Почему так работают регулярные выражения?

Question

[0ldn0mad]

В python рег. выражения работают правильно, например:

import re
s = '''Если ты хочешь построить корабль, не надо созывать людей, планировать, делить работу, доставать инструменты. 
Надо заразить людей стремлением к бесконечному морю. Тогда они сами построят корабль.'''
pattern = r'\w+'
match = re.findall(pattern, s)
if match:
    print(match)

Выводит ожидаемо:
['Если', 'ты', 'хочешь', 'построить', 'корабль', 'не', 'надо', 'созывать', 'людей', 'планировать', 'делить', 'работу', 'доставать', 'инструменты', 'Надо', 'заразить', 'людей', 'стремлением', 'к', 'бесконечному', 'морю', 'Тогда', 'они', 'сами', 'построят', 'корабль']

Делаю то же самое в программе, на выходе черт знает что:
\w [a-z0-9] Буквы и цифры

Вообще не видит ни букв, ни слов.
Меняю на большую W
\W [^a-z0-9] Кроме букв и цифр

А здесь видит и буквы и цифры. Что не так?

Answer 1

[dodo512]

pcre.org/original/doc/html/pcrepattern.html#SEC2

Unicode property support

Another special sequence that may appear at the start of a pattern is (*UCP). This has the same effect as setting the PCRE_UCP option: it causes sequences such as \d and \w to use Unicode properties to determine character types, instead of recognizing only characters with codes less than 128 via a lookup table.

Чтобы \w совпадало не только с латиницей нужно добавить (*UCP).

(*UCP)\w+

Answer 2

[Saboteur]

в программе

А что это за программа, и кто писал реализацию регулярок в ней?
К автору и вопросы.

Comments

[0ldn0mad]

Дык не только в ней одной. Я уж думал может что поменялось....Мол пропустил....

[Saboteur]

не знаю, написано что PCRE, значит \w+ должно работать.
Смотрите опции, смотрите что за текст вы вставляете, может в нем кривые переносы строк.

[0ldn0mad]

Saboteur, Оказывается, она не работает с кириллицей. Буду писать разработчику.

[Saboteur]

0ldn0mad, купили программу?

[0ldn0mad]

Saboteur, Нет, распространяется бесплатно.

[Saboteur]

0ldn0mad, ну тогда вряд ли вам автор чем-то поможет. Даже сомневаюсь что MacTechnologies Corp содержит русскоязычных сотрудников

[0ldn0mad]

Ну вопрос отправил на английском, типа так задумано принципиально без поддержки кириллицы или можно настроить? Хотя помню в ней же, когда PHP изучал, с кириллицей проблем не было.....санкции наверно.... =)

[Saboteur]

причем тут санкции?
В php можно настроить локаль.
Тут совершенно другое дело, десктопная прога, переписывать ее для поддержки локалей - это гемор, потому что если переписывать по-хорошему, то для поддержки кириллицы, а для поддержки отличной от стандартной локали, а это UTF-8, со всем набором.
Бесплатные проги, они на самом деле не бесплатные. непонятно вам это зачем, если вы можете пользоваться php