Вчера, 23 мая, состоялся релиз Perl 5.30.0. Новость была объявлена в Usenet-группе perl.perl5.porters одним из ключевых разработчиков Perl — Sawyer X.
По сравнению с предыдущим стабильным релизом, 5.28.0, вышедшим около 11 месяцев назад, было изменено около 620.000 строк кода, изменения затронули 1300 файлов, в разработке приняли участие 58 авторов. Изменения непосредственно исходного кода (только .pm, .t, .c и .h файлы) оцениваются в ~510.000 строк и 750 файлов.
Открыта разработка следующей ветки 5.31. Выпуск следующего стабильного релиза запланирован на май 2020 года.
- C-функции Perl API sv_utf8_downgrade и sv_utf8_decode более не считаются экспериментальными (experimental).
- Реализована экспериментальная поддержка lookbehind-выражений переменной длины, таких как например "(?<=foo?)" и "(?<!ba{1,9}r)" (ранее приводили к ошибке)
- Максимальное значение спецификатора размера ("n") в блоках "{m,n}" регулярных выражений увеличено с 32767 до 65534.
- Поддержка Unicode 12.1.
- Добавлена ограниченная поддержка масок (wildcards) в Unicode property value specifications (не знаю как перевести правильно). Например, выражение "qr! \p{nv= /(?x) \A [0-5] \z / }!" позволяет выделить все Unicode-символы, определяющие цифры от 0 до 5, включая тайские или бенгальские варианты написания цифр.
- Реализована поддержка qr'\N{name}' (именованных символов внутри регулярных выражений, ограниченных одинарными кавычками; ранее такой регексп приводил к ошибке).
- Теперь можно скомпилировать Perl с использованием только thread-safe операций с локалями (-Accflags='-DUSE_THREAD_SAFE_LOCALE').
- Сочетание флагов "-Dv" (расширенный отладочный вывод) и "-Dr" (отладка регулярных выражений) теперь приводит к включению всех возможных режимов отладки регулярных выражений.
- В pack() добавлена защита от возврата некорректных последовательностей Unicode.
Удаления фич и несовместимые изменения:
- Присвоение ненулевого значения спецпеременной $[ (индекс первого элемента массива) теперь приводит к фатальной ошибке.
- В качестве символов-разделителей строк и шаблонов теперь допускается использование только графем. (запрещены составные символы Unicode).
- Некоторые ранее устаревшие способы использования неэкранированной левой скобки «{» в шаблонах регулярных выражений теперь запрещены.
- Вызов sysread(), syswrite(), send() или recv() при обработке дескриптора :utf8 теперь является фатальной ошибкой.
- Запрещено использование "my" в тождественно ложных условных операторах (например, "my $x if 0").
- Удалена поддержка спецпеременной $* (многострочный поиск). Корректной альтернативой являются "/s" и "/m".
- Удалена поддержка спецпеременной $# (форматированный вывод чисел).
- Имя функции dump() теперь нужно явно квалифицировать (CORE::dump).
- Удалена функция File::Glob::glob (нужно использовать File::Glob::bsd_glob).
- Планировалось прекращение поддержки использования в коде XS (блоки на Си) макросов, выполняющих операции с UTF-8, но затем было решено это отложить до версии 5.32.
Улучшения производительности:
- Трансляция UTF-8 в code points (не знаю как перевести) теперь реализована в виде конечного автомата, что в том числе ведёт к повышению производительности — например, ord("\x7fff") теперь требует на 12% меньше инструкций. Проверка корректности последовательностей символов UTF-8 также реализована в виде конечного автомата и происходит быстрее.
- Из finalize_op() убраны рекурсивные вызовы.
- Внесены небольшие оптимизации в код сворачивания идентичных символов и определения классов символов в регулярных выражениях.
- Оптимизированы преобразования знаковых определителей типа в беззнаковые (IV в UV).
- Ускорен алгоритм преобразования целых чисел в строку за счёт обработки разом двух цифр вместо одной.
- Внесены улучшения, подготовленные по результатам анализа компанией LGTM.
- Оптимизирован код в файлах regcomp.c, regcomp.h и regexec.c.
- Матчинг регулярных выражений вида "qr/[^a]/" значительно ускорен для случаев, когда "a" — ASCII символ (случаи не-ASCII "a" также могут показывать увеличение производительности, но при определённых условиях).