Набор от POSIX утилити и декодер AV1, написан на Rust

Публикувана е версия 0.2.1 на проекта posixutils-rs, насочен към разработка на колекция от утилити за командния ред на езика Rust, които се споменават в стандарта POSIX и отговарят на неговите изисквания (cp, mv, awk, make, vi, find, sort, wc, xargs, sh, m4, sed и др.). При разработката по възможност се използват съществуващи crate-пакети. Кодът на posixutils-rs се разпространява под MIT лиценз.

Проектът е съсредоточен главно върху постигането на съответствие с изискванията на спецификацията POSIX.2024 и не планира да осигурява съвместимост с GNU утилитите, функцията на които авторите считат за неоправдано разширена. Въпреки това, в posixutils-rs се планира реализиране на най-популярните разширени опции на GNU утилитите, срещащи се в съществуващите скриптове.

Отличията от проекта uutils, който развива реализация на GNU Coreutils на Rust, включват по-широк обхват на утилитите, включващи, наред с другото, създаването на системни компоненти, споменавани в POSIX, като vi, awk, bc, m4, cron и компилатора c99. Също така, подходът е минималистичен, като се предвижда предоставяне само на минимално необходимия набор от опции, определени в спецификацията POSIX или без които е сложно да се обходи. Утилитите в набора posixutils-rs първоначално се доставят като самодостатъчен код, който може да се използва в други проекти.

В момента 55 от разработваните от проекта утилити отговарят на POSIX и са в етап на покритие с тестове, в 22 утилити е осигурена необходимата функционалност (но все още не е реализирано покритие с тестове), 20 са в етап на чернови, а работата по 44 утилити все още не е започнала. Сред утилитите с реализирана функционалност: awk, basename, bc, cp, cut, chown, date, diff, file, find, grep, ls, nice, ps, sort, strings, tail, tr, tty, wc, uniq. Сред утилитите, по които не е започната работа: crontab, c17, cflow, ctags, gettext, ed, ex, iconv, lex, locale, mailx, make, patch, pax, sed, sh, sccs, yacc, uucp, vi.

От измененията в новата версия се отбелязва добавянето на реализации на утилитите awk, m4, ps, realpath, join, time, fuser и gencat, както и началната поддръжка за работа в среди на базата на C-библиотеката musl и предоставянето на библиотека ftw за обход на дървото на каталогите с защита от условия на гонка.

Допълнително може да се отбележи анонса на проекта rav1d, който разработва високоефективен декодер за видео формат AV1, написан на Rust. Разработката се провежда чрез порттиране на кода на декодера от библиотеката dav1d, отличаваща се с висока производителност. Подготвеният порт е напълно съвместим с API на библиотеката dav1d. Изборът в полза на портването на съществуваща библиотека вместо писането на собствена версия се обяснява с желанието да се използва вече проверен и тестван декодер, за да се избегнат възможни проблеми с съвместимостта и да се вземат предвид всички тънкости на работа с формата AV1.

В текущия си вид подготвената реализация rav1d изостава с 6% по производителност от dav1d, но в бъдеще, след оптимизацията на кода, се планира постигането на паритет в производителността. За постигането на висока производителност е използван подход, при който базовите функции за декодиране на примитивни стойности са реализирани на асемблер в вид на опасни блокове (използван е асемблерен код от dav1d), в които данните постъпват след проверка от написаните на Rust функции за разбиране на потока (предишният опит при откриването на уязвимости в видео декодерите показва, че проблемите основно възникват в високо ниво код за разбиране на формата, а не в ниско ниво операции с данни).

Източник: opennet.ru