чойто, нормальный

лучше старо виндового ucs-2

на utf-16 всякие китайско-корейские тексты быстрее парсятся чем на utf8 внезапно

Не особо внезапно на самом деле

ну да, достаточно очевидно

Сломанный виндовый utf-16 должен умереть.

На винде другой ютф? Что там сломано?

он про ucs-2 наверн

> It represents, in a way compatible with UTF-8, text from systems such as JavaScript and Windows that use UTF-16 internally but don’t enforce the well-formedness invariant that surrogates must be paired.

нде

Если что, OsStr на винде как раз WTF-8 encoded.

Звучит как анекдот

Да, есть такое.

Microsoft's compilers often fail at producing UTF-8 string constants from UTF-8 source files. The most reliable method is to turn off UNICODE, not mark the input file as being UTF-8 (i.e. do not use a BOM), and arrange the string constants to have the UTF-8 bytes. If a BOM was added, a Microsoft compiler will interpret the strings as UTF-8, convert them to UTF-16, then convert them back into the current locale, thus destroying the UTF-8.[15] Without a BOM and using a single-byte locale, Microsoft compilers will leave the bytes in a quoted string unchanged.

ох лёль

я думаю что при переходе с ucs-2  майкрософт решил сделать “совместимо”
а что более совместимо с ucs-2 как не utf-16 с проигноренными диапазонами суррогатов

Легаси наше всё.

https://habr.com/ru/post/515034/
"Распространённые заблуждения о временах жизни в Rust" от @insert_reference_here

@sirgraim https://t.me/rustlang_ru/324572

ещё не читал но уже понимаю что ты мне хочешь сказать скорее всего

ибо понимаю как утроено в компиляторе это