Если использовать всякое бескомпромиссное барахло,
Вот 1251 это и есть «бескомпромиссное барахло».
учитывающее капризы всего мира — можно опупеть. Так что нафиг этот весь мир…
Отлично. Переставайте использовать UTF-8 вообще.
Самый прикол в том, что когда появился жабий язык, под юникодом всё ещё понимали просто нормальную двухбайтную кодировку, но не utf и не всякие извращения с составными символами.
Не порите чушь, ей больно. UTF-8 это транспортная кодировка, а 16/32бита — это внутреннее представление.
utf-16 появился емнип с шестой версии, но появилась ли поддержка всего того ада из статьи?<
С пятой версии.
Я сильно сомневаюсь)
Вы просто не разбираетесь в предмете, отсюда и сомнения. Еще раз: UTF-8/16 это транспортные кодировки. Внутреннее представление это отдельная тема, которая сюда никаким боком. Что бы понять написанное мной вам, вероятно, прийдется, немного погуглить. Возможно это пойдет вам на пользу.
Нет. Перекодировка понадобилась из-за того, что он связался со всякими новомодными json-ами.
Нет, она понадобилась из-за использования 1251, а не из-за JSON.
В остальном программа использует кодировку 1251.
Что, вобщем-то, и породило проблему.
И это правильный подход — если приходится путаться с новомодными «технологиями», нужно минимизировать связанную с ними область.
В данном случае правильным был бы подход сменить кодировку. И не пришлось бы ничего «минимизировать», поскольку и проблемы бы не было. А так из-за псевдо-«минимизации» пришлось городить костыль, да еще и клеить его жевачкой, что бы не развалилось. Я уж не говорю о том, что, вообще говоря, UTF-8 это, в некотором смысле, «нативный» формат для браузера, JS и всего остального, что связано с вебом. Любые виндодрочерские 1251 и прочие извращения это поиск приключений на собственную задницу. Данный топик именно об этом — как самому себе создать проблему и «с честью» ее победить. Учитывая, что вы постоянно пытаетесь выглядеть «борцом за правильный софт», весьма удивительно, что вы отстаиваете кривой костыль, да еще и так ревностно.
Если использовать всякое бескомпромиссное барахло, учитывающее капризы всего мира — можно опупеть. Так что нафиг этот весь мир…
изначально (с момента появления языука) весь текст внутри программы хранится и обрабатывается именно как юникод
Самый прикол в том, что когда появился жабий язык, под юникодом всё ещё понимали просто нормальную двухбайтную кодировку, но не utf и не всякие извращения с составными символами. Сейчас же в моде utf-8, так что жабий язык со своим двухбайтным чаром считается отсталым. utf-16 появился емнип с шестой версии, но появилась ли поддержка всего того ада из статьи? Я сильно сомневаюсь)
«мегабайты ненужного кода» понадобились автору топика из-за того, что они использует 1251
Нет. Перекодировка понадобилась из-за того, что он связался со всякими новомодными json-ами. В остальном программа использует кодировку 1251. И это правильный подход — если приходится путаться с новомодными «технологиями», нужно минимизировать связанную с ними область.
Вам — возможно. Но мир слегка больше, чем ареал распространения языков использующих кириллицу.
Зачем разбираться какая либа какие приколы учитывает (полагаю, жабий язык нативно их едва ли умеет...)?
«Жабий язык» их «нативно» учитывает просто в силу того, что изначально (с момента появления языука) весь текст внутри программы хранится и обрабатывается именно как юникод.
Или думать как избавиться от лишнего, если не хочется тащить за программкой/прошивкой мегабайты ненужного кода.
Весь прикол ситуации в том, что «мегабайты ненужного кода» понадобились автору топика из-за того, что они использует 1251. С юникодом этой проблемы бы не существовало вообще, не нужны были бы никакие перекодировки и библиотеки.
Надо понимать, что если нужно забить гвоздь, иногда можно просто взять молоток и забить его.
Я именно это и предложил, вместо изобретения очередных костылей с перекодировкой. Ах да, я забыл, что вы не могли пройти мимо предложения использовать «новомодный» UTF-8.
Справедливости ради, описанные в приведенной статье проблемы никак не связаны с юникодом.
Это проблемы приведения к верхнему/нижнему регистру с учетом особенностей языков.
К примеру немецкая Эсцет при переводе в верхний регистр заменятся на 2 символа (SS), не зависимо от того юникод это или восьмибитная cp437
Обычно надо кириллицу и ничего лишнего. Зачем разбираться какая либа какие приколы учитывает (полагаю, жабий язык нативно их едва ли умеет...)? Или думать как избавиться от лишнего, если не хочется тащить за программкой/прошивкой мегабайты ненужного кода.
Надо понимать, что если нужно забить гвоздь, иногда можно просто взять молоток и забить его. А не искать способы усложнить себе жизнь.
Ровно до тех пор, пока там будет исключительно текст влезающий в 1251 (а набор там весьма скуден). Если учесть, что использованные технологии (HTTP+HTML+JS) не накладывают таких ограничений, выбор кодировки, с которой надо а) трахаться что бы перекодировать, и б) которая накладывает ограничения — выглядит, мягко говоря не логичным.
Unicode — в принципе говно.
Вы или не порите чушь или придумайте что-то лучше, чем юникод. Искренне желаю вам удачи в этом процессе.
Со всем этим адом связываться только в самом крайнем случае.
Если с этим адом связаться в однобайтовых кодировках, то юникодные приколы покажутся несущественными мелочами. К тому же все, что там перечислено а) никак не касается кириллицы (а используя 1251 именно ею вы и ограничены) и б) давно учтены во всевозможных библиотеках (так что заморачиваться самостоятельно имеет смысл только из мазохизма). А сама статься просто отличный перечень аргументов для того, чтобы не изобретать велосипед и взять готовое. Хотя я подозреваю, что на мазохистов такая аргументация не подействует.
Вот ни разу не понимаю, нафига вообще пользоваться Win-1251 (за этого уродца мелкомягким вообще надо бы оторвать некоторые части тела, что бы не размножались). Не проще ли перейти полностью на UTF-8 и забыть о головняке и перекодировках?
Когда я допиливал код я был как раз в процессе переезда, интернет был только эпизодически, а вкомитить код было далеко не самой важной задачей. Сейчас тоже пока руки не доходят.
Подозреваю дело во формате файла сверловки. Первая версия расчитана на очень примитивный вариант екселоновского формата, который получается на выходе gerbmerge. Я допиливал парсер (и много других мелких улучшений), но новая версия еще не готова, что бы ее выкладывать.
Отлично. Переставайте использовать UTF-8 вообще.
Не порите чушь, ей больно. UTF-8 это транспортная кодировка, а 16/32бита — это внутреннее представление.
С пятой версии.
Вы просто не разбираетесь в предмете, отсюда и сомнения. Еще раз: UTF-8/16 это транспортные кодировки. Внутреннее представление это отдельная тема, которая сюда никаким боком. Что бы понять написанное мной вам, вероятно, прийдется, немного погуглить. Возможно это пойдет вам на пользу.
Нет, она понадобилась из-за использования 1251, а не из-за JSON.
Что, вобщем-то, и породило проблему.
В данном случае правильным был бы подход сменить кодировку. И не пришлось бы ничего «минимизировать», поскольку и проблемы бы не было. А так из-за псевдо-«минимизации» пришлось городить костыль, да еще и клеить его жевачкой, что бы не развалилось. Я уж не говорю о том, что, вообще говоря, UTF-8 это, в некотором смысле, «нативный» формат для браузера, JS и всего остального, что связано с вебом. Любые виндодрочерские 1251 и прочие извращения это поиск приключений на собственную задницу. Данный топик именно об этом — как самому себе создать проблему и «с честью» ее победить. Учитывая, что вы постоянно пытаетесь выглядеть «борцом за правильный софт», весьма удивительно, что вы отстаиваете кривой костыль, да еще и так ревностно.
Самый прикол в том, что когда появился жабий язык, под юникодом всё ещё понимали просто нормальную двухбайтную кодировку, но не utf и не всякие извращения с составными символами. Сейчас же в моде utf-8, так что жабий язык со своим двухбайтным чаром считается отсталым. utf-16 появился емнип с шестой версии, но появилась ли поддержка всего того ада из статьи? Я сильно сомневаюсь)
Нет. Перекодировка понадобилась из-за того, что он связался со всякими новомодными json-ами. В остальном программа использует кодировку 1251. И это правильный подход — если приходится путаться с новомодными «технологиями», нужно минимизировать связанную с ними область.
«Жабий язык» их «нативно» учитывает просто в силу того, что изначально (с момента появления языука) весь текст внутри программы хранится и обрабатывается именно как юникод.
Весь прикол ситуации в том, что «мегабайты ненужного кода» понадобились автору топика из-за того, что они использует 1251. С юникодом этой проблемы бы не существовало вообще, не нужны были бы никакие перекодировки и библиотеки.
Я именно это и предложил, вместо изобретения очередных костылей с перекодировкой. Ах да, я забыл, что вы не могли пройти мимо предложения использовать «новомодный» UTF-8.
Это проблемы приведения к верхнему/нижнему регистру с учетом особенностей языков.
К примеру немецкая Эсцет при переводе в верхний регистр заменятся на 2 символа (SS), не зависимо от того юникод это или восьмибитная cp437
Надо понимать, что если нужно забить гвоздь, иногда можно просто взять молоток и забить его. А не искать способы усложнить себе жизнь.
Вы или не порите чушь или придумайте что-то лучше, чем юникод. Искренне желаю вам удачи в этом процессе.
Если с этим адом связаться в однобайтовых кодировках, то юникодные приколы покажутся несущественными мелочами. К тому же все, что там перечислено а) никак не касается кириллицы (а используя 1251 именно ею вы и ограничены) и б) давно учтены во всевозможных библиотеках (так что заморачиваться самостоятельно имеет смысл только из мазохизма). А сама статься просто отличный перечень аргументов для того, чтобы не изобретать велосипед и взять готовое. Хотя я подозреваю, что на мазохистов такая аргументация не подействует.
Unicode — в принципе говно. Со всем этим адом связываться только в самом крайнем случае.
С перекодировками — медленнее.
Чем?