Вариант для распечатки		Пред. тема | След. тема
Форум Открытые системы на сервере (Оптимизация и тюнинг)
Режим отображения отдельной подветви беседы		[ Отслеживать ]

Отказаться от UTF-8, Sergey Maslennikov (ok), 06-Авг-17, (0) [смотреть все] +4 Приведенное вами условие распаковка - надуманно, высосано из пальца и взято с , ыы (?), 02:19 , 07-Авг-17, (1) –1 // А понимаешь, если не паковать, то ответ тривиален В случае русского языка UTF-8, Sergey Maslennikov (ok), 07:50 , 07-Авг-17, (2) +2 // тогда в чем проблема, если знаете что под Unicode кодировку выделяются 2 байта и, eRIC (ok), 08:49 , 07-Авг-17, (3) +1 // Не помогает Под кириллическую букву И вот если выделенное вместе с запихнутым, Sergey Maslennikov (ok), 18:17 , 07-Авг-17, (13) +1 Современность это UTF-8 Переданный файл при наличии шрифтов правильно отобразит, ПавелС (ok), 10:25 , 07-Авг-17, (4) // А экзабайты им депутата Яровой , Andrey Mitrofanov (?), 13:21 , 07-Авг-17, (6) +1 Сформированы данными не имеющими к описанной проблеме отношения , ыы (?), 13:43 , 07-Авг-17, (7) +2 А вот тут тогда вступает закон - а где это смогут прочитать Без перекодировщико, Anonimus (??), 13:46 , 07-Авг-17, (8) Ну, мы им инструкцию в регион зашлём На utf-8 напишем, чтоб поняли уже наконец , Sergey Maslennikov (ok), 17:15 , 07-Авг-17, (9) +1 У вас там никто задачу сформулировать не может если бы, да кабы , да быстрее , Andrey Mitrofanov (?), 17:36 , 07-Авг-17, (10) +1 300 АК не хотите Исходное сообщение читали , Sergey Maslennikov (ok), 17:43 , 07-Авг-17, (11) Архиватор выбирается по качелям сжатие время Ну, кому, мож, и керосин экономи, Andrey Mitrofanov (?), 19:08 , 07-Авг-17, (15) +1 xz был у меня на лаптопе Ну, я внёс свои две копейки Могу ещё добавить, что рас, Sergey Maslennikov (ok), 12:51 , 09-Авг-17, (52) +1 Согласен с вами Кириллический текст UTF-8 не отобразится, если в шрифте кирилли, Sergey Maslennikov (ok), 08:40 , 08-Авг-17, (20) +1 gt оверквотинг удален Смутные сомнения терзают меня Вот вам строгое доказатель, ыы (?), 09:49 , 08-Авг-17, (21) А что, если бы я в четвёртом классе учился, вы не стали бы со мной разговаривать, Sergey Maslennikov (ok), 10:30 , 08-Авг-17, (22) Ладно, рассказывай в каком классе на каком курсе учишься, по какой специальн, Andrey Mitrofanov (?), 11:15 , 08-Авг-17, (23) +1 Нет Завидую предположению о моём классе 4-м или 5-м Мне кажется, что эти товар, Sergey Maslennikov (ok), 15:36 , 08-Авг-17, (26) +1 Да, верно , Sergey Maslennikov (ok), 15:41 , 08-Авг-17, (27) +1 Ваш вопрос - бестолковый Очевидно же что преобразование многобайтной кодировки , ыы (?), 11:33 , 08-Авг-17, (24) –1 m многобайт r m одинбайт rВы, конечно, можете считать меня сволочью и недоу, Sergey Maslennikov (ok), 17:00 , 08-Авг-17, (28) +1 m многобайт r m одинбайт r, ыы (?), 17:31 , 08-Авг-17, (30) –1 Я имел в виду, что английские буквы, запятые, пробелы и знаки всякие в многобайт, Sergey Maslennikov (ok), 17:37 , 08-Авг-17, (32) +1 Нетm многобайт r m одинбайт r Уясните наконец как выглядит текст в многобайт, ыы (?), 18:29 , 08-Авг-17, (36) –1 The first 128 characters of Unicode, which correspond one-to-one with ASCII, are, Sergey Maslennikov (ok), 18:39 , 08-Авг-17, (37) +1 Откройте Notepadнапечатайте букву a английскую сохраните как utf-8снова сохрани, ыы (?), 18:57 , 08-Авг-17, (38) –1 Ой , Sergey Maslennikov (ok), 19:03 , 08-Авг-17, (39) +1 Этот ваш Notepad, видимо, что-то специальное для программистов У нас-то, просты, Sergey Maslennikov (ok), 09:10 , 09-Авг-17, (40) +1 Это ваши проблемы Не мои на 1 байт естественно А вы ожидали чегото еще Сомне, ыы (?), 10:20 , 09-Авг-17, (41) Ну, тогда в любой кодировке байтовость одинаковая Или как , Sergey Maslennikov (ok), 10:26 , 09-Авг-17, (42) +1 Интересная мысль Без указания BOM - и при наличии только английских букв - вам, ыы (?), 11:04 , 09-Авг-17, (44) Очень просто The first 128 characters of Unicode, which correspond one-to-one wi, Sergey Maslennikov (ok), 11:10 , 09-Авг-17, (45) +1 Человеку у которого ASCII она же UTF-8 и наоборот - сам черт не брат , ыы (?), 12:51 , 09-Авг-17, (51) +1 Согласен Это он эту UTF-8 придумал , Sergey Maslennikov (ok), 12:55 , 09-Авг-17, (54) +1 Здается мне, что вы оба не рограммисты BOM - это Byte Order Mask Вы бы хоть ин, Аноним (-), 08:09 , 11-Авг-17, (72) –1 Правильно ПОЭТОМУ говорить что у вас UTF-8 имея только английские буквы - нельз, ыы (?), 09:25 , 11-Авг-17, (74) Имеется ввиду многобайтные буквы , ыы (?), 09:35 , 11-Авг-17, (75) Извините, но Вы написали глупость полнейшую Во-первых задача не требует этого д, Аноним (-), 09:39 , 11-Авг-17, (76) –1 Требует m многобайт r m одинбайт r Нет Пока вы не прочитали файлы- вы этого, ыы (?), 09:52 , 11-Авг-17, (78) –1 Вы даже не понимаете какую чушь Вы несете Если Вы возьмете файл в WINDOWS-1251 , Аноним (-), 10:01 , 11-Авг-17, (79) А вы попробуйте , ыы (?), 10:09 , 11-Авг-17, (80) –1 А вот от ответа уходить не надо Отвечайте за свои слова Станет или не станет , Аноним (-), 10:15 , 11-Авг-17, (81) А я не ухожу Вы попробуйте прежде чем болтать ерунду , ыы (?), 10:27 , 11-Авг-17, (82) –1 Вы глубоко невежественны в предмете разговора Извините Ответ с точки зрения ПО , ыы (?), 10:33 , 11-Авг-17, (84) –1 gt оверквотинг удален То есть человек, утверждающий что я Я хаха гов, ыы (?), 10:38 , 11-Авг-17, (85) Не позорьтесь Вернитесь к вопросу и спокойно ответьте без Ваших мантр станет WI, Аноним (-), 10:59 , 11-Авг-17, (86) Разве спокойно и вежливо объяснять невежественному человеку его заблуждения- это, ыы (?), 11:14 , 11-Авг-17, (87) –2 Троль -это тот, кто на простые вопросы не отвечает На ваш ответ Вы вопрос пол, Аноним (-), 11:28 , 11-Авг-17, (89) Вот мой ответ http www opennet ru openforum vsluhforumID1 96963 html 84 Отв, ыы (?), 11:34 , 11-Авг-17, (90) –1 Вы что, в пятом классе учитесь, какая у ПО может быть точка зрения , Аноним (-), 11:42 , 11-Авг-17, (91) Когда вы подрастете, и возможно все таки окончите школу, и возможно сможете пост, ыы (?), 11:53 , 11-Авг-17, (92) Какого глагола форм Уверен, что вы их не знаете, как не знаете о чем пишете и н, Аноним (-), 12:06 , 11-Авг-17, (93) –1 А вот такой вот роезультат - CODE File usr lib64 python2 7 encodings , Andrey Mitrofanov (?), 11:17 , 11-Авг-17, (88) И вот, кстати, заметьте, Notepad оказался не моей проблемой , Sergey Maslennikov (ok), 11:41 , 09-Авг-17, (47) +1 Вы просто не поняли сути проблемы , ыы (?), 12:51 , 09-Авг-17, (53) +1 Во, об этом и была она, но мне нужна была референсная нитка о том Тред - памят, Andrey Mitrofanov (?), 10:32 , 09-Авг-17, (43) –1 Ну, а чего, пусть сходят, посмотрят Вам, вот, интересно же , Sergey Maslennikov (ok), 11:26 , 09-Авг-17, (46) +1 Про памятник, всё-таки, вы со зла В организации, где я работаю, есть небольшая , Sergey Maslennikov (ok), 20:51 , 09-Авг-17, (56) +1 gt оверквотинг удален Шел 2017 год В космосе летала вторая китайская космичес, ыы (?), 07:40 , 10-Авг-17, (58) –1 Снова начали Но, всё-таки, раньше боролись за КОИ, а теперь за вопрос Его и з, Sergey Maslennikov (ok), 08:04 , 10-Авг-17, (59) +2 Мама дорогая, это ж какое-то просто безумие , Anonymoustus (ok), 05:31 , 03-Окт-17, (101) UTF-8 придумана не для того чтобы обеспечить максимально быстрое исполнение или , ыы (?), 13:05 , 07-Авг-17, (5) // А что, люди ни этого ли хотят На размер запакованного файла выбор кодировки влия, Sergey Maslennikov (ok), 17:50 , 07-Авг-17, (12) +1 представьте себе Люди -хотят как правило работать поменьше и получать побольш, ыы (?), 19:12 , 07-Авг-17, (16) –1 Верно, но людей больше, чем программистов , Sergey Maslennikov (ok), 17:31 , 08-Авг-17, (31) +1 Вы хотели сказать, программисты не люди , Andrey Mitrofanov (?), 17:44 , 08-Авг-17, (33) –1 N_людей-непрограммистов N_людей-программистов N_людей-программистовN_людей-, Sergey Maslennikov (ok), 17:51 , 08-Авг-17, (34) +1 Программистам нужно, чтобы они кому-нибудь были нужны Ну, т е , им пришлось бы , Sergey Maslennikov (ok), 17:57 , 08-Авг-17, (35) +1 Оптимальная по каким параметрам Желаю, чтобы всем ц ШариковПППреждеврем, Andrey Mitrofanov (?), 19:14 , 07-Авг-17, (17) По времени обработки , Sergey Maslennikov (ok), 12:30 , 09-Авг-17, (49) +1 Посмотрите memcpy , Andrey Mitrofanov (?), 12:46 , 09-Авг-17, (50) А зачем -- она не имеет отношения к разбору текста, только куски целиком копиру, Sergey Maslennikov (ok), 13:06 , 09-Авг-17, (55) +1 Неправильно я ответил Смысл посмотреть на memcpy есть, если предположить, что, Sergey Maslennikov (ok), 17:04 , 23-Авг-17, (95) +2 Кодировка UTF-8 придумана вовсе не для оптимального хранения текстов, а для одно, XAnder (ok), 19:05 , 07-Авг-17, (14) // Тогда уж -- в нашу вечность Европейские языки проблема почти не затрагивает , Sergey Maslennikov (ok), 12:27 , 09-Авг-17, (48) +1 // Не-не-не Дело тут не в языках, и не в кодировках Собака зарыта уровнем глубже , XAnder (ok), 13:12 , 10-Авг-17, (60) // Qubit-ы , Sergey Maslennikov (ok), 13:34 , 10-Авг-17, (61) Да, компьютеры на третичной логике похоронили не заговор ли это , ыы (?), 13:36 , 10-Авг-17, (62) Я, вообще-то, про байты, а не про биты , XAnder (ok), 14:14 , 10-Авг-17, (63) –1 А, тогда Qubit-ы, видимо, тоже, не то, что вы чуете Но байт -- это просто степен, Sergey Maslennikov (ok), 14:20 , 10-Авг-17, (64) +1 Ну, вот - докатились уже с языками высокого уровня до того, что ОСНОВЫ народ не , asphinx (?), 15:35 , 10-Авг-17, (65) +1 Эх, пойду уроки делать, а то предки заругаютЪ почти без шуток Как бы донести, XAnder (ok), 17:46 , 10-Авг-17, (66) Вот тут мне http apenwarr ca log m 201708 10 тоже очень понравилось , Andrey Mitrofanov (?), 17:55 , 10-Авг-17, (67) Шикарно излагает В интересном мире мы живём, однако layers are only ever added,, XAnder (ok), 18:28 , 10-Авг-17, (69) gt оверквотинг удален А на заре вычислительной техники - байт то собственно и , ыы (?), 18:10 , 10-Авг-17, (68) –1 Я немного абзацы местами переставлю - ничего skip В таких условиях люди беру, asphinx (?), 23:14 , 10-Авг-17, (70) Вы не поверите Там он и был изначально Потом, правда, заменили на Си, потому ч, XAnder (ok), 07:37 , 11-Авг-17, (71) Да отчего ж не поверю - поверю Глядя на то, какой сейчас код получается на том , asphinx (?), 09:44 , 11-Авг-17, (77) Забавник За успехи компиляторов ещё в 77ом году Бэкусу Тьюринговскую премию да, Andrey Mitrofanov (?), 10:28 , 11-Авг-17, (83) Системное низкоуровневое программирование на фортране Под IBM PC XT в 1990-91, asphinx (?), 14:36 , 11-Авг-17, (94) 4 77 же 124 I Раньше были времена, А теперь мгновения Понимался раньше, Andrey Mitrofanov (?), 09:18 , 11-Авг-17, (73) А у тебя точно все-все французские символы которые Лев Николаевич впендюрил в э, Led (ok), 23:34 , 07-Авг-17, (18) // АК был с Мошковской библиотеки Там с текстом всё нормально -- французских букв , Sergey Maslennikov (ok), 08:19 , 08-Авг-17, (19) +1   // алгоритм в котором участвует абстрактная 1-байтная кодировка и абстрактная же 4-, ыы (?), 14:17 , 08-Авг-17, (25)   // Что такое абстрактная кодировка Ну, или -- реальная Или, чем они друг от друга, Sergey Maslennikov (ok), 17:19 , 08-Авг-17, (29) +1   Да Возможен Геморрой, связанный с зоопарком кодировок, эффективных для сжатия , DeadLoco (ok), 04:37 , 10-Авг-17, (57) // Ну, вы уж слишком категоричны Тред, всё-таки, в теме Оптимизация и тюнинг , т , Sergey Maslennikov (ok), 17:31 , 23-Авг-17, (96) +2 // Когда я был маленький и еб ый, я тоже думал, что каждая моя мысль революционн, pavlinux (ok), 01:57 , 24-Авг-17, (97) // В смысле, кириллица станет такой же нужной, как DVD-диски , Anonimous (?), 08:01 , 24-Авг-17, (98) +2 В смысле, что писать в программе тип short int, если оно всё равно в процессоре , pavlinux (ok), 02:36 , 08-Окт-17, (104) code dump 124 tar 124 splitcat 124 tar 124 restore code , DeadLoco (ok), 23:38 , 24-Авг-17, (99) Не, RAID с HotSwap купили Пара дисков укатывают в сейф, пара работают , pavlinux (ok), 04:04 , 26-Авг-17, (100) Это называется решилось Да вы под веществами , . (?), 05:59 , 03-Окт-17, (102) Да, бэкап есть и стабилен Какими способами, никого ни е т Есть много други, pavlinux (ok), 02:27 , 08-Окт-17, (103) 1,14,18,57

Сообщения

[Сортировка по времени | RSS]

	19. "Отказаться от UTF-8"	+1 +/–
	Сообщение от Sergey Maslennikov (ok), 08-Авг-17, 08:19
	> А у тебя точно все-все французские символы (которые Лев Николаевич впендюрил в > эту книженцию) в твоёй кои8 правльно сохранились? А в "Войне и > мире"? АК был с Мошковской библиотеки. Там с текстом всё нормально -- французских букв нет.  Вот так там, например, в Войне и мире: "Еh bien, mon prince. G#234;nes et Lucques ne sont plus que des apanages, des поместья, de la famille Buonaparte.  Non, je  vous pr#233;viens..." В целом же, да, вкрапления английских букв и всяких "nbsp;" в тестах нежелательны, т. к. они уменьшают время обработки UTF-8, изменяя результат в её пользу. Т. е., в тестах на кириллице без вкраплений проигрыш UTF-8 оказался бы больше. Переделывать я всё равно не буду. Правильный тест должен проверять алгоритм, а не собранную программу. Пусть эти тесты сделает тот, кто в этом шарит и мог бы провести их минимальными усилиями. В идеале -- докажет: существует оптимальный алгоритм преобр. <1-байтная кодировка> -> <универсальное 4-байтное представление> и обратно; существует оптимальный алгоритм преобр. <UTF-8> -> <универсальное 4-байтное представление> и обратно; сравнит их сложности. Ну, или, хотя бы, экспериментальную базу увеличит.
	Ответить | Правка | Наверх | Cообщить модератору

	25. "Отказаться от UTF-8"	+/–
	Сообщение от ыы (?), 08-Авг-17, 14:17
	> В идеале -- докажет: > существует оптимальный алгоритм преобр. <1-байтная кодировка> -> <универсальное 4-байтное > представление> и обратно; существует оптимальный алгоритм преобр. <UTF-8> -> <универсальное > 4-байтное представление> и обратно; сравнит их сложности. Ну, или, хотя бы, > экспериментальную базу увеличит. алгоритм в котором участвует абстрактная 1-байтная кодировка и абстрактная же 4-байтная кодировка? могу нарисовать. Легко :) для реальных 1-байтных кодировок и реальных  4-байтных - оптимальный алгоритм будет разным. это же элементарно. если бы вы поинтересовались как устроены кодировки - вы бы это надеюсь поняли.
	Ответить | Правка | Наверх | Cообщить модератору

	29. "Отказаться от UTF-8"	+1 +/–
	Сообщение от Sergey Maslennikov (ok), 08-Авг-17, 17:19
	> ... абстрактная 1-байтная кодировка и ... > реальных ... кодировок Что такое абстрактная кодировка? Ну, или -- реальная? Или, чем они друг от друга отличаются?
	Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема