Вариант для распечатки		Пред. тема | След. тема
Форум Открытые системы на рабочей станции (Unicode, кодировки / FreeBSD)
Режим отображения отдельной подветви беседы		[ Отслеживать ]

Как выдрать из UTF-8 текста указанное количество символов, DHCPep (?), 06-Дек-19, (0) [смотреть все] gt оверквотинг удален Может, сначала стоит перекодировать строку из UTF-8 в ко, anon1999 (?), 23:01 , 06-Дек-19, (1) +1 // А как Если например это текст война и мир , где есть и французский язык и русс, DHCPep (?), 23:33 , 06-Дек-19, (2) Или есть юникод с фиксированной шириной Тогда да, было бы конвертировать в него, DHCPep (?), 23:34 , 06-Дек-19, (3) // Есть - UTF-16 правда там есть нюансы с суррогатными парами символов - UTF-32, anon1999 (?), 23:47 , 06-Дек-19, (4) +1 // Да, похоже это выход Итого значит iconv -f UTF-8 -t UTF-32 original text 124 , DHCPep (?), 12:26 , 07-Дек-19, (7) +1 -c флаг там конечно же , DHCPep (?), 12:34 , 07-Дек-19, (8) Пожалуйста , anon1999 (?), 14:56 , 07-Дек-19, (9) Чес слово, ничерта не понял В смысле cut -c не работает с utf8 правильно cod, Аноним (5), 00:23 , 07-Дек-19, (5) +1   // Проверил, действительно с utf-8 работает cut успешно, но это зависит от настроен, DHCPep (?), 12:20 , 07-Дек-19, (6)   // gt оверквотинг удален устанавливайте локаль прямо в скрипте , ыы (?), 20:44 , 07-Дек-19, (10)   1,5

Сообщения

[Сортировка по времени | RSS]

5. "Как выдрать из UTF-8 текста указанное количество символов"	+1 +/–
Сообщение от Аноним (5), 07-Дек-19, 00:23
Чес слово, ничерта не понял. В смысле cut -c не работает с utf8 правильно??? [ diablopc@d200 ~ ]$ cat utf8.text абвгдежзилмнопрстуфхцчшщ [ diablopc@d200 ~ ]$ cut -c5-8 utf8.text дежз Что не так то?
Ответить | Правка | Наверх | Cообщить модератору

	6. "Как выдрать из UTF-8 текста указанное количество символов"	+/–
	Сообщение от DHCPep (?), 07-Дек-19, 12:20
	> Что не так то? Проверил, действительно с utf-8 работает cut успешно, но это зависит от настроенной локали пользователя который запускает. Я это когда проверил под своим юзером, от которого работаю на компе и у которого всё настроено - ок. А в принципе мне надо это решение для скрипта, и работает этот скрипт в джейле, там никаких локалей у пользователя не настроено и там он выдаёт если на начало двухбайтового символа не попадает, то  кракозябру. user$ cat ~/text.utf8 1234абвгд user$ cut -c5-7 ~/text.utf8 абв jail# cut -c5-7 /root/text.utf8 а� Ну и кроме этого ещё не подходит принципиально cut как инструмент для этого, т.к. он для каждой строки берёт этот диапазон, а мне надо имея текстовый файл получить его отгрызок от такого-то символа до такого-то.
	Ответить | Правка | Наверх | Cообщить модератору

	10. "Как выдрать из UTF-8 текста указанное количество символов"	+/–
	Сообщение от ыы (?), 07-Дек-19, 20:44
	>[оверквотинг удален] > user$ cat ~/text.utf8 > 1234абвгд > user$ cut -c5-7 ~/text.utf8 > абв > jail# cut -c5-7 /root/text.utf8 > а� > Ну и кроме этого ещё не подходит принципиально cut как инструмент для > этого, т.к. он для каждой строки берёт этот диапазон, а мне > надо имея текстовый файл получить его отгрызок от такого-то символа до > такого-то. устанавливайте локаль прямо в скрипте.
	Ответить | Правка | Наверх | Cообщить модератору

Архив | Удалить

Рекомендовать для помещения в FAQ | Индекс форумов | Темы | Пред. тема | След. тема