Перекодирование строки UTF-8 в HTML-entities - Работа с текстом - Интересные решения для программистов - Примеры кода

Работа с текстом → Перекодирование строки UTF-8 в HTML-entities → PHP

Для работы с кодировками предназначены функции группы iconv, но, к сожалению, они при перекодировании из юникода в 8-битовые кодировки попросту выбрасывают символы, которые в целевой кодировке отсутствуют. Если PHP собран с поддержкой multibyte-функций, то для преобразования можно использовать функцию mb_convert_encoding

<?
mb_convert_encoding($string, 'HTML-ENTITIES', 'UTF-8');
?>

//Если же поддержка mb_convert_encoding не гарантирована, то можно использовать следующую универсальную функцию:
<?
function utf2entity($s) {
    // если можем, то используем функцию mb_convert_encoding…
    if (function_exists('mb_convert_encoding')) 
      return mb_convert_encoding($s, 'HTML-ENTITIES', 'UTF-8');

//… иначе раскодируем UTF вручную
    $tgt = '';
    for($i=0,$len=strlen($s); $i<$len; $i++) {
        $c = $s[$i];
        $x = ord($c);
        if ($x < 0x80) { // 1-байтовый символ
            $tgt .= $c;
            continue;
        } elseif (($x & 0xC0) == 0xC0) { // (n+1)-байтовый символ
            $n = 1;
            while ( ($x & (0x40 >> $n)) > 0) $n++;
            $code = $x & (0x3F >> $n);
            for ($k=1; $k<=$n; $k++) {
                $y = ord($s[$i+$k]) & 0x3F;
                $code = ($code << 6) + $y;
            }
            $i += $n;
            // В переменной $code содержится Unicode-код текущего символа. 
            // Здесь можно преобразовать его в нужную нам 8-битную кодировку 
            // или просто сделать из него HTML-entity.
            $tgt .= '&#x'.dechex($code).';';
        } else {
            $tgt .= '?'; // такого не должно быть
        }
    }
    return $tgt;
}
?>

convert, php, unicode, utf8

01es

Андрей Новиков

18.11.2008

Дмитрий [Добавлено 27.04.2009 18:56:06]

Спасибо большое за топик! Не знал, что можно писать 'HTML-ENTITIES'.

Кирилл [Добавлено 17.11.2010 12:15:38]

Большое спасибо. Функция mb_substr судя по профайлеру очень тормозила, заменил на функцию, написанную по образу и подобию вашей и всё заработало гораздо быстрее.

Меню

Подписка на RSS:

Подпишись на RSS-ленту

Поиск

Облако тегов

	Работа с текстом → Перекодирование строки UTF-8 в HTML-entities → PHP Для работы с кодировками предназначены функции группы iconv, но, к сожалению, они при перекодировании из юникода в 8-битовые кодировки попросту выбрасывают символы, которые в целевой кодировке отсутствуют. Если PHP собран с поддержкой multibyte-функций, то для преобразования можно использовать функцию mb_convert_encoding <? mb_convert_encoding($string, 'HTML-ENTITIES', 'UTF-8'); ?> //Если же поддержка mb_convert_encoding не гарантирована, то можно использовать следующую универсальную функцию: <? function utf2entity($s) { // если можем, то используем функцию mb_convert_encoding… if (function_exists('mb_convert_encoding')) return mb_convert_encoding($s, 'HTML-ENTITIES', 'UTF-8'); //… иначе раскодируем UTF вручную $tgt = ''; for($i=0,$len=strlen($s); $i<$len; $i++) { $c = $s[$i]; $x = ord($c); if ($x < 0x80) { // 1-байтовый символ $tgt .= $c; continue; } elseif (($x & 0xC0) == 0xC0) { // (n+1)-байтовый символ $n = 1; while ( ($x & (0x40 >> $n)) > 0) $n++; $code = $x & (0x3F >> $n); for ($k=1; $k<=$n; $k++) { $y = ord($s[$i+$k]) & 0x3F; $code = ($code << 6) + $y; } $i += $n; // В переменной $code содержится Unicode-код текущего символа. // Здесь можно преобразовать его в нужную нам 8-битную кодировку // или просто сделать из него HTML-entity. $tgt .= '&#x'.dechex($code).';'; } else { $tgt .= '?'; // такого не должно быть } } return $tgt; } ?> convert, php, unicode, utf8 01es Андрей Новиков 18.11.2008 Дмитрий [Добавлено 27.04.2009 18:56:06] Спасибо большое за топик! Не знал, что можно писать 'HTML-ENTITIES'. Кирилл [Добавлено 17.11.2010 12:15:38] Большое спасибо. Функция mb_substr судя по профайлеру очень тормозила, заменил на функцию, написанную по образу и подобию вашей и всё заработало гораздо быстрее. Ваше имя Ваш E-mail (если хотите отслеживать комментарии) Дoкажи, что ты не робот Текст комментария	Меню CodeIgniter Алгоритмы Базы данных Дата и Время Интернет Интерфейс Мультимедиа ОС и Железо Работа с текстом Разное Технологии Файлы Подписка на RSS: Подпишись на RSS-ленту Поиск Облако тегов .net array asp bash browser charset check class clean convert count create css curl database date delete directory download element email equivalent extension file find form format function get height html http ie image javascript jquery load mysql number page perl php random scriplet send shell size sql string text time url utf8 variable vb visual basic width window xml xslt