Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

qwest · 2012-04-11 03:56:42

Собственно переделал движек на UTF-8 но возникла одна проблема при установке системы все таблицы создаются в UTF-8 а
таблица комментариев упорно создается в ср1251.
Уважаемые администраторы или кто знает подскажите пожалуйста в каком файле прописать кодировку что бы по умолчанию таблица комментариев создавалась в UTF-8.
А так в целом вроде все работает нормально только есть слова не вынесенные в ленгфайл.

Wolverine · 2012-04-11 12:04:32

\engine\install.php

$charset = $charsetEngine?' default charset=utf8':'';


if ($SUPRESS_CHARSET) { $dbCreateString = str_replace('default charset=utf8','',$dbCreateString); }

qwest · 2012-04-11 21:15:11

В обоих строках стоит utf8 но одна таблица комментариев упорно создается в utf8. Немогу найти где прописано.

ROZARD · 2012-04-11 21:43:18

Нужно ещё в mysql.class.php поправить строчку

qwest · 2012-04-11 21:45:17

Нашел оказывается после установки основной БД отдельно создается БД для плагинов в файле engine/includes/inc/extrainst.inc.php
там то и была указана кодировка ср1251.

qwest · 2012-04-11 22:47:49

Теперь комментарии не заработали они упорно пытаются добавляться в ср1251. На английском добавляются на русском добавляется пустой комментарий.
Я так понимаю при добавлении русский выводится крякозяблицей, а обработчик честно вычищает все это как недопустимые символы.
Вот застопорился немогу понять где жестко прописать UTF-8.

vitaly · 2012-04-11 23:48:41

qwest, интересное начинание...
Вообще я не торопился делать UTF-8 версию по одной причине - перестанет корректно работать масса регулярных выражений.
Начиная от проблем в шаблонах, заканчивая всякими XSS и другими атаками.

В плагине comments - открой файл /engine/plugins/comments/inc/comments.add.php и убери везде вызов функции convert() - именно она из UTF-8 преобразует в Win1251.

qwest · 2012-04-12 00:15:10

Заметил еще одни грабли при публикации новостей на китайском (вот где настоящая проверка UTF-8) URLы выводятся вида: http://ngcms.site/none/-.html
режутся все символы. Что чревато формированием одинаковых URL, я знаю в китайских CMS URLы формируются вида: http://ngcms.site/none/3333.html
т.е. через номер. Пока проверял китайский но грабли будут и с другими языками. Если с кириллицей конструкции вида 'с'='s' сделать не накладно то для иероглифов не подойдет.
'

qwest · 2012-04-12 00:36:55

Убрал вызов функции convert() комментарии стали добавляться но при выводе крякозяблица. Нажимаю обновить страницу в браузере становится все нормально. Если я правильно понял вся беда из за AJAX он обрабатывает все в ср 1251 или нет?. Прошу совета.

vitaly · 2012-04-12 00:46:21

qwest, вот с китайским ты словил первый баг - в наименовании альт. имени
Но с генерацией URL'ов всё проще - можно перейти на использование ID новости в URL'е, тогда проблем не будет.

В "управление форматом ссылок" находишь строку "Отображение полной новости" и меняешь в ней {altname} на {zid} - получишь ID с ведущими нулями.

vitaly · 2012-04-12 00:47:32

qwest пишет:

Убрал вызов функции convert() комментарии стали добавляться но при выводе крякозяблица. Нажимаю обновить страницу в браузере становится все нормально. Если я правильно понял вся беда из за AJAX он обрабатывает все в ср 1251 или нет?. Прошу совета.

Наоборот - AJAX работатет только в UTF8 и двиг принудительно делает конвертацию Win1251 => UTF8.
В файле comments.php найди и убери вызов функции iconv()

qwest · 2012-04-12 22:37:41

Подскажите пожалуйста как правильно в файле comments.php убрать вызов функции iconv()

1.

		$output = array(
			'status'	=> 1,
			'rev'		=> intval(pluginGetVariable('comments', 'backorder')),
			'data'		=> iconv('Windows-1251', 'UTF-8', comments_show($SQLnews['id'], $commentId, $SQLnews['com']+1, $callingCommentsParams))
		);

2.

if ($_REQUEST['ajax']) {
		$output['data'] = iconv('Windows-1251', 'UTF-8', $output['data']);
		$template['vars']['mainblock'] = json_encode($output);

3.

		$output = array(
			'status'	=> 1,
			'rev'		=> intval(pluginGetVariable('comments', 'backorder')),
			'data'		=> iconv('Windows-1251', 'UTF-8', comments_show($SQLnews['id'], $commentId, $SQLnews['com']+1, $callingCommentsParams))
		);

У меня небольшая заминка возникает при выводе сообщения об ошибке вот пытаюсь понять из за чего или я неправильно убираю iconv() или из за того что файл tpl в ср1251

Отредактировано qwest (2012-04-12 23:53:05)

qwest · 2012-04-12 23:59:39

Еще вопрос по языковым переменным планируется ли вынести все что не вынесено в языковые файлы.

vitaly · 2012-04-13 00:11:51

qwest пишет:

Подскажите пожалуйста как правильно в файле comments.php убрать вызов функции iconv()
1.
		$output = array(
			'status'	=> 1,
			'rev'		=> intval(pluginGetVariable('comments', 'backorder')),
			'data'		=> comments_show($SQLnews['id'], $commentId, $SQLnews['com']+1, $callingCommentsParams)
		);
2.
if ($_REQUEST['ajax']) {
		$output['data'] = $output['data'];
		$template['vars']['mainblock'] = json_encode($output);
3.
		$output = array(
			'status'	=> 1,
			'rev'		=> intval(pluginGetVariable('comments', 'backorder')),
			'data'		=> comments_show($SQLnews['id'], $commentId, $SQLnews['com']+1, $callingCommentsParams)
		);
У меня небольшая заминка возникает при выводе сообщения об ошибке вот пытаюсь понять из за чего или я неправильно убираю iconv() или из за того что файл tpl в ср1251

vitaly · 2012-04-13 00:12:38

qwest пишет:

Еще вопрос по языковым переменным планируется ли вынести все что не вынесено в языковые файлы.

Да.
И если твой эксперимент окажется удачен, то эта задача станет среди первых.

qwest · 2012-04-13 01:08:56

В спешке третий блок кода написал неправильно он вот такой из за него и заминка что то не выходит у меня правильно убрать в нем iconv()

3.

$output = array(
				'status' => 0,
				'data' => iconv('Windows-1251', 'UTF-8', $tpl -> show('comments.error'))
			);

vitaly · 2012-04-13 02:17:15

qwest, тебе надо убрать iconv('Windows-1251', 'UTF-8', и в конце )

qwest · 2012-04-13 03:42:47

Я так пробовал но у меня вместо сообщения об ошибке при неправильной отправке комментария выводится надпись "null".
Я подумал что я что то делаю неправильно, значит надо где то дальше искать или всетаки здесь ошибка?
Вроде уже все остальное нормально только с комментами неполучается.

Отредактировано qwest (2012-04-13 03:45:22)

qwest · 2012-04-13 21:31:40

Нашел еще один баг когда неправильно добавляю новость (без заголовка) выдается ошибка это нормально, но весь текст в текстовых полях становится
крякозябликами.
Я вот подумал может есть желающие посмотреть я файлы выложу.
Немогу победить два бага:
1. Неправильный вывод сообщения об ошибке в комментариях.
2. При добавлении новости без заголовка текст преобразуется в крякозяблицу.

qwest · 2012-04-14 06:48:20

Прошу помочь еще по одной строке правильно убрать iconv()

1.

	$result = array();
	foreach ($data as $k => $v) {
		$result[iconv($direction?'UTF-8':'Windows-1251', $direction?'Windows-1251':'UTF-8', $k)] = is_array($v)?arrayCharsetConvert($direction, $v):iconv($direction?'UTF-8':'Windows-1251', $direction?'Windows-1251':'UTF-8', $v);
	}
	return $result;
}

qwest · 2012-06-14 22:27:02

Ответ на вопрос в посте #20 актуален.

ROZARD · 2012-06-15 07:43:55

$result = array();
foreach ($data as $k => $v){
	$result[$k] = $v;
}
return $result;

Стоит вообще удалить function arrayCharsetConvert($direction, $data) { и сделать всё без неё.

qwest · 2012-06-17 12:34:10

ROZARD пишет:

$result = array();
foreach ($data as $k => $v){
	$result[$k] = $v;
}
return $result;
Стоит вообще удалить function arrayCharsetConvert($direction, $data) { и сделать всё без неё.

Просто удалить?

ROZARD · 2012-06-17 13:24:26

qwest, Ну не просто))
Для тебя нет смысла её использовать раз у тебя и так всё в utf-8

qwest · 2012-10-22 21:06:59

Версия UTF-8 может кому нужна: ngcms.zip

Качаем тестим отписываемся.

Next Generation CMS :: Форум поддержки

Объявление

#1 2012-04-11 03:56:42

Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#2 2012-04-11 12:04:32

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#3 2012-04-11 21:15:11

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#4 2012-04-11 21:43:18

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#5 2012-04-11 21:45:17

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#6 2012-04-11 22:47:49

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#7 2012-04-11 23:48:41

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#8 2012-04-12 00:15:10

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#9 2012-04-12 00:36:55

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#10 2012-04-12 00:46:21

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#11 2012-04-12 00:47:32

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#12 2012-04-12 22:37:41

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#13 2012-04-12 23:59:39

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#14 2012-04-13 00:11:51

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#15 2012-04-13 00:12:38

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#16 2012-04-13 01:08:56

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#17 2012-04-13 02:17:15

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#18 2012-04-13 03:42:47

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#19 2012-04-13 21:31:40

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#20 2012-04-14 06:48:20

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#21 2012-06-14 22:27:02

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#22 2012-06-15 07:43:55

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#23 2012-06-17 12:34:10

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#24 2012-06-17 13:24:26

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

#25 2012-10-22 21:06:59

Re: Переделал NGCMS в кодировке UTF-8 но есть небольшие проблемы.

Подвал форума