MS SQL Server, PHP и UTF-8

Question

[MastaEx]

Возникла задача получать данные из SQL Server в PHP.
Все бы ничего, но кодировка у MSSQL стоит SQL_Latin1_General_CP850_CI_AS.

Нужно получать данные в UTF-8.
Предполагаю два пути:
— Существование таблетки вида SET NAMES UTF-8. Существует ли нечто подобное в MSSQL?
— COLLATE каждого столбца во время запроса. COLLATE во что? Списки collation нашел, но ничего похожего на юникод не увидел.

Сейчас получаемые данные выглядят как знаки вопроса и подобрать кодировку для iconv под это дело не удается, да и не хотелось бы это делать через iconv.

p.s. SQL Server 8.0 — если не ошибаюсь, то это двухтысячный.

Answer 1

[pietrovich]

А каким, кстати, драйвером пользуетесь?
У меня при использовании SQL Server Driver for PHP никаких проблем с UTF-8 не возникает. Правда я пользую SQL Server 2008, но этот драйвер должен быть совместим и с 2000, емнип.

Comments

[MastaEx]

Драйвер стандартный, тот что в комплекте с php был, php_mssql.dll и php_pdo_mssql.dll.
Работаю с Yii, все запросы идут через PDO.

[MastaEx]

Вы, видимо, используете php_pdo_sqlsrv_52_ts_vc6.dll, сейчас попробую его прикрутить. С ним Yii из коробки не знаком, сейчас попробую подружить.

[pietrovich]

Попробуйте тот который от майкрософта (php_sqlsrv_*.dll), емнип PDO со второй версии поддерживается. По ссылке есть инсрукции по установке и ссылки на загрузку. По идее понадобится sql native client и сам драйвер под подходящую сборку php. Как в yii настроить collation на уровне соединения я не знаю, но в Zend настраивается с этим драйвером без проблем.

[MastaEx]

Поставил, не хочет он подключаться к 2000-му серверу, говорит: This extension requires either the Microsoft SQL Server 2008 Native Client (SP1 or later) or the Microsoft SQL Server 2008 R2 Native Client ODBC Driver to communicate with SQL Server.

Этот Native Client это что-то, что можно поставить поверх сервера или что?

[pietrovich]

Скорее не поверх а рядом. Если грубо, то это набор библиотек для взаимодействия с сервером.

[MastaEx]

На сайте Microsoft написано, что ставить туда, где запускается PHP. Поставил, ничего не изменилось. Его как-то надо настраивать / запускать?
Точно ставить не на сервер с SQL Server?

[pietrovich]

Нет, ничего настраивать не нужно, ставится на машину на которой крутится php. Для тестирования работоспособности связки для начала откройте документацию по этому драйверу (либа предоставляет свои функции для подключения выборки и т.д.) и проверьте на каком-нибудь простеньком скрипте типа «подкключиться; select 123; print_r(результат);». Далее в зависимости от результата проверки работоспособности драйвера в целом либо приводите драйвер в чувства, либо ищзите как его скрутить с yii.

[pietrovich]

Да, забыл добавить. Не забудьте подключить DLLку как extension через php.ini ;")

Answer 2

[plaha]

можно collate в CYRILLIC_GENERAL_CI_AS а потом iconv(«cp1251», «UTF-8», $value)

Comments

[MastaEx]

Так я пока и сделал. Но согласитесь, это костыль :-)
А в обратную сторону у меня так не получилось. Не могу выбрать строки по where с русскими буквами.
Collation базы SQL_Latin1_General_CP850_CI_AS, iconv при конвертации в cp850 ругается на illegal characters… Во что конвертировать мое utf-8 чтобы sql server понял?

[plaha]

С обратной ситуацией попробовать можно так (продолжение костылей):
входящую строку конвертим iconv из utf8 в cp 1251
затем вставляем ее в запрос в котором есть преобразования типа
convert (nvarchar,table.field) collate CYRILLIC_GENERAL_CI_AS as fieldNewName

Answer 3

[shushu]

support.microsoft.com/kb/232580
habrahabr.ru/blogs/php/75776/

Comments

[MastaEx]

Обе ссылки уже находил. По первой нет ответа на мой вопрос. USC-2 сервер не признает как валидный collation.
По второй драйвер под *nix, а я под win, да и нет у меня проблемы с драйвером…

Answer 4

[MastaEx]

Вы не поверите… :-)
Весь затык оказался в том, что я ставил Native Client от 2005 сервера. Уж не знаю, куда я смотрел :-0
Поставил от 2008-го — все завелось.
С этим драйвером все работает так, как-будто и нет никаких заморочек с кодировками. Запросы с utf8 условиями, ответы тоже в utf8.
А по ссылке про Yii из-за бага/фичи Yii автор не получит некоторых специфических методов для MS SQL. Все-таки про sqlsrv Yii кое-где пока не знает, надо бы им сообщить…

Всем огромное спасибо!

Comments

[MastaEx]

Тьфу, опять окошком промахнулся. Это к комменту-решению.

[pietrovich]

Про некоторые особенности sqlsrv и к ZF коннектор не знает. Но думаю это вопрос времени, если бы дравер был под linux было бы проще, все-таки php под линуксом крутится гораздо чаще, но по моим личным наблюдениям процент людей которые используют php под iis растет, а знаит и патчи к популярным фреймворкам рано или поздно появятся.

[MastaEx]

Написал в багтрекер про вышеупомянутый баг. Fixed спустя 12 минут. o0
Про Yii я имел в виду то, что внутри инстанцировался не совсем тот класс, терялась пара методов для работы с транзакциями и кое-чего по мелочи. Для sqlsrv ничего сверх методов обычного PDO Yii не реализует. Да в общем-то ничего и не нужно, имхо.
А php у меня под апачем ;-)

Answer 5

[MrCrock]

Если Latin1 стандартная кодировка базы, но данные в ней должны храниться и писаться в UTF-8, то в PHP коде после подключения к базе должно помочь:

mysql_query('SET character_set_database = utf8');
mysql_query('SET NAMES utf8');

Comments

[MrCrock]

Сорри, не углядел mssql.

Answer 6

[lavel]

Сами столбцы какого типа? в MSSQL данные хранятся в юникоде с использованием UCS2 для NCHAR, NVARCHAR, NTEXT. Попробуйте сделать CAST as NVARCHAR например, или создать таблицу с таким типом и выбрать из нее.

Comments

[MastaEx]

Столбцы как раз nvarchar, iconv('UTF-8', 'UCS-2LE', $str) не помогает.