Как правильно сделать LIKE запрос?

Question

[denis_druid]

Здравствуйте.
У меня такая ситуация:
В БД записи, часть из них в ASCII, часть в UTF-8 (если кириллица)
Из базы данных выбираются данные по запросу.
Запрос в ASCII.
Так вот, проблема в том, что при запросе LIKE "%bat%". Он выводит корректно все записи из БД, содержащие "bat".
Но при запросе LIKE "%bat 1%" он выводит только записи в ASCII и игнорирует записи UTF-8.
Таблица и поля в utf8_general_ci
Полагаю, что проблема именно в цифре на конце запроса, т.к. запрос LIKE "%bat bat%" работает нормально.
Не могу понять почему. Подскажите.
Запрос самый обычный:

SELECT * FROM `my_table` WHERE `name` LIKE '%bat 1%'

Comments

[ThunderCat]

я конечно извиняюсь, но запись аски в поле утф чем обусловлена? Или это что-то сродни тому чтобы косить траву топором в скафандре(люблю преодолевать трудности!)?

[denis_druid]

ThunderCat, тут сложно, данные уже есть в БД. Так сложилось исторически.

[denis_druid]

Владимир @, Это первое, что я пытался сделать, но
ASCII is a subset of UTF-8, so if a document is ASCII then it is already UTF-8.
И даже дело не в этом. Запрос не работает напрямую в MySQL (phpmyadmin)

[denis_druid]

Владимир @, проверил через консоль. Без разницы. Тоже самое, что и в phpmyadmin

Answer 1

[ThunderCat]

в целом мне видется куча возможных проблем, основная, конечно же, в том что вы не получите нормального ответа от сервера, если у вас мешанина из разных кодировок в поле где 1 кодировка. Так же неизвестно какая кодировка установлена для соединения. ЕМНИП пробелы могут быть разные, особенно для utf кодировок, так что на самом простом варианте у вас все посыпется(точнее уже). Имхо проще все отконвертить в утф 1 раз и настроить нормальное сохранение(например вставив iconv в 3-4 места в коде), чем продолжать колоться, но жрать кактус.

Comments

[denis_druid]

Кодировка соединения в норме.

function ConnectToDB($host = 'localhost', $db   = 'db', $user = 'root', $pass = ''){
    global $pdo;
    $charset = 'utf8';
    $dsn = "mysql:host=$host;dbname=$db;charset=$charset";
    $opt = array(PDO::ATTR_ERRMODE=>PDO::ERRMODE_EXCEPTION, PDO::ATTR_DEFAULT_FETCH_MODE=>PDO::FETCH_ASSOC, PDO::ATTR_EMULATE_PREPARES=>false);
    $pdo = new PDO($dsn, $user, $pass, $opt);
}

А по поводу конвертации. Оно же как бы всё в UTF-8 уже и есть, насколько я понимаю. И не конвертируется из аски в ютф8.
Данные по кодировки я получаю исключительно посредством mb_detect_encoding();

[ThunderCat]

denis_druid, добавьте в соединение

$reqCharset = "
SET character_set_connection = $charset;
SET character_set_client = $charset;
SET character_set_results = $charset;
";
$pdo->query($reqCharset);

емнип там не все из этого определяется в charset

[ThunderCat]

denis_druid, я бы действовал так:
1) нашел строку которая по вашему должна выбираться по like
2) выбрал бы ее по id в коде
3) сравнил побитово что лежит в результате запроса и что вы отправляете в like.
4) делал выводы

[ThunderCat]

denis_druid, еще тупой вопрос - вы уверены что там есть сторка "bat(один пробел)1" а не "bat(два пробела)1" например?

[denis_druid]

ThunderCat, не сталкивался с таким. Подскажите, как это сделать? Я про побитовое сравнение.

[denis_druid]

ThunderCat, Конечно. Это проверялось в первую очередь.

[denis_druid]

И вот сейчас тестирую конвертацию, но результат не такой, какой должен быть. Странно. Простой код, а не работает.

<?php
$str1 = "тест тест тест 11";
$str2 = "test test test 11";

echo mb_detect_encoding($str1)."<br />";
echo mb_detect_encoding($str2)."<br /><br />";

$str1 = iconv('ASCII', 'UTF-8//IGNORE', $str1);
$str2 = iconv('ASCII', 'UTF-8//IGNORE', $str2);

echo mb_detect_encoding($str1)."<br />";
echo mb_detect_encoding($str2)."<br /><br />";
?>

Результат:

UTF-8
ASCII

ASCII
ASCII

[ThunderCat]

denis_druid,

If you try to use mb_detect_encoding to detect whether a string is valid UTF-8, use the strict mode, it is pretty worthless otherwise.

<?php
$str = 'áéóú'; // ISO-8859-1
mb_detect_encoding($str, 'UTF-8'); // 'UTF-8'
mb_detect_encoding($str, 'UTF-8', true); // false
?>

И в целом оно не гарантирует верное определение строки, скорее выводит первое совпадающее с паттерном кодировки, а их может быть несколько.

[denis_druid]

ThunderCat, тут дело непонятно в чем. Может и не в кодировках. Достаточно в браузере написать латиницей и этой по умолчанию станет аски, если добавить кириллицу, автоматом станет ютф8. Интересно.

[ThunderCat]

denis_druid, все тут понятно, если пишете латиницей - она попадает под паттерн распознавания и как аскии и как утф, но аскии проверка стоИт раньше, соответственно возвращается первый найденный паттерн, в случае русских символов паттерн уже не соответствует аскии и возвращается утф.