Возможно ли как-то проверить данные перед вставкой в бд?

Question

[kolomat]

Добрый вечер, вопрос возможно не правильно сформулировал. Суть заключается в чем, есть простой скрипт

$products = 'INSERT INTO product(sku, quantity, price) VALUES';
foreach($xml->offers->offer as $product) {
         $products .= sprintf('("%s", "%s", "%s""),', $product->vendorCode, $product->quantity, $product->price);
}
$products = substr($products, 0, -1);
$db->query($products);

Вопрос собственно в чем, при записи в таблицу product, есть стлобец product_id и он идет автоинкремент, соотвественно при таком подходе товары двоятся. Возможно ли как-то при записью в бд, получить sku товаров и записать в бд только те которых нет?
На данный момент я думаю записать все товары с xml в отдельный массив, потом создать массив с уже существующими товарами и потом сравнить их по sku и записать потом только уникальные значения. Насколько это правильный подход и возможно ли есть более простое решения?

Answer 1

[artem_sib]

Вам когда в форму данные пришли, вы почему не хотите взять данные с формы и проверить есть ли они в бд если нет то добавить, данный товар

Comments

[kolomat]

Вот именно в этом и суть вопроса) На данный момент я думаю создать несколько ассоциативных массивов, например

$data = [];
foreach($xml->offers->offer as $product) {
$data[$k] = [
'sku' => $product->vendorCode
// еще какие-либо данные
];
}

Второй что-то в таком духе

$query = $db->query("SELECT sku FROM product");
while($row=$query->fetch_assoc()) {
$product_all[] = $row;
}

И потом уже используя например array_udiff сравнить эти 2 массива и получить массив уже с уникальными и обработать его и записать в бд, но мне кажется что это как-то сильно сложно и возможно, есть варианты с записью проще?

[artem_sib]

kolomat, я думаю что вам нужно просто запросить из бд конкретный товар, по наименованию или еще по какому либо полю, если вам в ответ придут пустые данные, до добавлять,

я сейчас вижу ваш вопрос так, у вас в бд лежит три товара, телевизор, утюг и телефон,
вам в форму вбивают телефон, вы берете из формы наименование телефон и выгружаете из базы товар, если ничего не выгрузилось значит его там нет, добавляете, не нужно делать никакие массивы и так далее, вам же нужно проверить уникальность поля, а не перелопачивать всю бд предварительно ее запихав в массив

[kolomat]

artem_sib, там нет формы, это обрабатуется обычный xml файл, который грузиться через file_get_contents. При первой он обрабатуется и грузит все товары в бд, но вот проблема при втором запуске, потому что начинают двоиться товары. Вот я и не могу понять, как мне перед записью получить уже существующии sku, потом сравнить с теми что есть в файле и потом дописать в бд только те, которые будут уникальными.) Я извеняюсь, возможно это и глупо, но я сегодня перепробовал массу вариантов и никакого решения не нашел, кроме того что описал выше)

[kolomat]

Если может у вас есть какие-либо ссылочки на статьи или примеры, буду благодарен за помощь

[artem_sib]

kolomat, можно сделать UNIQUE поля в бд, то есть натсроить поля с уникальным ключом где будут только уникальные значиния без повторений, и все, далее добавлять все подряд туда из вашего файла, если в бд такое поле уже есть, оно не добавится в бд

Вы можете также определить группу полей как уникальную с помощью команды ограничения таблицы - UNIQUE.

[kolomat]

artem_sib, тоже подумал об этом, но слабо понимаю насчет работы UNIQUE. Например, я добавил его для поля sku и оно работает, но не будет ли проблем, например если руками добавиться товар и это поле у этого товара будет пустым?

[artem_sib]

kolomat, любые пустоты в этой схеме вам нужно чем то заменять, пустых полей не должно быть для правильной отработки уникальности,

вы боретесь сейчас за что?)) нужно понять что вам нужно и делать так как захотите, я пока с вами общаюсь много нюансов узнал что поля могут быть пусты, что это не форма а файл и тд и тп, я последним вариантом вам могу предложить только дать по голове тому кто делает этот файл что бы сразу делали все записи уникальными)))) и вам не пришлось заморачиваться)

[kolomat]

artem_sib, Блин даже не знаю как правильно сформулировать, тут вопрос чисто теоритеческий)) Смотрите, на входе у нас xml файл с товарами, в файле есть тег с уникальным артикулом, этот артикул пишется в столбец sku таблицы product, уникализировать этот столбец не хочется так возможно будет еще 1 такой файл.
И вот суть вопросу в чем, есть массив который собирает данные из xml файла и формирует запрос на вставку.

$products = 'INSERT INTO product(sku, quantity, price) VALUES';
foreach($xml->offers->offer as $product) {
         $products .= sprintf('("%s", "%s", "%s""),', $product->vendorCode, $product->quantity, $product->price);
}

Тоесть в $products у нас лежит строка в духе

INSERT INTO product (sku, quantity, price) VALUES ("123","5","550"),("345","7","950")

Например ариткул 123 уже есть в бд, 345 нет
Так вот как же мне всетаки перед вставкой получить то что 123 уже есть в бд и его надо пропустить и не вставлять в $products?

Answer 2

[Дмитрий]

Ну как минимум надо использовать подготовленные выражения, вставку делать через insert ignore можно, либо делать проверку на наличие и делать обновление записи
https://www.php.net/manual/ru/mysqli.prepare.php
https://www.php.net/manual/ru/pdo.prepare.php

Comments

[kolomat]

Спасибо, IGNORE наверное действительно то что мне нужно. А подскажите, не совсем понял насчет prepare. Сделать bind в нутри цикла и отправить одним же запросом я не могу? Тоесть получается мне надо получается формировать запрос на каждой итерации цикла? Или это я не совсем правильно понял?

[Дмитрий]

kolomat, один раз подготовили, потом только вставки
Если через PDO, то схема такая

$data = [
    0 => ['id' => 1, 'name' = 'abc'],
    1 => ['id' => 2, 'name' = 'zxy']
];

$sql = 'insert into table (id, name) values (:id, :name);
// $sql = 'insert into table (id, name) values (?, ?); // неименованными

$res = $pdo->prepare($sql);

foreach ($data as $item) {
    $res->execute($item);
}