Как подготовить экспортированный файл XML из MySQL базы для импорта в Highload-инфоблоки?

Question

[EvgenyJozef3000]

Добрый вечер.

Что делаем:
1) Экспортируем базу данных MySQL (с таблицами: akb, makes, models, modifications и vehicles) в XML-файл. У каждый таблицы колонки разные!
2) В XML-файле должны сделать такую структуру, чтобы сработал правильно импорт.

Итак. С первой задачей я решил уже вопрос экспортом каждой таблица через PhpMyAdmin. Получился один из нескольких файлов (например возьмём таблицу makes): https://pastebin.com/raw/CMFhCrkq

Вот пример с уже настроенной структурой файла XML для импорта в Highload-инфоблок: https://pastebin.com/raw/yiDMGhRv

Среди таблиц имеется достаточно большая, состоящая из 200000 записей. Посмотрев на это всё, я понял, что нужно процесс с настройкой структуры как-то автоматизировать, поэтому обращаюсь к вам за предложениями. Что думаете?

Comments

[Ярослав Александров]

Если у вас есть на выходе файл XML, вам нужно писать свой скрипт обработчик, который будет обрабатывать ваш XML файл и добавлять значения в записи в highloadblock
задавать какой-то уникальный XML_ID, чтобы уже добавленные данные не добавлять повторно, так как скорее всего скрипт прервется (если виртуальный хостинг) и его нужно будет запускать повторно, либо вешать на крон.

[Kudis]

А доступна ли база данных из битриксового конейнера?
если да, то можно прямыми зпросами по 1000 штук к базе донору заполнить Highload стандартными битриксовыми средствами
если доступно по API, тогда то же самое, но меньшими порциями и через очередь
если нужен реалтайм, то стучитесь из донорской базы на endpoint, который собрать можно минут за 10-15

[SpeakeazyYT1]

Kudis, Добрый день! Вопрос данный уже решил, но назрел новый -> Как фильтровать элементы Highload-инфоблоков из нескольких блоков? (Как настроить умный фильтр для Highload-блоков?)