Как сделать пошаговую загрузку CSV в Mysql с помощью Ajax + php?

Question

[Владислав Дворянинов]

Есть большой CSV файл. 1млн строк. Как можно пошагово загрузить данные из него в БД. Может есть плагины или готовые решения?

Answer 1

[Владимир Коротенко]

А зачем пошагово?
https://www.mysqltutorial.org/import-csv-file-mysq...

Comments

[Владислав Дворянинов]

А как указывать путь к файлу на сервере, а не локально на компе?

[Владимир Коротенко]

Владислав Дворянинов,

Если текстовые файлы, которые нужно прочитать, находятся на сервере, то из соображений безопасности эти файлы должны либо размещаться в директории базы данных, либо быть доступными для чтения всем пользователям. Кроме того, для применения команды LOAD DATA INFILE к серверным файлам необходимо обладать привилегиями FILE для серверного хоста. See section 4.2.7 Привилегии, предоставляемые MySQL.

В версиях MySQL 3.23.49 и MySQL 4.0.2 команда LOCAL не будет работать в случаях, если демон mysqld запущен с параметром --local-infile=0 или если для клиента не включена возможность поддержки LOCAL. See section 4.2.4 Вопросы безопасности, относящиеся к команде LOAD DATA LOCAL.

Если указывается ключевое слово LOW_PRIORITY, то выполнение данной команды LOAD DATA будет задержано до тех пор, пока другие клиенты не завершат чтение этой таблицы.

Если указывается ключевое слово CONCURRENT при работе с таблицами MyISAM, то другие потоки могут извлекать данные из таблицы во время выполнения команды LOAD DATA. Использование этой возможности, конечно, будет немного влиять на производительность выполнения LOAD DATA, даже если никакой другой поток не использует данную таблицу в это же время.

При применении опции LOCAL выполнение может происходить несколько медленнее в сравнении с предоставлением серверу доступа к файлам напрямую, поскольку содержимое файла должно переместиться с клиентского хоста на сервер. С другой стороны, в этом случае нет необходимости в привилегиях FILE для загрузки локальных файлов.

www.mysql.ru/docs/man/LOAD_DATA.html

То что выделил болдом прочтите внимательно, это подразумевает что удаленный доступ возможен. Возможно что и через http(s) , но! Весь файл копируется на сервер, а потом разбирается