Как разбить большой dump файл для импорта в MySQL?

Question

[Никита Данилов]

Коллеги, добрый день!
Столкнулся со следующей проблемой:
При импорте MySQL больших дампов на сервер (~5 Гб), процесс импорта зависает и не возращает какой-либо результат. После изучения файлов Hex-редактором пришел к выводу, что содержимое - это один большой INSERT INTO *** VALUES()
Вопрос. Как разбить данный INSERT программно, для успешного импорта дампа.

P.S. Также пробовал утилиты:
MySQLDumpSplitter.jar - выдает ошибку
https://sqldumpsplitter.net - лимит на кол-во строк(134 млн.)

Заранее спасибо!

С уважением,
Никита

Comments

[sim3x]

Как заливаете сейчас?
При чем hex-editor?
Что дамп содержит?

[Никита Данилов]

Заливаю страндартным Импорт/Экспорт тулом.
Hex - чтобы открыть файл большого размера.
Содержание Дампа:

-- MySQL dump 10.13 Distrib 5.5.40-36.1, for Linux (x86_64).--.--
Host: ****
Database: ****
---------------------------------------------------------
Server version.5.5.40-36.1-log../*!40101 SET @OLD_CHARACTER_SET_CLIENT=@@CHARACTER_SET_CLIENT */;./*!40101 SET @OLD_CHARACTER_SET_RESULTS=@@CHARACTER_SET_RESULTS */;./*!40101 SET @OLD_COLLATION_CONNECTION=@@COLLATION_CONNECTION */;./*!40101 SET NAMES utf8 */;./*!40103 SET @OLD_TIME_ZONE=@@TIME_ZONE */;./*!40103 SET TIME_ZONE='+00:00' */;./*!40014 SET @OLD_UNIQUE_CHECKS=@@UNIQUE_CHECKS, UNIQUE_CHECKS=0 */;./*!40014 SET @OLD_FOREIGN_KEY_CHECKS=@@FOREIGN_KEY_CHECKS, FOREIGN_KEY_CHECKS=0 */;./*!40101 SET @OLD_SQL_MODE=@@SQL_MODE, SQL_MODE='NO_AUTO_VALUE_ON_ZERO' */;./*!40111 SET @OLD_SQL_NOTES=@@SQL_NOTES, SQL_NOTES=0 */;
..--.-- Table structure for table `member_login`.--..

DROP TABLE IF EXISTS `member_login`;./*!40101 SET @saved_cs_client = @@character_set_client */;./*!40101 SET character_set_client = utf8 */;.

CREATE TABLE `member_login` (. `pnum` int(11) NOT NULL AUTO_INCREMENT,. `username` varchar(28) CHARACTER SET utf8 COLLATE utf8_general_mysql500_ci NOT NULL DEFAULT '',. `password` varchar(128) NOT NULL DEFAULT '',. `loginkey` varchar(36) NOT NULL DEFAULT '',. `notify` int(4) NOT NULL DEFAULT '0',. PRIMARY KEY (`pnum`),. UNIQUE KEY `username` (`username`),. KEY `loginkey_lookup` (`loginkey`).) ENGINE=InnoDB AUTO_INCREMENT=37322429 DEFAULT CHARSET=utf8;./*!40101 SET character_set_client = @saved_cs_client */;

..--.-- Dumping data for table `member_login`.--..
LOCK TABLES `member_login` WRITE;./*!40000 ALTER TABLE `member_login` DISABLE KEYS */;.

INSERT INTO `member_login` VALUES
(
/* значения */
)

Answer 1

[Илья Хребет]

Рекомендую The MySQL Command-Line Tool, например:

mysql -u username -p -h localhost DATA-BASE-NAME < data.sql

Comments

[Denis]

И как это поможет от ошибки допустим
MySQL Server Has Gone Away
В случае если это огромный пакет?

[Илья Хребет]

sidni, max_allowed_packet в my.cnf.

[Denis]

Илья Хребет,
да это все ясно, так же можно изменить и wait_timeout и тд, но чаще всего админ сервера человек живущий в зимбабве а у тебя обычный пользователь для ssh который изменять может только то, что в его папке home и пользователь mysql у которого если повезет есть права создать новую бд на сервере

Answer 2

[Denis]

Ну под винду ( можно под вайном в линухе запустить ) есть прога клиент
https://www.heidisql.com
При загрузке огромных дампов пытается переразбивать инсерты на лету.