Как загрузить 10.000.000 товаров в интернет-магазин (со ссылкой на внешний сайт)?

Question

[Вова]

Здравствуйте!
Есть партнерская программа Admitad = и там дают возможность скачать CSV файлы с товарами от интернет-магазинов.
Сейчас пробую через wordpress + плагин wp all import - но он тяжеловат конечно... не знаю даже что и делать - но больше 50.000 товаров не заливается на 1 сайт - приходится плодить сайты до невозможного...
Может можете посоветовать что-то более оригинальное - чтобы не надо было плодить сайты а залить все на 1 сайт илидвижок? что лучше использовать при минимальных затратах на сервер?

сервер - 6 ядер, 300 гб место, 12 гб озу

Comments

[Ivan Yakushenko]

10.000.000

wordpress

при минимальных затратах на сервер

Какие-то 3 несовместимые вещи у вас.

[Вова]

Ivan Yakushenko, ну я не знаю... что посоветуете если не wordpress? сервер - 6 ядер, 300 гб место, 12 гб озу.

[Rustam Bainazarov]

Евгений, очень слабо.

Не говоря о том, что WP столько информации не переварит.

С таким объемом — без понятия даже, какой движок из коробки вытянет.

[Вова]

Рустам Байназаров, а какие нужны мощности для подобного вообще? надо что - покупать вообще отдельный сервер для этого? у меня сейчас самый дешевый вариант - он стоит 1000 рублей - сколько тогда надо в месяц за сервер отдаваь по вашим подсчетам скажите?

[Rustam Bainazarov]

Евгений, спокойно несколько миллионов за кластер серверов + обслуживание.

[Вова]

Рустам Байназаров, да это нереально... миллионов рублей?? я там столько за всю жизнь не заработаю с партнерской программы..

[Ivan Yakushenko]

Рустам Байназаров, не перебарщивайте =)
Евгений, ядра-ядрам рознь. Плюс очень сильно зависит от того, какое кол-во людей планируете обслуживать. Может чисто под БД этих 6 ядер и 12гб ОЗУ хватит, но правда очень сомневаюсь что это все нормально будет работать при тысячах обращений.
Вообще такие вопросы нужно задавать вам как инвестору (нанимателю), а не вам как "хочу в вордпресс впихнуть 10 лямов записей".
Единственное, что скажу наверняка - 10 лямов записей, вордпресс и впс за косарь - это настолько несовместимые вещи, насколько это только возможно.

[Rustam Bainazarov]

Ivan Yakushenko, ну смотря какие требования.

Если как у «Связного» — то вот они столько и тратят в месяц на серверы. Количество посетителей делают своё дело в плане нагрузки.

WP с таким количеством записей я не видел, конечно, тут необходимы какие-то лютые модификации движка, наверное.

[Вова]

Рустам Байназаров, просто сейчас мне приходится плодить эти вордпрессы как не знаю что и это не особо радует(

[Вова]

Ivan Yakushenko, сейчас все работает хорошо - там у меня около 200 штук вордпрессов стоит на нескольких доменах - все прекрасно работает. но... конечно еще 200 создавать уже просто нет сил - хотя не думаю , что если я еще 200 штук создам то сервер ляжет. посещаемость то там не такая большая как кажется..

[lamer350]

Евгений, все же нагрузка на сервер от 200х сайтов куда меньше будет чем с одного сайта с тем же количеством товаров... В любом случае это не реально, с любой CMS и вашим сервером. Есть кластеризация у битрикса, но 10 лямов - это надо лицензию ентерпрайз (1.5 млн рублей, это только лицензия). Я бы взял php (with pthreads) + MyISAM (mysql), без CMS. А сервер уже надо масштабировать в зависимости от количества пользователей.

[Дмитрий Гормаш]

оффтоп.

Интересный топик, спасибо автору.