Как реализовать сбор почты с 200 почтовых ящиков mail yandex gmail?

Question

[treein]

Возникла необходимость контролировать сотрудников большой сети , по мимо корпоративной почты есть в наличии почта mail, gmail, yandex. Подскажите как лучше просматривать почту через веб интерфейс, хранить ее и осуществлять поиск по ней, и все в одном месте. Думаю над VPS но не знаю какой софт лучше поставить для таких целей? примерно прикинул весь обьем данных 300 gb и будет рости.

Основные вопросы:
1) Есть ли для этих целей простое решение?
2) Пробовал скрипты для хостига но не нашел нужного, есть ли такие?
3) Если разворачивать все на vps какой софт ставить, что бы меньше геморроя было с настройками ( Хочется, что бы было все как в mail.ru вбил сервер, логин и пароль и автоматически сгенерировалась папка куда бы падало все содержимое почты "входящие, исходящие") ?
4) Какую vps выбрать, что бы хватило объема, и производительности ?
5) Есть ли проекты кто раньше это делал? вообще такое возможно для 200 почт?

Answer 1

[akelsey]

Очередной начальник самодур решил придумать винт с левой резьбой, т.е. вместо того что бы запретить на работе личную почту, начинается придумываться костыльное решение. Типа все 200 пользователей дадут свои пароли и логины к почтам?
PS
Теперь к делу
1. Вероятно простого решения нет, это разовое решение, то бишь проект.
2. Вряд ли есть готовые скрипты, см. п.1
3. Стандартного решения наверное такого не существует, ибо это мало кому нужно, а деньги платить вы все равно б не стали, а искали бы ключ на варезных сайтах.
4. Для сбора почты по шедулеру с 200 ящиков, не думаю что нужна шибко навороченная впс, думаю от 1гб рам, много хдд.
5. см п.1 и п.2

Как бы поступил я - будь у меня начальник самодур - уволился бы =) А если серьезно:
1. Базу пользователей вести либо в файле (200 юзеров не много) либо в MySQL (наверное не стоит). Либо самописный фронтенд на PHP либо руками в файле обновление имени, сервера, пароля, доп. параметры.
2. Почтовый сервер - тот который вы умеете админить, у которого есть вменяемая вебморда - например Postfix + RoundCube
3. По крону запускается самописный Bash/perl/php/python скрипт, который парсит файл с базой юзеров и например через imapsync синхронизирует исходный почтовый ящик в целевой почтовый на VPS
4. С поиском все еще сложнее =) Мне нечего вам предложить. (пилить какой нибудь sphinx возможно). Тут можно сделать в п.3 вместо синхронизации один в один, многие в один, такое журналирование - будет тогда и поиск.

А так то я б даже браться наверное не стал, если это еще предлагается делать бесплатно...

Comments

[treein]

1)"Очередной начальник самодур решил придумать винт с левой резьбой, т.е. вместо того что бы запретить на работе личную почту, начинается придумываться костыльное решение. Типа все 200 пользователей дадут свои пароли и логины к почтам?" - почему так сразу ? если есть задача, значит она не просто так появилась, опять же ни кто не говорит о личных почтах.
2) Так же ни слова не было сказано об отсутсвие финансирования, любая работа стоит денег
3) Вопрос был задан с целью получить совет профессионалов, а не критику

Как на счет реализации на базе Postfix + openwebmail ?
так же пробовал b1gmail - думал его функцеонала хватит но ощибся

[akelsey]

treein: ну так если это не личная почта, а корпоративная раскиданная по всяким сервисам, то не проще ли завести один раз корп. почту на любом почтовом своем личном сервере (exchange, postfix, mdaemon etc.) где включить журналирование, а на старых ящиках поставить безусловную переадресацию на новые.
Система станет более управляемой, масштабируемой, а старые ящики потихоньку сами отомрут.

[akelsey]

а что бы у пользователей не было соблазна заходить на старые ящики и писать оттуда - менять пароли после успешной миграции.

[treein]

на старых ящиках осталось очень много информации к которой иногда надо обращаться, а так уже все сделано нужно только собрать данные с gmail mail yandex почт в удобный интерфейс

[akelsey]

treein: я это и предложил, вам все равно придется заниматся всеми 200ми ящиков, какой бы вариант вы не выбрали 200 раз вам придется вводить пароль и логин, я предложил завести почтовый сервер, со своим доменным именем, сделать 20 пачек по 10 ящиков миграцию, т.е. получится что 5 в неделю или 1 мес. на всю миграцию.
1. Создали новый ящик на своем почтовом сервере
2. Сменили пароль на старом ящике на гмайл.ком
3. Синхронизировали ящики из п.2 в п.1
4. Настроили безусловную синхронизацию в ящике на новый адрес (всю входящую перенаправлять в новый адрес)
5. Известили пользователя что заходить нужно теперь так и так, вся почта у тебя теперь здесь
6. Повторить все пункты для еще 9 ящиков.

[aleksey_komyakov]

treein: раскопки...))
На своём примере: для 10 отделов было 10 ящиков и плюс работники пользовались личной почтой для пересылки служебных документов..
Сейчас: почта для доменов от яндекса куда собралась почти вся почта со старых ящиков. И все есть и поиск, и старые письма...
2 месяца был вынос мозга от работников, но теперь все ок))
Все остальные сервисы заблокировали и заодно проанализировали старые письма и нашли пару "протечек"..

Answer 2

[Dimonchik]

задача описана не полностью, нет данных о сохранении писем в ящиках, исходящих и правах на поиск

простое решение на часть задачи - посмотри https://www.arclab.com/en/inbox2db/
и https://zapier.com/zapbook/email-parser/mysql/
еще посмотри в сторону CRM
300Gb никакой VPS не поможет, таких не делают, только сервер

в целом вижу решение только выгрузкой в базу и последующую настройку sphinxsearch по всему этому

если будут вопросы - мыл в профиле

Comments

[treein]

1 пользователь который видит весь массив сообщений. Сrm это хорошо и она есть старые ящики разных работников до введения crm частично рабочие, хотелось бы в первую очередь собрать информацию с них

[Dimonchik]

посмотрите www.dbmail.org, может, получится за основу - управлять то логинами все равно нужно,
и возможно все проблемы решит вот это www.email2db.com/email-to-database.aspx

Answer 3

[Влад Животнев]

imapoffline, любой клиент (будь-то даже afterlogic) и поехали.

Comments

[treein]

можно по подробней про imapoffline, если можно ссылку русско язычную или любую с минуалом

[Влад Животнев]

treein: offlineimap.org/doc/quick_start.html