alexkozlov1982

Sphinx/Manticore Search могут подойти и по экономичности и по объему данных.
Эластик скушает всю память и не подавится.

Добавлено
Есть и другие игроки.

Solr has been more oriented towards text search. Elasticsearch quickly carved out its niche, aiming for log analytics by creating the Elastic Stack

Apache Solr. SolrCloud - шардинг и репликация. Solr умеет анализировать (искать) различные документы.
Elasticsearch vs. Solr vs. Sphinx: Best Open Sourc...
Для извлечения текста и метаданных самостоятельно можно использовать фреймворк Apache Tika.
Apache Hadoop - для хранения PDF.
Такой объем данных будет нелегко обработать. Будет много мороки с инфраструктурой и эксплуатацией ПО.

Храните связи между пользователь - oauth токен и пользователь - jwt токен.
Далее при получении в заголовке oauth токена ищите пользователя и привязанный к нему jwt токен и авторизовывайте

"Àëèíà Ãðîñó — Ìåëîì íà àñôàëüòå" — вам приходит в какой кодировке?
Если это однобайтовая кодировка, то вам достаточно

$string = iconv('cp1251', 'utf-8', $string);

Если же это вам приходит в utf-8, то вам нужно сделать так:

$string = iconv('utf-8', 'cp1252', $string);
$string = iconv('cp1251', 'utf-8', $string);

Вангую $attachment = new Image(); нужно запускать уже в цикле

ищите нужный cargo

вот вам биндинг к libcurl

Если пишете в web на Rust, то маст-хэв эту ссылку:
www.arewewebyet.org
Там расписано большинство аспектов касающихся web и текущее состояние экосистемы Rust по ним.

Касательно Вашего вопроса, то это к HTTP Clients:
www.arewewebyet.org/topics/clients
Пишет "getting there, stable but still maturing", значит все достаточно неплохо.

C# - для десктопного ПО под Windows лучшее решение на сегодня.

Используйте веб-сокеты для PHP socketo.me

а я думаю, что это путь в никуда

Зачем же отвергать один из самых прибыльных и простых вариантов? Или клиентов навалом?
СЕО и директ никак не мешают друг другу. Их нужно комбинировать.