impass

"stock video/footage" не судьба загуглить?

Если размер обрабатываемых страниц не измеряется десятками или сотнями мегабайт и доступная память не сильно ограничена, то штатного DOMDocument, использующего нативную libxml, вполне должно хватить.

регулярные выражения не рассматриваются

Говоря о выборке из XML/HTML всегда в первую очередь вспоминайте об XPath. В PHP в сочетании с DOMDocument пригодится DOMXPath.

Ознакомьтесь с лицензиями Creative Commons. А искать контент можно на любом сервисе, который поддерживает фильтрацию по лицензиям, например, Flickr или 500px.

Проще всего открыть нужную страницу в обычном браузере (платформа не важна, а под *nix можно использовать хоть xvfb вместо реального экрана), захватывать, кодировать и транслировать видимое окно или отдельную область.
Всё тот же VLC может помочь
VLC Media Player: Desktop Streaming
screen:// parameters

Что мешает написать собственную библиотеку для работы с конкретным сервисом? Ну и как предложили выше — IMAP.

Хочу посоветоваться, имеет ли смысл запускать сессию исключительно для залогиненых пользователей поскольку последних намного меньше?

На самом деле, так и должно быть почти всегда. Разработчки тех или иных веб-приложений так зачастую сами плохо представляют, что впустую созданная сессия до момента собственно аутентификации ни для чего не нужна. Для целей сбора какой-либо статистики посещения стоит изобретать решение, не зависящие от основной сессии: выставление куки для дополнительных субдоменов или конкретных путей сайта и т.п.
В случаях, когда, например, необходимо настроить кэширование ответов backend'а на сильно нагруженных сайтах, отключить создание сессии для каждого входящего — просто жизненно необходимо.

почитайте :)

журнал «Русский репортёр»: 10 самых перспективных российских мегаполисов

Сведя воедино индекс городского развития, основанный на статистических данных, субъективное мнение горожан о том, насколько комфортно им живется, и оценку экспертов, «РР» составил итоговую десятку самых перспективных российских городов.

журнал «Секрет фирмы»: Город в осаде + Топ-100 лучших городов России

Город — та же корпорация. Просто он производит не молоко или вагоны, а услуги государству, населению и бизнесу. Его цель вполне коммерческая: получить как можно больше выручки и прибыли, следя при этом, чтобы жители, инвесторы и бизнес процветали. «Секрет фирмы» составил очередной рейтинг самых успешных городов-корпораций из 164 муниципальных округов с населением от 100 тыс. человек. Самыми процветающими оказались города, вовлеченные в государственные инвестпроекты, подмосковные «стотысячники», а также самостоятельные середняки с аграрным уклоном.

ограниченная глубина вложенности, т.е. при большом количестве комментариев велика вероятность упереться в край экрана

А кто заставляет выводить сразу все вложенные подкомментарии? В ЖЖ неплохо в этом отношении сделано (разворачивается по требованию), но юзабилити немного недоработали, часто и много приходится разворачивать, да ещё и не везде почему-то это развёртывание на месте (через AJAX) доступно.

domenforum.net/
forum.searchengines.ru/