Как реализовать поиск интернет страниц по ключевым словам?
Всем привет. Нужно реализовать сервис, который бы собирал сообщения СМИ по определенному запросу (например, сообщения сми о действиях какой-либо организации). Я примерно представляю себе процесс парсинга определенной страницы, но как получать эти самые страницы из сети по определённым ключевым словам? Нашел много подобных сервисов, например, Webhose, но как реализовать это своими силами? Данные нужно собирать из открытых ресурсов сми и соцсетей. На выходе нужно получать текст для дальнейшего анализа. Подскажите, в каком направлении двигаться, мб кто-то знает соответствующую литературу?