Neocaridina: Поиск внешних ссылок ни как не связан с индексом ПС. Они же ищутся парсером самих страниц. Почему бы не написать такой парсер? Или взять ПО типа contentDownloader. В нем есть парсер ссылок, можно настроить под Ваши задачи.
Максим Тимофеев: зато этим мегаиндексам и т.п. нужно время и делей на переиндексацию, насколько помню.
Нет времени на велосипед, сабж заежжен донельзя, думал мб кто в теме секономит мне время(