Как парсить из Twitter ВСЕ твиты с определенным хэштегом?

Question

[tuxx]

Было дано задание написать парсер твитов по определенному тегу. Погуглил и наткнулся на класс. Подключил, настроил, получил твиты, но твиты получаются не совсем те и не все. Парсер срабатывает примерно 180 раз за 15 минут забирая по 100 сообщений за раз, но все 180 наборов сообщений одинаковы, хотя их больше сотни. Такого быть не должно, т.к. параметр since_id постоянно изменяется на id последнего твита.

Answer 1

[tuxx]

Сам же решил проблему. Был не достаточно внимателен. Параметры для следующего запроса со следующим набором твитов передается в search_metadata->next_results.

Answer 2

[Андрей Кравчук]

я тоже заюзал этот класс, но, не получается делать поиск по русским хештегам...

Comments

[tuxx]

для русских хэшьегов используй функцию urlencode

[Андрей Кравчук]

tuxx: она и для англ используется... но при попытке искать русский хештег выдается ошибка "Sorry, that page doesn’t exist!"

[tuxx]

у меня так работает. строка запроса выглядит так $getfield = '?q=%23' . $hashtag . '&count=' . $msgcount; где $hashtag сам хэштег после urlencode, %23 знак хэштега и $msgcount - количество возвращаемых сообщений (максимум 100)

Answer 3

[megastudio]

Мы используем API Twitter researcher twitter.sneakin.info У них там есть платная версия для их API по сбору твитов, которую можно заказать. В принципе, мы довольны, под наши задачи вплоне достаточно Есть еще варианты, к примеру, можно использовать API твиттера либо создать сеть ботов, но это дорого и не 100% вариант.