megastudio

Можно также использовать уже готовые API: https://twitter.sneakin.info - не нужно заморачиваться с проксями и запросами. Используем уже больше месяца, довольны. Юзайте)

Есть возможность поработать через API: https://twitter.sneakin.info Используем уже не первый месяц, более чем довольны.

Рекомендую проект: https://twitter.sneakin.info - пользуемся уже несколько месяцев их API, достаточно хороший продукт, под наши требования в вопросе сбора данных очень даже отвечает. Парсим при их помощи аккаунты политиков и трейдеров - дата радует, сам бы врятли смог бы за пару дней сделать подобное решение.

Не для всех случаев имеет смысл брать деньги только за разработку. Вам нужно сюда еще добавить обслуживание + эксклюзив тоже может быть (я так понимаю, вы и будете хостить). Вы ж все таки на рынке находитесь. Почему за apple не берут пару сотен рублей? Если ваш продукт действительно тащит, то зачем собирать крохи. Договаривайтесь с клиентом выходите на комфортную для всех сумму.

Есть сервис для сбора данных с твиттера по любому запросу и на любом языке, наша организация сейчас его использует для того, чтобы отслеживать новостные изменения по твиттам интересующих финансовых организаций. Подробностей пользования всех расскрыть не могу, но штука хорошая + апи тоже неплохой, хотя можно и заказывать выгрузку куда нужно: у нас на одном проекте висит выгрузка на гугл диск для аналитика, на втором забираем данные через апи каждые 5 минут на свой сервис и обрабатываем https://twitter.sneakin.info/ru/
- можете попробовать

Есть вариант заюзать готовые API есть множество. Даже у самого твттера есть своя апа, но, к сожалению, она платная + имеет ограничения на количество запросов, есть вариант заюзать - мы им пользуемся уже длительное время для своего проекта в сфере ресерчинга данных, вполне адекватное решение. Платная версия дешевле выходит чем оф. апи, но и производительность лучше. Поимо этого проекта есть еще решения, даже можно пойти по пути эмуляторов (к примеру на гитхабе есть много для Node.js), вам, конечно, может быть особенно сложно использовать целый стак технологий. В идеале, найти какой-то апи и подвязать его под свою апликацию: запилить пару контроллеров, какую-нибудь бейсик модель, если надо и давать курлом по апи запросы, ловя ответы - самый базовый вариант. Можете еще покопать код твиттера и через курл делать авторизацию под акком, после чего производить парсинг.

В принципе, да, более чем. Набиолее быстрым решением может быть использование готового API. Мы на фирме чаще вего юзаем API Twitter researcher twitter.sneakin.info Есть еще варианты, к примеру, можно использовать API твиттера либо создать сеть ботов, либо копнуть в сторону эмуляции, но это дорого и не 100% вариант, особенно, если нужно много контента собирать.

Мы используем API Twitter researcher twitter.sneakin.info У них там есть платная версия для их API по сбору твитов, которую можно заказать. В принципе, мы довольны, под наши задачи вплоне достаточно Есть еще варианты, к примеру, можно использовать API твиттера либо создать сеть ботов, но это дорого и не 100% вариант.

Есть решения онлайн-типа, такие как: Улитка, fb-parser.com, aparser.com и.т.п. Если вам не нужны файлы excel формата с контактами из FB, то рекомендую использовать API, которое, правда было лишь у Улитки. На данный момент доволен вторым сервисом из выше перечисленных.

Есть более экономный способ - использовать API Улитки либо заказать готовый пакет у решений типа fb-parser.com

Здравствуйте, есть проекты такие как Улитка, fb-parser.com, SpiderX и прочие, что наловчились работать не только через API но и через парсинг напрямую - это более чем возможно.

Касательно парсинга данных - не всегда это есть нарушение, поскольку если вы никак негативно не влияете на программное обеспечение Facebook + не совершаете действий, направленных на получение приватной информации пользователей, которая не открыта общественности либо вам, то абсурд трактовать такие действия противоправными (равносильно судить сервисы-агрегаторы, тот же самый Google за сбор базы в сети). Если ваша "жертва" осознанно сделала данные доступными всем - значит это не есть приватные данные.
Мой опыт сбора баз из ФБ говорит, что крайне не стоит использовать парсер Facebook, который десктопный - в моем случае пришлось докупать прокси + были большие проблемы с нагрузкой на компудактер. Среди web-решений, могу выделить b2b-group.xyz (то, что пользую лично), по другим решением слышал об API Ulitka, но не находил сайт сего чуда Как-то так :-)

Сразу скажу: не советую десктопные варианты (тут вам и производительность, и нагрузка на компудактер - как проблемы + еще и постоянно прокси искать). Среди онлайн сервисов надёжных не особо много, поскольку большинство являются "мертвым грузом" на рынке из-за заточенности под старый АPI Facebook, где была возможность сбора личных данных пользоватлей. На данный момент, основываясь на личном опыте, могу посоветовать только два: https://pepper.ninja/facebook/ и относительно молодой b2b-group.xyz - в принципе, b2b интересен тем, что люди там делают персонализированный сбор данных (походу сейчас будут переходить на "кабинетное приложение"). В общем, пробуйте! :-)

Для вашей задачи прекрасно подходит написание отдельного парсера Facebook: тамтошний API не предоставляет возможностей свободного поиска по всей базе FB. Есть и готовые решения, которые уже написаны ручками другими товарищами. Нам доводилось использовать решения типа фб парсер, b2b-group.xyz, monoparser.com ... Скажу сразу, десктопные решения - это "кот в мешке", поскольку тут вам и проблемы со скоростью работы, возможная блокировка ip (нужно постоянно искать прокси). В общем, варианты использовать готовые решения есть, но крайне желательно брать по меньше на себя рутинной работы.