Мониторинг социальной активности чиновников?

Question

[Дмитрий]

Идея появилась после такой лекции:
https://youtu.be/t9duFYxuvfU

Там приводили пример с предвыборной программой. Т.е. Открытые данные повлияли на политическую карьеру.

Идея создать некий сервис-агрегатор, собирающий данные из открытых источников о чиновниках и составляем подробный профиль на каждого.

Большая часть часть работы ляжет на ботов, которые будут собирать эту информацию. На людей ложатся проблемы сбора информации типа родственников, деклараций, каких-то не очевидных данных, которые сложно автоматизировать.

Это лишь концепт, интересно послушать мнения и мысли других. Сам такое я не потяну, от професиональной разработки очень далёк.

Пока есть вопросы как это все организовать на уровне архитектуры, как, что и где лучше хранить. Ну и как отображать.

Близкий по духу общественный проект - Диссернет.

Comments

[GavriKos]

Проситите, щас будет не ответ.
Но вот у меня бомбит от таких вопросов. У вас есть идея, вы ее хотите реализовать (иначе зачем спрашивать?), скорее всего даже в перспетктиве получать с нее прибыль - и хотите чтобы вам бесплатно сейчас расписали архитектуру и UI? No.

[Дмитрий]

GavriKos: бомбит? Проходите мимо. Это некоммерческий проект. Для прозрачности тех, кто работает за гос деньги.

[sim3x]

Там приводили пример с предвыборной программой. Т.е. Открытые данные повлияли на политическую карьеру

про такое лучше сразу забыть. Ето не решается ни данныи, ни публикациями.

Ето зависит от уровня развития общества

В общем задача не сложна, она сложна в деталях
А детали не решаются в общем случае

Потому ответа на ваш вопрос - не существует

[GavriKos]

Дмитрий: Некоммерческий? Без рекламы, без ничего? За серваки из своего кармана будете платить?

[Дмитрий]

sim3x: т.е. вы считаете, что нужно подождать, когда общество достигнет нужного уровня? А Диссернет не ждёт, уже делает. И вполне успешно.

[Дмитрий]

GavriKos: всё зависит от масштаба, можно собирать пожертвования. Думаю, под такой проект не нужен целый датацентр. По крайней мере если начать с небольшого количества чиновников

[sim3x]

Дмитрий:
дисернет - сообщество ученых, которые пытаются
Там много ручного труда
Очень много
Очень много волонтеров
Очень образованных волонтеров с чистыми помыслами

Результаты их работы при етом, саботируются
Я оставляю на ваше усмотрение - размышления, насколько успешна их работа

Я не призываю вас ждать или делать. Я констатирую, что цель

данные повлияли на политическую карьеру

призрачна. И я предлагаю, вам самим решить, стоит ли она вашего времени

И перейти к вашим конкретным техническим вопросам, если они есть

[Дмитрий]

sim3x: окей, целеполагание это другая тема.

Вопросы касаются, больше того, где бы почитать о похожих системах. Чтобы понять свои силы. Т.е. я понимаю, что работы много, но с чего лучше всего начать. Как правильно прикинуть объем хранимых данных, и соответственно необходимые ресурсы для их обработки.

[sim3x]

Дмитрий:
вцелом, про такие системы вы нигде не почитаете

Разделите на подтемы

граббинг / парсинг
entity recognition

Больше проблем со связыванием всего, что получится, в продукт

объем хранимых данных

про жесткие диски можно не думать

ресурсы для их обработки

стационарного пк хватит на очень большой период времени

с чего лучше всего начать

с парсинга. Он легче

[Сергей Горностаев]

Из каких открытых источников и какие именно данные вы хотите собирать? Я знаю множество чиновников и муниципальных служащих, большинство просто нигде не зарегистрированы, а некоторые и вообще интернетом не пользуются. Более-менее активны рядовые сотрудники женского пола и молодого возраста, но сомневаюсь, что кому-то будет интересны тонны фоток её детей и перепосты статусов вроде "Лучшие вещи в жизни бесплатные: Объятья, Улыбки, Друзья, Поцелуи, Семья, Сон, Смех и Хорошие Воспоминания!!!"

[sim3x]

Сергей Горностаев: зависит от уровня
Некоторые постят селфи с яхт, например

[Сергей Горностаев]

sim3x: таких человек 20 на всю страну и доступную информацию про них давно уже собрали вручную.

[sim3x]

Сергей Горностаев: вы сильно недооцениваете колличество таких людей

[Сергей Горностаев]

sim3x: я просто часто с такими общаюсь. Среди них очень мало дураков и очень много осторожных.

[sim3x]

Сергей Горностаев:
Простите за интимные вопрос, но чем вы занимаетесь, что вам часто приходится общаться с женами и и.о. жен чиновников?

[Сергей Горностаев]

sim3x: в моём случае сработало сразу несколько факторов :) Во-первых, мне в наследство достались связи из 90-х, которые я к тому же неплохо развил. Во-вторых, у меня есть родственники-чиновники. В-третьих, у меня есть женщины-чиновники. В-четвёртых, часть моих одноклассников\одногруппников ушли в госслужащие и в политику. В-пятых, на заре своей карьеры я сам был ведомственным сотрудником. А окончательно добивают букет полезных знакомств корпоративы МДВ, ФСБ, прокурорские, а также городских и районых администраций.

[airamkad]

Дмитрий:

бомбит? Проходите мимо. Это некоммерческий проект. Для прозрачности тех, кто работает за гос деньги.

Нету никакой прозрачности тех, кто делает политическую карьеру или сидит на высокой должности.

Адекватные челы не постят в соц. сети от своего имени.
Им руководство запрещает это явно в последнее время.
Да и они сами понимают.

Или (политики) - постят с умыслом.

Вы можете промониторить только какую-нибудь дуру-секретаршу или т.п.

[Дмитрий]

airamkad: не знаю, обрадую или разочарую вас, но постят и лайкают, комментируют и в целом ведут социальную жизнь, да - специфическую. Далеко ходить за примерами не надо. Астахов недавно довыделывался.

Я хочу собирать данные преимущественно о чиновниках местного уровня, т.к. остальные уже давно под зорким глазом общественности.

Вопрос еще в том, что следить за обычным человеком - смысла мало. А вот за публичные высказывания можно предъявить. Или задать вопрос, как на видео: "Вы тут детское пoрнo лайкаете, а попутно агитируете за детские площадки в каждый двор. Прокомментируйте".

[airamkad]

Дмитрий:
Астахов - не тот пример.
У меня есть знакомые чиновники.
У них бурная личная переписка с личными фото в Ватсапе - вполне компенсирует соц. сети, которые им настоятельно не рекомендуют в последнее время.

[Дмитрий]

airamkad: допустим такие есть, их большинство или меньшинство или сколько вообще? Я понимаю, скепсис, но назвать идею полностью бесполезной тоже нельзя. Пока не попробуешь, ничего не понятно.

Люди попробовали и ахнули, когда узнали о таком количестве плагиата и ничего, развивается проект. Хотя, я думаю, на первых порах точно так же им у виска крутили.

[airamkad]

Дмитрий:

Люди попробовали и ахнули, когда узнали о таком количестве плагиата и ничего, развивается проект. Хотя, я думаю, на первых порах точно так же им у виска крутили.

С плагиатом тут понятна и мотивация. И объемы инфы пригодые для автоматического поиска.

Ваш проект с технической стороны - совсем другой.

Answer 1

[airamkad]

Технически возможно.
И даже политические оппоненты и просто быдло в стиле "вау, ату его" - будут неплохими финансаторами.
Насчет полноценности результата - маловероятно. Далеко не все активны в соц. сетях. Далеко не все показывают как живут.
Технически - возможно. Поиск же по лицами из соц. сетей - заработал.

Comments

[Дмитрий]

Далеко не все активны в соц. сетях. Далеко не все показывают как живут.

Зато те, кто активны выдают таких.

[airamkad]

Дмитрий: как?
если человек не любит фотографироваться и просит друзей не постить его соц. сети - ты никак не увидишь его фото с пьянок.

[Дмитрий]

airamkad: Человеческая природа сама подталкивает быть социально активным. Особенно, если ты политик. Похоже на абсурд, если его нигде не видно и не слышно, то что это за должность?

В любом случае, я думаю, что таких "сферических конспираторов" не так уж много. Цель не в том, чтобы следить за всеми, а показать всем, что это возможно и что вновь пришедшие должны понимать, что они говорят и делают, когда становятся слугами народа.

[airamkad]

Дмитрий:

Человеческая природа сама подталкивает быть социально активным. Особенно, если ты политик. Похоже на абсурд, если его нигде не видно и не слышно, то что это за должность?

Политик свои выступления специально инициирует.

[airamkad]

Дмитрий:

В любом случае, я думаю, что таких "сферических конспираторов" не так уж много. Цель не в том, чтобы следить за всеми, а показать всем, что это возможно и что вновь пришедшие должны понимать, что они говорят и делают, когда становятся слугами народа.

Результаты будут весьма частичны.

Предположим, я чиновник (на самом деле нет)

К примеру я очень активен в соц. сетях. (а это уже на самом деле)
ЧИТАЮ.
И отправляют посты друзья в ЛИЧНЫХ сообщениях.

Лайков за последний год - ну хорошо если 10 наберется и они все безобидные.
Личных фото не публикую.
За все годы только 1 личная фотография моя утекла в сеть.