Как собирать аналитику telegram бота?

Question

[Maxim]

Есть бот в тг, захотелось поучиться поработать с бд и собирать аналитику например отправки запросов от пользователей или команд в боте.

Есть ли где подробный материал по работе с бд именно в таком ключе как логирование действий, анализ и вывод статистики?
на хабре видел статью, но там как то все поверхностно что и зачем не расписано... да и скрипт не работает почему то.

Comments

[Роман]

Вам поучится работать с БД или все же аналитику?

[Maxim]

Роман, думаю действия пользователей будут записываться в БД? Потом статистику вызывать из бд.
Или есть проще способ ?

[Роман]

wkes, Если все же аналитику, то для начала определитесь в каком ключе вам нужен анализ (для каких целей). Ведь можно анализировать на предмет пользовательской нагрузки, на предмет финансовой рентабельности и даже на предмет корреляции пользовательской активности с фазами Меркурия))) Аналитика, это не вещь в себе (пущай будет а там разберемся), она преследует строго определенные цели, от которых и зависит что а в каком виде мы будем сохранять в БД для последующего анализа.

[Роман]

wkes, вы похоже путаете статистику (а вернее сбор статистических данных для последующего анализа) и аналитику (а именно анализ собранных статистических данных)

[Роман]

wkes, в любом случае определитесь для начала для чего вам все это, после этого у вас уже не останеться вопросов какие именно данные для анализа вам понадобятся и останется только вопрос как и куда нужные данные сохранять.

[Maxim]

Роман, Да, не совсем верно вопрос задал.
Нужна статистика действий пользователей, потому и связал вопрос с бд но заголовок вопроса перепутал со статистикой.
Нужно например логировать действия пользователей, записывать их в бд и вызывать командой.

[Роман]

сделайте так:
1. определитесь какие именно действия пользователей вы будете вносить в логи
2. определитесь какую информацию о каждом из действий вы хотите сохранять (например: время совершения действия, условное наименование действия, ID пользователя, какую либо доп информацию о действии/пользователе)
3. создайте под данные поля таблицу в БД (если решили в БД сохранять)
4. Решите за какой период времени логи будут считаться актуальными.
5. Решите что делать с неактуальными (устаревшими) логами (удалять или выгружать в архив)
6. Напишите скрипты, которые при совершении пользователем нужных действий будут записывать нужную инфу в БД
7. Напишите ротацию логов (реализация пунктов 4 и 5)
8. Напишите боту обработчик команды получения статистики, для этого определитесь что именно вы хотите видеть после ввода такой команды.

ну вот в принципе и все

[Maxim]

Роман, я примерно представляю алгоритм действий, но я ищу какую либо информацию касательно описания логирования и запись действий на примере...или мануал какой или документация, какие библиотеки нужны и прочее.
Конечно я вижу примерную картину так:
- скрипт собирающий действия пользователей определенных команд к боту
- создание БД(куда будут записываться логи пользователей)
- скрипт который при определенной команде будет доставать из бд лог и выдавать его мне за неделю например.

[Роман]

Maxim, то есть вам просто нужна реализация того что я описал комментарием выше?

[Maxim]

Роман, мануал скорее по логированию действий пользователей или документацию

[Роман]

Maxim, такого не никогда встречал. Все что видел можно описать фразой "кто как хочет тот так и ...." )))
Это не говорит о том что такого труда/мануала не существует, поищите, возможно найдете.

[shurshur]

Maxim, есть бот, в нём реализованы какие-то обработчики событий. Дальше прямо в эти обработчики событий дописываем нужные действия. Например, обработчик команды /start показывал пользователю стартовое меню с кнопками - дописываем туда также запись в таблицу в базе информацию о том, что в такое-то время пользователь нажал /start. В обработчике кнопок дописываем, что пользователь нажал такую-то кнопку. Итд итп. В результате мы имеем данные для последующего анализа. Например, если в боте реализован опрос, можно посчитать, сколько времени потратил на прохождение опроса от первого вопроса до последнего, сколько процентов пользователей завершили опрос и всё такое.

[Maxim]

shurshur, примерно так я и вижу сбор статистики, но где найти список команд обрабатывающие подобные запросы ?
в какую сторону копать ? в доках к sqlite или python это искать ? или еще где ?
Может есть уже решения готовые, в которых я бы покопался для понимания

[MorganDusty]

Вам сюда: НАЖМИ

на крайняк сюда: ТЫК

[Maxim]

Вы флудить сюда заходите ?

[MorganDusty]

Maxim, извините я ссылками на хабр не умею пользоваться особо оказывается это bb, щас обновлю

[Maxim]

MorganDusty, ничего не подходит....botan.io закрыли проект
Но спасибо за ответ

[shurshur]

Maxim, это не вопрос про "список команд". Это вопрос про элементарные навыки программирования.

[ambal245]

Не проще подключить Google Analytics к каждой команде и просматривать отчеты в удобной форме.

[Maxim]

shurshur, написано "поучиться" - это говорит о том что я только изучаю эту тему.
Если вы зашли только показать свое чсв а не помощь какую то реальную оказать....что для вас элементарно - для новичков либо еще неизвестно, либо не до конца изучено ... что бы стать элементарным.

[Maxim]

ambal245, возможно, но я пока не встречал такое решение
Посмотрю спасибо

[ambal245]

Maxim, Я отвечал на похожий вопрос здесь

[shurshur]

Maxim, нет никаких "списков команд". У каждого бота своя индивидуальная логика, в которой мы для аналитики должны куда-то накапливать сведения.

Поясню на пальцах.

Например, пусть есть очень простой бот, реагирующий на слово "привет". Добавим в него накопление статистики в базе данных о том, как пользователи его привествовали. А дальше можно по базе считать какие-нибудь показатели, например, среднее число приветов на одного пользователя или количество пользователей, которые поприветствовали больше одного раза.

user_stats = {}

@bot.message_handler(content_types=['text'])
def reply(message):
  if 'привет' in message.text:
    if message.from_user.id not in user_stats:
      user_stats[message.from_user.id] = 1
      your_db_connection.execute("INSERT INTO user_stats (user_id, hellos) VALUES (?, ?)", (message.from_user.id, user_stats[message.from_user.id]))
    else:
      user_stats[message.from_user.id] += 1
      your_db_connection.execute("UPDATE user_stats SET hellos=? WHERE user_id=?", (user_stats[message.from_user.id], message.from_user.id))
    bot.send_message(message.chat.id, f"И тебе привет. Ты меня уже поприветсвовал {user_stats[message.from_user.id]} раз")

Можно вместо счётчика числа приветов сохранять сами случаи приветствий с временем. Тогда, например, можно считать среднее количество приветов от пользователей в сутки за последнюю неделю или количество пользователей в сутки.

[ambal245]

Еще как вариант собирать все клики в базу данных MySQL и на отдельной странице выводить графики по командам с помощью библиотеки Google Charts. Недавно такой функционал разрабатывал.

[Maxim]

ambal245, наверняка нужен отдельный домен для использования такого решения? у меня на VDS бот стоит