• Есть ли боты для модерации?

    HemulGM
    @HemulGM
    Delphi Developer, сис. админ
    1 комментарий
  • Почему он выдает interrupt exception, который не ловится?

    Vindicar
    @Vindicar
    RTFM!
    Потому что вызов thread.start() который внутри start_listen() - не блокирующий. Главный поток продолжит работу, выйдет из try-except и завершится, так что на момент возникновения KeyboardInterrupt он уже будет завершён. Твой поток не помечен как daemon, поэтому интерпретатор продолжит работу (был бы помечен - программа бы завершилась тут же).
    Если ты делаешь join() - то пока запущенный поток не закончится, главный не продолжит работу.

    Собственно, в текущем виде тебе поток вообще не нужен, у тебя главный поток ничего не делает и так, и так.
    Что ты пытаешься сделать?
    Ответ написан
    Комментировать
  • Несколько пользователей или контейнеризация?

    @Drno
    lxd контейнеры
    ставится и настраивается в 2 клика, запускаете каждому свой контейнер и пусть там развлекается
    ну и ssh каждому прокинуть в нужный контейнер
    Ответ написан
    Комментировать
  • Я пишу музыкального бота для Discorda, но выводит ошибки. Не могу понять в чем именно проблема?

    Vindicar
    @Vindicar
    RTFM!
    Ну тебе же прямым английским текстом написано: ты обращаешься к объекту, описывающему сервер(гильду), и пытаешься у него добыть свойство voice, а такого свойства нет.
    server.voice.channels - получить у объекта сервер свойство voice, а у объекта в этом свойстве - свойство channels.
    И в документации свойства voice у объектов класса Guild тоже нет. Зато есть voice_channels.
    Ответ написан
    Комментировать
  • Вероятностные алгоритмы: какие бывают и где найти полный их список?

    begemot_sun
    @begemot_sun Автор вопроса
    Программист в душе.
    Здесь буду собирать ссылки на вероятностные алгоритмы:
    1. Фильтр блума https://ru.wikipedia.org/wiki/%D0%A4%D0%B8%D0%BB%D...
    2. MinHash habrahabr.ru/post/115147
    3. LogLog: находим число уникальных элементов -- habrahabr.ru/post/119852
    3.1 HyperLogLog
    4. Поиск похожих документов с MinHash + LHS: habrahabr.ru/post/250673
    5. https://en.wikipedia.org/wiki/Count%E2%80%93min_sketch -- приближенный сбор частот событий в потоке.
    6. Алгоритм Рабина — Карпа: поиск подстрок в строке через хеширование. https://ru.wikipedia.org/wiki/%D0%90%D0%BB%D0%B3%D...

    https://en.wikipedia.org/wiki/Category:Probabilist...
    Ответ написан
    Комментировать
  • Как в питоне обеспечить контроль целосности данных?

    Vindicar
    @Vindicar
    RTFM!
    С переменными так не прокатит. А вот с полями класса - при желании можно, если использовать property.
    Базовая идея простая - пусть сеттер свойства производит валидацию.
    Например, так
    class Person:
        def __init__(self, name: str):
            self._name: str = ''
            self.name = name
        
        @property
        def name(self) -> str:
            return self._name
        
        @name.setter
        def name(self, value: str) -> None:
            if not value:
                raise ValueError('Must not be empty')
            self._name = value

    Но писать такой бойлерплейт быстро надоест. Поэтому можем попробовать обобщить процесс.
    Например, так
    from typing import TypeVar, Type, Any, Annotated, Callable, Dict, get_args, get_origin
    
    T = TypeVar('T')
    ValidationRule = Callable[[Any], bool]
    ValidationRules = Dict[str, ValidationRule]
    
    class ValidatedProperty:
        """Экземпляры этого класса будут свойствами в валидируемых классах, и будут заниматься валидацией."""
        def __init__(self, name: str, storagename: str, rules: ValidationRules):
            self.name = name  # как называется свойство
            self.storagename = storagename  # где его хранить
            self.rules = rules  # какие правила применять
    
        def __get__(self, instance, owner=None):
            return getattr(instance, self.storagename)  # при чтении просто возвращаем свойство
        
        def __set__(self, instance, value):  # при записи валидируем
            for message, rule in self.rules.items():  
                if not rule(value):  # если правило нарушено, выкидываем исключение с сообщением
                    raise ValueError(f'{instance.__class__.__name__}.{self.name}: {message}')
            setattr(instance, self.storagename, value)
    
    
    def validated(klass: Type[T]) -> Type[T]:
        """Декоратор для валидируемых классов."""
        for name, annot in klass.__annotations__.items():  # проверяем список аннотаций в классе
            base = get_origin(annot) or annot
            if base is not Annotated:  # нас интересуют только те, которые помечены как Annotated
                continue
            args = get_args(annot)
            rules = [arg for arg in args if isinstance(arg, dict)]
            if not rules:  # и только если один (любой) из аргументов Annotated - словарь
                continue
            # в этом случае мы считаем, что словарь содержит правила валидации, и создаём свойство класса
            setattr(klass, name, ValidatedProperty(name, f'_{name}', rules[0]))
        return klass  # не забываем вернуть изменённый класс!
    
    
    @validated
    class Person:
        name: Annotated[str, {'must not be empty': lambda v: bool(v)}]
        age: Annotated[int, {'must be positive': lambda v: v > 0}]
    
        def __init__(self, name: str, age: int):
            self.name = name  # валидация отработает уже здесь
            self.age = age  # валидация отработает уже здесь
        
        def __repr__(self) -> str:
            return f'Person(name={self.name!r}, age={self.age!r})'
    
    try:
        Person('John Doe', 23)  # отработает успешно
    except Exception as err:
        print('Failed to create person 1')
        print(f'{err.__class__.__name__}: {err!s}')
    else:
        print('Person 1 created')
    
    try:
        Person('', 23)  # выкинет исключение
    except Exception as err:
        print('Failed to create person 2')
        print(f'{err.__class__.__name__}: {err!s}')
    else:
        print('Person 2 created')
    
    try:
        Person('Jane Doe', -23)  # выкинет исключение
    except Exception as err:
        print('Failed to create person 3')
        print(f'{err.__class__.__name__}: {err!s}')
    else:
        print('Person 3 created')
    
    p = Person('John Doe', 23)
    try:
        p.name = ''  # выкинет исключение
    except Exception as err:
        print('Failed to modify person')
        print(f'{err.__class__.__name__}: {err!s}')
    
    try:
        p.age = 0  # выкинет исключение
    except Exception as err:
        print('Failed to modify person')
        print(f'{err.__class__.__name__}: {err!s}')
    
    try:
        p.age = 24  # отработает успешно
    except Exception as err:
        print('Failed to modify person')
        print(f'{err.__class__.__name__}: {err!s}')
    
    print(p)
    print(vars(p))


    Это, конечно, велосипед, и пользоваться им я бы не посоветовал. Для валидации есть библиотеки типа pydantic.
    Плюс, как было указано выше, не всё и не всегда имеет смысл валидировать...

    А для работы с БД лучше использовать ORM. SqlAlchemy популярна, но есть и более простые, например, peewee или ponyorm.
    Ответ написан
    Комментировать
  • Как в Python, используя logging, записать в traceback пойманного исключения значения локальных переменных функции?

    Vindicar
    @Vindicar
    RTFM!
    Попробуй создать свой LoggerAdapter или Filter. Вообще в доках есть секция на эту тему, почитай, может, найдешь что полезное.
    По сути, схема работы logging такая:
    • Logger предоставляет интерфейс генерации логов приложению, и создаёт объект-запись.
    • LoggerAdapter вызывается логгером, чтобы дополнить запись специфичной для программы контекстной информацией.
    • Filter определяет, какие записи реально выводить в лог, и может их менять
    • Formatter делает из записи строку.
    • Handler записывает записи по назначению.


    Либо, если тебя устраивает вариант делать это вручную, ты можешь передать в параметр exc_info методов логгера кортеж вида (класс исключения, объект исключения, трейсбэк). Тогда ты можешь подставить свой трейсбэк вместо "родного".
    Ответ написан
    Комментировать
  • Как создать кнопки в ТГ боте Golang (telegram-bot-api)?

    RimMirK
    @RimMirK
    Вроде человек. Вроде учусь. Вроде пайтону
    кнопка под сообщением
    Инлайн кнопка, ее вставить в инлайн маркап. Инлайн маркап передать функции отправляющей сообщение.

    кнопа внизу
    Репли кнопку (кейборд батн) вставить в репли маркап. Маркап в функцию отправки.
    Ответ написан
    Комментировать
  • Какой гайд поможет делать авторизацию на сайте golang?

    DollyPapper
    @DollyPapper
    Во первых аутентификацию. Авторизация это про проверку прав.
    Если без REST API, то классика это принимать через POST запрос данные с формы.
    Вот статья
    Если кратко:
    Делаете ручку /signin, которая проверяет пароль присланный пользователем с хешем паролей в базе данных (ну или где вы храните данные)
    Если всё ок, создаете сессию, сохраняете сессию где нибудь в хранилище (опять же это может быть база данных, может быть ин мемори, есть библиотеки для этого, погуглите, да хоть в памяти приложения в мапе храните)
    Далее ID сессии записываете в куки и посылаете ответ пользователю в заголовком Set-Cookie sessid="session_id", где session_id это айди который вы раньше сгенерили.
    А далее пользователь ходит на ваш сайт, и какая нибудь мидлвара берет из запроса куки, берете оттуда id сессии, ищет этот айди в хранилище. Если нашла, то пропускает запрос дальше, если нет - 401 Unauthorized.
    Ну в статье вобщем всё подробно описано.
    Ответ написан
    Комментировать
  • Как замокать зависимость в pytest?

    i229194964
    @i229194964
    Веб разработчик
    import pytest
    from unittest import mock
    
    class B:
        def __init__(self, db_connection):
            self.__db_connection = db_connection
    
    class A:
        def __init__(self, b: B):
            self.__b = b
    
        def do_something(self) -> None:
            pass
    
    @pytest.fixture(scope="module")
    def mock_b(mocker):
        mocker.patch('path.to.B')  # Здесь 'path.to.B' - это путь к классу B, который нужно замокать
        return B(mock.MagicMock())  # Возвращаем экземпляр класса B с мок-объектом для db_connection
    Ответ написан
    Комментировать
  • Как правильно запускать бота Telegram через Flask Server?

    WolfInChains
    @WolfInChains
    Вот так можно. Но стоит учитывать что если Flask сервер упадет, то упадет и бот.

    from multiprocessing import Process
    
    
    class BotProcess:
    
        def __init__(self):
            self.process = None
    
        def get(self) -> Process:
            return self.process
    
        def is_alive(self) -> bool:
    
            if self.process is not None and self.process.is_alive():
                return True
            else:
                return False
    
        def stop(self) -> None:
            self.process.terminate()
            self.process = None
    
        def start(self, process: Process) -> None:
            self.process = process
            self.process.start()


    bot_process = BotProcess()
    
    @app.route("/bot-start", methods=["GET"])
    def bot_start():
        if not bot_process.is_alive():
            bot_process.start(Process(target=start_bot))
            return "Bot started"
        else:
            return "Bot is already running"
    
    
    @app.route("/bot-restart", methods=["GET"])
    def bot_restart():
        if bot_process.is_alive():
            bot_process.stop()
            bot_process.start(Process(target=start_bot))
            return "Bot restarted"
        else:
            return "Bot is not running"
    
    
    @app.route("/bot-stop", methods=["GET"])
    def bot_stop():
        if bot_process.is_alive():
            bot_process.stop()
            return "Bot stopped"
        else:
            return "Bot is not running"
    Ответ написан
    Комментировать
  • Как сделать музыкального бота в discord, disnake(cogs)?

    AlexNest
    @AlexNest
    Работаю с Python/Django
    Программировать и гуглить решения ошибок вы, судя по постановке вопроса, не умеете.
    Читать документацию по библиотекам не хотите или не можете.
    Экстрасенсов, чтобы угадывать, что именно "не работает" здесь нет.
    Поэтому выход один - заказывайте разработку на фрилансе.
    Ответ написан
    Комментировать
  • Хостинг телеграм бота с базой данных SQLite3, как?

    Vindicar
    @Vindicar
    RTFM!
    Расширю ответ выше для случая, если VPS под линуксом:
    0. Добавь журналирование действий в бота, это упростит отладку потом.
    1. Арендуешь VPS.
    2. Получаешь доступ по SSH.
    3. Проверяешь, какая версия питона установлена по умолчанию.
    4. Если требуется, устанавливаешь предпочительную версию питона. По возможности используй пакетный менеджер.
    5. Создаёшь каталог для своего бота. Под никсами обычно это каталог внутри /opt.
    6. Создаёшь в каталоге виртуальное окружение через venv.
    7. Активируешь это окружение и ставишь в него нужные боту пакеты через pip. Это предпочтительнее, чем ставить пакеты прямо в системное окружение.
    8. Загружаешь в каталог бота. Либо прямо с машины, используя scp, либо загрузив его куда-то ещё, и скачав через wget. Есть ещё вариант с загрузкой бота на гитхаб, но тут надо быть осторожным и не запалить токен бота и другую секретную инфу.
    9. Проверяешь, что бот работает. Рекомендуется не запускать бота из-под root. Создай новую учётную запись, и сделай chown на все файлы бота, чтобы они принадлежали этой учётке.
    10. Формулируешь и записываешь команду, которая позволит запустить бота через желаемое виртуальное окружение от имени правильной учётной записи.
    11. Разбираешься, как том дистрибутиве, под которым работает VPS, настроить автозапуск. Скорее всего это systemd, но может быть и просто скрипт в /etc/init.d или ещё что. Прописываешь автозапуск бота, например, через systemd модуль.
    12. Убеждаешься, что бот заводится через автозапуск.
    13. PROFIT.
    Ответ написан
    Комментировать
  • Какую key-value БД использовать с данными в 10 млрд строк записей?

    mayton2019
    @mayton2019
    Bigdata Engineer
    Несколько мыслей.

    1) У меня устойчивое дежа-вю. Периодически в топик заходят люди с именно этим вопросом. Разница только в количестве. Кому 1 млрд. Кому 10. Можно также поискать и слинковать эти вопросы в один большой вопрос.

    2) MySQL который указан в тегах - нормально справляется с этой задачей. Он и не такое число строк
    умеет хранить. И если взять MariaDb - там есть куча новых engines которые можно крутить для тюнинга
    именно скорости чтения. Разумеется жертвуя чем-то другим. Транзакциями и записью например.

    3) Непонятно что такое минимальное время? Если использовать дисковую БД типа MySQL то деградация времени
    поиска будет примерно зависеть от логарифма количества строк. Тоесть деградация будет но очень медленно.
    Для 10 млрд индекс по key будет содержать порядка 4-5 уровней BTree дерева. Тоесть дисковой системе
    нужно будет сделать до 5 или до 6 рандомных чтений (если нужные данные лежат в таблице). Это достаточно
    быстро для того чтобы моргнуть глазом за это время. Рандомное чтение любого блока из магнитного диска
    класса SATA-3 занимает порядка 20 милисекунд. Тоесть для 5 уровней - это 100 милисекунд. Для дисков
    класса SSD и это время можно уже считать меньше милисекунды. Точно я не знаю надо мерять.

    Испортить это время может сетевой лаг который в данной задаче мы просто не учитываем. Считаем что сеть идеальна.

    4) Непонятно зачем здесь указан Redis. Его задача не хранить 10 млрд а хранить только горячие
    ключи по котороым идет очень частый доступ. Если автор хочет In-memory хранение - то время можно
    еще сильнее улучшить. Его можно свести практически до нуля (я вангую несколько микро-секунд)
    но придется прикупить планок памяти побольше и посчитать сколько памяти
    надо для 10 млрд key/values неизвестной длины. Вообще крутить регулятор в направлении
    микро-секунд нет особого смысла т.к. другие звенья вашего стека (приложение и сеть) могут
    быть на порядки медленнее а это вообще нивелирует всю пользу от такой оптимизации.
    Ответ написан
    41 комментарий
  • Как посмотреть тело функции в python?

    drygdryg
    @drygdryg
    Python-разработчик
    Поскольку самая популярная и эталонная реализация Python: CPython имеет открытый исходный код, вы можете найти исходники встроенных функций в репозитории с исходными кодами CPython: https://github.com/python/cpython.
    Некоторые встроенные функции написаны не на Python, а на том языке, на котором написан сам интерпретатор Python: на Си, поэтому, скорее всего, там вы не найдёте легкочитаемый исходный код функций sum, min, max и др.
    Но в случае, когда функция или любой другой объект написан на Python, посмотреть его исходный код можно с помощью inspect.getsource:
    >>> import inspect
    >>> import requests
    >>> print(inspect.getsource(requests.get))
    def get(url, params=None, **kwargs):
        r"""Sends a GET request.
    
        :param url: URL for the new :class:`Request` object.
        :param params: (optional) Dictionary, list of tuples or bytes to send
            in the query string for the :class:`Request`.
        :param \*\*kwargs: Optional arguments that ``request`` takes.
        :return: :class:`Response <Response>` object
        :rtype: requests.Response
        """
    
        return request("get", url, params=params, **kwargs)

    Получить исходный код встроенной функции или метода, реализованного на Си внутри CPython, таким способом не получится:
    Попытка получить исходный код функции sum

    >>> import inspect
    >>> print(inspect.getsource(sum))
    Traceback (most recent call last):
      File "<stdin>", line 1, in <module>
      File "/usr/lib/python3.10/inspect.py", line 1139, in getsource
        lines, lnum = getsourcelines(object)
      File "/usr/lib/python3.10/inspect.py", line 1121, in getsourcelines
        lines, lnum = findsource(object)
      File "/usr/lib/python3.10/inspect.py", line 940, in findsource
        file = getsourcefile(object)
      File "/usr/lib/python3.10/inspect.py", line 817, in getsourcefile
        filename = getfile(object)
      File "/usr/lib/python3.10/inspect.py", line 797, in getfile
        raise TypeError('module, class, method, function, traceback, frame, or '
    TypeError: module, class, method, function, traceback, frame, or code object was expected, got builtin_function_or_method


    Также можно использовать IPython для получения того же результата более коротким путём:
    In [1]: import requests
    
    In [2]: %psource requests.get
    def get(url, params=None, **kwargs):
        r"""Sends a GET request.
    
        :param url: URL for the new :class:`Request` object.
        :param params: (optional) Dictionary, list of tuples or bytes to send
            in the query string for the :class:`Request`.
        :param \*\*kwargs: Optional arguments that ``request`` takes.
        :return: :class:`Response <Response>` object
        :rtype: requests.Response
        """
    
        return request("get", url, params=params, **kwargs)
    Ответ написан
    Комментировать
  • Почему все говорят что писать ботов это сложно?

    Vindicar
    @Vindicar
    RTFM!
    А сложность начинается, как только задачи, стоящие перед ботом, перерастают уровень примера в документации видеотуториале пятилетней давности.

    Нужно сделать несколько под-команд у команды. Напишу цепочку if-elif-else, делов то. Ой, а теперь простыня кода на пять экранов, в которой фиг чего найдёшь. Потому что нет привычки структурировать код.

    Нужно, чтобы несколько команд/событий формировали цепочку (сценарий). Например, пользователь отправил тре сообщения, первое с именем, второе с возрастом, третье с адресом. Ой, а как это сделать вообще? Не зная понятия "конечный автомат" (finite state machine, FSM), очень трудно догадаться, как тут поступить.

    Нужно, чтобы ботом могли пользоваться несколько человек. Ой, их данные перепутались! Потому что бот использует глобальные переменные.

    Нужно, чтобы бот выполнил длительную задачу, и написал сообщение, когда она выполнится. Не вопрос, напишу функцию, вызову её, а сразу после отправлю сообщение. Ой, а бот не отвечает! Потому что рабочий цикл asyncio занят этой длительной операцией и не может отреагировать на поступающие данные. Нужно иметь хорошее представление о том, как работает асинхронная программа.

    Нужно добавить боту графический интерфейс - админку. Ой, а работает или интерфейс, или сам бот! Потому что нужно представлять, как устроено большинство GUI-фреймворков, и как устроена асинхронное приложение. А заодно понимать многопоточность, вопросы синхронизации действий между двумя потоками, и особенности работы с asyncio в многопоточных приложениях. Потому что одним потоком тут обойтись будет очень непросто.

    Нужно хранить данные в БД. Ой, а почему у меня проблемы при записи в БД имени пользователя? А потому что погромист собирает SQL-запрос через форматирование строк. Надо было почитать доки, чтобы наткнуться на prepared statements, они же parameterized queries.

    Нужно хранить данные в БД. Вот только данные имеют связи многие-ко-многим. Я знаю! Я буду просто добавлять или удалять столбцы в таблицу! Потому что не освоены даже азы проектирования БД. Тут уже nuff said. И да, я такое видел на этом сайте.

    Незнание средств языка и основных приемов построения алгоритмов и структур данных приводит к диким велосипедам, которые создают больше проблем, чем пользы. Особенно если к этому добавляется нежелание находить и читать документацию на фреймворк, на котором построен бот.
    Ответ написан
    2 комментария
  • Как в python создать interface?

    Vindicar
    @Vindicar
    RTFM!
    typing.Protocol играет роль интерфейса, с той поправкой, что наследоваться от него потом необязательно - главное, чтобы набор полей/методов соответствовал.

    abc.ABC - это именно абстрактный класс, он требует наследование от себя для соответствия, и часто предполагает наличие какой-то частичной реализации функциональности.

    В отличие от него, typing.Protocol обычно применяется только для описания контракта класса, но не для частичной реализации. Так как он не требует наследования, он хорошо подходит для описания структуры объекты, который мы ожидаем на входе - без жётской привязки этого объекта к нашей иерархии классов.

    "Обычно", потому что и то, и то можно использовать "не по назначению".
    Ответ написан
    9 комментариев
  • Почему выдает ошибку Shard ID None has connected to Gateway?

    Vindicar
    @Vindicar
    RTFM!
    1. Это не ошибка, это уведомление. Не видишь метку INFO?
    2. Почему ты реализуешь команды через on_message()? Класс Client вообще не очень хоршо подходит для ботов, используй класс Bot (наследник Client, умеет всё что и Client плюс еще кучу полезностей).
    3. Ты указываешь в качестве интентов Intents.default(), а команды, похоже, рассчитаны на работу на сервере. Для получение текста сообщения из сервера нужно запросить интент message_content, иначе content будет приходить только для тех сообщений, где упоминается бот, или которые посланы боту в личку.

    Короче, найди туториал получше, например, вот этот.
    Ответ написан
    Комментировать