antonksa

Какие данные, важен ли их порядок, сколько их (байты, килобайты, терабайты), сколько потоков, сколько это должно работать (секунду, минуту, вечность), откуда эти данные берутся, куда эти данные сохраняются.

Вопрос поставлен максимально расплывчато и на него можно получить два десятка абсолютно разных, и при этом верных для своего конечного контекста, решений.

Можно ли обойти все вершины графа и вернуться в начальную?

Можно.

Есть готовые многопоточные и асинхронные парсеры и пауки. Я бы рекомендовал не изобретать велосипед, тем более судя по вашей квалификации начинающего велосипед может и не поехать, а воспользоваться готовым решением.

https://github.com/aio-libs/aiohttp/issues/2722
https://github.com/aio-libs/aiohttp/issues/845#iss...



Похоже Вам придется таки поднапрячься и написать десять строчек.

Вам же на русском языке фласк написал - "неплохо было бы добавить return, хозяина-ма".

try:
    db_cursor.execute(req)
    return redirect(url_for('auth_request'), code=307)
except:
    return Response('registration is failed')

redirect() это ФУНКЦИЯ, которая возвращает объект КЛАССА Response, просто специфический, с кодом и заголовками. Но он ушел в нихиль, потому что вы его не вернули из вызова. Вы вообще руками могли его сформировать. Любой код в контроллере должен в итоге вернуть Response или выбросить эксцепшн, который фласк умеет обрабатывать.

И еще, Вы НЕ делаете редирект из контроллера в контроллер. Вы ВОЗВРАЩАЕТЕ ПОЛЬЛЬЗОВАТЕЛЮ ответ на запрос, в котором упаковано предложение на редирект. У него может они вообще отключены.

В aiohttp есть отличный асинхронный http клиент.

pip install aiohttp

Кривоватое решение. Достаточно передать несуществующий id прилетит 500.
Поэтому все первичные ключи нужно валидировать.

class RatingSerializer(serializers.Serializer):
    user = serializers.PrimaryKeyRelatedField(queryset=User.objects.all())
    rating = serializers.IntegerField(min_value=1, max_value=5)

    def create(self, validated_data):
        user = validated_data['user']
        rating = validated_data['rating']
        profile = Profile.objects.get(user=user)
        rating_obj = Rating.objects.create(profile=profile, rating=rating)
        return rating_obj

А вьюха должна тогда выглядеть так:

class RatingAdd(generics.GenericAPIView):
    serializer_class = serializers.RatingSerializer
    permission_classes = [IsAuthenticated]

    def post(self, request, **kwargs):
        data = request.data.copy()
        data.update({'user': kwargs['userid'}})
        serializer = self.get_serializer(data=data)
        serializer.is_valid(raise_exception=True)
        serializer.save()

        return Response(serializer.data, status=status.HTTP_201_CREATED)

(upd) Сорян, поправил вьюху, т.к. не удалил кусок оригинального кода.

Что до вопроса про kwargs, то непонятно чего вы ждали, ведь это же kwargs ViewSet'a а не сериализера. Тут нужно быть осторожным, но вообще их можно выковырять из контекста, так как ApiView.get_serializer() еще пропихивает в сериализер контекст:

def create(self, validated_data):
    view = self.context.get('view')
    userid = view.kwargs['userid'] if view else None
    if not userid:
        raise NotFound('User with given id does not exist.')
    rating = Rating.objects.create(profile=Profile.objects.get(user__id=userid), **validated_data)
    return rating

Поднасрал конечно Psycopg со своим binary
Попробуйте удалить обычный psycopg, т.к. они будут конфликтовать.
Что до Редиса, люди, вы реально не читаете документацию, или это контент менеджеры Тостера так издеваются?

На первой же странице написано как устанавливать пакет и его имя в PyPI.
redis-py он называется на GitHub чтобы не путать его с redis-php, redis-go и тому подобными коннекторами, в индексе пакетов питона он называется просто redis.

Капча хоть не гугловая? :) Она очень хорошо умеет вычислять таких умненьких.
Что до сабжа, то я вот так заполнял текстовые поля, потому что у меня через раз символы частично не вводились...

class TextField(PageElement):
    def _fill_field_using_js(self, string_value: str) -> None:
        elem = self.get_element()
        self.driver.execute_script(f'let el = arguments[0]; el.value="{string_value}";', elem)  # type: ignore

Тебя еще не послали? А, уже послали... Ну тогда я просто присоединюсь.

Я бы сделал так:
1. Как сказали выше example.org ставится nginx'у как условие направления запросов в приложение. Т.е. любой pupkin.example.org и ivanov.example.org уйдут в Джанго на обработку.
2. Создал модель Company в базе данных с индексируемым полем domain.
3. Сделал мидлварь, которая наподобие мидлвари ванильной авторизации выковыривает хост из request.META, лезет в базу, находит объект компании и прикрепляет его к запросу
setattr(request, 'company', company_instance)
, после этого объект компании можно будет юзать во вьюхах, так же как и юзера:
request.company
4. В случае если в имени хоста нету домена третьего уровня, то я бы сделал
setattr(request, 'main_site', True)
чтобы во вьюхе можно было понять что это основной сайт, а если поддомен передан, но в базе его нет, то я бы сразу вернул редирект на страницу с инфой, что такой компании не существует, или она заблокирована, или еще что, зарегистрируйтесь и будет вам счастье.
5. Автоматическое создание поддомена это лишь создание

Company.objects.create(
    owner=some_user,
    domain=company_domain,
    email=company_email,
    ...
    created=timezone.now()
)

, вопрос только в том, будет ли company_domain генерироваться согласно какому-то принципу, или задаваться админом, или юзером при регистрации, или с потолка или рандом, вариантов как звезд на небе, а вопрос слишком обширный, типа "я хочу сделать сайт как фейспук, шо мне делать".

Гугл по запросу python strip html tags выдает полтора миллиона результатов.

Вот на эти два процента я и живу...