Lord_of_Rings
@Lord_of_Rings
Python developer

Почему после нескольких запросов выдает Remote end closed connection?

Написал прогу, которая качает видео с YouTube (использую pytubefix). Для обхода м-м-м... некоторых трудностей использую этот скрипт (взял отсюда):
spoiler
import random
import asyncio

BLOCKED = [...]
TASKS = []


async def main(host, port):
    server = await asyncio.start_server(new_conn, host, port)
    await server.serve_forever()


async def pipe(reader, writer):
    while not reader.at_eof() and not writer.is_closing():
        try:
            writer.write(await reader.read(1500))
            await writer.drain()
        except:
            break

    writer.close()


async def new_conn(local_reader, local_writer):
    http_data = await local_reader.read(1500)
    # print(http_data, end='\n\n')
    try:
        type, target = http_data.split(b"\r\n")[0].split(b" ")[0:2]
        host, port = target.split(b":")
    except:
        local_writer.close()
        return

    if type != b"CONNECT":
        local_writer.close()
        return

    local_writer.write(b'HTTP/1.1 200 OK\n\n')
    await local_writer.drain()

    try:
        remote_reader, remote_writer = await asyncio.open_connection(host, port)
    except:
        local_writer.close()
        return

    if port == b'443':
        await fragemtn_data(local_reader, remote_writer)

    TASKS.append(asyncio.create_task(pipe(local_reader, remote_writer)))
    TASKS.append(asyncio.create_task(pipe(remote_reader, local_writer)))


async def fragemtn_data(local_reader, remote_writer):
    head = await local_reader.read(5)
    data = await local_reader.read(1500)
    parts = []

    if all([data.find(site) == -1 for site in BLOCKED]):
        remote_writer.write(head + data)
        await remote_writer.drain()

        return

    while data:
        part_len = random.randint(1, len(data))
        parts.append(bytes.fromhex("1603") + bytes([random.randint(0, 255)]) + int(
            part_len).to_bytes(2, byteorder='big') + data[0:part_len])

        data = data[part_len:]

    remote_writer.write(b''.join(parts))
    await remote_writer.drain()

И все бы ничего, но после скачивания 3-20 видео (разброс большой), вылетает с Remote end closed connection. Если процесс (скачивания) закрыть, подождать 30 сек и открыть заново, то история повторяется. Как это пофиксить?
  • Вопрос задан
  • 120 просмотров
Решения вопроса 1
ky0
@ky0
Миллиардер, филантроп, патологический лгун
Для Ютуба некоторые, м-м-м, трудности - это вы, качки пачек видео. Вот он и борется, как может.
Ответ написан
Пригласить эксперта
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Похожие вопросы