Как принимать данные попеременной длины через сокет?

Question

[viskeg]

Мне нужно написать демон на python, который принимает соединения от кучи клиентов по сокетам. При этом некоторые клиенты могут отправлять короткие сообщения ( типа опрос сервера, на получения команд ), так и большие ( большие файлы, любого типа ).

я использую заготовку кода следующего содержания pastebin.com/SBtW7tC2 и у меня на ее основе возник вопрос - если я принимаю громадный файл, например, более 500 мб..при этом, клиент помимо файла, передает с ним еще свою техническую инфу, то как мне увеличить буфер на прием ? и как то регулировать объемы , которые принимаю?

Answer 1

[#алгоптимизируй #отботизируй]

Есть разные варианты, лучше ,чем передавать длину сообщения, я еще не видел
Если параллельно может идти несколько кусков от разных сообщений, нужно добавлТь ид целового сообщения и длины каждого из кусков. Это минимум.

Comments

[viskeg]

Так, если я принял , т.е. сделал recv(), после если передана длина - открывать либо цикл с более мелкой длинной с количеством шагов до конца файла или делать recv() с длинной из первого сообщения?

[#алгоптимизируй #отботизируй]

Макс Размер буфера чтения за раз на ваше усмотрению, обычно это размер системного буфера,в ряд ли вы готовы выделять буфер на 500мб. Я точно не знаю, как работает ресв, надо смотреть доку.

[#алгоптимизируй #отботизируй]

Если он может вернуть меньше, значит да, нужен цикл. Или вы не готовы выделять большой объем.