Не удается отправить файл на ftp сервер, в чем может быть причина?

Question

[kriminal_key]

Использую аналогичный код:

import ftplib
import os
import os.path

host = "server.serv"
port = 0000
user = "user"
password = "password"
filename = "file.txt"

ftp = ftplib.FTP()

ftp.connect(host, port) #конектюсь к ftp
ftp.login(user, password) #выполняю вход

file = open(filename) #Открываю файл (по дефолту мод r)
ftp.storlines('STOR ' + filename, file)

file.close()

ftp.quit()

Файл находится в той же дириктории что и скрипт.
Права на запись есть.
Я вхожу на сервер, могу даже создать там папку используя ftp.mkd().

В тот момент когда код доходит до строчки с записью файла на ftp, он долго думает и после выводит эту ошибку.



Вот логи, никакой информации связанной с STOR, но всё остальное работает замечательно



я не стал указывать официальные данные о хосте порте и т.д в целях безопасности, на деле вход на сервак происходит, единственное что здесь не работает это запись файла на сервер, очень долго мучался, искал инфу в интернете, везде описан именно такой способ, но в моем случае он не работает. В чём может быть проблема?

Answer 1

[neatsoft]

Видно что ошибка возникает при вызове FTP.connect. Учитывая что библиотека FTP используется во многих проектах, и c подобными проблемами больше никто не сталкивается, рискну предположить, что неправильно заданы параметры - адрес и порт. Для их проверки удобно использовать интерактивный режим Python.

Кроме того, исходя из личного опыта, советую явно указывать таймаут:

FTP_TIMEOUT = 10 # seconds
ftp.connect(host, port, FTP_TIMEOUT)

задать рабочий каталог:
ftp.cwd(path)

и обернуть вызов библиотечных функций в try-except блоки:

try:
    ftp.connect(...)
    ftp.login(...)
    ftp.cwd(...)
except Exception as e:
    ...

...

try:
    ftp.storbinary(f'STOR {filename}', f)
except Exception as e:
    ...

Comments

[kriminal_key]

Спасибо за совет, но и в этом случае ничего не работает, та же самая ошибка



использую такой код

import ftplib
import os
import os.path

host = "server.serv"
port = 0000
user = "user"
password = "password"
filename = "file.txt"

file = open(filename)

FTP_TIMEOUT = 10 # seconds
ftp = ftplib.FTP()

try:
    ftp.connect(host, port, FTP_TIMEOUT)
    ftp.login(user, password)
    print(ftp.login(user, password))
except Exception as e:
    print("Неудалось подключиться к серверу")

try:
    ftp.cwd('Mihail hello')
    print("Перешел в каталог 'Mihail hello' ")
except Exception as e:
    print("Не удалось перейти в каталог")

try:
    ftp.storlines(f'STOR {filename}', file)
except Exception as e:
    print("Не удалось записать файл")

ftp.quit()

[neatsoft]

Что выводит print(ftp.nlst()), если вставить этот вызов вместо ftp.storlines?
Какие-нибудь файлы в этом каталоге уже есть?

[Дмитрий]

kriminal_key, откройте файл бинарно.

[kriminal_key]

neatsoft,
Никаких файлов в каталоге нет.

print(ftp.nlst())
выводит следующую ошибку

но как я знаю, в целях защиты, команды которые выводят список файлов и т.д сервер не принимает.

[neatsoft]

Дмитрий, да, учитывая что это винда, при открытии файла нужно указывать режим:
f = open(filename, 'rb')

А про бинарный режим сохранения писал в изначальном сообщении - вместо storlines нужно использовать storbinary:
ftp.storbinary(f'STOR {filename}', f)

[Дмитрий]

neatsoft, мы же о третьем питоне говорим? Там и для storlines файл должен быть открыт с rb

[kriminal_key]

neatsoft, я записываю файл формата .txt, по этому использую storlines(). При явном указании режима 'rb' возникает абсолютно та же самая ошибка.

[kriminal_key]

Дмитрий, зачем открывать файл .txt бинарно?

[Дмитрий]

kriminal_key, https://docs.python.org/3/library/ftplib.html#ftpl...

[neatsoft]

501 ошибка указывает на неправильную настройку файрвола - не отслеживаются и не открываются порты для корректной работы пассивного режима:
https://interface31.ru/tech_it/2013/10/osobennosti...

[kriminal_key]

Дмитрий, Спасибо за информацию, вопрос - при этом в файле должа содержаться инфа в бинарном виде?

[neatsoft]

kriminal_key, Кейсов, в которых может потребоваться storlines, не существует - это legacy. Во-первых, этот режим может приводить к изменению символов окончания строк, следовательно не гарантирует бинарную идентичность. Во-вторых, он будет тормозить и расходовать больше памяти при работе с файлами, в которых присутствуют длинные строки. В третьих, он может падать при наличии в файле непечатаемых символов.
Вне зависимости от типа файлов, лучше всегда использовать бинарный режим

[kriminal_key]

neatsoft, Спасибо передал информацию Администратору сети, как примут меры обязательно отпишусь здесь, пока вопрос является не решенным, т.к файл я так отправить и не смог. Если это поможет, обязательно помечу ответ как "решение проблемы"

[neatsoft]

kriminal_key, не заметил эту фразу:

но как я знаю, в целях защиты, команды которые выводят список файлов и т.д сервер не принимает.

А что там за сервер? Какой-то стандартный, или что-то самописное? Просто "в целях защиты" к ftp никак не применимо - это текстовый протокол для локального использования, в котором даже пароли в открытом виде передаются

[kriminal_key]

neatsoft, Если честно у самого мало инфы по этому поводу, сейчас разговаривал с админом, показал ему ваш ответ. в ответ получил что то вроде

501 это - не корректный порт.
Надо посмотреть в какой порт стучишься тогда будет понятно.

когда я указал ему с каким портом работаю , получил такой ответ.

Просто 2134 он же 21 это порты авторизации, рабочие порты они другие по фтп, надо чтоб все было по тсп, юдп не канает у нас не локалка, у нас интернет.

На самом деле наш фтп работает по тсп, у нас юдп душат провайдеры

[neatsoft]

kriminal_key, какой UDP, какой 2134?

Принцип работы пассивного режима FTP на пальцах:
1. клиент подключается к серверу по 21/TCP и авторизуется
2. клиент сообщает о переключении в пассивный режим - команда PASV
3. сервер выбирает случайный непривилегированный порт, биндится к нему, и передает номер порта клиенту
4. клиент подключается к указанному порту по TCP, и использует это второе соединение для передачи данных

Для работы в пассивном режиме нужно правильно настроить FTP сервер и firewall - указать и пробросить диапазон динамических портов для передачи данных.

Активный режим в большинстве случаев неприменим, т.к. для работы в активном режиме клиенту требуется публичный IP

[kriminal_key]

neatsoft, у нас рабочие порты от 30000 до 65000

[kriminal_key]

neatsoft, может ли быть проблема в том что сервер дает мне рабочий порт для передачи данных, а код использует порт указанный мной в переменной port? по этому не получается передать данные, но без явного указания порта, я не смогу законектиться

вот кусок кода, посмотрите.

host = "server.serv"
port = 2134

ftp.connect(host, port, FTP_TIMEOUT)

[Animkim]

kriminal_key, нет не может.
Попробуйте сделать всё тоже самое через какое нибудь приложение, с теми же данными всё работает?

[kriminal_key]

Animkim, neatsoft,

да, используя Fillezila, все работает
Файл перекинуть тоже могу, смотрите скрин 2.

[Animkim]

kriminal_key, меня смущает "сервер отправил ответ с неопределяемым адресом"
Во всех таких прогах миллион костылей на все случаи жизни, ведь если программа не работает виновата программа, а не хреново настроенные ftp сервер.

ftplib ожидает что сервер настроен корректно, думаю проблема именно в этом. Можно ещё посмотреть ftplib в debug режиме, там должно быть больше информации возможно будет видно этот пассивный ответ с неопределяемым адресом и сам адрес.
Я когда-то давно сталкивался с неверно настроенным ftp сервером и не очень умным и упертым к тому же админом, пришлось обходить через subprocces и линуксово-консольную утилиту lftp.

[kriminal_key]

Animkim, есть возможность наладить с тобой связь? попробуем решить эту проблему, не бесплатно конечно

[neatsoft]

kriminal_key,

у нас рабочие порты от 30000 до 65000

И ftp сервер, и файрвол должны об этом знать, чтобы ftp сервер выбирал порты из этого диапазона, а файрвол пропускал на них входящие соединения.

Есть ещё один момент: в пассивном режиме ftp сервер сообщает клиенту не только номер порта, но и IP адрес. Следовательно, если ftp сервер находится за NAT, адрес он будет возвращать неверный, и клиент подключиться не сможет. Корректных решений два:
1. В настройках ftp сервера указать публичный IP. Для vsftpd, например, это параметр pasv_address
2. Настроить файрвол таким образом, чтобы он подменял локальный IP на публичный

"Умные" ftp клиенты могут игнорировать IP адрес, полученный от сервера в ответе на команду PASV, но это отступление от стандарта.

[neatsoft]

kriminal_key,

может ли быть проблема в том что сервер дает мне рабочий порт для передачи данных, а код использует порт указанный мной в переменной port

Нет. Но если сервер настроен неправильно, он может возвращать неверный IP адрес, который клиент будет пытаться использовать

[neatsoft]

kriminal_key,
со скрина с Fillezila:

Сервер отправил пассивный ответ с неопределенным адресом. Использую существующий адрес

вот и ответ - нужно указать публичный IP в настройках ftp сервера, либо настроить NAT таким образом, чтобы он подменял IP адрес на публичный

[neatsoft]

kriminal_key, Глянул исходники ftplib, в частности функцию makepasv. Если нет возможности добиться от администратора правильной настройки ftp сервера, то можно решить проблему довольно простым манкипатчингом на клиентской стороне:

from ftplib import FTP

class MyFTP(FTP):
    def makepasv(self):
        __, port = super().makepasv()
        return self.host, port

ftp = MyFTP()

...

[kriminal_key]

neatsoft, Спасибо, заработало, пожалуйста укажите данные своего QIWI кошелька, вы меня очень выручили и я хотел бы вас поблагодарить за это

Answer 2

[rPman]

возможно вам нужно включить passive mode если между вами и сервером фаервол (например за NAT)
ftp.set_pasv(true)

Comments

[neatsoft]

Passive mode is on by default.

[kriminal_key]

в случае
ftp.set_pasv(True)
а так же
ftp.set_pasv(False)
абсолютно такая же ошибка