Телеграм бот не корректно отправляет результаты парсинга страницы, как исправить?

Question

[singularnist]

Столкнулся с такой проблемой, телеграм бот не отправляет весь результат парсинга страницы, а только последнюю строчку, как обеденить весь результат парсинга в один текст?????

line = 1 #line number denotes the exact place where the exception is raised
try:
    # Your configuration
    USERNAME = "******"
    PASSWORD = "******"
    URI = "https://noc.enet.vn.ua/cgi-bin/power_check/power-vn.pl"
    # specify the user agent
    USER_AGENT = "Mozilla/5.0 (X11; Linux i686) AppleWebKit/537.17 (KHTML, like Gecko) Chrome/24.0.1312.27 Safari/537.17"
    # verify the host. Skips verification if set to false
    CERT_FILE = False
    #diable the warnings
    urllib3.disable_warnings(urllib3.exceptions.InsecureRequestWarning)
    urllib3.disable_warnings(urllib3.exceptions.HTTPError)

    # Create a Session to contain you basic AUTH, it will also persist your cookies
    line += 1#2
    authed_session = requests.Session()

    # Add your credentials
    line += 1#3
    authed_session.auth = (USERNAME, PASSWORD)

    # Cert verification, will not verify on false
    line += 1#4
    authed_session.verify = CERT_FILE

    line += 1#5
    authed_session.headers.update({'User-Agent': USER_AGENT})

    # Fetch the actual data
    line += 1#6
    fetched_data = authed_session.get(URI)
    line += 1#7

    
    soup = BS(fetched_data.content, "html.parser")
    power = soup.find_all('tr')
    for name in power:
        
        n1 = str(name.text)
        n2 = n1


        character_map = {
            ord('\n'):''  
        }
        n2 = (n1.translate(character_map))


        print(n2)
@bot.message_handler(commands=['zw_vn'])
def zw_vn(m, res=False):
    bot.send_message(m.chat.id, n2)
bot.infinity_polling()

Answer 1

[shurshur]

А как иначе? На каждой итерации цикла содержимое n2 перезатирается очередной строкой, в итоге в конце цикла остаётся последняя. Вероятно, предполагалось, что в n2 нужно добавлять очередную строку.

Ну и скрипт, вероятно, парсит страницу один раз, при своём запуске, а затем показывает одинаковый неизменный результат (но так как начала скрипта не видно, непонятно, когда запускается этот парсинг).

Comments

[singularnist]

line = 1 #line number denotes the exact place where the exception is raised
try:
    # Your configuration
    USERNAME = "******"
    PASSWORD = "******"
    URI = "https://noc.enet.vn.ua/cgi-bin/power_check/power-vn.pl"
    # specify the user agent
    USER_AGENT = "Mozilla/5.0 (X11; Linux i686) AppleWebKit/537.17 (KHTML, like Gecko) Chrome/24.0.1312.27 Safari/537.17"
    # verify the host. Skips verification if set to false
    CERT_FILE = False
    #diable the warnings
    urllib3.disable_warnings(urllib3.exceptions.InsecureRequestWarning)
    urllib3.disable_warnings(urllib3.exceptions.HTTPError)

    # Create a Session to contain you basic AUTH, it will also persist your cookies
    line += 1#2
    authed_session = requests.Session()

    # Add your credentials
    line += 1#3
    authed_session.auth = (USERNAME, PASSWORD)

    # Cert verification, will not verify on false
    line += 1#4
    authed_session.verify = CERT_FILE

    line += 1#5
    authed_session.headers.update({'User-Agent': USER_AGENT})

    # Fetch the actual data
    line += 1#6
    fetched_data = authed_session.get(URI)
    line += 1#7

    
    soup = BS(fetched_data.content, "html.parser")
    power = soup.find_all('tr')
    for name in power:
        
        n1 = str(name.text)
        n2 = n1


        character_map = {
            ord('\n'):''  
        }
        n2 = (n1.translate(character_map))


        print(n2)

[shurshur]

singularnist, ну да, как я и предполагал, парсится один раз в начале. И в n2 записывается последнее значение. А надо к предыдущему значению n2 дописывать новое, а не перезатирать.

До кучи, непонятно, зачем в n2 помещать n1, а потом сразу же заменять. И в чём смысл переменной line я не понимаю. В общем, очень корявый код.

Переменные бы тоже как-то понятнее называть надо...

[igor6130]

Также не очень понятно, зачем отключаются предупреждения.

[shurshur]

igor6130, это как раз понятно, если там сертификат невалидный.

[singularnist]

Всем спасибо, решил сам этот вопрос