Как отформатировать таблицу в pandas?

Question

[Nikita235]

Мой код:

import requests
import pandas as pd


def SWHL_sniper():
    url = "http://www.swhl.ru/tournament/1026071/stats?common=1"
    response = requests.get(url)
    df_list = pd.read_html(response.text)
    print(df_list[0])


print(SWHL_sniper())

Вот результат, выводимый в боте:


Как можно отформатировать таблицу?

Comments

[Максим Припадчев]

Вы уже делаете print внутри функции, достаточно просто вызвать функцию. Я запустил ваш код и как и ожидалось, он выдает уже форматированную таблицу. Где и как вы запускаете скрипт, потому что таблица должна быть отформатированна при выводе.

[Nikita235]

Максим Припадчев,
Запрещается публиковать скриншоты фрагментов кода и вообще форматированного текста. См.п.3.8 Регламента.

[Максим Припадчев]

Nikita235, Я не разу не работал с ботами, но достаточно ли места для вывода форматированной таблицы в консоле куда вы водите? вот вывод в обычном терминале все в порядке.

[Nikita235]

Максим Припадчев, хочу попробовать убрать индекс и номер игроков. Как это можно сделать?

[Максим Припадчев]

Nikita235,

df = df_list[0]
df = df.drop('#',axis=1)
print(df.to_string(index=False))

это код внутрь функции своей, вставь, он уберет и то и другое. Индекс убирается только при выводе на печать, а так индекс неотемлимая часть датафрейма и его убрать нельзя.

[Nikita235]

Максим Припадчев, таблица хоть и не стала красивее, но я узнал новое, спасибо!

[Viktor T2]

https://stackoverflow.com/questions/18528533/prett...
https://thispointer.com/pretty-print-a-pandas-data...

[Viktor T2]

пандас можно вывести в html, а html отрендерить в картинку https://qna.habr.com/q/1165652
Еще вроде можно выводить просто в html или мarkdown https://qna.habr.com/q/1194750

[Nikita235]

Viktor T2, о, а вот это уже интересно. Но можно ли проделать тоже самое, учитывая, что я использую Pandas для парсинга?

[Viktor T2]

Nikita235,
Да все просто, нет ничего сложного:

spoiler

import requests
import pandas as pd

from pretty_html_table import build_table
import imgkit

import subprocess


def SWHL_sniper():
    url = "http://www.swhl.ru/tournament/1026071/stats?common=1"
    response = requests.get(url)
    df_list = pd.read_html(response.text)

    return df_list[0]

html_table = build_table(SWHL_sniper(), 'green_dark', text_align='left', font_size='30px', padding='10px')


# На винде нужно установить wkhtmltopdf и прописать путь к нему
# con = imgkit.config(wkhtmltoimage='C:\\Program Files\\wkhtmltopdf\\bin\\wkhtmltoimage.exe')
# imgkit.from_string(html_table, 'out.png', config=con)

imgkit.from_string(html_table, "out.png")

# картинку при необходимости подрезать 

subprocess.Popen( "out.png", shell=True) # Win
subprocess.Popen(["xdg-open", "out.png"]) # Lin

spoiler

[Nikita235]

Viktor T2, спасибо! Картинки появились, но появилась о шибка:
OSError:
No wkhtmltoimage executable found: "command not found"
If this file exists please check that this process can read it.
Otherwise please install wkhtmltopdf - wkhtmltopdf.org

И это при том, что путь указан верный.

Ошибка мешает мне отправить фото пользователю

[Viktor T2]

Nikita235,
Вариант а - прописать путь к wkhtmltopdf в PATH https://www.java.com/ru/download/help/path.html

Вариант б - рендерить браузером https://pypi.org/project/html2image/

spoiler

import requests
import pandas as pd

from pretty_html_table import build_table
from html2image import Html2Image

import subprocess

def SWHL_sniper():
    url = "http://www.swhl.ru/tournament/1026071/stats?common=1"
    response = requests.get(url)
    df_list = pd.read_html(response.text)

    return df_list[0]

html_table = build_table(SWHL_sniper(), 'green_dark', text_align='left', font_size='30px', padding='10px')

hti = Html2Image()
hti.screenshot(html_str=html_table, save_as='out.png') #css_str=css,

# картинку при необходимости подрезать 

subprocess.Popen( "out.png", shell=True) # Win
subprocess.Popen(["xdg-open", "out.png"]) # Lin

[Viktor T2]

План с - дергать wkhtmltoimage subprocess-ом , без оберток

[Nikita235]

Viktor T2, вариант а не сработал, что странно, но помог вариант б, жаль только, что рендеринг шакального качества, но ничего, и так сойдет.

Большое спасибо! Не знаю, что бы делал без вашей помощи

[Nikita235]

Viktor T2, не знаю, как это работает, но вариант а просто взял и заработал

[Viktor T2]

Nikita235, Ну и отлично

Answer 1

[o5a]

Pandas выдает правильно отформатированную таблицу. Просто проблема в том, что для текста в телеграм используется не моноширинный шрифт, поэтому при ее отображении колонки так съезжают.
Чтобы исправить это, можно указать ему четко следовать форматированию, добавив тэг 'pre' и обработку как html. Так должно сработать.

def SWHL_sniper():
    url = "http://www.swhl.ru/tournament/1026071/stats?common=1"
    response = requests.get(url)
    df_list = pd.read_html(response.text)
    return df_list[0].to_string(index=False)

table = SWHL_sniper()
text=f'<pre>{table}</pre>'
bot.send_message(message.chat.id, text=text, parse_mode='HTML')

Comments

[Nikita235]

Спасибо! Жаль, что это работает только в telegram desktop, на телефоне всё такое же искаженное. Но видимо это плата за удобство

[o5a]

Nikita235, насколько вижу, на телефоне искажено по другой причине. Шрифт там тоже моноширинный, т.е. само форматирование есть, но в телефоне ширина текста меньше, поэтому он делает перенос на другую строку, из-за этого форматирование "съезжает." Если расположите телефон горизонтально, например, то вся таблица отобразится верно. Как вариант, можете ограничить кол-во выводимых колонок, чтобы все влезало в строку.

[Nikita235]

o5a, к сожалению не могу уменьшить кол-во колонок. Жаль, что нет выхода из этой ситуации

[o5a]

Nikita235, Да, в такой постановке текстом никак не вывести, если он просто не вмещается в ширину экрана. Но можете, как предложили другие, перевести таблицу в изображение, и высылать его, тогда картинка смасштабируется по ширине.

[Nikita235]

o5a, пытался, но как-то не особо получается

[o5a]

Nikita235, можно попробовать таким способом, напрямую через PIL (набросал примерно, но вариант рабочий)

from PIL import Image, ImageDraw, ImageFont
from io import BytesIO

def text_to_image(text, size=20):
    # нужно указать существующий файл шрифта
    my_font = ImageFont.truetype(font='c:/Windows/Fonts/consola.ttf', size=size)
    text_data = text.split('\n')
    line_num = len(text_data)
    # определяет размер области с учетом шрифта
    bsize = my_font.getsize(text_data[0])
    bsize = (bsize[0], bsize[1]*line_num)
    img = Image.new(mode='RGB', size=bsize, color=(255, 255, 255))
    d1 = ImageDraw.Draw(img)
    d1.text((0, 0), text=text, font=my_font, fill=(0, 0, 0))
    # img.show() # можно раскоментить для проверки получившейся картинки

    # и получившуюся картинку преобразуем в байтовый объект, чтобы можно было использовать в телеграм
    # создаем наш байтовый объект-файл
    file = BytesIO()
    # в который и сохраняем сгенерированную картинку
    img.save(file, 'PNG')
    # не забыть промотать файл в начало
    file.seek(0)
    return file

# далее уже в телеграм результат этой функции можно напрямую отсылать как картинку
table = SWHL_sniper()
img = text_to_image(table)
bot.send_photo(message.chat.id, img)

Answer 2

[Aragorn]

Может быть ljust(), rjust() помогут

Comments

[Nikita235]

Я был бы самым счастливым, но это не работает