Python Не получается сохранить csv в формате utf-8?

Question

[Дмитрий]

Суть: С сайта мне необходимо достать таблицу и сохранить её в формате csv, но мне не удается сделать это в кодировке utf 8
Код простой:

import pandas as pd

tables = pd.read_html('https://kody-smajlov-vkontakte.ru/')
db = tables[1]
db.to_csv("data.csv", encoding = 'utf-8')

Comments

[Дмитрий]

Смотрите что приходит со странички, может мусор какой мешает

[Дмитрий]

Дмитрий, Я так понимаю, что по итогу я получаю массив с такими данными

[Дмитрий]

Дмитрий, так проверьте перед записью в базу

[galaxy]

А не получается что?

[Alex F]

Что-то не пойму, либо у вас локаль не УТФ-8, либо...
И да, смайлы там картинками.

[o5a]

Дмитрий, а как проверяете, что "не удается сделать это в кодировке utf 8"?

[Дмитрий]

o5a, Да задача простая - получить таблицы и сохранить их на комп, чтобы открывались и читались
Но при сохранение вместо нормального текста это:

[Дмитрий]

galaxy, Ответил человеку ниже, что получается на выходе при обработке и сохранении данных

[Дмитрий]

Дмитрий, Не знаю, как.. )

[Дмитрий]

Alex F, Alex F, То есть у вас всё работает нормально ?

[o5a]

Дмитрий, это как раз показывает, что все сохранилось в UTF8. Excel при открытии csv предполагает кодировку win-1251, поэтому UTF8 так и отображается.
Можно явно указывать ему на кодировку UTF8, сохраняя в формате "UTF-8 BOM", если использовать encoding="utf-8-sig".

[Дмитрий]

o5a, Блин, огромное спасибо, именно то, что было нужно

[Дмитрий]

o5a, Можете вынести в ответы, я отмечу решением

[Alex F]

Дмитрий, То есть, да, нормально, ибо у меня Linux с UTF-консолью.

Answer 1

[John Rosed]

df.to_csv("data.csv", encoding = "utf-8-sig")

Answer 2

[Alex F]

Попробуйте:

import locale
locale.setlocale(locale.LC_ALL, 'UTF-8')