Как удалить много строк (порядка 500.000) из csv файла в Python?

Question

[ilannnn]

Как максимально просто удалить много строк из csv файла, при этом сохранить названия столбцов (т.е. первую строку)? А также как изменить индексы сток, чтобы дальше можно было сконкатенировать эти данные с другими?
И можно ли это сделать не используя библиотеку csv?

Comments

[Viktor T2]

pandas же
https://www.codecamp.ru/blog/pandas-read-csv/
https://ru.hexlet.io/courses/python-pandas/lessons...

[Everything_is_bad]

правила про теги почитай, а 500к это и рядом не бигдата

Answer 1

[Roman K]

Просто перепиши в соседний csv файл только те строки, которые должны остаться

И можно ли это сделать не используя библиотеку csv?

Так и быть, разрешаю

Answer 2

[rPman]

csv не простой формат, строки в нем могут содержать разделители, ковычки и даже переводы на следующие строки. Поэтому рекомендуется работать с ним через библиотеки.

Но если ты точно знаешь, что таких сложных ситуаций нет, и можно обойтись простым split, то код будет простой... читаешь построчно файл, парсишь колонки, и тут же из нужных формируешь строку, удалив ненужные колонки и пропуская не нужные строки, записываешь в новый файл.

По окончанию работы, если ошибок не будет, старый файл удаляешь (или переименовываешь его в xxx.bak) а новый переименовываешь под старым именем