Как выполнить поиск и сохранение одинаковых строк?

Question

[Никита]

Например, есть база с N кол-вом строк, скажем 100к. Строки имеют такой вот вид:

[e-mail]:123
[e-mail]:1234
[e-mail]:2dw123ds
[e-mail]:1232dw

Как видим, в первых двух строках до символа ":" всё идёт одинаково. После символа ":" может стоять любое число/буква.

Задача:
Каким-то образом проанализировать загруженную базу и после обработки сохранить те строки, в которых идёт повторение до символа ":". Грубо говоря - сохранить строки: [e-mail]:123 и [e-mail]:1234

Нужно это именно батником делать, возможно через регулярное выражение.

Comments

[4iloveg]

Ты хотя бы пытался написать батник?

Answer 1

[Dimonchik]

а что сложного?

делишь символом ':' в две дополнительные колонки, group by , count по первой из подополнительных - где больше 1, сохраняешь

удаляешь впомогательные данные

Comments

[Иван Мельников]

Как я понял, у топикстартера не БД, а текстовый файл.

[Никита]

Иван Мельников, всё верно.

[Moskus]

Иван Мельников, это не значит, что ему будет проще решить задачу, используя только команды cmd.exe, превратить это в csv и загрузить в sqlite будет куда проще.

[Иван Мельников]

Moskus, да, конечно, проще. А ещё проще питоном. Но задача стоит не такая.

[Moskus]

Иван Мельников, да мало ли каких требований добавили в задачу по незнанию