Как удалить одинаковые строки в файле?

Question

[bychok300]

Есть txt файл с историей команд терминала,

673  sudo mysql-workbanch
  674  sudo mysql-workbench
  675  poweroff
  676  sudo mysql -u root -p
  677  sudo mysql-workbench
  678  poweroff
вывод sort -u

как мне удалить повторяющиеся записи? sort -u не подходит, там два значения номер и сама команда, сортировка не нужна, нужно что бы удалялись повторяющиеся строки и удалялись вместе с номером

Comments

[Владимир]

Еще можно сделать чтобы они туда не попадали

So put the following line in your ~/.bashrc:
export HISTCONTROL=ignoreboth:erasedups

askubuntu.com/questions/15926/how-to-avoid-duplica...

Answer 1

[Сергей Горячев]

Если подойдет "ручное" решение, то можно перевести тестовый в csv.
1. Замена двух пробелов на ;
2. Изменить разрешение файла .csv
3. Сравнивать 2 столбец в Libre Office Calc и удалять повторы
В принципе быстро делается) И сортировка и номера сохраняются.

Answer 2

[Андрей Мывреник]

Если сортировка не важна, то как вариант:
sort history.txt | uniq -u

Comments

[bychok300]

все равно оставляет одинаковые поля, желательно что бы осталась сортировка по порядку

Answer 3

[Макс]

рецепт

Comments

[bychok300]

ему не надо удалять строки встречающиеся более двух раз, а мне надо)

[Макс]

bychok300: там оба рецепта