Как сохранить номер порта в этом случае?

Question

[Алексей Ярков]

Есть файл с проксями (пример):

127.0.0.1:8081
127.0.0.1:878
127.0.0.1:80
137.30.30.1:8080
137.30.30.1:80
127.0.0.1:878
137.30.30.1:8080

Сортируем:

$ cat test.txt | sort -u
127.0.0.1:80
127.0.0.1:8081
127.0.0.1:878
137.30.30.1:80
137.30.30.1:8080

Результат ожидаемый, но не тот что нужен.
Пробуем по другому:

$ cat test.txt | awk -F  ":" ' { print $1 } ' | sort -u
127.0.0.1
137.30.30.1

То что надо! Остались только уникальные IP, но.... Нет номеров портов! Как быть?

Comments

[Владимир Куц]

Ну а в каком формате вы хотели бы получить, и чем сортировка (второй случай) не устраивает?

[Алексей Ярков]

Владимир Куц: надо чтобы остался IP прокси с любым портом.
Например:
127.0.0.1:80
127.0.0.1:8080
И после сортировки остался один из адресов с портом. Сервис для голосования блочит по IP, если повторно обращаться.

Answer 1

[mureevms]

cat test.txt | sort -u | uniq

Comments

[Igor Nikolaev]

и мы получаем:
127.0.0.1:80
127.0.0.1:8081
127.0.0.1:878
137.30.30.1:80
137.30.30.1:8080

Answer 2

[Вячеслав]

sort -k1 -t: < 1.txt

Comments

[Igor Nikolaev]

Не то, что нужно автору поста