Как удалить дубликаты из списка?

Question

[WASDABOO]

{'threads/4862302', 'threads/4855381/', 'threads/4867041/', 'threads/4865447', 'threads/4866970/', 'threads/4862317', 'threads/4866935/', 'threads/4867075/', 'threads/4867089', 'threads/4867110/', 'threads/4867132/', 'threads/4867113', 'threads/4867112/', 'threads/4867110', 'threads/4862569', 'threads/4867041', 'threads/4867138', 'threads/4862569/', 'threads/4867083', 'threads/4867144', 'threads/4867092/', 'threads/4867065/', 'threads/4867021', 'threads/4867089/', 'threads/4855381', 'threads/4867061/', 'threads/4867092', 'threads/4866935', 'threads/4867113/', 'threads/4867138/', 'threads/4866941/', 'threads/4866941', 'threads/4867075', 'threads/4867061', 'threads/4866970', 'threads/4860112', 'threads/4867111/', 'threads/4867140/', 'threads/4867132', 'threads/4862850', 'threads/4861918/', 'threads/4867111', 'threads/4867065', 'threads/4867122/', 'threads/4867122', 'threads/4867083/', 'threads/4860986', 'threads/4867145', 'threads/4860986/', 'threads/4867144/', 'threads/4865534', 'threads/4867021/', 'threads/43694', 'threads/4862317/', 'threads/4867145/', 'threads/4864682/', 'threads/4866913/', 'threads/4867140', 'threads/4860112/', 'threads/4865534/', 'threads/4862302/', 'threads/4856417/', 'threads/4856417', 'threads/4864682', 'threads/4867077', '/threads/4883/', 'threads/4866913', 'threads/4865447/', 'threads/4867112', 'threads/4862850/', 'threads/4867077/', 'threads/4861918'}

Из этого списка нужно удалить дубликаты. Но есть один нюанс, во всех дубликатах присутсвует символ "/" в конце.
Как удалить такие дубликаты?

Answer 1

[Владимир Куц]

Ну так нормализуйте - удалите лишнюю '/' там где не надо - да оберните в set как уже посоветовали:

set(x[:-1] if x[-1] == '/' else x for x in data)
где data - ваш список

Comments

[WASDABOO]

Это работает, большое вам спасибо

Answer 2

[dmshar]

То, что вы написали - некоторые данные в фигурных скобках - согласно синтаксису Python не есть список. Это множество. Множество - это такая структура, которая не допускает повторяющихся элементов внутри себя. Т.е. присвоив эту строку некой переменной, ей автоматом будет приписан тип "set" и при выполнении этой операции все повторяющиеся элементы будут автоматом удалены.
Вот пример

slt={'threads/4862302', 'threads/4862302', 'threads/4862302/'}
print (slt)

и результат
{'threads/4862302/', 'threads/4862302'}

Если вдруг вы считаете, что 'threads/4862302/' и 'threads/4862302' - это один и тот-же элемент, то вам надо предварительно просто поудалять символы '/' из строк, например - вот так:

slt={'threads/4862302', 'threads/4862302', 'threads/4862302/', 'threads/4862303/','threads/4862304/'}
sa=set()
for x in slt:
    if x[-1]=='/':
        x=x[:-1]
    sa.add(x)
print (sa)

и результат:

{'threads/4862304', 'threads/4862303', 'threads/4862302'}

Answer 3

[igor6130]

Обернуть список в set.

Comments

[WASDABOO]

Пробовал, не помогает. Я думаю это из-за того что в дубликатах присутствует "/" в конце

[igor6130]

WASDABOO, если присутствуют "лишние" символы, это, с точки зрения языка, не дубликаты. В этом случае можно обойти все значения в списке, удалить из них символ / и на основе этих данных составить новый список, который уже обернуть сэтом.

[WASDABOO]

igor6130, так а как я удалю "/", если этот символ есть между threads/12344/, а мне надо удалить лишь тот который в конце

[igor6130]

WASDABOO, используйте для строк метод strip("/").

[WASDABOO]

igor6130, зачем мне для строк, если мне нужно из списка удалить?

[igor6130]

WASDABOO, я же писал выше зачем.

[WASDABOO]

igor6130, не помог метод strip("/"), проблема осталась такой же. В конце всё равно есть "/"

[igor6130]

WASDABOO, так приведите код, который пробуете. Вслепую тяжело предлагать решение.