Как удалить повторяющиеся записи в SQL?

Question

[Влад]

У меня такая проблема.
В MySQL базе имеются повторяющиеся строки - смотрите на скрине 003.ee
Одна запись от другой отличается тем, что в перой откудато при импорте взялся пробел или перенос на другую строку.. ну какойто невидимый символ.

Как мне удалить все невидимые символы, а затем удалить все повторяющиеся в 1 столбике записи?

Comments

[Влад]

удалить пробелы помогло
update domains set domain = replace(domain,"
","")

теперь ищу как удалить дубли

[Влад]

вот это помогло:

-- create a new tmp_eployee table
CREATE TABLE tmp_employee LIKE employee;

-- add a unique constraint
ALTER TABLE tmp_employee ADD UNIQUE(ssn);

-- scan over the employee table to insert employee entries
INSERT IGNORE INTO tmp_employee SELECT * FROM employee ORDER BY id;

-- rename tables
RENAME TABLE employee TO backup_employee, tmp_employee TO employee;

Answer 1

[Александр Шилов]

CREATE TABLE `table_tmp` SELECT DISTINCT * FROM `table`;
DROP TABLE `table`;
RENAME TABLE `table_tmp` TO `table`;

Comments

[Александр Шилов]

BD_ l3ftoverZ!, он уже удалил дубли

Answer 2

[Rognoroc]

Одна запись от другой отличается тем, что в перой откудато при импорте взялся пробел или перенос на другую строку.. ну какойто невидимый символ.

У вас записи отличаются еще как минимум 2 полями status и data_added, не считая id.
а что касается удаления невидимых символов то как то так:
UPDATE yourTable SET domain= TRIM(REPLACE(REPLACE(REPLACE(domain, ‘\n’, ‘ ‘), ‘\r’, ‘ ‘), ‘\t’, ‘ ‘));

Answer 3

[Zubekas]

Distinct не подойдёт, т к он фильтранет когда все столбцы записи будут идентичны (на скрине это не так), group by тогда уж по domain, либо с district вложеный запрос...
CREATE TABLE `table_tmp` SELECT * FROM `table` where domain in(select distinct domain from table)