Как удалить дубли из БД mysql ?
- Автор темы backoff
- Дата начала
top.razrab
Client
- Регистрация
- 05.09.2017
- Сообщения
- 61
- Благодарностей
- 16
- Баллы
- 8
Поиск дубликатов MySQL · GitHub
Поиск дубликатов MySQL. GitHub Gist: instantly share code, notes, and snippets.
gist.github.com
- Регистрация
- 20.04.2015
- Сообщения
- 5 926
- Благодарностей
- 6 389
- Баллы
- 113
я так понимаю нужен этот запрос
но не понимаю что куда пихать, чтоб не запороть)
правильно ли?
table - это название таблицы
col1 - это нужный столбец
а вот что такое id - наверно индекс
и что такое tmp - наверно временные строки?
как составить запрос, если
моя таблица называется - mytable555
столбец - page
верно?
SQL:
DELETE
`table`
FROM
`table`
LEFT OUTER JOIN
(SELECT MIN(`id`) AS `id`, `col1` FROM `table` GROUP BY `col1`) AS `tmp`
ON
`table`.`id` = `tmp`.`id`
WHERE
`tmp`.`id` IS NULLправильно ли?
table - это название таблицы
col1 - это нужный столбец
а вот что такое id - наверно индекс
и что такое tmp - наверно временные строки?
как составить запрос, если
моя таблица называется - mytable555
столбец - page
верно?
SQL:
DELETE
`mytable555`
FROM
`mytable555`
LEFT OUTER JOIN
(SELECT MIN(`id`) AS `id`, `page` FROM `mytable555` GROUP BY `page`) AS `tmp`
ON
`mytable555`.`id` = `tmp`.`id`
WHERE
`tmp`.`id` IS NULLtop.razrab
Client
- Регистрация
- 05.09.2017
- Сообщения
- 61
- Благодарностей
- 16
- Баллы
- 8
- Регистрация
- 20.04.2015
- Сообщения
- 5 926
- Благодарностей
- 6 389
- Баллы
- 113
запрос завис на 12й минуте, и чето ничего не удалил, я посмотрел запросов другим (select), посмотреть сколько дублей, запрос занял 4 минуты и показал 330к дублей из 5.2кк срок.
сделал дамп и руками вытащил все строки, через - EmEditor решил удалить дубли, удалилось дублей 4.5кк )))))
база из 800мб, стала 80
как-то так)
сделал дамп и руками вытащил все строки, через - EmEditor решил удалить дубли, удалилось дублей 4.5кк )))))
база из 800мб, стала 80
как-то так)
top.razrab
Client
- Регистрация
- 05.09.2017
- Сообщения
- 61
- Благодарностей
- 16
- Баллы
- 8
Я чистил базу на 11кк строк через HeidiSQL примерно минут 40, около 4кк дублей
WalkODoff
Client
- Регистрация
- 09.04.2016
- Сообщения
- 149
- Благодарностей
- 31
- Баллы
- 28
а вообще в самой БД настрой столбец что бы если уже есть такое значение то больше не записывалось.
PHP:
ALTER TABLE mytable555
ADD CONSTRAINT unique_page UNIQUE (page);
Последнее редактирование:
- Регистрация
- 20.04.2015
- Сообщения
- 5 926
- Благодарностей
- 6 389
- Баллы
- 113
doc
Client
- Регистрация
- 30.03.2012
- Сообщения
- 8 607
- Благодарностей
- 4 598
- Баллы
- 113
- Регистрация
- 20.04.2015
- Сообщения
- 5 926
- Благодарностей
- 6 389
- Баллы
- 113