Question

mysql数据库删除重复数据

zhszty_ebook表有两个字段id,url，id是唯一标识，url有重复数据，要删除url重复的

Answer 1

直接拿1楼的来改吧，

delete from zhszty_ebook
where id not in(
select * from (select max(id) from zhszty_ebook group by url
) as tmp);------------mysql有个特性，对于表进行修改，删除操作，子查询不能和外层的查询的表一样，所以在加个select就可以了。其他数据库按照楼上的那个是没问题的

追问

我这里有16W条数据，正常应该是3W条数据，要执行多久？

追答

not in的效率比较差，你可以给url和id建个联合索引，

追问

怎么建索引，这个我不太擅长

追答

show create table zhszty_ebook;看看这个表建了哪些索引先

追问

这个样子

追答

这样把，你先执行 select * from
from zhszty_ebook
where id not in(
select * from (select max(id) from zhszty_ebook group by url
) as tmp); 看看需要多久，那么delete就需要多久

追问

追答

你先执行 select * from
from zhszty_ebook
where id not in(
select * from (select max(id) from zhszty_ebook group by url
) as tmp); 看看需要多久，那么delete就需要多久

追问

17s

追答

explain
select * from
from zhszty_ebook
where id not in(
select * from (select max(id) from zhszty_ebook group by url
) as tmp);---把显示的结果发我看看

追问

追答

给url建立个索引，create index index_url on zhszty_ebook(url);然后再执行下查询

追问

加我QQ，1156054105，拜托

Answer 2

select max(id),url into #zhszty_ebook from zhszty_ebook
--先查询到临时表中
delete * from zhszty_book
--删除原表数据，或进干脆删除原来的表
insert into zhsty_book select * from #zhsty_book
--向原因添加数据，id如果是自增的则不能够直接添加，考虑重置一下后再添加。

如果原表的中的id没有多大使用的话——我的意思是重新编写id的话。
select distint url from zhszty_book
--只取出url并去掉重复值，清除原表数据后，然后再进行添加。

清除原表或添加不重复数据后，建产唯一索引：
create unique clustrede index IX_URL
on zhszty_book(url ASC);

建立唯一索引后不再能添加重复的url了！看看你们的数据库分析师——对修选键还不建立一个唯一非聚集索引，重复是必然的！你们的数据库分析师不合格啊！

追问

能不能用一条语句写出来，性能要好

追答

不能，你与成批处理，可以写在一个文件中，但不是一句SQL,最后建索引号时必须是第一句，换句话来说，在create index前必须加一个go语句！

Answer 3

alter ignore table zhszty_ebook add unique key(id,url).

Answer 4

delete from zhszty_ebook
where id not in(
select max(id) from zhszty_ebook group by url
);

追问

才看清楚，你这是啥玩意？逗我玩呢？