这篇文章主要介绍了mysql去重的方法整理的相关资料,需要的朋友可以参考下
MySQL去重的方法整理
【初级】有极少的重复行
使用distinct查出来，然后手动一行一行删除。
【中级】按照单个字段的重复去重
例如：对id字段去重
使用方法：获取id的重复字段的值，利用相同id字段所在的行中，比较出数据不同的字段，删除 除了最小（或最大）的字段所在的该行之外的所有重复的行。一般使用主键来比较，因为主键的值一定是唯一值，绝对不相同。
id name1 a1 b2 c2 a3 c
结果：
id name1 a 2 a
操作：
delete from a_tmp where id in (select * from (select b.id from a_tmp b group by b.id having count(b.id) >1) bb) and name not in (select * from (select min(a.name) from a_tmp a GROUP BY a.id having count(a.id) >1) aa);
注意：
上述加粗并绿色的字，必须加别名，必须使用select * from (……)这样的格式，否则会报错：
[Err] 1093 – You can’t specify target table ‘a_tmp’ for update in FROM clause
【高级】按多个字段的重复来去重
例如：对id，name相同的去重，即：对id，name都相同的算作重复行，对id相同而name不同的算作不重复行
使用方法：和单个字段相似，一般使用主键来比较，因为主键的值一定是唯一值。
启科网络PHP商城系统
启科网络商城系统由启科网络技术开发团队完全自主开发，使用国内最流行高效的PHP程序语言，并用小巧的MySql作为数据库服务器，并且使用Smarty引擎来分离网站程序与前端设计代码，让建立的网站可以自由制作个性化的页面。 系统使用标签作为数据调用格式，网站前台开发人员只要简单学习系统标签功能和使用方法，将标签设置在制作的HTML模板中进行对网站数据、内容、信息等的调用，即可建设出美观、个性的网站。
0 查看详情
id name rowid1 a 11 a 21 b 32 b 42 b 53 c 63 d 7
结果：
id name rowid1 a 1 1 b 32 b 43 c 63 d 7
操作：
第一种：
delete from a_tmp where (id,name) in (select * from (select b.id,b.name from a_tmp b group by b.id,b.name having count(b.id) >1) bb) and rowid not in (select * from (select min(a.rowid) from a_tmp a group by a.id,a.name having count(a.id) >1) aa);
第二种：
将id和name字段的值连接起来插入到临时表中b_tmp，这样便可以使用【中级】的单字段的判断删除方法。
#将两字段连接的值，a_tmp表中唯一值的字段插入b_tmp表
insert into b_tmp select concat(id,name),rowid from a_tmp;#查出需要留下来的行select id_name,max(rowid) from b_tmp group by id_name having count(id_name)>1;#使用【中级】的方法，或存储过程完成去重的工作
【终极】每行都有两份一样的数据
例如：
使用方法：对于整行的数据都一样，是没办法使用SQL语句删除的，因为没有可以使用的条件限制来留下一行删除所有与其相同的行。没有不同的字段可以自己创造不同的字段，即：添加一个字段，设为自增长，并设为主键，它会自动添加上值。
id name1 a1 a1 b1 b2 c2 c3 c3 c
结果：
id name rowid1 a 11 b 32 c 53 c 7
操作：
添加一个自增长的字段，并暂时设为主键。
使用上面【中级】和【高级】的方法操作。
以上就是mysql去重的方法的详细内容，更多请关注创想鸟其它相关文章！
版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容， 请发送邮件至 chuangxiangniao@163.com 举报，一经查实，本站将立刻删除。
发布者：程序猿，转转请注明出处：https://www.chuangxiangniao.com/p/1080037.html
微信扫一扫 
支付宝扫一扫 
