需求：对一张用户表根据name/email/card_num字段去除重复数据；
思路：用group by方法可以查询出’去重’后的数据，将这些数据存储到一张临时表中，然后将临时表的数据存储到指定的表中；
误区及解决方案：group by方法只能获取部分字段（去重指定字段），不能一次获取到完整的数据，但是可以通过max函数获取group by结果集中的id，再根据id集合查询出全部的记录。
测试思路
查询去重后的数据
SELECT max(id) as id,name,email,card_num FROM users GROUP BY name,email,card_num;
从去重后的数据中获取id集合
SELECT ID from (SELECT max(id) as id,name,email,card_num FROM users GROUP BY name,email,card_num) as T;
根据去重后的数据中获取id集合，从源数据中获得记录列表
SELECT * from users where id in (SELECT ID from (SELECT max(id) as id,name,email,card_num FROM users GROUP BY name,email,card_num) as T);
怪兽AI数字人
数字人短视频创作，数字人直播，实时驱动数字人
44 查看详情 
实际方法
根据去重后的数据中获取id集合，从源数据中获得记录列表，将这些列表数据存入一个临时表中
create TEMP TABLE tmp_data as SELECT * from users where id in (SELECT ID from (SELECT max(id) as id,name,email,card_num FROM users GROUP BY name,email,card_num) as T);
将临时表中的数据存入指定的数据表中，完毕
insert into users_copy1 select * from tmp_data;
检测
检测结果是不是和第一步查询去重后的数据总数相同
select count(*) from users_copy1;
测试结果：1.4w条数据中有2300条数据重复，实际运行结果为0.7s，基本满足现在的需求。
更多MySQL相关技术文章，请访问MySQL教程栏目进行学习！
以上就是数据库根据指定字段去重的详细内容，更多请关注创想鸟其它相关文章！
版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容， 请发送邮件至 chuangxiangniao@163.com 举报，一经查实，本站将立刻删除。
发布者：程序猿，转转请注明出处：https://www.chuangxiangniao.com/p/366403.html
微信扫一扫 
支付宝扫一扫 
