亚游wwwag8com
你好,游客 登录 注册
背景:
阅读新闻

MySQL处理重复数据实例分析

[日期:2019-05-19] 来源:Linux社区  作者:also-brook [字体: ]

亚游wwwag8com,  俄罗斯总参谋部行动总局局长谢尔盖•鲁茨科伊称,俄罗斯航空群的飞机自9月30日在叙利亚开始以来,已经完成了超过4200架次飞行,其中有145次由战略飞机完成的飞行。

  据俄罗斯情报部门透露,驻阿富汗美军开辟的另一条北方补给线是从拉脱维亚首都里加经俄罗斯、哈萨克斯坦和乌兹别克斯坦到达阿富汗。据悉,由于巴基斯坦补给线被关,目前经过两条北方补给线的物资运输量已占驻阿美军运输总量的40%。澎湃新闻:莫里斯拒赛?CBA对外援人情味淡了些  我想逃避这个成为我丈夫的男人,于是便到省城亲戚的公司里去做事。在这里认识了赵健。赵健26岁,他气质冷峻,身体结实。对我,却很是关心。闲暇时总陪我聊天,还和我一起吃饭。我知道他喜欢我,我也喜欢他,可是我是婚姻的女人。要想获得他的爱,只能隐瞒结婚的事实。于是,在赵健面前,我成了一个活泼的单身女。

MySQL限制数据重复的方式:表上增加主键(Primary Key)或增加唯一性索引(Unique)

主键对重复资料进行限制,这样资料在导入时就无法重复插入

create table primary_t(
last_name varchar(20),
first_name varchar(20),
sex varchar(8),
primary key(last_name,first_name)
)engine=innodb default charset=utf8;



show table status like 'primary_t'\G

show index from primary_t\G


模拟插入两笔有主键约束的资料
insert into primary_t(last_name,first_name,sex) values('Frank','Li','Man'),('Frank','Li','Man'),('Coco','Li','Woman');

ERROR 1062 (23000): Duplicate entry 'Frank-Li' for key 'PRIMARY'


insert into primary_t(last_name,first_name,sex) values('Frank','Li','Man'),('Frank','Cai','Man'),('Coco','Li','Woman');

mysql> select * from primary_t;
+-----------+------------+-------+
| last_name | first_name | sex   |
+-----------+------------+-------+
| Coco      | Li         | Woman |
| Frank     | Cai        | Man   |
| Frank     | Li         | Man   |
+-----------+------------+-------+
rows in set (0.00 sec)

唯一性索引对复制资料进行限制

create table unique_t(
last_name varchar(20),
first_name varchar(20),
sex varchar(8),
unique index  unique_name(last_name,first_name)
)engine=innodb default charset=utf8;

show table status like 'unique_t'\G

show index from unique_t\G


模拟插入两笔有唯一性约束的资料
insert into unique_t(last_name,first_name,sex) values('Frank','Li','Man'),('Frank','Li','Man'),('Coco','Li','Woman');

ERROR 1062 (23000): Duplicate entry 'Frank-Li' for key 'unique_name'


insert into unique_t(last_name,first_name,sex) values('Frank','Li','Man'),('Frank','Cai','Man'),('Coco','Li','Woman');
mysql> select * from unique_t;
+-----------+------------+-------+
| last_name | first_name | sex   |
+-----------+------------+-------+
| Frank     | Li         | Man   |
| Frank     | Cai        | Man   |
| Coco      | Li         | Woman |
+-----------+------------+-------+
rows in set (0.00 sec)

对资料的统计

create table count_t(
last_name varchar(20),
first_name varchar(20),
sex varchar(8)
)engine=innodb default charset=utf8;

insert into count_t values('Frank','A','Man'),
('Frank','B','Man'),
('Frank','C','Woman'),
('Frank','D','Man'),
('Frank','E','Man'),
('Frank','F','Woman'),
('Frank','G','Man'),
('Frank','H','Man'),
('Frank','I','Woman'),
('Coco','A','Woman'),
('Coco','B','Man'),
('Coco','C','Man'),
('Coco','D','Man'),
('Coco','E','Man'),
('Coco','F','Man'),
('Coco','G','Woman'),
('Coco','H','Woman'),
('Alex','B','Man'),
('ALex','C','Man'),
('ALex','D','Man'),
('Alex','E','Man'),
('ALex','F','Man'),
('ALex','G','Woman'),
('ALex','H','Woman')
;

commit;

按各个列进行分组统计
select last_name,count(*) from count_t group by last_name;


select first_name,count(*) from count_t group by first_name;


select sex,count(*) from count_t group by sex;


mysql> select last_name,count(*) from count_t group by last_name;
+-----------+----------+
| last_name | count(*) |
+-----------+----------+
| Alex      |        7 |
| Coco      |        8 |
| Frank     |        9 |
+-----------+----------+
rows in set (0.00 sec)


mysql> select first_name,count(*) from count_t group by first_name;
+------------+----------+
| first_name | count(*) |
+------------+----------+
| A          |        2 |
| B          |        3 |
| C          |        3 |
| D          |        3 |
| E          |        3 |
| F          |        3 |
| G          |        3 |
| H          |        3 |
| I          |        1 |
+------------+----------+
rows in set (0.00 sec)


mysql> select sex,count(*) from count_t group by sex;
+-------+----------+
| sex   | count(*) |
+-------+----------+
| Man   |       16 |
| Woman |        8 |
+-------+----------+
rows in set (0.00 sec)


对分组的统计在进行限定,having 大于等于8次的记录
select last_name ,count(*) from count_t group by last_name having count(*) >=8;

mysql> select last_name ,count(*) from count_t group by last_name having count(*) >=8;
+-----------+----------+
| last_name | count(*) |
+-----------+----------+
| Coco      |        8 |
| Frank     |        9 |
+-----------+----------+
rows in set (0.00 sec)

对资料进行去重操作,主要使用distinct函数

select distinct last_name from count_t;
select distinct first_name from count_t;
select distinct sex from count_t;

对已有资料的表进行去重操作

insert into count_t values('Xi','Xi','Man'),('Xi','Xi','Man');


增加主键约束,加入ignore,忽悠重复的资料

alter ignore table count_t
add primary key(last_name,first_name);

select * from count_t where last_name='Xi';



mysql> alter ignore table count_t
    -> add primary key(last_name,first_name);
Query OK, 26 rows affected (0.01 sec)
Records: 26  Duplicates: 1  Warnings: 0

mysql> select * from count_t where last_name='Xi';
+-----------+------------+------+
| last_name | first_name | sex  |
+-----------+------------+------+
| Xi        | Xi         | Man  |
+-----------+------------+------+
row in set (0.00 sec)


使用group by方式也可去除重复资料

create table count_t0 as select last_name,first_name,sex from count_t group by last_name,first_name,sex;

Linux公社的RSS地址亚游wwwag8com/wwwd35clinuxidcd35ccom/rssFeed.aspx

本文永久更新链接地址/wwwd35clinuxidcd35ccom/Linux/2019-05/158748.htm

linux
相关资讯       SQL去重复 
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数

       

评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款
湖人新大腿说能不批他了吗!其实他跟JR一样 安盛据称正在就收购保险商XL Group进行高级谈判 沪媒:北京队“豪赌”带来启示 求变才能突破 科技部部长:科技型中小企业去年增加就业200多万 君子雷亲谈当年绿军事!完全不理解隆多世界观 亚冠第7季毛剑卿终斩首球 他对自己申花定位很清楚 进球gif-杨程扑救变助攻 U23罗皓头球顶入空门 凤凰新媒体2018年第一季度营收2.8亿元 净亏同比扩… 媒体评公益人雷闯涉性侵:莫借公益身份行不轨之事 廊坊男子出租车管理站停车场内死亡 警方排除他杀 内马尔:很遗憾无法帮助巴黎 队友表现令人骄傲 与马接触有风险!如何安全的让马儿接纳你
商务部:2050年前全面建成“经贸强国” 交通运输部:清明假期高速公路小客车免费通行 重返水浒传:台军曝现代版“九纹龙史进”士兵 中纪委机关报:严书记为不能严管家人官员敲响警钟 7月10大谣言在此 你“中招”了吗? 进球gif-王燊超边路传中架炮 于海后点推射破僵 Twitter美国内容团队重组 视频依然是战略重点 刘昌赫名局系列2 第一攻击手屠龙破曹登大王宝座 美军官鼓吹对台军售防大陆“武统” 网友:纸老虎 淡江大学教授:李敖对1960年代台湾高中生影响极大 管清友:对海南会有特殊政策 博彩开放不太可能 4名官员多次工作时间通过手机APP打麻将 均被处分
土伦杯国青20人出战 黄紫昌张玉宁林良铭等缺阵 苹果放弃在爱尔兰建设数据中心计划 因审批拖延太久 “结构牛”行情可期? 放水暖风拂面大宗商品起锚 老人被邻居叫醒帮抬病人后猝死 家属欲向对方索赔 美组织朝鲜问题外长会中国未受邀参加?中方回应 共和党人鲍威尔治下的美联储 与国会关系可能改善 新浪彩票名家大乐透第18028期推荐汇总 哈勒普分享观战大小威内战心得 直言身体略疲惫 齐达内:皇马不会为巴萨列队 是他们先坏了规矩 美联储主席光环褪去 耶伦将再与伯南克共事 亚太股市全线下跌 沪指早盘收跌0.18% 江西全面部署扫黑除恶工作 已抓获涉案人员1111人 益科正润举牌登云股份 看好汽车行业及公司成长 亚游wwwag8com