mysql中distinct去除重复值方法

,而无法返回其它字段,这个问题让我困扰了很久,用distinct不能解决的话,我只有用二重循环查询来解决,而 这样对于一个数据量非常大的站来说,无疑是会直接影响到效率的。所以我花了很多时间来研究这个问题

mysql的DISTINCT的关键字有很多你想不到的用处
1.在count 不重复的记录的时候能用到
比如SELECT COUNT( DISTINCT id ) FROM tablename;
就是计算talbebname表中id不同的记录有多少条

2,在需要返回记录不同的id的具体值的时候可以用
比如SELECT DISTINCT id FROM tablename;
返回talbebname表中不同的id的具体的值

3.上面的情况2对于需要返回mysql表中2列以上的结果时会有歧义
比如SELECT DISTINCT id, type FROM tablename;
实际上返回的是 id与type同时不相同的结果,也就是DISTINCT同时作用了两个字段,必须得id与tyoe都相同的才被排除了,与我们期望的结果不一样

 代码如下 复制代码

CREATE TABLE `student` (                  
           `name` varchar(20) NOT NULL DEFAULT '', 
           `age` int(10) DEFAULT '0'               
         ) ENGINE=InnoDB DEFAULT CHARSET=latin1

1.测试一
select * from student;        
a    5
a    5
c    0

用distinct过滤掉两列都相同的记录

 代码如下 复制代码
select distinct name,age from student;

返回
a    5
c    0

2.测试二
将表student的数据改为如下:

 代码如下 复制代码

select * from student;
c    2
c    5

select distinct name,age from student;

返回如下,说明distinct后面有多于一列的字段时,只有每列的值完全相同才过滤
c    2
c    5

3.测试三

 代码如下 复制代码
select * from student;
name age height

c    2    123
c    2    456
b    20    222

 代码如下 复制代码

group by按两列同时分组
select name,age,sum(height) from student group by name,age;
b    20    222
c    2    579

group by按两列同时分组,同时在后面加上having的条件

 代码如下 复制代码
select name,age,sum(height) as n from student group by name,age having n > 500;

返回
c    2    579

4.测试四
关于group by后面limit的测试

 代码如下 复制代码
select songname,sengerid,count(sengerid) as n from t_song group by songname,sengerid having n > 1 ORDER BY n DESC,songid ASC limit 10;

未知    8738    40
共同渡过    1432    24
风继续吹    1432    23
倩女幽魂    1432    23
无心睡眠    1432    23
罗百吉超嗨派对连续组曲    780    19
拒绝再玩    1432    19
风再起时    1432    18
每天爱你多一些    1480    18
千言万语    1794    18

 代码如下 复制代码
select songname,sengerid,count(sengerid) as n from t_song group by songname,sengerid having n > 1 ORDER BY n DESC,songid ASC limit 5;

未知    8738    40
共同渡过    1432    24
风继续吹    1432    23
倩女幽魂    1432    23
无心睡眠    1432    23

经过以上两个测试可以看出,如果sql语句中含有limit,limit是对用group by进行分组,并进行相关计算以后的limit操作,而不是对limit后面的指定记录数进行分组,从n那一列的数据每一行的值都大于10就可以看出来。

5.测试五
用以下的两种形式的distinct均可以得到相同的记录数,写法不一样,结果是一样的。

 代码如下 复制代码

select count(distinct(songid)) from feedback;

select count(distinct songid) from feedback;

6.测试六
field singername is string,max(singername),如果singername有些列为空,有些列不为空,则max(singername)取非空的值,如果一列为zxx,一列为lady,则取zxx,按字母顺利取的。

 代码如下 复制代码
select feedback_id,songid,songname,max(singername),max(time) as new_time from feedback group by songid order by new_time desc;

7.Sql语句中where,group by,order by及limit的顺序
where xxx,group by xxx,order by xxx,limit xxx

8.关于group by与count的问题
如果sql语句中含有group by,则最好不要将count sql转换为select count(*) from xxx,否则select与from之间的字段很有可能是后面要使用的,例如

 代码如下 复制代码

select feedback_id,songid,songname,max(singername),max(time) as new_time from feedback group by songid order by new_time desc;

MySQL Query Error: SELECT COUNT(*) FROM feedback GROUP BY songid ORDER BY new_time DESC Error Info:Unknown column 'new_time' in 'order clause'

时间: 2024-09-19 09:13:05

mysql中distinct去除重复值方法的相关文章

excel2010中怎么去除重复值

  本文为大家介绍一下在excel2010中怎么去除重复值,下面一起来看看具体操作吧. 步骤/方法 方法一:删除重复项 方法二:数据透视表 操作过程:选取数据>[插入]>[数据透视表]>[确定]. 我们有可能面对的数据有两种,一种是单列的,另一种是多列的(包括在不同工作表内),单列的非常简单,只要将需要去除重复的那一项字段勾选就完成了,多列的就要用到多重合并:

JavaScript中数组去除重复的三种方法_javascript技巧

废话不多说了,具体方法如下所示: 方法一:返回新数组每个位子类型没变 function outRepeat(a){ var hash=[],arr=[]; for (var i = 0; i < a.length; i++) { hash[a[i]]!=null; if(!hash[a[i]]){ arr.push(a[i]); hash[a[i]]=true; } } console.log(arr); } outRepeat([2,4,4,5,"a","a"

如何在结构体数组中删掉重复值

问题描述 如何在结构体数组中删掉重复值 假如结构体数组中的数据为:3 3 5 5 5 3 7 0 2 5 ,删除后的结构体数组中的数据为:3 5 3 7 0 2 5 解决方案 用个土方法吧,先吧结构体的数据截取出来,放在数组里遍历.在截取该数组的足后一个对象来遍历比较是否有相同的,有就删除,没有就吧该对象存放在新的数组中. 解决方案二: 如果你的数据最大小于数组的长度则可以这样实现.思想: 根据拆装箱思想,先统计各个数据重复个数,再删除重复数据 #include #include using n

Mysql中 unique列插入重复值该怎么解决呢_Mysql

当unique列在一个UNIQUE键上插入包含重复值的记录时,我们可以控制MySQL如何处理这种情况:使用IGNORE关键字或者ON DUPLICATE KEY UPDATE子句跳过INSERT.中断操作或者更新旧记录为新值. mysql> create table menus(id tinyint(4) not null auto_increment, -> label varchar(10) null,url varchar(20) null,unique key(id)); Query

字符串聚合函数(去除重复值)_mssql2005

--功能:提供字符串的替代聚合函数 --说明:例如,将下列数据 --test_id test_value -------------------- 'a' '01,03,04' 'a' '02,04' 'b' '03,04,08' 'b' '06,08,09' 'c' '09' 'c' '10' --转换成test_vlaue列聚合后的函数,且聚合后的字符串中的值不重复 --test_id test_value -------------------- 'a' '01,03,04,02' 'b'

MySQL中distinct与group by之间的性能进行比较_Mysql

最近在网上看到了一些测试,感觉不是很准确,今天亲自测试了一番.得出了结论,测试过程在个人计算机上,可能不够全面,仅供参考. 测试过程: 准备一张测试表  CREATE TABLE `test_test` ( `id` int(11) NOT NULL auto_increment, `num` int(11) NOT NULL default '0', PRIMARY KEY (`id`) ) ENGINE=MyISAM DEFAULT CHARSET=utf8 AUTO_INCREMENT=1

asp.net unique去除重复数据方法

asp教程.net unique去除重复数据方法 1   sort(bis.begin(), bis.end()); 2   bis.erase(unique(bis.begin(), bis.end()), bis.end()); ,就顺手写了bis.erase(unique(bis.begin, bis.end()) bis.end()),但是调试发现并没有按照我的意图执行,查书之后发现unique只能检测相邻的重复元素,所以之前也先对vector进行排序,这里有一点需要注意,vector没

详解JavaScript数组和字符串中去除重复值的方法_javascript技巧

原理在代码中表现得非常清晰,我们直接来看代码例子: var ages = array.map(function(obj) { return obj.age; }); ages = ages.filter(function(v,i) { return ages.indexOf(v) == i; }); console.log(ages); //=> [17, 35] function isBigEnough(element) { return element >= 10; } var filte

MySQL中处理各种重复的一些方法_Mysql

有时表或结果集包含重复的记录.有时它是允许的,但有时它需要停止重复的记录.有时它需要识别重复的记录从表中删除.本章将介绍如何防止发生在一个表中重复的记录如何删除已经存在的重复记录.防止重复表中的发生: 可以使用PRIMARY KEY或UNIQUE索引的表上相应的字段来防止重复的记录.让我们举一个例子,下面的表中不包含这样的索引或主键,所以它会允许记录first_name和last_name重复 CREATE TABLE person_tbl ( first_name CHAR(20), last