sql千万级数据分页效率分析与方法

sql千万级数据分页效率分析与方法

select top 100 * from (select top 500 * from T1 order by id asc) a order by id desc

先asc取前500条 再倒着取(desc)这个结果的100条...

MSSQL在我这里测试通过

这个ID字段如果是默认的升序序列 也是主键列 那下面这句就能实现了
select * from t1 where id between 400 and 500

我就知道三种方法 having in   between and  和 >= and <=
测试过 between and 的效率应该是3者最高的

首先: id>400 and id<500 只有99条
id>=401 and id<=500 才是100条

最好的方法:用FIRST_ROWS(n)优化器提示:用它的目的是提高SQL语句的响应时间,快速的先返回 n 行

另外between and 的效率最高

select /* FIRST_ROWS (100) */
id, username from t1
where id between 401 and 500

最后总结

在查询点来看,用between...and比取“<”、“>”号的效率要高
select a.*
from table1 a
where rownum between 10000001 and 10000101

时间: 2025-01-02 09:02:02

sql千万级数据分页效率分析与方法的相关文章

sql千万级数据库分页与性能优化分析

在之前也有很多人问类似这样的问题,回复这样的问题,我们一般会从索引,水平分区,垂直分区和硬件的升级等方面考虑.    分析   对于千万级数据的分页,要求在秒级内响应,解决方案除了刚列的几个方面考虑,这里说一个非常重要的考虑(评估)是,现实意义. 拿CSDN论坛的那1690万数据来说,我按每页显示200行数据,需要84500页.从站在用户(使用者)角度看,对于查看1万页以后的数据的概率是非常小.假设我们是使用者,让我们一页一页的点,点到100页都够郁闷的了,更何况是1万页后的数据了.这里从现实意

数据库 SQL千万级数据规模处理概要_数据库其它

1. 数据太多.放在一个表肯定不行. 比如月周期表.一个月1000万,一年就1.2亿,如此累计下去肯定不行的.所以都是基于一个周期数据一个表.甚至一个周期数据就要分几个分表.主要是考虑实际的数据量而定.当你创建一个新表时,可能这个表需要有索引,但是都要先取消索引,或者先建立表,导入数据后,再建立索引. 必要时处理完,统计完后,就备份到磁带或者其他介质.然后清掉. 从问题域来看,一个周期内的数据关联性最大.比如统计一个客户某个帐期的话单总额,同比上月增幅,还有就是零话费客户等.如此种种,参照的数据

实现千万级数据分页的存储过程!

存储过程|分页|数据 /*  经测试,在 14483461 条记录中查询第 100000 页,每页 10 条记录按升序和降序第一次时间均为 0.47 秒,第二次时间均为 0.43 秒,测试语法如下:  exec GetRecordFromPage news,newsid,10,100000  news 为 表名, newsid 为关键字段, 使用时请先对 newsid 建立索引.*/ /*  函数名称: GetRecordFromPage  函数功能: 获取指定页的数据  参数说明: @tblN

千万级数据分页之三----实现设计时支持和数字分页

一.对上一版本源代码的修正 上一篇文章发布了一个分页控件的源码,但是这个分页控件的设计时支持不太好,出现了"未处理的异常,输入字符串的格式不正确"的错误,如下图所示: 原因是一下代码引起的异常: int pageCount = int.Parse(_lblPageCount.Text); //获取总页数 修改为以下代码后即显示正常,如图所示:    if (_lblPageCount.Text == "")                ...{          

三种SQL分页法效率分析

表中主键必须为标识列,[ID] int IDENTITY (1,1) 1.分页方案一:(利用Not In和SELECT TOP分页) 语句形式: SELECT TOP 10 * FROM TestTable WHERE (ID NOT IN (SELECT TOP 20 id FROM TestTable ORDER BY id)) ORDER BY ID SELECT TOP 页大小 * FROM TestTable WHERE (ID NOT IN (SELECT TOP 页大小*页数 id

SQL Server 存储过程的分页方案比拼

server|存储过程|分页 SQL Server 存储过程的分页,这个问题已经讨论过几年了,很多朋友在问我,所以在此发表一下我的观点建立表: CREATE TABLE [TestTable] ( [ID] [int] IDENTITY (1, 1) NOT NULL , [FirstName] [nvarchar] (100) COLLATE Chinese_PRC_CI_AS NULL , [LastName] [nvarchar] (100) COLLATE Chinese_PRC_CI_

SQL Server 存储过程的分页

server|存储过程|分页 SQL Server 存储过程的分页,这个问题已经讨论过几年了,很多朋友在问我,所以在此发表一下我的观点建立表: CREATE TABLE [TestTable] ( [ID] [int] IDENTITY (1, 1) NOT NULL , [FirstName] [nvarchar] (100) COLLATE Chinese_PRC_CI_AS NULL , [LastName] [nvarchar] (100) COLLATE Chinese_PRC_CI_

SQL Server 存储过程的分页_存储过程

建立表:  CREATE TABLE [TestTable] (  [ID] [int] IDENTITY (1, 1) NOT NULL ,  [FirstName] [nvarchar] (100) COLLATE Chinese_PRC_CI_AS NULL ,  [LastName] [nvarchar] (100) COLLATE Chinese_PRC_CI_AS NULL ,  [Country] [nvarchar] (50) COLLATE Chinese_PRC_CI_AS 

[转]SQL Server 存储过程的分页方案比拼

    1SQL Server 存储过程的分页,这个问题已经讨论过几年了,很多朋友在问我,所以在此发表一下我的观点   2建立表:   3  4CREATE TABLE [TestTable] (   5 [ID] [int] IDENTITY (1, 1) NOT NULL ,   6 [FirstName] [nvarchar] (100) COLLATE Chinese_PRC_CI_AS NULL ,   7 [LastName] [nvarchar] (100) COLLATE Chi