数据量你造吗-JAVA分页

学习的心态第一,解行要相应。其实《弟子规》在“余力学文”当中,一开头就强调了这一个重点。“不力行,但学文,长浮华,成何人”,这个没有侥幸的,只要学了不去做,无形当中就会增长傲慢,自己不知道。-<弟子规>

Written In The Font

    JAVA-Web 基础那块,我自己也准备.搞哪里,优化哪里然后带给大家终结.谢谢

    分页虽易,好却难.数据量,怎么办?

Content

    分页(Paging),就像个切面.能把这个切面好好的放进去也是种nice方式.

 

第一种:小数据量分页实现 (可广泛用于 门户型 网页快速开发等)



    这种比较简单,这边我们模拟实现.

    字段结构:

                   private int pageSize; //每页有多少条

                   private int rowCount; //总行数  

                   private int pageCount;//总页数

                   private int currentPage; //当前页码

   

    流程结构:               

                

     核心:
            list.subList(index,
(currentPage < pageCount) ? (index + pageSize) :
rowCount);将小数据量集合,根据分页参数返回指定的list部分.这样,如果数据小的话,这样很方便的实现了分页功能.下面是JDK
api里面对方法的解释:

subList(int fromIndex, int toIndex)
          返回列表中指定的 fromIndex(包括 )和 toIndex(不包括)之间的部分视图。

 

分页工具类:

package jeffli_10;

import java.util.ArrayList;
import java.util.List;

/** 分页类:根据总记录数和分页大小对 {@link List} 进行分页处理 */
public class Pagination
{
    public static final int DEFAULT_PAGE_SIZE = 10;

    private int rowCount;
    private int currentPage;
    private int pageSize;
    private int pageCount;

    private List<?> list;

    public Pagination(List<?> list)
    {
        this(list, DEFAULT_PAGE_SIZE);
    }

    public Pagination(List<?> list, int pageSize)
    {
        this.currentPage    = 1;
        this.list            = list;
        this.rowCount        = list.size();

        setPageSize(pageSize);
    }

    private void adjustPageCount()
    {
        pageCount = (rowCount + pageSize - 1) / pageSize;
    }

    /** 获取要分页的 {@link List}  */
    public List<?> getList()
    {
        return list;
    }

    /** 获取的 {@link List} 当前页内容 */
    public List<?> getCurrentList()
    {
        List<?> currentList = null;

        if(currentPage >= 1 && currentPage <= pageCount)
        {
            int index = (currentPage - 1) * pageSize;
            currentList = list.subList(index, (currentPage < pageCount) ? (index + pageSize) : rowCount);
        }

        return currentList;
    }

    /** 获取当前页号(从 1 开始) */
    public int getCurrentPage()
    {
        return currentPage;
    }

    /** 设置当前页号(从 1 开始) */
    public boolean setCurrentPage(int page)
    {
        if(page >= 1 && page <= pageCount)
        {
            currentPage = page;
            return true;
        }

        return false;
    }

    /** 转到下一页 */
    public boolean nextPage()
    {
        return setCurrentPage(currentPage + 1);
    }

    /** 转到上一页 */
    public boolean prePage()
    {
        return setCurrentPage(currentPage - 1);
    }

    /** 获取分页大小 */
    public int getPageSize()
    {
        return pageSize;
    }

    /** 设置分页大小 */
    public void setPageSize(int size)
    {
        if(size <= 0)
            size = DEFAULT_PAGE_SIZE;

        int index = (currentPage - 1) * pageSize;

        pageSize = size;

        if(index > pageSize)
            currentPage = (index + pageSize - 1) / pageSize;
        else
            currentPage = 1;

        adjustPageCount();
    }

    /** 获取总页数 */
    public int getPageCount()
    {
        return pageCount;
    }

    public static void main(String[] args)
    {
        final int PAGE_SIZE        = 10;
        final int LIST_SIZE        = 39;

        List<Integer> list = new ArrayList<Integer>();
        for(int i = 1; i <= LIST_SIZE; i++)
            list.add(i);

        Pagination pg = new Pagination(list, PAGE_SIZE);

        for(int i = 1; i <= pg.getPageCount(); i++)
        {
                pg.setCurrentPage(i);
                System.out.println(pg.getCurrentList());
        }
    }

}

 

RUN,你会看到 OUTPUTS:



[1, 2, 3, 4, 5, 6, 7, 8, 9, 10]
[11, 12, 13, 14, 15, 16, 17, 18, 19, 20]
[21, 22, 23, 24, 25, 26, 27, 28, 29, 30]
[31, 32, 33, 34, 35, 36, 37, 38, 39]

第二种:大数据量,采取DAO层分页操作(普遍性需求)



环境:

        spring MVC (spring-4.0.0.RELEASE.jar)

        hibernate     (hibernate-core-4.3.5.Final.jar)

        Mysql           

 

两个核心工具类-分页

分页对象,包含所需要的所有参数及逻辑.

package sedion.jeffli.wmuitp.util;

import java.util.List;

import org.apache.commons.lang3.StringUtils;

import com.google.common.collect.Lists;

public class Page<T> {

    //public variables
    public static final String ASC     = "asc";
    public static final String DESC = "desc";

    //parameters of page
    protected int pageNo         = 1;
    protected int pageSize         = -1;

    protected String orderBy     = null;
    protected String order         = null;

    protected boolean autoCount = true;

    //results
    protected long totalCount     = -1;
    protected List<T> result     = Lists.newArrayList();

    public Page()
    {

    }

    public Page(int pageSize)
    {
        this.pageSize = pageSize;
    }

    /**
     * 获得当前页的页号,序号从1开始,默认为1.
     */
    public int getPageNo()
    {
        return pageNo;
    }

    /**
     * 设置当前页的页号,序号从1开始,低于1时自动调整为1.
     */
    public void setPageNo(final int pageNo)
    {
        this.pageNo = pageNo;

        if (pageNo < 1)
            this.pageNo = 1;
    }

    /**
     * 返回Page对象自身的setPageNo函数,可用于连续设置。
     */
    public Page<T> pageNo(final int thePageNo)
    {
        setPageNo(thePageNo);
        return this;
    }

    /**
     * 获得每页的记录数量, 默认为-1.
     */
    public int getPageSize()
    {
        return pageSize;
    }

    /**
     * 设置每页的记录数量.
     */
    public void setPageSize(final int pageSize)
    {
        this.pageSize = pageSize;
    }

    /**
     * 返回Page对象自身的setPageSize函数,可用于连续设置。
     */
    public Page<T> pageSize(final int thePageSize)
    {
        setPageSize(thePageSize);
        return this;
    }

    /**
     * 根据pageNo和pageSize计算当前页第一条记录在总结果集中的位置,序号从1开始.
     */
    public int getFirst()
    {
        return ((pageNo - 1) * pageSize) + 1;
    }

    /**
     * 获得排序字段,无默认值. 多个排序字段时用','分隔.
     */
    public String getOrderBy()
    {
        return orderBy;
    }

    /**
     * 设置排序字段,多个排序字段时用','分隔.
     */
    public void setOrderBy(final String orderBy)
    {
        this.orderBy = orderBy;
    }

    /**
     * 返回Page对象自身的setOrderBy函数,可用于连续设置。
     */
    public Page<T> orderBy(final String theOrderBy)
    {
        setOrderBy(theOrderBy);
        return this;
    }

    /**
     * 获得排序方向, 无默认值.
     */
    public String getOrder()
    {
        return order;
    }

    /**
     * 设置排序方式向.
     *
     * @param order
     *            可选值为desc或asc,多个排序字段时用','分隔.
     */
    public void setOrder(final String order)
    {
        String lowcaseOrder = StringUtils.lowerCase(order);

        String[] orders = StringUtils.split(lowcaseOrder, ',');
        for (String orderStr : orders) {
            if (!StringUtils.equals(DESC, orderStr) && !StringUtils.equals(ASC, orderStr)) {// 检查order字符串的合法值
                throw new IllegalArgumentException("排序方向" + orderStr + "不是合法值");
            }
        }

        this.order = lowcaseOrder;
    }

    /**
     * 返回Page对象自身的setOrder函数,可用于连续设置。
     */
    public Page<T> order(final String theOrder)
    {
        setOrder(theOrder);
        return this;
    }

    /**
     * 是否已设置排序字段,无默认值.
     */
    public boolean isOrderBySetted()
    {
        return (StringUtils.isNotBlank(orderBy) && StringUtils.isNotBlank(order));
    }

    /**
     * 获得查询对象时是否先自动执行count查询获取总记录数, 默认为false.
     */
    public boolean isAutoCount()
    {
        return autoCount;
    }

    /**
     * 设置查询对象时是否自动先执行count查询获取总记录数.
     */
    public void setAutoCount(final boolean autoCount)
    {
        this.autoCount = autoCount;
    }

    /**
     * 返回Page对象自身的setAutoCount函数,可用于连续设置。
     */
    public Page<T> autoCount(final boolean theAutoCount)
    {
        setAutoCount(theAutoCount);
        return this;
    }

    // -- 访问查询结果函数 --//

    /**
     * 获得页内的记录列表.
     */
    public List<T> getResult()
    {
        return result;
    }

    /**
     * 设置页内的记录列表.
     */
    public void setResult(final List<T> result)
    {
        this.result = result;
    }

    /**
     * 获得总记录数, 默认值为-1.
     */
    public long getTotalCount()
    {
        return totalCount;
    }

    /**
     * 设置总记录数.
     */
    public void setTotalCount(final long totalCount)
    {
        this.totalCount = totalCount;
    }

    /**
     * 根据pageSize与totalCount计算总页数, 默认值为-1.
     */
    public long getTotalPages()
    {
        if (totalCount < 0)
            return 1;

        long count = totalCount / pageSize;

        if (totalCount % pageSize > 0)
            count++;
        return count;
    }

    /**
     * 是否还有下一页.
     */
    public boolean isHasNext()
    {
        return (pageNo + 1 <= getTotalPages());
    }

    /**
     * 取得下页的页号, 序号从1开始. 当前页为尾页时仍返回尾页序号.
     */
    public int getNextPage()
    {
        if (isHasNext())
            return pageNo + 1;
        else
            return pageNo;
    }

    /**
     * 是否还有上一页.
     */
    public boolean isHasPre()
    {
        return (pageNo - 1 >= 1);
    }

    /**
     * 取得上页的页号, 序号从1开始. 当前页为首页时返回首页序号.
     */
    public int getPrePage()
    {
        if (isHasPre())
            return pageNo - 1;
        else
            return pageNo;
    }

    public long getBegin()
    {
        return Math.max(1, getPageNo() - pageSize / 2);
    }

    public long getEnd()
    {
        return getTotalPages();
    }
}

 

分页初始化(包括参数变化)

package sedion.jeffli.wmuitp.util;

import javax.servlet.http.HttpServletRequest;

import org.apache.commons.lang3.StringUtils;

import com.sun.org.apache.xml.internal.resolver.helpers.PublicId;

import sedion.jeffli.wmuitp.entity.SubjectInfor;

/**
 * 分页工具
 *
 */
public class PageUtil {

    public static int PAGE_SIZE             = 20;
    public static int MAX_SIZE              = 9999;

    public static final String PAGE_NUM_STR = "pageNum";

    /**
     * 初始化分页
     * @param page        page对象
     * @param request     请求体
     * @return
     */
    public static int[] init(Page<?> page, HttpServletRequest request) {

        int pageNum = Integer.parseInt(StringUtils.defaultIfBlank(request.getParameter(PAGE_NUM_STR), "1"));

        page.setPageNo(Integer.valueOf(pageNum));
        page.setPageSize(page.getPageSize());

        int firstResult = page.getFirst() - 1;
        int maxResults = page.getPageSize();

        return new int[] { firstResult, maxResults };
    }
}

#这里我们用request.getParameter(PAGE_NUM_STR) 获取分页操作时改变的字段.这样不必要每次都在Controller上附带参数了.

 

页面端:

<form id="pagerForm" method="post" action="${ctx}/subjectInfor/subjectInfors">
        <input type="hidden" name="pageNum"     value=${page.getPageNo()} />
        <input type="hidden" name="numPerPage"     value=${page.getPageSize()} />
    </form>
    <div class="panelBar">
        <div class="pages">
            <span>显示</span>
            <select class="combox" name="numPerPage" onchange="navTabPageBreak({numPerPage:this.value})">
                <option value="20"     <#if numPerPage == 20>    selected</#if>>20    </option>
                <option value="50"     <#if numPerPage == 50>    selected</#if>>50    </option>
                <option value="100" <#if numPerPage == 100>    selected</#if>>100    </option>
                <option value="200" <#if numPerPage == 200>    selected</#if>>200    </option>
            </select>
            <span>条,共${page.getTotalCount()}条</span>
        </div>
    <div class="pagination" totalCount=${page.getTotalCount()} numPerPage=${page.getPageSize()} pageNumShown="10" currentPage=${page.getPageNo()}></div>

 

然后到Controller层:

@RequestMapping(value = "/subjectInfors")
    public ModelAndView subjectInfos()
    {
        ModelAndView mav = new ModelAndView(SubjectInforWebConstant.getSubjectInforListView());

        try {

            Page<SubjectInfor> page = new Page<>(PageUtil.PAGE_SIZE);
            int[] pageParams = PageUtil.init(page,request);//分页初始化
            subjectInforService.getSubjectInforsPages(page, pageParams);

            mav.addObject(MainWebConstant.getPage(), page);

        } catch (Exception e) {
            e.printStackTrace();
        }

        return mav;
    }

调用Service层:

@Override
    public List<SubjectInfor> getSubjectInforsPages(Page<SubjectInfor> page, int[] pageParams)
    {
        List<SubjectInfor> results = new ArrayList<>();

        StringBuffer resultsHQL = new StringBuffer(All_SUBJECT_INFORS);

        try
        {
            results = subjectInforDAO.findByPage(resultsHQL.toString(), pageParams[0], pageParams[1]);

            page.setTotalCount(subjectInforDAO.getCount(resultsHQL.toString()));
            page.setResult(results);

        } catch (Exception e)
        {
            e.printStackTrace();
        }

        return results;
    }

 

调用DAO层:

/**
     * find entity-s of database by hql
     * --------------------------------------------------------
     * @param(String)     hql
     * @param(String)     offset        当前标识
     * @param(String)     pageSize    分页大小
     * @return            null/List<T>
     */
    @SuppressWarnings("unchecked")
    public List<T> findByPage(String hql, int offset, int pageSize)
    {
        if (hql == null)
        {
            return new ArrayList<T>();
        }
        Query query = createQuery(hql);
        if (!(offset == 0 && pageSize == 0))
        {
            query.setFirstResult(offset).setMaxResults(pageSize);
        }
        if (query.list() != null)
            return query.list();
        else
            return null;

    }

实现的效果图:

#这样分页就简简单单实现了.

 

时间: 2024-11-03 05:29:13

数据量你造吗-JAVA分页的相关文章

大数据量下的分页

分页|数据 对于非常大的数据模型而言,分页检索时,每次都加载整个数据源非常浪费.通常的选择是检索页面大小的块区的数据,而非检索所有的数据,然后单步执行当前行. 本文演示ASP.net的DataGrid和Sql Server 实现大数据量下的分页,为了便于实现演示,数据表采用了Northwind数据库的Orders表(830条记录). 如果数据表中有唯一的自增索引,并且这个字段没有出现断号现象.检索页面大小的块区数据就非常简单了.通过简单的Sql语句就可以实现这个功能:select * from

MySQL大数据量时提高分页效率

我的这段代码是大数据量时提高分页的效率的测试代码 --提高分页效率:实现分页时只读取显示数据,需要先在数据库创建数据库"TestForPaging" use TestForPaging go --创建表SomeData create table SomeData ( id int primary key, name varchar(30) null, description text ) go --插入数据 insert into SomeData values(1,'num1','第

ASP.NET 2.0数据教程之二十五:大数据量时提高分页的效率

返回"ASP.NET 2.0数据教程目录" 如我们在之前的教程里讨论的那样,分页可以通过两种方法来实现: 默 认分页– 你仅仅只用选中data Web control的智能标签的Enable Paging ; 然而,当你浏览页面的时候,虽然你看到的只是一小部分数据,ObjectDataSource 还是会每次都读取所有数据 自定义分页– 通过只从数据库读取用户 需要浏览的那部分数据,提高了性能.显然这种方法需要你做更多的工作. 默认的分页功能非常吸引人,因为你只需要选中一个checkb

在ASP.NET 2.0中操作数据之二十五:大数据量时提高分页的效率_自学过程

导言 如我们在之前的教程里讨论的那样,分页可以通过两种方法来实现: 1.默认分页– 你仅仅只用选中data Web control的 智能标签的Enable Paging ; 然而,当你浏览页面的时候,虽然你看到的只是一小部分数据,ObjectDataSource 还是会每次都读取所有数据 2.自定义分页– 通过只从数据库读取用户需要浏览的那部分数据,提高了性能. 显然这种方法需要你做更多的工作. 默认的分页功能非常吸引人,因为你只需要选中一个checkbox就可以完成了.但是它每次都读取所有的

大数据量时提高分页的效率_数据库其它

如我们在之前的教程里讨论的那样,分页可以通过两种方法来实现: 默认分页– 你仅仅只用选中data Web control的 智能标签的Enable Paging ; 然而,当你浏览页面的时候,虽然你看到的只是一小部分数据,ObjectDataSource 还是会每次都读取所有数据 自定义分页– 通过只从数据库读取用户需要浏览的那部分数据,提高了性能. 显然这种方法需要你做更多的工作. 默认的分页功能非常吸引人,因为你只需要选中一个checkbox就可以完成了.但是它每次都读取所有的数据,这种方式

SQL2005 大数据量检索的分页_mssql2005

@StartIndex为当前页起始序号,@EndIndex为当前页结束记录序号,可以直接作为参数输入,也可以通过输入PageSize和PageIndex计算得出 复制代码 代码如下: select * from ( select *,row_number() over(order by OrderColumn) as orderindex from TableName ) as a where a.orderindex between @StartIndex and @EndIndex

数据库-sqlserver大数据量用like

问题描述 sqlserver大数据量用like 现在我有一个数据库表,数据量大概是300W,还在不停的添加,其中有一个查询需要用到模糊查询, 如果用select Cs_Id,Cs_Content from Customer_Service where Cs_Content like '%关键字%'的话效率很低,而且如果同时查询的人多会影响整个数据库的性能,我也想过用全文索引,但是全文索引的分词效果很差,有时候需要查询的数据查询不出来,有没有什么好的优化方法?感激不尽 解决方案 自己先分词(比如说

java map中写入的数据量大,入库也慢导致浏览器假死

问题描述 java map中写入的数据量大,入库也慢导致浏览器假死 由于前台要选中8000行左右的记录,提交后写入到map中,然后再从map中取出后插入到相应的表中,这时非常费时.目前插入操作也是指提交,但是提交后,目前浏览器经常会碰到假死的现象,大家有好的办法解决吗? 解决方案 你的设计有问题,批量选择,在界面上应该提供单独的设计,不是展示全部8000的记录,而是允许用户根据字段的范围来选择,界面上用可以懒惰加载和预览的方式呈现数据. 解决方案二: 数据要进行分页操作,分批插入,分批显示 解决

mysql limit大数据量分页优化方法

Mysql的优化是非常重要的.其他最常用也最需要优化的就是limit.Mysql的limit给分页带来了极大的方便,但数据量一大的时候,limit的性能就急剧下降. 同样是取10条数据 select * from yanxue8_visit limit 10000,10 和 select * from yanxue8_visit limit 0,10 就不是一个数量级别的. 网上也很多关于limit的五条优化准则,都是翻译自Mysql手册,虽然正确但不实用.今天发现一篇文章写了些关于limit优