menu

秋梦无痕

一场秋雨无梦痕,春夜清风冻煞人。冬来冷水寒似铁,夏至京北蟑满城。

Avatar

DataGrid分页与优化

ASP.NET中利用DataGrid的自定义分页功能和存储过程结合实现高效分页
from: http://dev.csdn.net/article/33/33643.shtm

ASP.Net中的DataGrid有内置分页功能, 但是它的默认的分页方式效率是很低的,特别是在数据量很大的时候,用它内置的分页功能几乎是不可能的事,因为它会把所有的数据从数据库读出来再进行分页, 这种只选取了一小部分而丢掉大部分的方法是不可去取的.

在最进的一个项目中因为一个管理页面要管理的数据量非常大,所以必须分页显示,并且不能用DataGrid的内置分页功能,于是自己实现分页. 下面介绍一下我在项目中用到的分页方法.

当然显示控件还是用DataGrid的, 因为数据绑定很方便^_^.

要保证不传输冗余的数据,那么必须在数据库中数据读取时实现分页, 数据库的分页操作可以放在存储过程中. 看了CSDN的一篇Blog中讲了一个百万级数据分页的存储过程的实现(http://blog.csdn.net/wellknow/posts/55167.aspx),他的这个方法可以根据不同情况进行适当的优化), 根据他的方法,这里实现一个简单的SQL语句来实现这里分页需要的存储过程。

create procedure ListProduct (
@PageIndex int, -- 分页后需要页的序号
@PageSize int, -- 一页的大小
@ConditionSQL – 查询条件的SQL语句
) AS … 具体代码就不写了(可以参考上面的链接).

具体的SQL语句如下:

SELECT TOP 100 * FROM (select * from product where productid<200000) T WHERE T.productid NOT IN (SELECT TOP 900 productid FROM (select productid from product where productid<200000) T1 ORDER BY T1.productid asc) ORDER BY productid asc

这条语句的 从总的商品(30万)中取出productid<200000(共20万),再按每页100的大小分页,然后取出第10页.

Public DataTable ListProduct(int pageIndex, int pageSize) {
//ADO.net从数据库中取出数据的代码就略过^_^.
}

用上面的存储过程读出的数据在DataGrid里面分页, 必须把DataGrid的AllowPaging和AllowCustomPaging设置为true

protected System.Web.UI.WebControls.DataGrid ProductGrid;
ProductGrid.AllowPaging = true;
ProductGrid.AllowCustomPaging = true;

然后在设置要显示的一页的大小

ProductGrid.PageSize = 100; // 在显示的时候依据实际的数据显示。

设置一页大小后,如果要让DataGrid实际分出页数来,还必须设置

ProductGrid.VirtualItemCount = GetProductCount() ; // GetProductCount() 的功能是获取满足条件的产品数目, 这里的条件就是productid<200000. 设置这项属性后,那么这个DataGrid的页数就是

VirtualItemCount/PageSize, 也就是PageCount的值. 不能对PageCount直接赋值,因为他是只读的属性.

这些属性设置好后再绑定数据:

ProductGrid.DataSource = ListProduct(1, ProductGrid.PageSize); // 在Page_Load里面 pageIndex为1,记住判断IsPostBack,在IsPostBack为false时执行这些代码
ProductGrid.DataBind();

这样数据绑定后就可以看到具有分页模样的页面了.但是还不能真正的分页.要实现真正的分页,还必须实现下面的功能.

处理DataGrid的PageIndexChanged事件(处理用户新选中某页时的事件)

private void ProductGrid_PageIndexChanged(object source, System.Web.UI.WebControls.DataGridPageChangedEventArgs e) {
// 如果在存储过程分页功能中用1表示第一页的序号的话那么这里必须用e.NewPageIndex+1作为pageIndex(如果选择了DataGrid上页号为3的页,那么e.NewPageIndex就为2), 否则的话直接用e.NewPageIndex就可以了
ProductGrid.DataSource = ListProduct(e.NewPageIndex+1, ProductGrid.PageSize); // 从数据库中读取新的数据
ProductGrid.DataBind();
// 设置当前的Page序号值, 如果不设置的话它是不会变得, 这样会给用户造成误解,以为所有页的数据相同。
ProductGrid.CurrentPageIndex =e.NewPageIndex;
}

如果你处理了DataGrid的ItemCommand的事件的话,必须在ItemCommand事件处理代码前面加上这些代码:

if (e.Item.ItemType == ListItemType.Pager) {
return;
}

因为当PageIndexChanged事件激发,也就是用户选则了另外一页时会先激发ItemCommand事件,如果不这样处理的话,可能会遇到一些意想不到的情况(如果你确实需要的话也可以上面这段代码,不过最好实际测试一下)。

整个过程完成后,再次浏览页面,觉得速度真是快多了。

运行环境:
WinXP Pro SP1, SQLServer 2000, .Net Framework 1.1

附:上文中提到的存储过程的实现:
==========================================================
http://www.delphibbs.com/delphibbs/dispq.asp?lid=1083587
by yysun@大富翁[www.delphibbs.com]

CREATE PROCEDURE usp_speed1
@nextid int, @counter int
AS
set nocount on
create table #t ( rid int )
declare AA insensitive scroll cursor for
select UserId from tblUser order by UserId for read only
open AA
fetch absolute @nextid from AA into @nextid
while @counter>0 begin fetch next from AA into @nextid
if @@fetch_status=0 insert #t (rid) values (@nextid)
set @counter = @counter-1
end
close AA
deallocate AA
select rid as UserId from #t
GO
==========================================================
CREATE PROCEDURE usp_speed2
@PageNo int, @PageSize int
AS
SET NOCOUNT ON
CREATE TABLE #Temp (
Id int IDENTITY primary key,
rid int
)
declare @MaxGet int
set @MaxGet=@PageSize*@PageNo
SET ROWCOUNT @MaxGet;

INSERT INTO #Temp (rid) SELECT UserId FROM tblUser ORDER BY UserId
SELECT rid as UserId FROM #Temp
WHERE Id>@MaxGet-@PageSize
GO
==========================================================
CREATE PROCEDURE usp_speed3
@nextid int, @pagesize int
AS
set nocount on
declare @sql nvarchar(2000)

set @sql=N'select top '+convert(varchar(12),@pagesize)+
' UserId from tblUser where UserId not in (select top ' + convert(varchar(12),@nextid) +
' UserId from tblUser order by userId) order by userId'
exec sp_executesql @sql
GO
==========================================================
usp_speed1 是俄国人的老方法(用 cursor),
usp_speed2 是yysun改进后的方法(用 identity),
usp_speed3 是俄国人的新方法(用 not in)。

可不能想当然,那个用 cursor 的办法不行的。下面是大致的测试结果 (1M记录,单位秒)
页码 usp_speed1 usp_speed2 usp_speed3
10 10 0. 0.
100 10 0. 0.
1000 10 0. 0.
10000 10 1. 0.
20000 10 7 1
200000 10 18 1
(0. 表示 < 1 秒)
==========================================================
CREATE PROCEDURE usp_GetSomethingList @PageNo int, @PageSize int AS
SET NOCOUNT ON
CREATE TABLE #Temp (
Id int IDENTITY primary key,
rid int
)
declare @MaxGet int
set @MaxGet=@PageSize*@PageNo
SET ROWCOUNT @MaxGet;

INSERT INTO #Temp (rid) SELECT SomethingId FROM tblSomething ORDER BY SomethingId
SELECT Something.* FROM #Temp a right Join tblSomething Something on a.rid=Something.SomethingId
WHERE a.Id>@MaxGet-@PageSize
ORDER BY SomethingId
GO
==========================================================
set nocount on declare
@nextid int, @counter int
set @counter=5
create table #t ( rid int )
declare AA insensitive scroll cursor for select UserId from tblUser order by UserId for read only
open AA
fetch absolute 2 from AA into @nextid
while @counter>0 begin
fetch next from AA into @nextid
if @@fetch_status=0 insert #t (rid) values (@nextid)
set @counter = @counter-1
end
close AA
deallocate AA
select * from tblUser u inner join #t t on UserId=t.rid order by UserId
drop table #t
==========================================================
djflying@大富翁
select * from
(select top 5 * from orders where orderid>10275 order by orderid) as A
union
select * from
(select top 5 * from orders where orderid<=10275 order by orderid desc) as B
order by orderid
==========================================================
soul 的算法:
SELECT ID FROM Letters WHERE id in
(SELECT TOP 20 ID FROM
(SELECT TOP 40000 * FROM Letters
WHERE status<2 and parent=0
ORDER BY [datetime] DESC) as t
ORDER BY [datetime] )
ORDER BY [datetime] DESC

yysun的算法:
select top 20 Id from letters where Id not in
(select top 39980 Id from letters
where status<2 and parent=0
order by [datetime] desc)
and (status<2 and parent=0)
order by [datetime] desc
==========================================================

评论已关闭