在实际中我们经常遇到表里的记录数非常庞大(数万至数百万),而一次只显示几十条数据的情况,如果我们直接用下面的SQL语句查询并填充到DataTable的话,将是一个非常恐怖的事情(假设UserInfo有几百万用户数据):
Select * from UserInfo
在csdn论坛里我曾经就见过有一位朋友一张表里有8万条左右的记录,他每次都是将全部数据填充到DataTable,然后在循环中决定显示哪些数据,最后他在论坛上求助,说那样做的效果太慢了,当时把我和其它几个回帖的朋友吓懵了。其实他这种情况就应该用分页查询。
分页查询就是根据需要每次只返回所需要的数据,而不用每次都从数据库中全部把数据提取出来,这样可以降低程序与数据库之间的数据传送量,并且还可以提高程序的性能。
一般来说我们在数据量大的情况下总是会分页显示(谁也不会一下子将几万条数据全部一次性显示给用户),这样决定我们返回的查询结果集的参数有两个:当前显示的页数pageIndex和每页显示的记录条数size。
这里来举例在SQL Server中我们如何写分页查询的SQL语句,假设我们按照UserID字段降序查询,每页显示5条记录。
下面是按照UserID字段降序查询全部所有用户的截图(出于某些原因,我把前面的14条记录删除掉了):
那么第一页显示的应该是UserID最小的前5位用户。查询第一页要显示的用户信息应该是:
第一页我们可以按照对UserID降序查询,并利用top 5取出前5条记录。可是第二页的SQL语句我们该怎么写呢?下面的语句是否正确呢?
select top 10 * from UserInfo order by UserID asc
上面的语句肯定不正确!因为top 10将会取到前10条记录,而我们每页只显示5条记录,第二页显示的数据应该是按照UserID降序排列之后第6条到10条记录,有没有办法做到这一点呢?有两种办法:第一种就是前面我所提到的一次性将全部数据提取并填充到DataTable中,然后在for循环中通过i从5开始,并且i小于10(因为在C#中所有的集合下标都是从0开始的,第六条记录的下标就是5)这种方法显示5条数据,但是这种做法的缺点我在前面也提到了。第二种办法就是在数据库中过滤。我们通过分析发现,第二页要显示的记录的UserID字段有以下特点:它们是紧跟这第一页显示的记录之后的5条记录,也就是通过对UserID字段进行降序排列时,它们是除了第一页数据之后的5条记录,也就是它们的UserID不在第一页的UserID之中,在SQL语句有一个not in这个正好可以排上用场。
首先我们按照对UserID进行降序排序,查询出前面第一页使用的数据的UserID,SQL语句及执行结果如下:
然后我们再按照对UserID进行降序查询,并且UserID不在第一页所使用的数据集中,使用的SQL语句及查询结果如下:
因为我们的数据UserID是从14开始,所以UserID在14至19的记录在第一页显示,UserID为20至24的记录在第二页显示,UserID为25至29的记录在第三页显示……依此类推,如果每页显示5条记录,那么第n页显示的数据记录的公式应该是:
select top 5 * from UserInfo where UserId not in
(select top (n-1)*5 UserID from UserInfo order by UserID asc)
order by UserID asc
需要注意的是:上面的查询,两次都是对UserID进行排序,并且都是降序,也就是说我们分页查询的时候写这种SQL语句的时候一定要都是对同一字段进行相同方式(asc或desc)的排序查询,这样查询的结果才会正确。
还有一点,如何查询数据库满足条件的记录条数呢?
还记得我讲过Command对象的ExecuteScalar()方法吧,这个方法就是返回查询结果的第一行第一列的。
下面是例子:
01.//实例化Connection对象
02.SqlConnection connection = new SqlConnection("Data Source=(local);Initial Catalog=AspNetStudy;Persist Security Info=True;User ID=sa;Password=sa");
03.//实例化Command对象
04. SqlCommand command = new SqlCommand("select count(1) as 男性人数 from UserInfo where sex=1", connection);
05.//打开Connection对象
06. connection.Open();
07. //执行SQL语句
08.//得到第一行第一列的结果,这里是所有用户总数
09. int count = int.Parse(command.ExecuteScalar().ToString());
10. //关闭Connection对象
11. connection.Close();
最后一点,如果计算总页数的问题。假如我们有20条记录,每页显示5条,毫无疑问总共分4页显示。如果是21条记录呢?答案是分5页显示,尽管最后一页只有一条记录,但是还是要显示的。这里也有一个公式,假如总共有m条记录,每页显示n条记录(这里m,n都是大于0的整数)那么需要显示全部记录所用到的页数page为:
01.page=(m%n)==0?(m/n):(m/n+1);