Linux中国  设为主页
 收藏本站
 
当前位置: > 首页 ->数据库应用 ->其他数据库 ->海量数据库的查询优化及分页算法方案
  相关分类: 
Access
DB2
Mysql
Oracle
PostgreSQL
SQL Server
Sybase
其他数据库
  站内搜索: 
热门文章排行
热门文章排行 数据库连接字符串大全(06-03)
海量数据库的查询优化及分页算法方案(04-23)
sql年月日计算方法(06-03)
有关 Eclipse 运行命令行参数大全 (04-23)
sql 经典语句(06-03)
精采文章排行
精采文章排行 分析数据库备份过程中九种易出现的情(06-29)
第七届Teradata数据仓库峰会在上海召(06-29)
SQL语句游标For.Loop与Open.Close比(06-29)
渗透测试中攻与守之数据库系统渗透简(06-29)
容灾可捍卫数据安全 确保信息即时恢(06-29)
  ·罗维数据库营销的网络化 改善客户体验 ·精华推荐 数据库系统专用词汇集锦之二 ·轻松七个步骤帮助你来顺利开发数据仓库 ·SQL语句基础学习 帮你明了数值数据类型 ·SQL语句基础学习 从子表里如何删除数据 ·SQL语句基础学习 子选择如何来合并查询 ·逐行扫描 为你讲解几个基本SQLPLUS命令 ·精华推荐 数据库系统专用词汇集锦之一 ·数据库基础知识帮你分析何为ASP数据库

海量数据库的查询优化及分页算法方案

作者:Webmaster   来源:csdn    点击:   日期:2007-04-23 [收藏] [投稿]

  IE是否经常中毒?推荐您

随着“金盾工程”建设的逐步深入和公安信息化的高速发展,公安计算机应用系统被广泛应用在各警种、各部门。与此同时,应用系统体系的核心、系统数据的存放地――数据库也随着实际应用而急剧膨胀,一些大规模的系统,如人口系统的数据甚至超过了1000万条,可谓海量。那么,怎么样实现快速地从这些超大容量的数据库中提取数据(查询)、分析、统计以及提取数据后进行数据分页已成为各地系统管理员和数据库管理员亟待解决的难题。

在以下的文章中,我将以“办公自动化”系统为例,探讨怎么样在有着1000万条数据的MS SQL SERVER数据库中实现快速的数据提取和数据分页。以下代码说明了我们实例中数据库的“红头文件”一表的部分数据结构:

CREATE TABLE [dbo].[TGongwen] (    --TGongwen是红头文件表名
   [Gid] [int] IDENTITY (1, 1) NOT NULL ,
--本表的id号,也是主键
   [title] [varchar] (80) COLLATE Chinese_PRC_CI_AS NULL ,  
--红头文件的标题
   [fariqi] [datetime] NULL ,
--发布日期
   [neibuYonghu] [varchar] (70) COLLATE Chinese_PRC_CI_AS NULL ,
--发布用户
   [reader] [varchar] (900) COLLATE Chinese_PRC_CI_AS NULL ,
--需要浏览的用户。每个用户中间用分隔符“,”分开
) ON [PRIMARY] TEXTIMAGE_ON [PRIMARY]
GO

下面,我们来往数据库中添加1000万条数据:

declare @i int
set @i=1
while @i<=250000
begin
    insert into Tgongwen(fariqi,neibuyonghu,reader,title) values
('2004-2-5','通信科','通信科,办公室,王局长,刘局长,张局长,admin,
刑侦支队,特勤支队,交巡警支队,经侦支队,户政科,治安支队,外事科',
'这是最先的25万条记录')
    set @i=@i+1
end
GO

declare @i int
set @i=1
while @i<=250000
begin
    insert into Tgongwen(fariqi,neibuyonghu,reader,title) values
('2004-9-16','办公室','办公室,通信科,王局长,刘局长,张局长,admin,
刑侦支队,特勤支队,交巡警支队,经侦支队,户政科,外事科',
'这是中间的25万条记录')
    set @i=@i+1
end
GO

declare @h int
set @h=1
while @h<=100
begin
declare @i int
set @i=2002
while @i<=2003
begin
declare @j int
        set @j=0
        while @j<50
            begin
declare @k int
            set @k=0
            while @k<50
            begin
    insert into Tgongwen(fariqi,neibuyonghu,reader,title) values
(cast(@i as varchar(4))+'-8-15 3:'+cast(@j as varchar(2))+':
'+cast(@j as varchar(2)),'通信科','办公室,通信科,王局长,刘局长,
张局长,admin,刑侦支队,特勤支队,交巡警支队,经侦支队,户政科,外事科',
'这是最后的50万条记录')

            set @k=@k+1
            end
set @j=@j+1
        end
set @i=@i+1
end
set @h=@h+1
end
GO

declare @i int
set @i=1
while @i<=9000000
begin
    insert into Tgongwen(fariqi,neibuyonghu,reader,title) values
('2004-5-5','通信科','通信科,办公室,王局长,刘局长,张局长,admin,
刑侦支队,特勤支队,交巡警支队,经侦支队,户政科,治安支队,外事科',
'这是最后添加的900万条记录')
    set @i=@i+1000000
end
GO

通过以上语句,我们创建了25万条由通信科于2004年2月5日发布的记录,25万条由办公室于2004年9月6日发布的记录,2002年和2003年各100个2500条相同日期、不同分秒的由通信科发布的记录(共50万条),还有由通信科于2004年5月5日发布的900万条记录,合计1000万条。

 如果您对本文有任何疑问或者建议,请到讨论区发表您的意见: >> 论坛入口 <<

上一页12 3 4 5 6 7 8 9 10 11 下一页

上一篇:数据库输出HTML格式报表的测试简介   下一篇:Paradox的数据表损坏后怎么样来修复
文章评论】 【收藏本文】 【推荐好友】 【打印本文】 【我要投稿】 【论坛讨论

   相关文章:
·精华推荐 数据库系统专用词汇集锦之三

   文章评论:(1条)
  
 请留名: 匿名评论   点击查看所有评论 论坛讨论
 

 声明:刊登此文章是为了传递更多信息,文章内容仅供参考,转载请注明出处。