空间数据库采用什么技术来nginx实现百万并发并发控制

SDE - 空间数据库引擎_多可文档管理系统
<div style="display:" title="企业网盘系统,
三分钟完成企业内部部署,更安全,更高效
& SDE - 空间数据库引擎
SDE - 空间数据库引擎
文档管理软件,文档管理系统,知识管理系统,档案管理系统的技术资料:
经历了二十多年的发展,GIS已从小规模的工程项目组,进入了分布式的部门、企业GIS阶段,并正在俏然走向社会GIS阶段。随着计算机网络通讯,各种媒体技术特别是信息系统技术的迅猛发展,GIS技术、GIS应用服务系统及相应设施必然日益渗透和走入社会生活的各个部门、角落,甚至家庭。各种服务于不同目的的实用GIS系统将成为各阶层、部门,及个人生活中日益不可缺少的重要设施。可以想象,这种地理信息系统的主要特点是存贮和管理极大数量的空间信息,并应能提供大量用户通过网络对其进行并发查询访问的快速响应服务,例如某一城市或全国范围的通用房地产信息系统等。
为了满足上述系统的需求,ESRI最近推出了全新的空间数据库管理软件SDE——Spatial Database Engine。用以支持超大型空间数据库管理以及在网络环境中对多用户并发空间数据访问的快速响应方面的应用(Mission Critical Application)。
SDE采用真正的客户/服务器体系结构的,是高性能、面向目标的空间数据库管理系统,并提供一系列用于管理和访问大型分布式的地理数据的功能,SDE为系统开发者和集成商提供了一个高效能分布式和多用户的实时应用系统开发工具,它由一个多线程的空间数据库服务器和客户应用程序接口(API)组成。
SDE具有如下的主要特点:
支持超大型数据集
高性能的空间数据提取
灵活、高性能的空间数据搜索
专门为多用户,分布式环境设计
开放的体系结构
逻辑上的无缝、连续的非瓦片式的空间目标数据模型
两阶段事物提交控制
支持多种硬件平台
具有有力而灵活的应用开发环境
完整灵活的安全控制机制
多用户并发查询的快速响应
前不久在澳大利亚对SDE进行了一次测试,300个用户在Windows NT平台上通过网络对管理1百多万个地理要素空间数据库的SDE进行并发查询访问,SDE对每个查询的最大响应时间均小于3秒。并证明用户数目的增加并不导致性能明显下降。
图一:用户数目的增加并不导致性能的下降
SDE的系统结构
SDE的体系结构是一种数据库的而不是GIS系统的体系结构,它使用关系型数据库来存贮和管理所有空间数据和属性数据。SDE是位于RDBMS上面一个层次的服务程序,为客户的请求提供空间数据的查询访问和分析服务。客户端对SDE所有功能访问都是通过应用程序接口(API)来完成,SDE应用程序接口提供给用户标准的空间查询和分析函数,以C语言函数库的形式存在。新版本的ArcView就嵌入了SDE API程序,使ArcView可被用来作为SDE的客户端产品,请求SDE服务器的服务。
图2:SDE 体系结构
SDE的处理模型
SDE采用真正的客户/服务器处理模型,每个客户发出的服务请求在服务器上都将引发一个独立的任务。
这种多线程的设计意味着SDE可以充分利用多CPU带来的高性能。SDE Server可运行在不同的Unix平台,Client和 Server进程的数据传输采用TCP/IP协议。当SDE的客户和服务器进程分别运行于异种机平台时,采用外部数据表示(XDR),来支持不同硬件平台数据格式。SDE将通过其自身的安全机制,监控所有进程的状态和连接,以保持系统的一致性。客户任务可运行于几乎目前所有PC和Unix平台如Windows、Windows NT、 Windows 95、Machintosh、 Solaris、HP-UX 、AIX、 Digital Unix等。
SDE的高性能
系统的整体性能和事务级的数据一致性是SDE设计的最为重要的目标。由于实时信息系统需要很高的性能,SDE最大限度地加速系统的响应,降低网络的传输量。SDE的体系结构强调了进程间的异步协处理的概念和技术。SDE Client和Server分别具有一个缓冲区,Client和Server之间完全通过这两个缓冲区传输请求和结果。Client程序发出请求后不是等待Server返回结果,而是继续向缓冲区中发出请求或从缓冲区中读出前面某次的请求结果,Client 和Server的请求和应答完全是并发和异步的。用户的应用可随需要动态地改变缓冲区的大小和性能,以进一步改进Client和Server的协调处理性能。有时,CPU密集的操作,如缓冲区的计算、多边形的叠加运算等,可由Client任务在本地机上完成,Server只负责从库中找到与本次运算有关的所有空间数据。这样可使Server避免大量的不必要的运算负担。这种任务的分配由SDE自动进行,对用户是透明的。
连续的空间目标数据库
实际上,目前所有的GIS为了组织和存贮大型空间数据,都将数据进行分幅存储和管理。当对跨图幅要素进行访问时,这种人为的分幅就大大地降低了响应速度。SDE则以完全连续的方式存贮数据,不论数据量多大都没有图幅系统和区块的概念。SDE数据库是真正意义上的连续和无缝,用户可自由地漫游整个数据库
空间目标数据模型
SDE采用空间目标的数据结构模型,地物要素用某一空间目标表示。SDE目前支持三类空间目标类和7种目标类型。空间目标可以是两维也可以是三维的。
1、点状目标类型
Point - 单一坐标的点,表示点要素位置如水井、控制点、水栓等
Point Cluster - 任意坐标点集合。用于加快数据访问速度。
例如高程控制点50米 - 100米之间用一个点群表示,一个磁盘访问操作即可调入。
2、线状目标类型
Spaghetti - N个点之间的连线
Linestring - N点之间的连线且不闭合和相交
Ring - N点之间的闭合连线
3、面状目标类型
Polygon
Donut Polygon - 多个不相交和相邻的多边形被另一个不同多边形包围的目标,用于表示有岛的湖泊等地物要素。
4、网状特征类型 - Network
Network由Linestring和Ring目标组成,如果某一空间要素被声明是Network类型,则SDE自动维护一个node-to-node表以用于网络分析功能。
快速的空间搜索
当人们使用地图的时候,最通常是在读图,实际上在判断各种地图要素的空间关系以找出想要得到地理系统和要素的空间信息,类似于这种读图的操作在计算机中表现为空间搜索操作。SDE支持多种空间搜索方式 ,空间关系被动态地判断无须预先在库中存贮要素的空间关系。
SDE系统的安全机制
在所有运行环境下SDE为用户提供三个层次的灵活的安全机制。第一层是在SDE Server的登录(Login)级别上实施的。当Client任务向SDE Server发请求之前,须在SDE Server上进行登录。SDE Server确认为合法用户后进入下一层安全机制。用户被确认是否有权使用它所需要的数据集。如果确认为有权使用,则这次请求就继承一个系统管理员为此用户设定的不同类型要素访问权限的位模(Mask),每种地物要素类型在数据集中都具有256个不同安全级别中的一个,用户访问请求的位模指明了对于哪类数据记录是可读、不可读或根本无权访问。
SDE的事物控制
SDE的两阶段事物提交控制使应用对空间数据的更新与数据库中的实际数据更新同步发生,如果对数据库的提交操作不成功,SDE再回退此事物。SDE提供了4个事物控制的函数:SE_start_trans(),SE_prepare_trans(),SE_commit_trans()和SE_rollback_trans()。
SDE的空间数据记录锁定
独立于RDBMS提供的记录锁定机制,SDE提供空间目标级的数据锁定,它支持三种锁定类型和两种锁定方式SDE系统管理员可以保证哪些用户有权更新那些数据,并能保证并发的更新操作不破坏库中数据的一致性。
多可文档管理系统特色
o 轻量级架构,自助型部署,三分钟完成
o TB级海量文档集中存储管理
o 文件加密存储、多硬盘支持
o LDAP、Windows AD域用户集成、RTX集成
o 先进的分组模式权限机制,确保文档安全
o 强大的全文检索支持毫秒级检索
o 支持超过500多种各种文档的在线预览
o OFFICE、PDF等在线预览,修改,协同工作
o 支持超大文件的自动上传、剪切板粘贴上传
o 文件在线修改、版本控制
o 文件审核机制,是工程文件管理更安全可靠
o 支持专业文档+图纸+图片的集中管理与搜索
o 10用户、1万文档免费版,无期限限制,无功能限制空间数据库版本控制技术及应用_百度文库
两大类热门资源免费畅读
续费一年阅读会员,立省24元!
空间数据库版本控制技术及应用
上传于||文档简介
&&空&#8203;间&#8203;数&#8203;据&#8203;库&#8203;版&#8203;本&#8203;控&#8203;制&#8203;技&#8203;术&#8203;及&#8203;应&#8203;用
阅读已结束,如果下载本文需要使用1下载券
想免费下载本文?
下载文档到电脑,查找使用更方便
还剩1页未读,继续阅读
你可能喜欢SQLServer优化资料整理SQLServer优化资料整理50种方法优化SQL Server数据库查询(有N多错别字)查询速度慢的原因很多,常见如下几种:    1、没有索引或者没有用到索引(这是查询慢最常见的问题,是程序设计的缺陷)    2、I/O吞吐量小,形成了瓶颈效应。    3、没有创建计算列导致查询不优化。    4、内存不足    5、网络速度慢    6、查询出的数据量过大(可以采用多次查询,其他的方法降低数据量)    7、锁或者死锁(这也是查询慢最常见的问题,是程序设计的缺陷)    8、sp_lock,sp_who,活动的用户查看,原因是读写竞争资源。    9、返回了不必要的行和列    10、查询语句不好,没有优化  可以通过如下方法来优化查询&:    1、把数据、日志、索引放到不同的I/O设备上,增加读取速度,以前可以将Tempdb应放在RAID0上,SQL2000不在支持。数据量(尺寸)越大,提高I/O越重要.    2、纵向、横向分割表,减少表的尺寸(sp_spaceuse)    3、升级硬件    4、根据查询条件,建立索引,优化索引、优化访问方式,限制结果集的数据量。注意填充因子要适当(最好是使用默认值0)。索引应该尽量小,使用字节数小的列建索引好(参照索引的创建),不要对有限的几个值的字段建单一索引如性别字段    5、提高网速;    6、扩大服务器的内存,Windows 2000和SQL server 2000能支持4-8G的内存。配置虚拟内存:虚拟内存大小应基于计算机上并发运行的服务进行配置。运行&Microsoft SQLServer? 2000&时,可考虑将虚拟内存大小设置为计算机中安装的物理内存的&1.5&倍。如果另外安装了全文检索功能,并打算运行&Microsoft&搜索服务以便执行全文索引和查询,可考虑:将虚拟内存大小配置为至少是计算机中安装的物理内存的&3&倍。将&SQL Server max server memory&服务器配置选项配置为物理内存的&1.5&倍(虚拟内存大小设置的一半)。    7、增加服务器&CPU个数;但是必须明白并行处理串行处理更需要资源例如内存。使用并行还是串行程是MsSQL自动评估选择的。单个任务分解成多个任务,就可以在处理器上运行。例如耽搁查询的排序、连接、扫描和GROUP BY字句同时执行,SQL SERVER根据系统的负载情况决定最优的并行等级,复杂的需要消耗大量的CPU的查询最适合并行处理。但是更新操作Update,Insert,&Delete还不能并行处理。    8、如果是使用like进行查询的话,简单的使用index是不行的,但是全文索引,耗空间。&like 'a%'&使用索引&like '%a'&不使用索引用&like '%a%'&查询时,查询耗时和字段值总长度成正比,所以不能用CHAR类型,而是VARCHAR。对于字段的值很长的建全文索引。    9、DB Server&和APPLication Server&分离;OLTP和OLAP分离    10、分布式分区视图可用于实现数据库服务器联合体。联合体是一组分开管理的服务器,但它们相互协作分担系统的处理负荷。这种通过分区数据形成数据库服务器联合体的机制能够扩大一组服务器,以支持大型的多层&Web&站点的处理需要。有关更多信息,参见设计联合数据库服务器。(参照SQL帮助文件'分区视图')    a、在实现分区视图之前,必须先水平分区表    b、在创建成员表后,在每个成员服务器上定义一个分布式分区视图,并且每个视图具有相同的名称。这样,引用分布式分区视图名的查询可以在任何一个成员服务器上运行。系统操作如同每个成员服务器上都有一个原始表的复本一样,但其实每个服务器上只有一个成员表和一个分布式分区视图。数据的位置对应用程序是透明的。    11、重建索引&DBCC REINDEX ,DBCCINDEXDEFRAG,收缩数据和日志&DBCC SHRINKDB,DBCC SHRINKFILE.&设置自动收缩日志.对于大的数据库不要设置数据库自动增长,它会降低服务器的性能。在T-sql的写法上有很大的讲究,下面列出常见的要点:首先,&DBMS处理查询计划的过程是这样的:    1、&查询语句的词法、语法检查    2、&将语句提交给DBMS的查询优化器    3、&优化器做代数优化和存取路径的优化    4、&由预编译模块生成查询规划    5、&然后在合适的时间提交给系统处理执行    6、&最后将执行结果返回给用户其次,看一下SQL SERVER的数据存放的结构:一个页面的大小为8K(8060)字节,8个页面为一个盘区,按照B树存放。    12、Commit和rollback的区别&Rollback:回滚所有的事物。&Commit:提交当前的事物.&没有必要在动态SQL里写事物,如果要写请写在外面如:&begin tran exec(@s) commit trans&或者将动态SQL&写成函数或者存储过程。    13、在查询Select语句中用Where字句限制返回的行数,避免表扫描,如果返回不必要的数据,浪费了服务器的I/O资源,加重了网络的负担降低性能。如果表很大,在表扫描的期间将表锁住,禁止其他的联接访问表,后果严重。    14、SQL的注释申明对执行没有任何影响  15、尽可能不使用光标,它占用大量的资源。如果需要row-by-row地执行,尽量采用非光标技术,如:在客户端循环,用临时表,Table变量,用子查询,用Case语句等等。游标可以按照它所支持的提取选项进行分类:&只进&必须按照从第一行到最后一行的顺序提取行。FETCH NEXT&是唯一允许的提取操作,也是默认方式。可滚动性可以在游标中任何地方随机提取任意行。游标的技术在SQL2000下变得功能很强大,他的目的是支持循环。有四个并发选项&READ_ONLY:不允许通过游标定位更新(Update),且在组成结果集的行中没有锁。&OPTIMISTIC WITH valueS:乐观并发控制是事务控制理论的一个标准部分。乐观并发控制用于这样的情形,即在打开游标及更新行的间隔中,只有很小的机会让第二个用户更新某一行。当某个游标以此选项打开时,没有锁控制其中的行,这将有助于最大化其处理能力。如果用户试图修改某一行,则此行的当前值会与最后一次提取此行时获取的值进行比较。如果任何值发生改变,则服务器就会知道其他人已更新了此行,并会返回一个错误。如果值是一样的,服务器就执行修改。选择这个并发选项&?OPTIMISTIC WITH ROW VERSIONING:此乐观并发控制选项基于行版本控制。使用行版本控制,其中的表必须具有某种版本标识符,服务器可用它来确定该行在读入游标后是否有所更改。在&SQL Server&中,这个性能由&timestamp&数据类型提供,它是一个二进制数字,表示数据库中更改的相对顺序。每个数据库都有一个全局当前时间戳值:@@DBTS。每次以任何方式更改带有&timestamp&列的行时,SQL Server&先在时间戳列中存储当前的&@@DBTS&值,然后增加&@@DBTS&的值。如果某&个表具有&timestamp&列,则时间戳会被记到行级。服务器就可以比较某行的当前时间戳值和上次提取时所存储的时间戳值,从而确定该行是否已更新。服务器不必比较所有列的值,只需比较&timestamp&列即可。如果应用程序对没有&timestamp&列的表要求基于行版本控制的乐观并发,则游标默认为基于数值的乐观并发控制。&SCROLL LOCKS&这个选项实现悲观并发控制。在悲观并发控制中,在把数据库的行读入游标结果集时,应用程序将试图锁定数据库行。在使用服务器游标时,将行读入游标时会在其上放置一个更新锁。如果在事务内打开游标,则该事务更新锁将一直保持到事务被提交或回滚;当提取下一行时,将除去游标锁。如果在事务外打开游标,则提取下一行时,锁就被丢弃。因此,每当用户需要完全的悲观并发控制时,游标都应在事务内打开。更新锁将阻止任何其它任务获取更新锁或排它锁,从而阻止其它任务更新该行。然而,更新锁并不阻止共享锁,所以它不会阻止其它任务读取行,除非第二个任务也在要求带更新锁的读取。滚动锁根据在游标定义的&Select&语句中指定的锁提示,这些游标并发选项可以生成滚动锁。滚动锁在提取时在每行上获取,并保持到下次提取或者游标关闭,以先发生者为准。下次提取时,服务器为新提取中的行获取滚动锁,并释放上次提取中行的滚动锁。滚动锁独立于事务锁,并可以保持到一个提交或回滚操作之后。如果提交时关闭游标的选项为关,则&COMMIT&语句并不关闭任何打开的游标,而且滚动锁被保留到提交之后,以维护对所提取数据的隔离。所获取滚动锁的类型取决于游标并发选项和游标&Select&语句中的锁提示。锁提示&只读&乐观数值&乐观行版本控制&锁定无提示&未锁定&未锁定&未锁定&更新&NOLOCK&未锁定未锁定未锁定&未锁定&HOLDLOCK&共享共享&共享&更新&UPDLOCK&错误&更新&更新&更新&TABLOCKX&错误&未锁定未锁定更新其它&未锁定&未锁定&未锁定&更新&*指定&NOLOCK&提示将使指定了该提示的表在游标内是只读的。    16、用Profiler来跟踪查询,得到查询所需的时间,找出SQL的问题所在;用索引优化器优化索引    17、注意UNion和UNion all&的区别。UNION all好    18、注意使用DISTINCT,在没有必要时不要用,它同UNION一样会使查询变慢。重复的记录在查询里是没有问题的    19、查询时不要返回不需要的行、列    20、用sp_configure 'querygovernor cost limit'或者SET QUERY_GOVERNOR_COST_LIMIT来限制查询消耗的资源。当评估查询消耗的资源超出限制时,服务器自动取消查询,在查询之前就扼杀掉。&SET LOCKTIME设置锁的时间    21、用select top 100 / 10Percent&来限制用户返回的行数或者SET ROWCOUNT来限制操作的行    22、在SQL2000以前,一般不要用如下的字句: "IS NULL", "&&","!=", "!&", "!&", "NOT","NOT EXISTS", "NOT IN", "NOT LIKE", and"LIKE '%500'",因为他们不走索引全是表扫描。也不要在Where字句中的列名加函数,如Convert,substring等,如果必须用函数的时候,创建计算列再创建索引来替代.还可以变通写法:WhereSUBSTRING(firstname,1,1) = 'm'改为Where firstnamelike 'm%'(索引扫描),一定要将函数和列名分开。并且索引不能建得太多和太大。NOT IN会多次扫描表,使用EXISTS、NOT EXISTS&,IN , LEFT OUTER JOIN&来替代,特别是左连接,而Exists比IN更快,最慢的是NOT操作.如果列的值含有空,以前它的索引不起作用,现在2000的优化器能够处理了。相同的是IS NULL,"NOT", "NOT EXISTS", "NOT IN"能优化她,而"&&"等还是不能优化,用不到索引。    23、使用Query Analyzer,查看SQL语句的查询计划和评估分析是否是优化的SQL。一般的20%的代码占据了80%的资源,我们优化的重点是这些慢的地方。    24、如果使用了IN或者OR等时发现查询没有走索引,使用显示申明指定索引:&Select * FROM PersonMember (INDEX =IX_Title) Where processid IN ('男','女')    25、将需要查询的结果预先计算好放在表中,查询的时候再Select。这在SQL7.0以前是最重要的手段。例如医院的住院费计算。    26、MIN()&和&MAX()能使用到合适的索引。    27、数据库有一个原则是代码离数据越近越好,所以优先选择Default,依次为Rules,Triggers, Constraint(约束如外健主健CheckUNIQUE&&,数据类型的最大长度等等都是约束),Procedure.这样不仅维护工作小,编写程序质量高,并且执行的速度快。    28、如果要插入大的二进制值到Image列,使用存储过程,千万不要用内嵌Insert来插入(不知JAVA是否)。因为这样应用程序首先将二进制值转换成字符串(尺寸是它的两倍),服务器受到字符后又将他转换成二进制值.存储过程就没有这些动作:&方法:Create procedurep_insert as insert into table(Fimage) values (@image),&在前台调用这个存储过程传入二进制参数,这样处理速度明显改善。    29、Between在某些时候比IN&速度更快,Between能够更快地根据索引找到范围。用查询优化器可见到差别。&select * fromchineseresume where title in ('男','女') Select * from chineseresume where between '男' and '女'&是一样的。由于in会在比较多次,所以有时会慢些。    30、在必要是对全局或者局部临时表创建索引,有时能够提高速度,但不是一定会这样,因为索引也耗费大量的资源。他的创建同是实际表一样。    31、不要建没有作用的事物例如产生报表时,浪费资源。只有在必要使用事物时使用它。    32、用OR的字句可以分解成多个查询,并且通过UNION&连接多个查询。他们的速度只同是否使用索引有关,如果查询需要用到联合索引,用UNION all执行的效率更高.多个OR的字句没有用到索引,改写成UNION的形式再试图与索引匹配。一个关键的问题是否用到索引。    &33、尽量少用视图,它的效率低。对视图操作比直接对表操作慢,可以用stored procedure来代替她。特别的是不要用视图嵌套,嵌套视图增加了寻找原始资料的难度。我们看视图的本质:它是存放在服务器上的被优化好了的已经产生了查询规划的SQL。对单个表检索数据时,不要使用指向多个表的视图,直接从表检索或者仅仅包含这个表的视图上读,否则增加了不必要的开销,查询受到干扰.为了加快视图的查询,MsSQL增加了视图索引的功能。    34、没有必要时不要用DISTINCT和ORDER BY,这些动作可以改在客户端执行。它们增加了额外的开销。这同UNION&和UNION ALL一样的道理。    select&top&20&panyname,comid,position,ad.referenceid,worklocation,&convert(varchar(10),ad.postDate,120)&as&postDate1,workyear,degreedescription&FROM&jobcn_PANYAD_query&ad&where&referenceID&in('JCNAD','JCNAD132168','JCNAD','JCNAD',  'JCNAD','JCNAD','JCNAD',  'JCNAD','JCNAD','JCNAD','JCNAD',  'JCNAD','JCNAD','JCNAD',  'JCNAD','JCNAD','JCNAD','JCNAD',  'JCNAD','JCNAD')&order&by&postdate&desc    35、在IN后面值的列表中,将出现最频繁的值放在最前面,出现得最少的放在最后面,减少判断的次数。    36、当用Select INTO时,它会锁住系统表(sysobjects,sysindexes等等),阻塞其他的连接的存取。创建临时表时用显示申明语句,而不是&select INTO. drop table t_lxh begintran select * into t_lxh from chineseresume where name = 'XYZ' --commit&在另一个连接中Select * from sysobjects可以看到&Select INTO&会锁住系统表,Create table&也会锁系统表(不管是临时表还是系统表)。所以千万不要在事物内使用它!!!这样的话如果是经常要用的临时表请使用实表,或者临时表变量。    37、一般在GROUP BY&个HAVING字句之前就能剔除多余的行,所以尽量不要用它们来做剔除行的工作。他们的执行顺序应该如下最优:select&的Where字句选择所有合适的行,Group By用来分组个统计行,Having字句用来剔除多余的分组。这样Group By&个Having的开销小,查询快.对于大的数据行进行分组和Having十分消耗资源。如果Group BY的目的不包括计算,只是分组,那么用Distinct更快    38、一次更新多条记录比分多次更新每次一条快,就是说批处理好    39、少用临时表,尽量用结果集和Table类性的变量来代替它,Table&类型的变量比临时表好    40、在SQL2000下,计算字段是可以索引的,需要满足的条件如下:    a、计算字段的表达是确定的    b、不能用在TEXT,Ntext,Image数据类型    c、必须配制如下选项&ANSI_NULLS = ON,ANSI_PADDINGS = ON, &&.    41、尽量将数据的处理工作放在服务器上,减少网络的开销,如使用存储过程。存储过程是编译好、优化过、并且被组织到一个执行规划里、且存储在数据库中的SQL语句,是控制流语言的集合,速度当然快。反复执行的动态SQL,可以使用临时存储过程,该过程(临时表)被放在Tempdb中。以前由于SQL SERVER对复杂的数学计算不支持,所以不得不将这个工作放在其他的层上而增加网络的开销。SQL2000支持UDFs,现在支持复杂的数学计算,函数的返回值不要太大,这样的开销很大。用户自定义函数象光标一样执行的消耗大量的资源,如果返回大的结果采用存储过程    42、不要在一句话里再三的使用相同的函数,浪费资源,将结果放在变量里再调用更快    43、Select COUNT(*)的效率教低,尽量变通他的写法,而EXISTS快.同时请注意区别:&select count(Field of null) from Table&和&select count(Field of NOT null) from Table&的返回值是不同的!!!    44、当服务器的内存够多时,配制线程数量&=&最大连接数+5,这样能发挥最大的效率;否则使用&配制线程数量&最大连接数启用SQL SERVER的线程池来解决,如果还是数量&=&最大连接数+5,严重的损害服务器的性能。    45、按照一定的次序来访问你的表。如果你先锁住表A,再锁住表B,那么在所有的存储过程中都要按照这个顺序来锁定它们。如果你(不经意的)某个存储过程中先锁定表B,再锁定表A,这可能就会导致一个死锁。如果锁定顺序没有被预先详细的设计好,死锁很难被发现    46、通过SQL ServerPerformance Monitor监视相应硬件的负载&Memory: Page Faults / sec计数器如果该值偶尔走高,表明当时有线程竞争内存。如果持续很高,则内存可能是瓶颈。  Process:    1、% DPC Time&指在范例间隔期间处理器用在缓延程序调用(DPC)接收和提供服务的百分比。(DPC&正在运行的为比标准间隔优先权低的间隔)。&由于&DPC&是以特权模式执行的,DPC&时间的百分比为特权时间百分比的一部分。这些时间单独计算并且不属于间隔计算总数的一部&分。这个总数显示了作为实例时间百分比的平均忙时。    2、%Processor Time计数器 如果该参数值持续超过95%,表明瓶颈是CPU。可以考虑增加一个处理器或换一个更快的处理器。    3、% Privileged Time&指非闲置处理器时间用于特权模式的百分比。(特权模式是为操作系统组件和操纵硬件驱动程序而设计的一种处理模式。它允许直接访问硬件和所有内存。另一种模式为用户模式,它是一种为应用程序、环境分系统和整数分系统设计的一种有限处理模式。操作系统将应用程序线程转换成特权模式以访问操作系统服务)。特权时间的&%&包括为间断和&DPC&提供服务的时间。特权时间比率高可能是由于失败设备产生的大数量的间隔而引起的。这个计数器将平均忙时作为样本时间的一部分显示。    4、% User Time表示耗费CPU的数据库操作,如排序,执行aggregate functions等。如果该值很高,可考虑增加索引,尽量使用简单的表联接,水平分割大表格等方法来降低该值。&Physical Disk: Curretn Disk QueueLength计数器该值应不超过磁盘数的1.5~2倍。要提高性能,可增加磁盘。&SQLServer:CacheHit Ratio计数器该值越高越好。如果持续低于80%,应考虑增加内存。&注意该参数值是从SQL Server启动后,就一直累加记数,所以运行经过一段时间后,该值将不能反映系统当前值。    47、分析select emp_nameform employee where salary & 3000&在此语句中若salary是Float类型的,则优化器对其进行优化为Convert(float,3000),因为3000是个整数,我们应在编程时使用3000.0而不要等运行时让DBMS进行转化。同样字符和整型数据的转换。    48、查询的关联同写的顺序    select&a.personMemberID,&*&from&chineseresume&a,personmember&b&where&personMemberID&=&b.referenceid&and&a.personMemberID&=&'JCNPRH39681'&(A&=&B&,B&=&'号码')    select&a.personMemberID,&*&from&chineseresume&a,personmember&b&where&a.personMemberID&=&b.referenceid&and&a.personMemberID&=&'JCNPRH39681'&and&b.referenceid&=&'JCNPRH39681'&(A&=&B&,B&=&'号码',&A&=&'号码')    select&a.personMemberID,&*&from&chineseresume&a,personmember&b&where&b.referenceid&=&'JCNPRH39681'&and&a.personMemberID&=&'JCNPRH39681'&(B&=&'号码',&A&=&'号码')    49、    (1)IF&没有输入负责人代码&THEN code1=0code2=9999 ELSE code1=code2=负责人代码&END IF&执行SQL语句为: Select&负责人名&FROM P2000 Where&负责人代码&=:code1 AND负责人代码&&=:code2    (2)IF&没有输入负责人代码&THEN& Select&负责人名&FROM P2000 ELSE code=&负责人代码&Select&负责人代码&FROM P2000 Where&负责人代码=:code END IF&第一种方法只用了一条SQL语句,第二种方法用了两条SQL语句。在没有输入负责人代码时,第二种方法显然比第一种方法执行效率高,因为它没有限制条件;&在输入了负责人代码时,第二种方法仍然比第一种方法效率高,不仅是少了一个限制条件,还因相等运算是最快的查询运算。我们写程序不要怕麻烦    50、关于JOBCN现在查询分页的新方法(如下),用性能优化器分析性能的瓶颈,如果在I/O或者网络的速度上,如下的方法优化切实有效,如果在CPU或者内存上,用现在的方法更好。请区分如下的方法,说明索引越小越好。    begin    DECLARE&@local_variable&table&(FID&int&identity(1,1),ReferenceID&varchar(20))    insert&into&@local_variable&(ReferenceID)    select&top&100000&ReferenceID&from&chineseresume&order&by&ReferenceID    select&*&from&@local_variable&where&Fid&&&40&and&fid&&=&60    end&和    begin    DECLARE&@local_variable&table&(FID&int&identity(1,1),ReferenceID&varchar(20))    insert&into&@local_variable&(ReferenceID)    select&top&100000&ReferenceID&from&chineseresume&order&by&updatedate    select&*&from&@local_variable&where&Fid&&&40&and&fid&&=&60    end&的不同    begin    create&table&#temp&(FID&int&identity(1,1),ReferenceID&varchar(20))    insert&into&#temp&(ReferenceID)    select&top&100000&ReferenceID&from&chineseresume&order&by&updatedate    select&*&from&#temp&where&Fid&&&40&and&fid&&=&60&drop&table&#temp    end&存储过程编写经验和优化措施&From:网页教学网  一、适合读者对象:数据库开发程序员,数据库的数据量很多,涉及到对SP(存储过程)的优化的项目开发人员,对数据库有浓厚兴趣的人。&   二、介绍:在数据库的开发过程中,经常会遇到复杂的业务逻辑和对数据库的操作,这个时候就会用SP来封装数据库操作。如果项目的SP较多,书写又没有一定的规范,将会影响以后的系统维护困难和大SP逻辑的难以理解,另外如果数据库的数据量大或者项目对SP&的性能要求很,就会遇到优化的问题,否则速度有可能很慢,经过亲身经验,一个经过优化过的SP要比一个性能差的SP的效率甚至高几百倍。&   三、内容:&   1、开发人员如果用到其他库的Table或View,务必在当前库中建立View来实现跨库操作,最好不要直接使用&databse.dbo.table_name&,因为sp_depends不能显示出该SP所使用的跨库table或view,不方便校验。    2、开发人员在提交SP前,必须已经使用set showplan on分析过查询计划,做过自身的查询优化检查。&   3、高程序运行效率,优化应用程序,在SP编写过程中应该注意以下几点:&    a)SQL的使用规范:   i. 尽量避免大事务操作,慎用holdlock子句,提高系统并发能力。   ii. 尽量避免反复访问同一张或几张表,尤其是数据量较大的表,可以考虑先根据条件提取数据到临时表中,然后再做连接。   iii. 尽量避免使用游标,因为游标的效率较差,如果游标操作的数据超过1万行,那么就应该改写;如果使用了游标,就要尽量避免在游标循环中再进行表连接的操作。   iv. 注意where字句写法,必须考虑语句顺序,应该根据索引顺序、范围大小来确定条件子句的前后顺序,尽可能的让字段顺序与索引顺序相一致,范围从大到小。   v. 不要在where子句中的&=&左边进行函数、算术运算或其他表达式运算,否则系统将可能无法正确使用索引。   vi. 尽量使用exists代替select count(1)来判断是否存在记录,count函数只有在统计表中所有行数时使用,而且count(1)比count(*)更有效率。   vii. 尽量使用&&=&,不要使用&&&。   viii. 注意一些or子句和union子句之间的替换   ix. 注意表之间连接的数据类型,避免不同类型数据之间的连接。   x. 注意存储过程中参数和数据类型的关系。   xi. 注意insert、update操作的数据量,防止与其他应用冲突。如果数据量超过200个数据页面(400k),那么系统将会进行锁升级,页级锁会升级成表级锁。&    b)索引的使用规范:   i. 索引的创建要与应用结合考虑,建议大的OLTP表不要超过6个索引。   ii. 尽可能的使用索引字段作为查询条件,尤其是聚簇索引,必要时可以通过index index_name来强制指定索引   iii. 避免对大表查询时进行table scan,必要时考虑新建索引。   iv. 在使用索引字段作为条件时,如果该索引是联合索引,那么必须使用到该索引中的第一个字段作为条件时才能保证系统使用该索引,否则该索引将不会被使用。   v. 要注意索引的维护,周期性重建索引,重新编译存储过程。    c)tempdb的使用规范:   i. 尽量避免使用distinct、order by、group by、having、join、cumpute,因为这些语句会加重tempdb的负担。   ii. 避免频繁创建和删除临时表,减少系统表资源的消耗。   iii. 在新建临时表时,如果一次性插入数据量很大,那么可以使用select into代替create table,避免log,提高速度;如果数据量不大,为了缓和系统表的资源,建议先create table,然后insert。   iv. 如果临时表的数据量较大,需要建立索引,那么应该将创建临时表和建立索引的过程放在单独一个子存储过程中,这样才能保证系统能够很好的使用到该临时表的索引。   &v. 如果使用到了临时表,在存储过程的最后务必将所有的临时表显式删除,先truncate table,然后drop table,这样可以避免系统表的较长时间锁定。   &vi. 慎用大的临时表与其他大表的连接查询和修改,减低系统表负担,因为这种操作会在一条语句中多次使用tempdb的系统表。    d)合理的算法使用:&    根据上面已提到的SQL优化技术和ASE Tuning手册中的SQL优化内容,结合实际应用,采用多种算法进行比较,以获得消耗资源最少、效率最高的方法。具体可用ASE调优命令:set statistics io on, set statistics time on , set showplan on&等。解析:Microsoft SQL Server中的锁模式在SQL Server数据库中加锁时,除了可以对不同的资源加锁,还可以使用不同程度的加锁方式,即锁有多种模式,SQL Server中锁模式包括:1.共享锁&SQL Server中,共享锁用于所有的只读数据操作。共享锁是非独占的,允许多个并发事务读取其锁定的资源。默认情况下,数据被读取后,SQL Server立即释放共享锁。例如,执行查询&SELECT * FROM AUTHORS&时,首先锁定第一页,读取之后,释放对第一页的锁定,然后锁定第二页。这样,就允许在读操作过程中,修改未被锁定的第一页。但是,事务隔离级别连接选项设置和SELECT语句中的锁定设置都可以改变SQL Server的这种默认设置。例如,& SELECT * FROMAUTHORS HOLDLOCK&就要求在整个查询过程中,保持对表的锁定,直到查询完成才释放锁定。2.更新锁更新锁在修改操作的初始化阶段用来锁定可能要被修改的资源,这样可以避免使用共享锁造成的死锁现象。因为使用共享锁时,修改数据的操作分为两步,首先获得一个共享锁,读取数据,然后将共享锁升级为排它锁,然后再执行修改操作。这样如果同时有两个或多个事务同时对一个事务申请了共享锁,在修改数据的时候,这些事务都要将共享锁升级为排它锁。这时,这些事务都不会释放共享锁而是一直等待对方释放,这样就造成了死锁。如果一个数据在修改前直接申请更新锁,在数据修改的时候再升级为排它锁,就可以避免死锁。3.排它锁&排它锁是为修改数据而保留的。它所锁定的资源,其他事务不能读取也不能修改。4.结构锁&执行表的数据定义语言&(DDL)&操作(例如添加列或除去表)时使用架构修改&(Sch-M)&锁。当编译查询时,使用架构稳定性&(Sch-S)&锁。架构稳定性&(Sch-S)&锁不阻塞任何事务锁,包括排它锁。因此在编译查询时,其它事务(包括在表上有排它锁的事务)都能继续运行。但不能在表上执行&DDL&操作。5.意向锁&意向锁说明SQL Server有在资源的低层获得共享锁或排它锁的意向。例如,表级的共享意向锁说明事务意图将排它锁释放到表中的页或者行。意向锁又可以分为共享意向锁、独占意向锁和共享式独占意向锁。共享意向锁说明事务意图在共享意向锁所锁定的低层资源上放置共享锁来读取数据。独占意向锁说明事务意图在共享意向锁所锁定的低层资源上放置排它锁来修改数据。共享式排它锁说明事务允许其他事务使用共享锁来读取顶层资源,并意图在该资源低层上放置排它锁。6.大容量更新锁&当将数据大容量复制到表,且指定了&TABLOCK&提示或者使用&sp_tableoption&设置了&table lock on bulk&表选项时,将使用大容量更新锁。大容量更新锁允许进程将数据并发地大容量复制到同一表,同时防止其它不进行大容量复制数据的进程访问该表。详细介绍优化SQL Server 2000的设置  SQL Server已经为了优化自己的性能而进行了良好的配置,比今天市场其他的关系型数据库都要好得多。然而,你仍然有几项设置需要进行修改,以便你的数据库每分钟可以处理更多的事务(TPM)。本篇文章的目的就是讨论这些设置。我们忽略那些可以通过硬件配置或者表或者索引设计提高的性能,因为这些内容在本篇文章范围之外。  破碎页面检测  在我们开始讨论服务器配置开关之前,让我们快速浏览一下你的模型数据库--或者说用作构建新的数据库的基础的模板。默认情况下,你可以在数据库中创建存储过程、函数等类似的东西,随后他们将会被加入新创建的数据库中。  要优化性能,你也许想要关闭模型数据库中的破碎页面检测。当一个页面被成功写入磁盘的时候,破碎页面检测进行识别。如果激活了的话,你可以看到每个写操作对性能产生的每个细小的影响。大多数现代的磁盘阵列都有板上电池,使得阵列可以在突然断电的情况下完成所有的写操作--引起破碎页面的最频繁原因。  以下的步骤可以接受如何关闭破碎页面检测:  exec&sp_dboption&'model',&'torn&page&detection',&'false'  这篇基础知识资源可以为你提供更多有关这个设置的信息。  大多数的配置是通过系统存储过程sp_configure完成的。要显示服务器的全部设置列表以便定制,你可以输入如下命令:  sp_configure&'show&advanced&options',&1  GO  RECONFIGURE&WITH&OVERRIDE&  你可以配置的选项的数量根据你的SQL Server的版本、服务包,以及位数版本(64位的SQL Server比32位的选项要多)而定。我将直接讨论最能影响SQL Server性能优化的选项。  Affinity mask:Affinity mask让你可以控制SQL Server使用哪个处理器。对于大多数情况,你不应该接触这个设置,让操作系统控制处理器关系。然而,你也许想要用这个选项来将某个处理器专门用于另一个进程(例如,MSSearch&或者&SQL Server磁盘&IO&,以及&SQL Server的平衡)。参考基础知识资源获取更多有关这个设置的信息。  Awe enabled: Awe的启动可以让SQL Server Enterprise版本运行在Windows 2000以及以上高级服务器上,或者Windows 2003 Enterprise以及以上的版本使用超过4GB的内存。如果你的服务器符合这些条件的话,就激活这个设置吧。  并行成本极限:当查询需要进行并行处理的时候,并行的成本极限就定下来了。默认情况是五秒钟。将这个数值改为稍低的数值,俄可以让更多个查询获得并行处理,但是这也会引起CPU瓶颈。这个设置只有在多个处理器的机器上才会起作用。  填充因子:填充因子设置了在创建聚簇索引的时候用来自动填充的因子。在频繁插入的表中,将数值从默认的90%设置为较低的数值,你会获得收益。  轻量级缓冲池:这个设置启动了光纤模式。使用这个选项在CPU利用率很高的8路及其以上的服务器上。这可以让光纤同时为每个线程提供服务,同时在默认情况下运行在每个处理器上。某些任务可以从这些光纤中获得优势。  并行的最大程度:当服务器可以使用并行或者不能使用并行,或者是当某个数量的处理器可以用于并行操作的时候,这个设置就确定了。并行就是多个处理器上发生多个处理。例如,查询的并行操作可以在不同的处理器上同时处理。  服务器最大内存(MB):如果你在SQL Server上运行了其他的处理,并且有足够的内存,那么你有可能想要留出512MB的内存给操作系统和这些进程。例如,你可以在MSSearch或者在本地运行大量的代理的情况下将其设置为512。最大工作线程:最大工作线程设置与ADO.net中的连接池有些类似。通过这个设置,任何超过限制(255个用户)的用户连接都可以在线程池中等待,直到为某个连接服务的线程得到释放,就好像是ADO.net中的连接与连接池共享。如果你有很大量的连接,并且大量的内存,那么你就可以提高这个数值。  网络包尺寸(B):这个设置控制了网络中传输到你的客户端的包的尺寸。在有损耗的网络中(例如电话线),你可能想要将这个参数设置为比较低的数值,墨人数值是4096。在连接良好的网络中,你可以提高这个设置,特别是涉及BLOB的大型批处理操作。  优先推进:这个设置为SQL Server提供了处理器的推动。在任务管理器中,点击进程标签,定位SQL Server的位置,然后右击它。选择&设置优先级别&。注意,SQL Server应该运行在正常的优先级别上。输入如下命令:&  Sp_configure&'priority&boost',&1  Reconfigure&with&override&  然后重新启动你的SQL Server。在任务管理器中察看SQL Server现在运行在什么优先级别上。它应该是在高优先级上。SQL Server应该比其他的用户进程运行优先级别要高。在专用于SQL Server的服务器上使用这个设置。总结  本篇讨论了最常见的SQL Server优化设置。在做出改变之前和之后分别在测试环境中进行基线确定是非常重要的,可以据此来评估在典型的负载下,改变对你的系统的影响。SQL Server&数据库中关于死锁的分析SQL Server数据库发生死锁时不会像ORACLE那样自动生成一个跟踪文件。有时可以在[管理]-&[当前活动]&里看到阻塞信息(有时SQL Server企业管理器会因为锁太多而没有响应).设定跟踪1204:&USE&MASTERDBCC&TRACEON&(1204,-1)&显示当前启用的所有跟踪标记的状态:DBCC TRACESTATUS(-1)取消跟踪1204:DBCC TRACEOFF (1204,-1)在设定跟踪1204后,会在数据库的日志文件里显示SQL Server数据库死锁时一些信息。但那些信息很难看懂,需要对照SQL Server联机丛书仔细来看。根据PAG锁要找到相关数据库表的方法:DBCC TRACEON (3604)DBCC PAGE (db_id,file_id,page_no)DBCC TRACEOFF (3604)请参考<上更详细的讲解.但又从CSDN学到了一个找到死锁原因的方法。我稍加修改,&去掉了游标操作并增加了一些提示信息,写了一个系统存储过程sp_who_lock.sql。代码如下:&if&exists&(select&*&from&dbo.sysobjectswhere&id&=&object_id(N'[dbo].[sp_who_lock]')and&OBJECTPROPERTY(id,&N'IsProcedure')&=&1)drop&procedure&[dbo].[sp_who_lock]GO&/**//********************************************************//&&创建&:&fengyu&&邮件&:&//&&日期&://&&修改&:&从http://www.csdn.net/develop/Read_Article.asp?id=26566//&&学习到并改写//&&说明&:&查看数据库里阻塞和死锁情况********************************************************/use&mastergocreate&procedure&sp_who_lockasbegindeclare&@spid&int,@bl&int,@intTransactionCountOnEntry&&&&&int,@intRowcount&&&&&&&&&&&&&int,@intCountProperties&&&&&&&&&int,@intCounter&&&&&&&&&&&&&intcreate&table&#tmp_lock_who&(id&int&identity(1,1),spid&smallint,bl&smallint)IF&@@ERROR&&0&RETURN&@@ERRORinsert&into&#tmp_lock_who(spid,bl)&select&&0&,blockedfrom&(select&*&from&sysprocesses&where&&blocked&0&)&awhere&not&exists(select&*&from&(select&*&from&sysprocesseswhere&&blocked&0&)&bwhere&a.blocked=spid)union&select&spid,blocked&from&sysprocesses&where&&blocked&0IF&@@ERROR&&0&RETURN&@@ERROR--&找到临时表的记录数select&&&&&@intCountProperties&=&Count(*),@intCounter&=&1from&#tmp_lock_whoIF&@@ERROR&&0&RETURN&@@ERRORif&&&&@intCountProperties=0select&'现在没有阻塞和死锁信息'&as&message--&循环开始while&@intCounter&&=&@intCountPropertiesbegin--&取第一条记录select&&&&&@spid&=&spid,@bl&=&blfrom&#tmp_lock_who&where&Id&=&@intCounterbeginif&@spid&=0select&'引起数据库死锁的是:&'+&CAST(@bl&AS&VARCHAR(10))+&'进程号,其执行的SQL语法如下'elseselect&'进程号SPID:'+&CAST(@spid&AS&VARCHAR(10))+&'被'+&'进程号SPID:'+&CAST(@bl&AS&VARCHAR(10))&+'阻塞,其当前进程执行的SQL语法如下'DBCC&INPUTBUFFER&(@bl&)end--&循环指针下移set&@intCounter&=&@intCounter&+&1enddrop&table&#tmp_lock_whoreturn&0end需要的时候直接调用:sp_who_lock就可以查出引起死锁的进程和SQL语句.SQL Server自带的系统存储过程sp_who和sp_lock也可以用来查找阻塞和死锁,&但没有这里介绍的方法好用。如果想知道其它tracenum参数的含义,请看文章我们还可以设置锁的超时时间(单位是毫秒),&来缩短死锁可能影响的时间范围:例如:&use&masterseelct&@@lock_timeoutset&lock_timeout&900000--&15分钟seelct&@@lock_timeout&优化SQLServer索引的小技巧SQL Server中有几个可以让你检测、调整和优化SQL Server性能的工具。在本文中,我将说明如何用SQL Server的工具来优化数据库索引的使用,本文还涉及到有关索引的一般性知识。关于索引的常识影响到数据库性能的最大因素就是索引。由于该问题的复杂性,我只可能简单的谈谈这个问题,不过关于这方面的问题,目前有好几本不错的书籍可供你参阅。我在这里只讨论两种SQL Server索引,即clustered索引和nonclustered索引。当考察建立什么类型的索引时,你应当考虑数据类型和保存这些数据的&column。同样,你也必须考虑数据库可能用到的查询类型以及使用的最为频繁的查询类型。索引的类型如果column保存了高度相关的数据,并且常常被顺序访问时,最好使用clustered索引,这是因为如果使用clustered索引,SQL Server会在物理上按升序(默认)或者降序重排数据列,这样就可以迅速的找到被查询的数据。同样,在搜寻控制在一定范围内的情况下,对这些&column也最好使用clustered索引。这是因为由于物理上重排数据,每个表格上只有一个clustered索引。与上面情况相反,如果columns包含的数据相关性较差,你可以使用nonculstered索引。你可以在一个表格中使用高达249个nonclustered索引--尽管我想象不出实际应用场合会用的上这么多索引。当表格使用主关键字(primary keys),默认情况下SQL Server会自动对包含该关键字的column(s)建立一个独有的cluster索引。很显然,对这些column(s)建立独有索引意味着主关键字的唯一性。当建立外关键字(foreign key)关系时,如果你打算频繁使用它,那么在外关键字cloumn上建立nonclustered索引不失为一个好的方法。如果表格有&clustered索引,那么它用一个链表来维护数据页之间的关系。相反,如果表格没有clustered索引,SQL Server将在一个堆栈中保存数据页。数据页当索引建立起来的时候,SQLServer就建立数据页(datapage),数据页是用以加速搜索的指针。当索引建立起来的时候,其对应的填充因子也即被设置。设置填充因子的目的是为了指示该索引中数据页的百分比。随着时间的推移,数据库的更新会消耗掉已有的空闲空间,这就会导致页被拆分。页拆分的后果是降低了索引的性能,因而使用该索引的查询会导致数据存储的支离破碎。当建立一个索引时,该索引的填充因子即被设置好了,因此填充因子不能动态维护。为了更新数据页中的填充因子,我们可以停止旧有索引并重建索引,并重新设置填充因子(注意:这将影响到当前数据库的运行,在重要场合请谨慎使用)。&DBCC INDEXDEFRAG和DBCC DBREINDEX是清除clustered和nonculstered索引碎片的两个命令。INDEXDEFRAG是一种在线操作(也就是说,它不会阻塞其它表格动作,如查询),而DBREINDEX则在物理上重建索引。在绝大多数情况下,重建索引可以更好的消除碎片,但是这个优点是以阻塞当前发生在该索引所在表格上其它动作为代价换取来得。当出现较大的碎片索引时,INDEXDEFRAG会花上一段比较长的时间,这是因为该命令的运行是基于小的交互块(transactional block)。填充因子当你执行上述措施中的任何一个,数据库引擎可以更有效的返回编入索引的数据。关于填充因子(fillfactor)话题已经超出了本文的范畴,不过我还是提醒你需要注意那些打算使用填充因子建立索引的表格。在执行查询时,SQL Server动态选择使用哪个索引。为此,SQL Server根据每个索引上分布在该关键字上的统计量来决定使用哪个索引。值得注意的是,经过日常的数据库活动(如插入、删除和更新表格),SQL Server用到的这些统计量可能已经&过期&了,需要更新。你可以通过执行DBCC SHOWCONTIG来查看统计量的状态。当你认为统计量已经&过期&时,你可以执行该表格的UPDATE STATISTICS命令,这样SQL Server就刷新了关于该索引的信息了。建立数据库维护计划SQL Server提供了一种简化并自动维护数据库的工具。这个称之为数据库维护计划向导(DatabaseMaintenance Plan Wizard&,DMPW)的工具也包括了对索引的优化。如果你运行这个向导,你会看到关于数据库中关于索引的统计量,这些统计量作为日志工作并定时更新,这样就减轻了手工重建索引所带来的工作量。如果你不想自动定期刷新索引统计量,你还可以在DMPW中选择重新组织数据和数据页,这将停止旧有索引并按特定的填充因子重建索引。Sybase SQL Server索引的使用和优化&  在应用系统中,尤其在联机事务处理系统中,对数据查询及处理速度已成为衡&量应用系统成败的标准。而采用索引来加快数据处理速度也成为广大数据库用户所&接受的优化方法。  在良好的数据库设计基础上,能有效地使用索引是SQL Server取得高性能的基础,SQL Server采用基于代价的优化模型,它对每一个提交的有关表的查询,决定是否使用索引或用哪一个索引。因为查询执行的大部分开销是磁盘I/O,使用索引提高性能的一个主要目标是避免全表扫描,因为全表扫描需要从磁盘上读表的每一个数据页,如果有索引指向数据值,则查询只需读几次磁盘就可以了。所以如果建立了合理的索引,优化器就能利用索引加速数据的查询过程。但是,索引并不总是提高系统的性能,在增、删、改操作中索引的存在会增加一定的工作量,因此,在适当的地方增加适当的索引并从不合理的地方删除次优的索引,将有助于优化那些性能较差的SQL Server应用。实践表明,合理的索引设计是建立在对各种查询的分析和预测上的,只有正确地使索引与程序结合起来,才能产生最佳的优化方案。本文就SQL Server索引的性能问题进行了一些分析和实践。  一、聚簇索引(clustered indexes)的使用  聚簇索引是一种对磁盘上实际数据重新组织以按指定的一个或多个列的值排序。由于聚簇索引的索引页面指针指向数据页面,所以使用聚簇索引查找数据几乎总是比使用非聚簇索引快。每张表只能建一个聚簇索引,并且建聚簇索引需要至少相当该表120%的附加空间,以存放该表的副本和索引中间页。建立聚簇索引的思想是:  1、&大多数表都应该有聚簇索引或使用分区来降低对表尾页的竞争,在一个高事务的环境中,对最后一页的封锁严重影响系统的吞吐量。  2、在聚簇索引下,数据在物理上按顺序排在数据页上,重复值也排在一起,因而在那些包含范围检查(between、&、&=、&、& =)或使用group by或order by的查询时,一旦找到具有范围中第一个键值的行,具有后续索引值的行保证物理上毗连在一起而不必进一步搜索,避免了大范围扫描,可以大大提高查询速度。  3、&在一个频繁发生插入操作的表上建立聚簇索引时,不要建在具有单调上升值的列(如IDENTITY)上,否则会经常引起封锁冲突。  4、&在聚簇索引中不要包含经常修改的列,因为码值修改后,数据行必须移动到新的位置。  5、&选择聚簇索引应基于where子句和连接操作的类型。聚簇索引的侯选列是:  ●&主键列,该列在where子句中使用并且插入是随机的。  ●&按范围存取的列,如pri_order & 100 and pri_order & 200&。  ●&在group by或order by中使用的列。  ●&不经常修改的列。  ●&在连接操作中使用的列。  二、非聚簇索引(nonclusteredindexes)的使用  SQL Server缺省情况下建立的索引是非聚簇索引,由于非聚簇索引不重新组织表中的数据,而是对每一行存储索引列值并用一个指针指向数据所在的页面。换句话说非聚簇索引具有在索引结构和数据本身之间的一个额外级。一个表如果没有聚簇索引时,可有250个非聚簇索引。每个非聚簇索引提供访问数据的不同排序顺序。在建立非聚簇索引时,要权衡索引对查询速度的加快与降低修改速度之间的利弊。另外,还要考虑这些问题:  ●&索引需要使用多少空间。  ●&合适的列是否稳定。  ●&索引键是如何选择的,扫描效果是否更佳。  ●&是否有许多重复值。  对更新频繁的表来说,表上的非聚簇索引比聚簇索引和根本没有索引需要更多的额外开销。对移到新页的每一行而言,指向该数据的每个非聚簇索引的页级行也必须更新,有时可能还需要索引页的分理。从一个页面删除数据的进程也会有类似的开销,另外,删除进程还必须把数据移到页面上部,以保证数据的连续性。所以,建立非聚簇索引要非常慎重。非聚簇索引常被用在以下情况:  ●&某列常用于集合函数(如Sum,....)。  ●&某列常用于join,order by,group by。  ●&查寻出的数据不超过表中数据量的20%。  三、覆盖索引(covering indexes)的使用  覆盖索引是指那些索引项中包含查寻所需要的全部信息的非聚簇索引,这&种索引之所以比较快也正是因为索引页中包含了查寻所必须的数据,不需去访&问数据页。&如果非聚簇索引中包含结果数据,那么它的查询速度将快于聚簇索引。  但是由于覆盖索引的索引项比较多,要占用比较大的空间。而且update&操&作会引起索引值改变。所以如果潜在的覆盖查询并不常用或不太关键,则覆盖索引的增加反而会降低性能。  四、索引的选择技术  p_detail是住房公积金管理系统中记录个人明细的表,有890000行,观察在不同索引下的查询运行效果,测试在C/S环境下进行,客户机是&IBM PII350(内存64M),服务器是DEC Alpha1000A(内存128M),数据库为SYBASE11.0.3。  1、&select count(*) from p_detail where op_date&&& andop_date&&& and pri_surplus1&300  2、&select count(*),sum(pri_surplus1) from p_detail whereop_date&&& and pay_month between &199908& and &199912&  不建任何索引&查询1 1分15秒  查询2 1分7秒  在op_date上建非聚簇索引&查询1 57秒  查询2 57秒  在op_date上建聚簇索引&查询1 &1秒  查询2 52秒  在pay_month、op_date、pri_surplus1上建索引&查询1 34秒  查询2 &1秒  在op_date、pay_month、pri_surplus1上建索引&查询1 &1秒  查询2 &1秒  从以上查询效果分析,索引的有无,建立方式的不同将会导致不同的查询效果,选择什么样的索引基于用户对数据的查询条件,这些条件体现于where从句和join表达式中。一般来说建立索引的思路是:  (1)、主键时常作为where子句的条件,应在表的主键列上建立聚簇索引,尤其当经常用它作为连接的时候。  (2)、有大量重复值且经常有范围查询和排序、分组发生的列,或者非常频繁地被访问的列,可考虑建立聚簇索引。  (3)、经常同时存取多列,且每列都含有重复值可考虑建立复合索引来覆盖一个或一组查询,并把查询引用最频繁的列作为前导列,如果可能尽量使关键查询形成覆盖查询。  (4)、如果知道索引键的所有值都是唯一的,那么确保把索引定义成唯一索引。  (5)、在一个经常做插入操作的表上建索引时,使用fillfactor(填充因子)来减少页分裂,同时提高并发度降低死锁的发生。如果在只读表上建索引,则可以把fillfactor置为100。  (6)、在选择索引键时,设法选择那些采用小数据类型的列作为键以使每个索  引页能够容纳尽可能多的索引键和指针,通过这种方式,可使一个查询必须遍历的索引页面降到最小。此外,尽可能地使用整数为键值,因为它能够提供比任何数据类型都快的访问速度。  五、索引的维护  上面讲到,某些不合适的索引影响到SQL Server的性能,随着应用系统的运行,数据不断地发生变化,当数据变化达到某一个程度时将&会影响到索引的使用。这时&需要用户自己来维护索引。索引的维护包括:  1、重建索引  随着数据行的插入、删除和数据页的分裂,有些索引页可能只包含几页数据,另外应用在执行大块I/O的时候,重建非聚簇索引可以降低分片,维护大块I/O的效率。重建索引实际上是重新组织B-树空间。在下面情况下需要重建索引:  (1)、数据和使用模式大幅度变化。  (2)、排序的顺序发生改变。  (3)、要进行大量插入操作或已经完成。  (4)、使用大块I/O的查询的磁盘读次数比预料的要多。  (5)、由于大量数据修改,使得数据页和索引页没有充分使用而导致空间的使用超出估算。  (6)、dbcc检查出索引有问题。  当重建聚簇索引时,这张表的所有非聚簇索引将被重  建.  2、索引统计信息的更新  当在一个包含数据的表上创建索引的时候,SQL Server会创建分布数据页来存放有关索引的两种统计信息:分布表和密度表。优化器利用这个页来判断该索引对某个特定查询是否有用。但这个统计信息并不动态地重新计算。这意味着,当表的数据改变之后,统计信息有可能是过时的,从而影响优化器追求最有工作的目标。因此,在下面情况下应该运行update statistics命令:  (1)、数据行的插入和删除修改了数据的分布。  (2)、对用truncate table删除数据的表上增加数据行。  (3)、修改索引列的值。  六、结束语  实践表明,不恰当的索引不但于事无补,反而会降低系统的执行性能。因为大量的索引在插入、修改和删除操作时比没有索引花费更多的系统时间。例如下面情况下建立的索引是不恰当的:  ●&在查询中很少或从不引用的列不会受益于索引,因为索引很少或从来不必搜索基于这些列的行。  ●&只有两个或三个值的列,如男性和女性(是或否),从不会从索引中得到好处。  另外,鉴于索引加快了查询速度,但减慢了数据更新速度的特点。可通过在一个段上建表,而在另一个段上建其非聚簇索引,而这两段分别在单独的物理设备上来改善操作性能}

我要回帖

更多关于 并发进程的模拟实现 的文章

更多推荐

版权声明:文章内容来源于网络,版权归原作者所有,如有侵权请点击这里与我们联系,我们将及时删除。

点击添加站长微信