SQL Server优化必备之任务调度
在前面两篇文章中( 浅谈sql server内部运行机制 and 浅谈sql server数据内部表现形式 ),我们交流了一些关于sql server的一些术语,sql sever引擎
与ssms抽象模型,sql server内部存储机制和sql server内部体系结构等。讨论的这些问题,均可以归为一个问题,即"sql server是怎么执行客户端输入的sql
语句的?”,其中,重点讨论了下图(sql server 体系结构)
然而,如果我们仅仅了解如上技术,是不具备一个资深dba或数据库优化高手条件的,原因很简单,我们仅仅知道了sql server是怎么做的(sql server是如
何执行sql语句的),但是我们并不知到是什么做的(是什么真正执行sql语句?),只知其然,而不知其所以然。本篇文章,我们将重点论述是什么执行了sql server
体系结构逻辑?其实,执行sql server体系结构逻辑的核心组件便是sqlos(简称sql server操作系统)。
一 sql server引擎组件
下图为sql server引擎核心主件,它大致包括五大部分:协议层(protocol layer),查询引擎(query processor),存储引擎(storage engine),公用组件(utilities)和
sql server操作系统(sqlos)。其中,除了utilities和sqlos两大部分外,其他部分在前面两篇文章中均已简要论述。本篇文章,我们将重点论述sqlos。
(一)sqlos
sqlos是sql server和windows os(windows 操作系统)瘦用户模式层,它主要负责一些底层的操作,如调度、处理i/o、内存管理、文件管理等。
当客户端(如在ssms中输入)输入一条sql语句(select * from tablename),并基于tds服务点,向sql server服务引擎提交该语句,sql sever引擎接收到
该语句后(准确来说,是先通过protocol layer协议层),查询引擎的命令分析器(query processor)先检查语法结构,若语法结构有错误,则直接将错误返回给客户端,
编译不通过;若语法正确,则命令分析器会去缓冲池的计划任务中寻找是否存在该语句的缓存,若存在,则命令分析器把该计划缓存交给查询执行器处理,若缓存池的计
划缓存中没有该计划任务,则命令解析器将会生成查询树,并将该sql语句传递给查询优化器,查询优化器根据“最少开销算法”生成最优方案,然后传递给查询执行器;
流程到查询执行器后,查询执行器通过存储引擎的访问方法传递给存储引擎,存储引擎根据规则来配置和使用缓冲区管理器和事务管理器,接下来的工作,就交给
sqlos来处理。
也许读者会问?为什么不直接用windos os来调度,而要另做一个sqlos来执行调度呢?因为windows os是基于“抢占式调度算法的”,这种算法依据时间片来执行的,
这种算法并没有针对sql server进行优化,为了解决这个问题,微软决定sql server应自己处理自己的调度,并通过创建用户模式调度器(ums)来解决该问题,ums基于
“合作调度模式”算法被设计,这种算法指当执行中的线程需要等待其他资源才能执行时,不会因为时间片的轮询被中断,而是采用自动退出处理器的方式。
(二)线程三态
当在一个会话中执行请求时,sql server将这项工作(这个请求)分成一个或多个任务,每个任务由一个线程负责,任务被放在任务队列中,等待调度器去调度工作线程来执行,
原则上,调度器会为每个任务分配一个工作线程,这个工作线程就负责执行该任务。每个线程都有三个状态,即执行状态(running)、挂起状态(suspend)和可执行状态(runable)。
- 执行状态(running):表示该线程正在执行任务
- 挂起状态(suspend):表示该线程因缺资源,被cpu强制挂起,如尝试修改被锁的表
- 可执行状态(runnable):表示线程具备了可执行任务的条件,如线程1执行完任务1后,被放在线程队列中,等待调度器分配任务
线程三个状态之间,存在如下转换关系:
1.具备执行条件的线程(runnable),只要获得cpu,就可执行任务,从而从runnable状态变成running状态
2.正在执行的线程(running)因缺必要资源,被cpu挂起,从而从running状态变成suspend状态
3.被挂起的线程(suspend)因获得可执行的资源,被cpu唤醒执行,从而从suspend状态变成running状态
4.runnable状态的线程,调度器可不让其执行(这里,暂且称之为suspeng状态)
(三)windows os与sql server
当一台电脑刚生产出来,未装任何系统时,我们称之为裸机,对于裸机,我们是无法使用的,若要使用,则需要安装操作系统,如win10,
当我们在裸机上装上操作系统后,就可以通过操作系统来操作电脑了,如查看cpu,管理文件,管理内存等,不仅仅如此,我们还在操作系统上
安装相应的运用软件,如visual studio 2017,sql server 2014等。
二 sql server一个较为完整的调度流程
当ssms向sql server引擎发起请求时,将会产生一个会话(session),会话成功后,就可以执行sql语句请求了。
1.当建立会话成功后,在会话中建立一个sql语句请求时(如执行查询语句:select * from tablename),会话会将一个请求分成一个或多个任务,并将这些任务放在任务队列中;
2.每个任务都会被分配一个或多个工作线程来执行;
3.sqlos任务调度器通过从工作线程队列中调度线程来执行相应的工作任务
注意:sqlos只是逻辑的,真的的执行还是windows os
以下是一些涉及到的相关类型表
sys.dm_exec_*:该类型表包含用户代码执行和关联连接直接或间接相关的信息,如请求表sys.dm_exec_requests,会话表sys.dm_exec_sessions
sys.dm_os_*: 该类型表包含操作os相关的信息
sys.dm_tran_*: 该类型表包含事务相关信息
sys.dm_logpool_*:该类型包含日志相关信息
sys.dm_io_*: 该类型表包含io相关信息
sys.dm_db_*: 该类型包含数据库相关信息
三 参考文献
【01】《microsoft sql server 2012 internals》kalen delaney,bob beauchemin,conor cunningham,jonathan kehayias,benjamin nevarez,paul s.randal
【02】《microsoft sql server 2012 administration》tom carpenter
【03】《sql server 2012 深入解析与性能优化 第3版》christian bolton,justin langford,glenn berry,gavin payne,amit banerjee,rob farley著
【04】《microsoft sql server 2008 技术内幕:t-sql查询》ltzik ben-gran,lubor kollar,dejan sarka,steve kass著
【05】《sql server 2008查询性能优化》grant fritchey,sajal dam著
四 版权区
- 感谢您的阅读,若有不足之处,欢迎指教,共同学习、共同进步。
- 博主网址:http://www.cnblogs.com/wangjiming/。
- 极少部分文章利用读书、参考、引用、抄袭、复制和粘贴等多种方式整合而成的,大部分为原创。
- 如您喜欢,麻烦推荐一下;如您有新想法,欢迎提出,邮箱:2098469527@qq.com。
- 可以转载该博客,但必须著名博客来源。
上一篇: [C++::STL]之stcak的用法
推荐阅读
-
sql语句优化之SQL Server(详细整理)
-
sql server 任务调度与CPU
-
SQL Server优化必备之任务调度
-
【SQL Server性能优化】SQL Server 2008之表压缩
-
sql server数据库性能优化之2-避免使用CTE公用表达式的递归【by zhang502219048】
-
sql server数据库性能优化之1-慎用distinct避免不必要的distinct【by zhang502219048】
-
sql server中的任务调度与CPU深入讲解
-
SQL Server OS的任务调度机制
-
浅谈SQL Server数据优化之若干要点
-
Sql Server查询性能优化之不可小觑的书签查找介绍