使用Powershell监控AlwayOn健康
1.基本命令概述
AlwayOn Dashboard是很有用的查看整体AG健康状况的工具。但是这个工具不是用于7*24监控的。如果应用程序夜间发送严重的问题,Dashboard并不会有任何提示。那么可以使用Powershell命令来获取并通过SQL Agent调用创建告警。
 
1.1 Dashboard
首先创建一个AG。这个AG被配置为自动故障转移。查看这个AG的dashboard
 
 
通过查看AG的状态发现,AG状态不对。而且问题是来自于WSNAVEL1-94bv5这台服务器的。然后我们使用Powershell获取AG的信息
 
1.2 Powershell 整合
通过3个powershell获取AlwayOn Dashboard信息:
1.Test-SqlAvailabilityGroup
2.Test-SqlAvailabilityReplica
3.Test-SqlDatabaseReplicaState
 
命令对应Dashboard各个部分:
 
 
然后通过powershell调用,首先进入SQLPS
PS > SQLPS
Microsoft SQL Server PowerShell
Version 11.0.2100.18
Microsoft Corp. All rights reserved.
 
进入到AG
 
PS > cd SQLSERVER:\SQL\WSNAVELY1-SH21Q\DEFAULT\AvailabilityGroups
PS > dir
 
Name                 PrimaryReplicaServerName
----                 ------------------------
VLEApplication       WSNAVELY1-sh21q
 
现在就可以运行Test-SqlAvailabilityGroup命令了。
 
PS > Test-SqlAvailabilityGroup .\VLEApplication
 
HealthState            Name
-----------            ----
Error                  VLEApplication
 
发现是错误状态,以下是各个状态表示的意思:
 
HealthState
 
Meaning
 
Error
 
表示对象存在严重的问题,高可用受损
 
Warning
 
表示对象存在警告状态,高可用存在风险。
 
Unknown
 
表示对象的健康状态无法确定,可能会在secondary副本上执行这个命令会出现。
 
PolicyExecutionFailure
 
当评估对象是发生异常。说明实现策略有问题
 
Healthy
 
表示是健康状态
 
然后进去这个AG查看可用副本状态
 
PS > cd .\VLEApplication
PS > dir
 
AvailabilityDatabases
AvailabilityGroupListeners
AvailabilityReplicas
DatabaseReplicaStates
 
PS > cd .\AvailabilityReplicas
 
PS > dir
 
Name                 Role      ConnectionState RollupSynchronizationState
----                 ----      --------------- --------------------------
WSNAVELY1-94bv5      Secondary Connected       NotSynchronizing
WSNAVELY1-sh21q      Primary   Connected       Synchronized
 
PS > dir | Test-SqlAvailabilityReplica
 
HealthState            AvailabilityGroup    Name
-----------            -----------------    ----
Warning                VLEApplication       WSNAVELY1-94bv5
Healthy                VLEApplication       WSNAVELY1-sh21q
 
然后会发现可用副本上有警告状态。然后我们进入该可用副本,查看可用的状态
 
PS > cd ..
 
PS > cd .\DatabaseReplicaStates
 
PS > dir
 
 
 
AvailabilityReplicaServerName AvailabilityDatabaseName SynchronizationState
 
----------------------------- ------------------------ --------------------
 
WSNAVELY1-94bv5               DB-1                     NotSynchronizing    
 
WSNAVELY1-94bv5               DB-2                     Synchronized        
 
WSNAVELY1-94bv5               DB-3                     Synchronized        
 
WSNAVELY1-94bv5               DB-4                     Synchronized        
 
WSNAVELY1-94bv5               DB-5                     Synchronized        
 
WSNAVELY1-sh21q               DB-1                     Synchronized        
 
WSNAVELY1-sh21q               DB-2                     Synchronized        
 
WSNAVELY1-sh21q               DB-3                     Synchronized        
 
WSNAVELY1-sh21q               DB-4                     Synchronized        
 
WSNAVELY1-sh21q               DB-5                     Synchronized        
 
 
 
PS > dir | Test-SqlDatabaseReplicaState
 
 
 
HealthState            AvailabilityGroup    AvailabilityReplica  Name
 
-----------            -----------------    -------------------  ----
 
Warning                VLEApplication       WSNAVELY1-94bv5      DB-1
 
Healthy                VLEApplication       WSNAVELY1-94bv5      DB-2
 
Healthy                VLEApplication       WSNAVELY1-94bv5      DB-3
 
Healthy                VLEApplication       WSNAVELY1-94bv5      DB-4
 
Healthy                VLEApplication       WSNAVELY1-94bv5      DB-5
 
Healthy                VLEApplication       WSNAVELY1-sh21q      DB-1
 
Healthy                VLEApplication       WSNAVELY1-sh21q      DB-2
 
Healthy                VLEApplication       WSNAVELY1-sh21q      DB-3
 
Healthy                VLEApplication       WSNAVELY1-sh21q      DB-4
 
Healthy                VLEApplication       WSNAVELY1-sh21q      DB-5
 
发现WSNAVELY1-94bv5的DB-1上有警告状态。这个时候我们已经评估了所有的AG内的对象。也知道了那个对象需要跟深入的调查。
 
2.额外Powershell命令的使用
2.1 AlwaysOn的健康模型
读到这里需要先了解一下AlwayOn的健康模型。大概总结如下:为了计算AG,可用副本,可用数据库的健康状态,我们执行一些已经安装的策略。这些策略来测试高可用配置的各个方面,根据结果我们计算总体对象的健康状态。一些策略可能比其他策略要严重,所以一个策略错误可能会导致错误或者警告。用户可以自定义策略来丰富健康模型。
 
2.2 查看策略评估细节
使用Powershell指令,可以获取策略评估的细节:
1.每个由Test-Sql*执行的powershell命令都有一个列,PolicyEvaluationDetails。这个列保存了一组策略的细节。
 
2.每个Test-Sql*命令都有一个-ShowPolicyDetail参数。如果指定了这个参数,命令会列举所有策略的结果,而不是只有一个结果。
 
方法1:
 
还是上面的AG场景:
 
PS > cd SQLSERVER:\SQL\WSNAVELY1-SH21Q\DEFAULT\AvailabilityGroups
 
PS > Test-SqlAvailabilityGroup .\VLEApplication
 
HealthState            Name
-----------            ----
Error                  VLEApplication
 
发现AG有严重的问题,但是不能知道是什么策略错误导致的。评估AG策略,然后获取PolicyEvaluationDetails列。
 
PS > $result = Test-SqlAvailabilityGroup .\VLEApplication
 
PS > $result.PolicyEvaluationDetails | ft Result,Name -AutoSize
 
Result  Name
------  ----
True    AlwaysOnAgOnlineStateHealthPolicy
True    AlwaysOnAgWSFClusterHealthPolicy
False   AlwaysOnAgAutomaticFailoverHealthPolicy
True    AlwaysOnAgReplicasConnectionHealthPolicy
False   AlwaysOnAgReplicasDataSynchronizationHealthPolicy
True    AlwaysOnAgReplicasRoleHealthPolicy
False   AlwaysOnAgSynchronousReplicasDataSynchronizationHealthPolicy
 
这里ft是Format-Table的缩写。会发现3个策略出现错误:
 
AlwaysOnAgAutomaticFailoverHealthPolicy
 
AlwaysOnAgReplicasDataSynchronizationHealthPolicy
 
AlwaysOnAgSynchronousReplicasDataSynchronizationHealthPolicy
 
这个时候可以连接到SSMS然后确定这3个策略到底是检查什么的。
 
方法2:
 
这个方法使用-ShowPolicyDetails参数。
 
PS > Test-SqlAvailabilityGroup .\VLEApplication -ShowPolicyDetails | ft Result,Name -AutoSize
 
Result  Name
------  ----
True    AlwaysOnAgOnlineStateHealthPolicy
True    AlwaysOnAgWSFClusterHealthPolicy
False   AlwaysOnAgAutomaticFailoverHealthPolicy
True    AlwaysOnAgReplicasConnectionHealthPolicy
False   AlwaysOnAgReplicasDataSynchronizationHealthPolicy
True    AlwaysOnAgReplicasRoleHealthPolicy
False   AlwaysOnAgSynchronousReplicasDataSynchronizationHealthPolicy
 
2.3 包含用户策略
AlwaysOn策略可以通过定义用户策略来扩展。首先需要允许用户定义的策略
 
Test-SqlAvailabilityGroup .\VLEApplication -ShowPolicyDetails –AllowUserPolicies
 
2.4 性能考虑
这样的场景,有搞一个100个数据库的AG。2个可用副本,一个200个数据库。想要评估AG下的所有数据库:
PS > $serverObj = New-Object Microsoft.SqlServer.Management.Smo.Server("WSNAVELY1-SH21Q")
 
PS > $ag = $serverObj.AvailabilityGroups["LargeAvailabilityGroup"]
 
PS > Measure-Command { $ag.DatabaseReplicaStates | Test-SqlDatabaseReplicaState }
 
Days              : 0
Hours             : 0
Minutes           : 0
Seconds           : 23
Milliseconds      : 430
 
大概花了20秒。现在显示后话后的方法。首先要关闭自动刷新行为-NoRefresh参数。然后需要指出有效的方法来加载服务器上的数据。幸运的是SMO提供了有效加载数据的方法。SetDefaultInitFields方法。对于这个机制详细的工作机制可以查看:
 
http://blogs.msdn.com/b/mwories/archive/2005/04/22/smoperf1.x
http://blogs.msdn.com/b/mwories/archive/2005/04/22/smoperf2.aspx
 
优化后的命令:
PS > $ServerObj = New-Object Microsoft.SqlServer.Management.Smo.Server("WSNAVELY1-SH21Q")
PS > $ServerObj.SetDefaultInitFields([Microsoft.SqlServer.Management.Smo.AvailabilityGroup], $true)
PS > $ServerObj.SetDefaultInitFields([Microsoft.SqlServer.Management.Smo.AvailabilityReplica], $true)
PS > $ServerObj.SetDefaultInitFields([Microsoft.SqlServer.Management.Smo.DatabaseReplicaState], $true)
PS > Measure-Command { $ag.DatabaseReplicaStates | Test-SqlDatabaseReplicaState -NoRefresh }
 
Days              : 0
Hours             : 0
Minutes           : 0
Seconds           : 7
Milliseconds      : 317
 
这样命令只花了7秒,比之前的快很多,主要的失却是查询执行次数不同。第一个例子每个数据库执行一次查询,第二个只用了一个查询获取了所有数据。
 
3.简单的监控程序
通过上面2节的介绍已经了解AlwaysOn的健康命令操作。我们可以使用这些命令来写一个简单的监控程序。流程如下:
 
先来看一下简单的监控脚本,如果AG出现问题就会抛出异常。脚本如下:
http://gallery.technet.microsoft.com/scriptcenter/AlwaysOn-Availability-23bc88b5
 
脚本基本流程如下:
脚本有2个参数Servername和GroupName。ServerName参数表示AG所在host的服务器名(需要当前primary所在的)。GroupName表示AG的在服务器上的名称。在脚本体,使用windows验证连接到指定的服务。然后设置一些DefaultInitFields。接下来常识查询相关的AG信息。如果AG不存在会抛出错误。如果PrimaryReplicaServerName没有设置也会抛出异常。PrimaryReplicaServerName为空可能表示AGoffline。如果发现是secondary replica,脚本会中断并且抛出警告。
 
最后执行AG上,可用副本上,可用数据库上的健康命令,如果有严重错误就会抛出异常。当然这个逻辑可以根据软件的不同进行调整。比如你在对象警告的时候抛出错误。或者在排出错误之前过滤一些。
 
先把上面的脚本放到本地,然后打开PowerShell命令行执行SQLPS,然后设置执行策略为RemoteSigned。因为SQLPS执行策略和的执行策略是分离的,必须制定Scope参数比如:
 
Set-ExecutionPolicy RemoteSigned -Scope Process
 
表示已经为SQLPS设置了执行策略,然后可以运行本地脚本了如下:
 
PS C:\> SQLPS
 
Microsoft SQL Server PowerShell
 
Version 11.0.2100.54
 
Microsoft Corp. All rights reserved.
 
PS SQLSERVER:\> Set-ExecutionPolicy RemoteSigned -Scope Process
 
PS SQLSERVER:\> C:\scripts\monitorag.ps1 -ServerName "myserver\myinstance" -GroupName "myag"
 
调度和通知
 
查看现在的监控从程序的流程:
 
困难的工作都已经完成了,只需要执行监控脚本,并且发送通知。
 
4.使用SQL Agent来调度
这里主要介绍如果调用脚本并通知错误。因为AG是多服务的系统,所以有个问题是,在哪个服务器上运行这个脚本?显然脚本必须运行在当前primary上。一个方法是在每个实例上都运行。只注意是primary的实例。所以现在需要再到如何在每个实例上都运行并且定期调用。并且需要一些通知机制。这个可以使用SQL Agent来处理。
 
4.1 单个实例配置
一下是在单个实例上配置的方法,前提条件:
 
1.SQL Agent已经运行
2.已经配置了数据库邮箱
3.已经在SQL Agent上配置了数据库邮箱
4.在SQL Agentb上配置操作
 
配置步骤:
 
1.新建一个job
2.新增步骤,选择type为powershell,然后在命令里面输入,C:\scripts\monitorag.ps1 -ServerName "wsnavely1-fs821" -GroupName "VLEApplication"点击ok完成。
3.设置schedule,并且在通知一栏设置错误通知,点击ok完成
 
4.2 多个实例设置
通过以上步骤,我们可以在每个实例上都运行一遍。但是SQL Agent也可以创建多服务的job