经验首页 前端设计 程序设计 Java相关 移动开发 数据库/运维 软件/图像 大数据/云计算 其他经验
当前位置:技术经验 » 数据库/运维 » MS SQL Server » 查看文章
关于SQL Server 镜像数据库快照的创建及使用
来源:cnblogs  作者:东山絮柳仔  时间:2021/1/25 11:07:46  对本文有异议

从SQL Server 2005 SP1 起,SQL 开始支持数据库镜像。它的设计目的是试图为SQL Server 提供一个具有实时性数据同步的灾难恢复技术,即能够提供数据冗余备份,切换起来比较方便。每个主体数据库只能有一个镜像数据库。镜像数据库作为主体数据库的一个副本,在主体数据库发生故障、不可访问时能够迅速恢复数据库访问,提供故障恢复功能。镜像数据库一直处于“恢复”状态,因此不能被直接访问。

一.什么是数据库快照

为了提高资源的使用率,想让镜像数据库可以承担部分读,可以借助数据库快照技术。

数据库快照是 SQL Server 数据库(源数据库)的只读静态视图。数据库快照在事务上与创建快照时刻的源数据库一致。一个源数据库可以有多个数据库快照,并且可以作为数据库驻留在一个SQL Server实例中。数据库快照是一个只读的状态,这也就决定了快照的使用场景,那就是用于报表。也可以通过快照快速恢复部分误操作数据。

快照创建时,SQL Server会在实例中创建一个空文件的快照数据库,如果在快照数据库上查询数据,就会被重定向到源数据库中,所以返回的数据都是源数据库的数据。如果在创建数据库快照后,源数据库的原始数据发生了变更,则会把变更前的数据Copy一份写入到对应的数据库快照空白文件中,这时候数据库快照就有了数据,也不再全是空白页了,此时再查询SQL Server数据库快照,查询到的是数据库快照中的数据库(也就是原始数据的副本)。快照文件的大小随着对源数据库的更改而增大。 注意:数据库快照在数据页级运行。在第一次修改源数据库页之前,先将原始页从源数据库复制到快照。快照将存储原始页,保留它们在创建快照时的数据记录。 对要进行第一次修改的每一页重复此过程。

二.实现创建数据库快照的SP

1.时间格式函数FormatDate

在前面的学习分析中,我们知道一个源数据库可以有多个快照,所以,为了区别同时存在的多快照,我们对快照的命名基于了时间(即包含了时间元素),例如:

SS_DBName_19022311(2019年2月23号11点产生的快照);SS_DBName_19022312(2019年2月23号12点产生的快照);SS_DBName_19022313(2019年2月23号13点产生的快照)。所以,先编写创建时间格式函数FormatDate。此外,快照以SS_开头是为了标示此对象为数据库快照,与其他数据库对象区别开,便于运维管理,SS为Snapshots的缩写。

  1. USE [master]
  2. GO
  3.  
  4. /****** Object: UserDefinedFunction [dbo].[FormatDate] Script Date: 2019/1/22 17:37:53 ******/
  5. SET ANSI_NULLS ON
  6. GO
  7.  
  8. SET QUOTED_IDENTIFIER ON
  9. GO
  10.  
  11.  
  12. Create FUNCTION [dbo].[FormatDate]
  13. (@date as datetime,
  14. @formatstring as varchar(100)
  15. )
  16. RETURNS varchar(100) AS
  17. BEGIN
  18. declare @datestring as varchar(100)
  19. set @datestring=@formatstring
  20.  
  21. --year
  22. set @datestring=replace(@datestring, 'yyyy', cast(year(@date) as char(4)))
  23. set @datestring=replace(@datestring, 'yy', right(cast(year(@date) as char(4)),2))
  24. --millisecond
  25. set @datestring=replace(@datestring, 'ms', replicate('0',3-len(cast(datepart(ms,@date) as varchar(3)))) + cast(datepart(ms, @date) as varchar(3)))
  26. --month
  27. set @datestring=replace(@datestring, 'mm', replicate('0',2-len(cast(month(@date) as varchar(2)))) + cast(month(@date) as varchar(2)))
  28. set @datestring=replace(@datestring, 'm', cast(month(@date) as varchar(2)))
  29. --day
  30. set @datestring=replace(@datestring, 'dd', replicate('0',2-len(cast(day(@date) as varchar(2)))) + cast(day(@date) as varchar(2)))
  31. set @datestring=replace(@datestring, 'd', cast(day(@date) as varchar(2)))
  32. --hour
  33. set @datestring=replace(@datestring, 'hh', replicate('0',2-len(cast(datepart(hh,@date) as varchar(2)))) + cast(datepart(hh, @date) as varchar(2)))
  34. set @datestring=replace(@datestring, 'h', cast(datepart(hh, @date) as varchar(2)))
  35. --minute
  36. set @datestring=replace(@datestring, 'nn', replicate('0',2-len(cast(datepart(n,@date) as varchar(2)))) + cast(datepart(n, @date) as varchar(2)))
  37. set @datestring=replace(@datestring, 'n', cast(datepart(n, @date) as varchar(2)))
  38. --second
  39. set @datestring=replace(@datestring, 'ss', replicate('0',2-len(cast(datepart(ss,@date) as varchar(2)))) + cast(datepart(ss, @date) as varchar(2)))
  40. set @datestring=replace(@datestring, 's', cast(datepart(ss, @date) as varchar(2)))
  41. return @datestring
  42. END
  43.  
  44. GO

2.创建快照的SP

(1)首先明确那些DB需要创建快照。这里是从MirrorDB 中筛选的,并且,IN()可以定义多个数据库。定义部分如下:

(2)明确数据库快照保留的个数

         

 (3)具体的创建脚本

  1. USE [master]
  2. GO
  3.  
  4. /****** Object: StoredProcedure [dbo].[CreateSnapshotDB_By1H] Script Date: 2019/1/22 17:39:07 ******/
  5. SET ANSI_NULLS ON
  6. GO
  7.  
  8. SET QUOTED_IDENTIFIER ON
  9. GO
  10.  
  11.  
  12. --------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
  13. --*Program*: <Create Snapshot DB for Mirror DB>
  14. --*Programer*:<Carson.Xu>
  15. --*Date*:<2019/01/21>
  16. --*Unify*:<ALL>
  17. --*Description*:<Create Snapshot DB for Mirror DB>
  18. --########## Parameter Description Begin ##########
  19.  
  20. --########## Parameter Description End # ##########
  21. --------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
  22.  
  23. CREATE PROCEDURE [dbo].[CreateSnapshotDB_By1H]
  24. AS
  25.  
  26. set nocount on
  27.  
  28. declare @sSql nvarchar(2000)
  29. declare @sMsg varchar(4000)
  30. declare @TransDT varchar(10)
  31. declare @SS_DBName varchar(40)=''
  32. declare @DBLogic_FileName varchar(40)=''
  33. declare @SnapshotDBType varchar(40)=''
  34. declare @SS_NewDBName varchar(40)=''
  35. declare @SS_NewDB_FileName varchar(50)=''
  36. Declare @RestorePath varchar(200)
  37. create table #DBLogic (Name nvarchar(200) )
  38. create table #OldSS_DB (Name nvarchar(200) )
  39. set @sMsg=''
  40. set @RestorePath='D:\SnapShot'
  41. select @TransDT=dbo.FormatDate(GETDATE(),'YYYYMMDDHH')
  42. select DB_NAME(database_id) as DBName,database_id, mirroring_partner_name Into #MirrorDB from sys.database_mirroring where mirroring_guid is not null and DB_NAME(database_id) in('Your_DBName')
  43. While exists(Select top 1 * from #MirrorDB )
  44. begin
  45. --SS_JON/QFMS_MMDDHH
  46. select top 1 @SnapshotDBType=DBName from #MirrorDB
  47. set @SS_NewDBName='SS_'+@SnapshotDBType+'_'+Right(@TransDT,6)
  48. --print @SS_NewDBName
  49. IF exists(select Name from sys.databases where name = @SS_NewDBName )
  50. BEGIN
  51. BEGIN
  52. set @sSql='drop DATABASE '+ @SS_NewDBName
  53. exec sp_executesql @sSql
  54. END
  55. END
  56.  
  57. Insert into #DBLogic
  58. select Name from sys.master_files where DB_NAME(database_id)=@SnapshotDBType and type=0
  59. if not exists(select Name from sys.databases where name = @SS_NewDBName )
  60. begin
  61. set @sSql=' CREATE DATABASE '+@SS_NewDBName +' ON '
  62. select @sSql= @sSql+ '( NAME ='+Name +', FILENAME = '''+@RestorePath+ '\'+@SnapshotDBType+
  63. '\SS_'+Name+'_'+ left(@TransDT,10)+'.SS''),' from #DBLogic
  64. if right(@sSql,1)=','
  65. begin
  66. set @sSql=SUBSTRING( @sSql,1,LEN(@sSql)-1 )
  67. end
  68. set @sSql=@sSql+' AS SNAPSHOT OF ['+ @SnapshotDBType +']'
  69. print @sSql
  70. exec sp_executesql @sSql
  71. end
  72. else
  73. begin
  74. print 'Drop SnapShot DB('+@SS_NewDBName+' fail, it can not create it again! transDT:' +@TransDT
  75. end
  76.  
  77. Declare @TempSS_DB nvarchar(200)
  78. ----删除历史快照
  79. Insert Into #OldSS_DB
  80. select Name from sys.databases where name like 'SS_'+@SnapshotDBType+'%' and create_date < dateadd(hour,-3, GETDATE())
  81. while exists(Select * from #OldSS_DB)
  82. begin
  83. select top 1 @TempSS_DB=Name from #OldSS_DB
  84. set @sSql='drop DATABASE '+ @TempSS_DB
  85. exec sp_executesql @sSql
  86. delete from #OldSS_DB where Name=@TempSS_DB
  87. end
  88. delete from #DBLogic
  89. delete from #MirrorDB where DBName =@SnapshotDBType
  90. end
  91.  
  92. GO

 3.创建便于访问的快照

上面的SP是创建了以时间命名的DB快照,创建时间不同,快照的名字就会不同。但是,如果DB名字不同,程序应用调用起来就非常不方便。所以我们还希望可以创建一个不带时间的数据库快照,每次创建数据的快照名字是一样的。这样前端应用程序访问数据库就不再需要修改数据库的连接配置了。

下面这个SP就是为了解决这个上面这个应用场景。代码将数据库的快照命名为SS_DBName。为了包含融合前面SP的功能,这份SP还直接调用了存储过程CreateSnapshotDB_By1H----EXEC [dbo].[CreateSnapshotDB_By1H]

  1. USE [master]
  2. GO
  3.  
  4. /****** Object: StoredProcedure [dbo].[CreateSnapshotDB] Script Date: 2019/1/22 17:40:57 ******/
  5. SET ANSI_NULLS ON
  6. GO
  7.  
  8. SET QUOTED_IDENTIFIER ON
  9. GO
  10.  
  11. --------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
  12. --*Program*: <Create Snapshot DB for Mirror DB>
  13. --*Programer*:<Carson Xu>
  14. --*Date*:<2019/01/21>
  15. --*Unify*:<ALL>
  16. --*Description*:<Create Snapshot DB for Mirror DB>
  17. --########## Parameter Description Begin ##########
  18.  
  19. --########## Parameter Description End # ##########
  20. --------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
  21. Create PROCEDURE [dbo].[CreateSnapshotDB]
  22. AS
  23. BEGIN
  24. set nocount on
  25.  
  26. declare @sSql nvarchar(2000)
  27. declare @sMsg varchar(4000)
  28. declare @SS_DBName varchar(40)=''
  29. declare @TransDT char(10)
  30. declare @DBLogic_FileName varchar(40)=''
  31. declare @SnapshotDBType varchar(40)=''
  32. declare @SS_NewDBName varchar(40)=''
  33. declare @SS_NewDB_FileName varchar(50)=''
  34. Declare @RestorePath varchar(200)
  35. create table #DBLogic (Name nvarchar(200) )
  36. create table #OldSS_DB (Name nvarchar(200) )
  37. set @sMsg=''
  38.  
  39. set @RestorePath='D:\SnapShot'
  40. select @TransDT=dbo.FormatDate(GETDATE(),'YYYYMMDDHH')
  41. Set @sSql='"MD '+@RestorePath
  42. EXEC master..xp_cmdshell @sSql ,no_output
  43. select DB_NAME(database_id) as DBName,database_id, mirroring_partner_name Into #MirrorDB from sys.database_mirroring where mirroring_guid is not null and DB_NAME(database_id) in('Your_DBName')
  44. While exists(Select top 1 * from #MirrorDB )
  45. begin
  46. --SS_SMT/QSMS_MMDDHH
  47. select top 1 @SnapshotDBType=DBName from #MirrorDB
  48. Set @sSql='"MD '+@RestorePath +'\'+@SnapshotDBType
  49. EXEC master..xp_cmdshell @sSql ,no_output
  50. set @SS_NewDBName='SS_'+@SnapshotDBType
  51. --print @SS_NewDBName
  52. IF exists(select Name from sys.databases where name = @SS_NewDBName )
  53. BEGIN
  54. BEGIN
  55. set @sSql='drop DATABASE '+ @SS_NewDBName
  56. exec sp_executesql @sSql
  57. END
  58. END
  59.  
  60. Insert into #DBLogic
  61. select Name from sys.master_files where DB_NAME(database_id)=@SnapshotDBType and type=0
  62. if not exists(select Name from sys.databases where name = @SS_NewDBName )
  63. begin
  64. set @sSql=' CREATE DATABASE '+@SS_NewDBName +' ON '
  65. select @sSql= @sSql+ '( NAME ='+Name +', FILENAME = '''+@RestorePath+ '\'+@SnapshotDBType+
  66. '\SS_'+Name+'.SS''),' from #DBLogic
  67. if right(@sSql,1)=','
  68. begin
  69. set @sSql=SUBSTRING( @sSql,1,LEN(@sSql)-1 )
  70. end
  71. set @sSql=@sSql+' AS SNAPSHOT OF ['+ @SnapshotDBType +']'
  72. print @sSql
  73. exec sp_executesql @sSql
  74. end
  75. else
  76. begin
  77. print 'Drop SnapShot DB('+@SS_NewDBName+' fail, it can not create it again! transDT:' +@TransDT
  78. end
  79. delete from #DBLogic
  80. delete from #MirrorDB where DBName =@SnapshotDBType
  81. end
  82. EXEC [dbo].[CreateSnapshotDB_By1H]
  83.  
  84. END
  85.  
  86. GO

 以上代码为创建镜像DB快照使用到的函数和存储过程。在调试部署OK后,就可以设置Job了,让其每小时自动执行一次。Job的设置就不再赘言了,核心代码就是:

  1. exec CreateSnapshotDB

三.同步主体、镜像数据库间的账号

系统数据库不能被镜像,用户名密码自然也不能被同步到Mirror服务器上。快照的用户权限继承于源库,但是MIrror 实例上并没有相应的账号信息。所以,需要先到主体数据库(Principal Database)上导出用户的账号信息(可以指定某个账号),然后将打印出的SQL语句Copy至Mirror实例上执行一下就可以了。

主要使用的SP为sp_help_revlogin,但是这个SP会调用到sp_hexadecimal。

1.先创建基础SP:sp_hexadecimal

  1. USE [master]
  2. GO
  3.  
  4. /****** Object: StoredProcedure [dbo].[sp_hexadecimal] Script Date: 2019/1/22 17:48:06 ******/
  5. SET ANSI_NULLS ON
  6. GO
  7.  
  8. SET QUOTED_IDENTIFIER ON
  9. GO
  10.  
  11.  
  12. CREATE PROCEDURE [dbo].[sp_hexadecimal]
  13. @binvalue varbinary(256),
  14. @hexvalue varchar (514) OUTPUT
  15. AS
  16. DECLARE @charvalue varchar (514)
  17. DECLARE @i int
  18. DECLARE @length int
  19. DECLARE @hexstring char(16)
  20. SELECT @charvalue = '0x'
  21. SELECT @i = 1
  22. SELECT @length = DATALENGTH (@binvalue)
  23. SELECT @hexstring = '0123456789ABCDEF'
  24. WHILE (@i <= @length)
  25. BEGIN
  26. DECLARE @tempint int
  27. DECLARE @firstint int
  28. DECLARE @secondint int
  29. SELECT @tempint = CONVERT(int, SUBSTRING(@binvalue,@i,1))
  30. SELECT @firstint = FLOOR(@tempint/16)
  31. SELECT @secondint = @tempint - (@firstint*16)
  32. SELECT @charvalue = @charvalue +
  33. SUBSTRING(@hexstring, @firstint+1, 1) +
  34. SUBSTRING(@hexstring, @secondint+1, 1)
  35. SELECT @i = @i + 1
  36. END
  37. SELECT @hexvalue = @charvalue
  38. GO

 2.创建导出用户信息的SP:sp_help_revlogin

  1. USE [master]
  2. GO
  3.  
  4. /****** Object: StoredProcedure [dbo].[sp_help_revlogin] Script Date: 2019/1/22 17:52:39 ******/
  5. SET ANSI_NULLS ON
  6. GO
  7.  
  8. SET QUOTED_IDENTIFIER ON
  9. GO
  10.  
  11.  
  12. CREATE PROCEDURE [dbo].[sp_help_revlogin] @login_name sysname = NULL AS
  13. DECLARE @name sysname
  14. DECLARE @type varchar (1)
  15. DECLARE @hasaccess int
  16. DECLARE @denylogin int
  17. DECLARE @is_disabled int
  18. DECLARE @PWD_varbinary varbinary (256)
  19. DECLARE @PWD_string varchar (514)
  20. DECLARE @SID_varbinary varbinary (85)
  21. DECLARE @SID_string varchar (514)
  22. DECLARE @tmpstr varchar (1024)
  23. DECLARE @is_policy_checked varchar (3)
  24. DECLARE @is_expiration_checked varchar (3)
  25. DECLARE @defaultdb sysname
  26. IF (@login_name IS NULL)
  27. DECLARE login_curs CURSOR FOR
  28. SELECT p.sid, p.name, p.type, p.is_disabled, p.default_database_name, l.hasaccess, l.denylogin FROM
  29. sys.server_principals p LEFT JOIN sys.syslogins l
  30. ON ( l.name = p.name ) WHERE p.type IN ( 'S', 'G', 'U' ) AND p.name <> 'sa'
  31. ELSE
  32. DECLARE login_curs CURSOR FOR
  33. SELECT p.sid, p.name, p.type, p.is_disabled, p.default_database_name, l.hasaccess, l.denylogin FROM
  34. sys.server_principals p LEFT JOIN sys.syslogins l
  35. ON ( l.name = p.name ) WHERE p.type IN ( 'S', 'G', 'U' ) AND p.name = @login_name
  36. OPEN login_curs
  37. FETCH NEXT FROM login_curs INTO @SID_varbinary, @name, @type, @is_disabled, @defaultdb, @hasaccess, @denylogin
  38. IF (@@fetch_status = -1)
  39. BEGIN
  40. PRINT 'No login(s) found.'
  41. CLOSE login_curs
  42. DEALLOCATE login_curs
  43. RETURN -1
  44. END
  45. SET @tmpstr = '/* sp_help_revlogin script '
  46. PRINT @tmpstr
  47. SET @tmpstr = '** Generated ' + CONVERT (varchar, GETDATE()) + ' on ' + @@SERVERNAME + ' */'
  48. PRINT @tmpstr
  49. PRINT ''
  50. WHILE (@@fetch_status <> -1)
  51. BEGIN
  52. IF (@@fetch_status <> -2)
  53. BEGIN
  54. PRINT ''
  55. SET @tmpstr = '-- Login: ' + @name
  56. PRINT @tmpstr
  57. IF (@type IN ( 'G', 'U'))
  58. BEGIN -- NT authenticated account/group
  59. SET @tmpstr = 'CREATE LOGIN ' + QUOTENAME( @name ) + ' FROM WINDOWS WITH DEFAULT_DATABASE = [' + @defaultdb + ']'
  60. END
  61. ELSE BEGIN -- SQL Server authentication
  62. -- obtain password and sid
  63. SET @PWD_varbinary = CAST( LOGINPROPERTY( @name, 'PasswordHash' ) AS varbinary (256) )
  64. EXEC sp_hexadecimal @PWD_varbinary, @PWD_string OUT
  65. EXEC sp_hexadecimal @SID_varbinary,@SID_string OUT
  66. -- obtain password policy state
  67. SELECT @is_policy_checked = CASE is_policy_checked WHEN 1 THEN 'ON' WHEN 0 THEN 'OFF' ELSE NULL END FROM sys.sql_logins WHERE name = @name
  68. SELECT @is_expiration_checked = CASE is_expiration_checked WHEN 1 THEN 'ON' WHEN 0 THEN 'OFF' ELSE NULL END FROM sys.sql_logins WHERE name = @name
  69. SET @tmpstr = 'CREATE LOGIN ' + QUOTENAME( @name ) + ' WITH PASSWORD = ' + @PWD_string + ' HASHED, SID = ' + @SID_string + ', DEFAULT_DATABASE = [' + @defaultdb + ']'
  70. IF ( @is_policy_checked IS NOT NULL )
  71. BEGIN
  72. SET @tmpstr = @tmpstr + ', CHECK_POLICY = ' + @is_policy_checked
  73. END
  74. IF ( @is_expiration_checked IS NOT NULL )
  75. BEGIN
  76. SET @tmpstr = @tmpstr + ', CHECK_EXPIRATION = ' + @is_expiration_checked
  77. END
  78. END
  79. IF (@denylogin = 1)
  80. BEGIN -- login is denied access
  81. SET @tmpstr = @tmpstr + '; DENY CONNECT SQL TO ' + QUOTENAME( @name )
  82. END
  83. ELSE IF (@hasaccess = 0)
  84. BEGIN -- login exists but does not have access
  85. SET @tmpstr = @tmpstr + '; REVOKE CONNECT SQL TO ' + QUOTENAME( @name )
  86. END
  87. IF (@is_disabled = 1)
  88. BEGIN -- login is disabled
  89. SET @tmpstr = @tmpstr + '; ALTER LOGIN ' + QUOTENAME( @name ) + ' DISABLE'
  90. END
  91. PRINT @tmpstr
  92. END
  93. FETCH NEXT FROM login_curs INTO @SID_varbinary, @name, @type, @is_disabled, @defaultdb, @hasaccess, @denylogin
  94. END
  95. CLOSE login_curs
  96. DEALLOCATE login_curs
  97. RETURN 0
  98. GO

 

四.快照原理请参阅以下分享

1.https://docs.microsoft.com/zh-cn/sql/relational-databases/databases/database-snapshots-sql-server?view=sql-server-ver15

2.https://www.zhihu.com/question/305701792

原文链接:http://www.cnblogs.com/xuliuzai/p/14314609.html

 友情链接:直通硅谷  点职佳  北美留学生论坛

本站QQ群:前端 618073944 | Java 606181507 | Python 626812652 | C/C++ 612253063 | 微信 634508462 | 苹果 692586424 | C#/.net 182808419 | PHP 305140648 | 运维 608723728

W3xue 的所有内容仅供测试,对任何法律问题及风险不承担任何责任。通过使用本站内容随之而来的风险与本站无关。
关于我们  |  意见建议  |  捐助我们  |  报错有奖  |  广告合作、友情链接(目前9元/月)请联系QQ:27243702 沸活量
皖ICP备17017327号-2 皖公网安备34020702000426号