Репликация SQL Server «многие к одному»

14

У меня есть 8 отдельных машин SQL Server 2008 R2, на каждой из которых размещена 1 база данных. Каждая база данных имеет идентичную структуру таблицы и схему, а также полностью уникальные данные.

Я хотел бы установить сервер отчетов (может быть 2008 или 2012), который объединяет строки из выбранных таблиц на 8 исходных серверах в один экземпляр этих таблиц на сервере отчетов. Это односторонняя репликация (без изменений на сервер отчетов). Мне нужно будет реплицировать изменения из исходных баз данных с относительно низкой задержкой (скажем, 20-30 секунд).

Кроме того, я хотел бы найти методы для достижения этого с минимальным воздействием на исходные серверы, насколько это практически возможно. Сторонние агенты, триггеры или моды схемы на этих серверах сложны в моей среде.

Мои вопросы:

  • Каковы перспективные архитектуры и технологии для достижения этой цели?
  • Я смотрел на репликацию слиянием SQL Server, но меня беспокоит задержка. Это подходящая технология для этой цели?
  • Существуют ли много-к-одному архитектуры для репликации транзакций?
  • Стоит ли смотреть репликацию «1 к 1» на 8 баз данных на моем сервере отчетов, а затем какую-нибудь настраиваемую функцию слияния (двухэтапная репликация)?

Спасибо Джон

Джон Джехеймер
источник
Единственная встроенная опция - репликация слиянием. 30-секундный SLA должен быть легко достижимым, если в источниках не происходит тонны изменений. Любая двухэтапная схема репликации привнесет дополнительную задержку в процесс, усложняя достижение указанного SLA.
Джон Зигель

Ответы:

16

У меня есть 8 отдельных машин SQL Server 2008 R2, на каждой из которых размещена 1 база данных. Каждая база данных имеет идентичную структуру таблицы и схему, а также полностью уникальные данные. Я хотел бы установить сервер отчетов (может быть 2008 или 2012), который объединяет строки из выбранных таблиц на 8 исходных серверах в один экземпляр этих таблиц на сервере отчетов. Это односторонняя репликация (без изменений на сервер отчетов). Мне нужно будет реплицировать изменения из исходных баз данных с относительно низкой задержкой (скажем, 20-30 секунд).

Вы можете добиться этого с помощью репликации транзакций . Ниже описано, как вы можете это сделать.

Примечание. Для достижения этой цели необходимо слегка изменить схему таблицы, поскольку вы должны однозначно идентифицировать эти строки при репликации на подписчика. В качестве предварительного условия для T-Rep вам нужно иметь таблицы с определенным PK.

Ниже приведен пример таблицы на серверах Publisher, которая находится на всех ваших 8 серверах, которые вы хотите объединить на сервере отчетов.

CREATE TABLE Products
(
ProductID INT not null,
ProductName VARCHAR(25),
ServerName sysname default @@servername not null -- this is to identify which row is from which server ; probably add this using Alter column
)
GO
ALTER TABLE Products
ADD CONSTRAINT pk_Product_ID_ServerName PRIMARY KEY (ProductID)

На сервере подписчика необходимо создать ту же таблицу, но с другим PK, чтобы однозначно идентифицировать строки на подписчике (если этого не произойдет, T-Rep потерпит неудачу с нарушением PK - я предполагаю, что вы не можете изменить структуру PK на живая ПРОДУКЦИЯ, а лучше ее модифицировать у подписчика)

CREATE TABLE Products
(
ProductID INT not null,
ProductName VARCHAR(25),
ServerName sysname default @@servername not null
);
GO

ALTER TABLE Products
ADD CONSTRAINT pk_Product_ID_ServerName PRIMARY KEY (ProductID,ServerName)

Приведенный ниже скрипт поможет вам настроить T-Rep, просто измените имя базы данных, имя сервера назначения и имя объекта.

-- Enabling the replication database
use master
exec sp_replicationdboption @dbname = N'repl1', @optname = N'publish', @value = N'true'
GO

exec [repl1].sys.sp_addlogreader_agent @job_login = null, @job_password = null, @publisher_security_mode = 1
GO
exec [repl1].sys.sp_addqreader_agent @job_login = null, @job_password = null, @frompublisher = 1
GO
-- Adding the transactional publication
use [repl1]
exec sp_addpublication @publication = N'repl1_2005', @description = N'Transactional publication of database ''repl1'' from Publisher ''server_name\SQL2005''.', @sync_method = N'concurrent', @retention = 0, @allow_push = N'true', @allow_pull = N'true', @allow_anonymous = N'false', @enabled_for_internet = N'false', @snapshot_in_defaultfolder = N'true', @compress_snapshot = N'false', @ftp_port = 21, @ftp_login = N'anonymous', @allow_subscription_copy = N'false', @add_to_active_directory = N'false', @repl_freq = N'continuous', @status = N'active', @independent_agent = N'true', @immediate_sync = N'false', @allow_sync_tran = N'false', @autogen_sync_procs = N'false', @allow_queued_tran = N'false', @allow_dts = N'false', @replicate_ddl = 1, @allow_initialize_from_backup = N'false', @enabled_for_p2p = N'false', @enabled_for_het_sub = N'false'
GO


exec sp_addpublication_snapshot @publication = N'repl1_2005', @frequency_type = 1, @frequency_interval = 0, @frequency_relative_interval = 0, @frequency_recurrence_factor = 0, @frequency_subday = 0, @frequency_subday_interval = 0, @active_start_time_of_day = 0, @active_end_time_of_day = 235959, @active_start_date = 0, @active_end_date = 0, @job_login = null, @job_password = null, @publisher_security_mode = 1
exec sp_grant_publication_access @publication = N'repl1_2005', @login = N'sa'
GO
exec sp_grant_publication_access @publication = N'repl1_2005', @login = N'NT AUTHORITY\SYSTEM'
GO
exec sp_grant_publication_access @publication = N'repl1_2005', @login = N'BUILTIN\Administrators'
GO
exec sp_grant_publication_access @publication = N'repl1_2005', @login = N'server_name\SQLServer2005SQLAgentUser$server_name$SQL2005'
GO
exec sp_grant_publication_access @publication = N'repl1_2005', @login = N'server_name\SQLServer2005MSSQLUser$server_name$SQL2005'
GO
exec sp_grant_publication_access @publication = N'repl1_2005', @login = N'distributor_admin'
GO

-- Adding the transactional articles
use [repl1]
exec sp_addarticle @publication = N'repl1_2005', @article = N'Products', @source_owner = N'dbo', @source_object = N'Products', @type = N'logbased', @description = N'', @creation_script = N'', @pre_creation_cmd = N'none', @schema_option = 0x000000000803509F, @identityrangemanagementoption = N'none', @destination_table = N'Products', @destination_owner = N'dbo', @status = 24, @vertical_partition = N'false', @ins_cmd = N'CALL [sp_MSins_dboProducts]', @del_cmd = N'CALL [sp_MSdel_dboProducts]', @upd_cmd = N'SCALL [sp_MSupd_dboProducts]'
GO

-- Adding the transactional subscriptions
use [repl1]
exec sp_addsubscription @publication = N'repl1_2005', @subscriber = N'server_name\SQL2008R2', @destination_db = N'repl123', @subscription_type = N'Push', @sync_type = N'automatic', @article = N'all', @update_mode = N'read only', @subscriber_type = 0
exec sp_addpushsubscription_agent @publication = N'repl1_2005', @subscriber = N'server_name\SQL2008R2', @subscriber_db = N'repl123', @job_login = null, @job_password = null, @subscriber_security_mode = 1, @frequency_type = 64, @frequency_interval = 1, @frequency_relative_interval = 1, @frequency_recurrence_factor = 0, @frequency_subday = 4, @frequency_subday_interval = 5, @active_start_time_of_day = 0, @active_end_time_of_day = 235959, @active_start_date = 0, @active_end_date = 0, @dts_package_location = N'Distributor'
GO

Несколько замечаний:

В sp_addsubscription убедитесь, что @sync_type = N'automatic'

И свойства статьи должны быть установлены на:

введите описание изображения здесь

Итак, наконец, вы можете объединить строки из всех (в моем случае 3 серверов), как показано ниже:

введите описание изображения здесь

Итак, в итоге,

  • Используйте T-Rep.
  • Добавьте дополнительный столбец к существующим базам данных Publisher, например, serverName, чтобы однозначно идентифицировать строки на подписчике.
  • Создайте таблицу на подписчике с включенным PK в качестве ServerName.

  • Создайте репликацию таблиц с параметром @sync_type = N'automatic 'и свойством Article, установленным на «Сохранить существующий объект без изменений».

  • Запустите агент моментальных снимков.

  • Проверьте консолидированные данные на подписчика.

Кин Шах
источник
@JohnJeheimer Рад, что это помогло. Если вы чувствуете, что ответ ответил на ваш вопрос, пожалуйста, поставьте / отметьте как ответ.
Кин Шах