SQL Server – это мощная система управления базами данных, которая предлагает широкий спектр функций и возможностей. Одним из ключевых компонентов SQL Server является Azure Data Factory (ADF) V2, который предоставляет управляемую службу для интеграции и оркестрации данных в облаке.

На недавнем вебинаре от Pragmatic Works докладчик обсудил функции и преимущества ADF V2. Вот некоторые важные вопросы и ответы из вебинара:

Можно ли использовать сторонние задачи в Data Factory V2?

В нативной версии Data Factory не поддерживаются сторонние задачи. Однако SSIS Integration Runtime, который интегрирован с ADF V2, позволяет использовать сторонние задачи.

Можно ли использовать сторонние задачи в SSIS-пакетах, выполняемых в ADF V2?

Изначально ответ был “нет”. Однако в этой области произошли недавние изменения. Документация доступна по добавлению сторонних компонентов и драйверов, таких как Oracle и Teradata, в виртуальные машины SSIS runtime.

Можно ли получить доступ к хранимым процедурам каталога SSIS для выполнения пакетов из кода T-SQL?

Да, возможно выполнение SSIS-пакетов из кода T-SQL с использованием хранимых процедур каталога SSIS. Документация содержит подробности о настройке конвейера с помощью PowerShell и включает встроенный образец кода в формате JSON.

Почему я должен использовать что-то, кроме SSIS в Azure?

Data Factory предлагает несколько преимуществ в качестве управляемой службы. Она предоставляет точки интеграции с другими ресурсами Azure и устраняет необходимость в Visual Studio и ручном обновлении пакетов. Однако SSIS все еще превосходит в некоторых областях, поэтому важно выбрать правильный инструмент для работы.

Может ли SSIS-пакет ссылаться на данные внутри предприятия?

Да, разместив виртуальные машины SSIS Integration Runtime на VNet с подключением ExpressRoute или VPN, вы можете получить доступ к данным внутри предприятия в своих SSIS-пакетах.

Когда Pragmatic Works выпустит Task Factory для Data Factory?

Программное обеспечение Pragmatic Works теперь является частью SentryOne, и Task Factory для Data Factory находится в разработке. Для получения обновлений о Task Factory посетите веб-сайт SentryOne.

Можно ли загружать файлы с динамическими именами файлов?

Да, ADF позволяет параметризацию имен файлов. Кнопка “Dynamic” в параметрах предоставляет возможность указать динамические имена файлов.

В чем разница между копированием ADF и ADL Copy и AZ Copy?

Функция копирования ADF позволяет перемещать данные между файлами и базами данных, в то время как ADL Copy и AZ Copy специально предназначены для перемещения файлов.

Необходимо ли использовать каталог SSIS для использования SSIS Integration Runtime?

Да, каталог SSIS все еще используется для хранения SSIS-пакетов в SSIS Integration Runtime. Однако база данных размещается в Azure SQL DB или SQL Managed Instance, что устраняет необходимость в ручных задачах DBA, таких как резервное копирование.

Azure Data Factory V2 – это мощный инструмент для интеграции и оркестрации данных в облаке. Он предлагает ряд функций и преимуществ, делая его ценным дополнением к любой среде SQL Server. Будь вы сильно заинтересованы в облаке или планируете перенести свои данные в облако, ADF V2 определенно стоит изучить.