Мониторинг отдельной задачи данных

Вы можете отслеживать статус и ход выполнения задач данных, выбрав Мониторинг в раскрывающемся меню в левом верхнем углу окна задачи данных.

Вы также можете создавать представления мониторинга для отслеживания нескольких задач данных. Для получения дополнительной информации см. Мониторинг и управление задачами данных.

Общий обзор мониторинга

Представление мониторинга доступно для всех типов задач и позволяет отслеживать статус и метрики задачи:

• Вкладки

  Переключайтесь между доступными вкладками, такими как Информация, Полная загрузка и Обработка изменений, Пакет или Потоковая передача, в зависимости от типа задачи. Подробные сведения о каждой вкладке см. в соответствующем разделе задач ниже.

• Фильтр статуса набора данных

  Линейчатая диаграмма над таблицей наборов данных показывает, сколько наборов данных находится в каждом статусе: В очереди, Загрузка, Завершено и Ошибка. Диаграмма обновляется динамически при изменении статусов наборов данных. Щелкните сегмент статуса, чтобы отфильтровать таблицу наборов данных и показать только наборы данных в этом статусе.

• Скрыть виджеты

  Нажмите Скрыть виджеты, чтобы свернуть виджеты метрик. Это освободит больше места для просмотра таблицы наборов данных ниже.

• Дата начала

  Дата и время начала текущего запуска задачи.

• Дата окончания

  Дата и время окончания запуска задачи. Отображается только для завершенных запусков задач.

• История запусков

  Нажмите История запусков, чтобы просмотреть список предыдущих запусков задач и их результаты.

Мониторинг задач перемещения данных

Перезагрузка выбранных таблиц

Вы можете вручную перезагрузить выбранные таблицы из источника. Это полезно, когда требуется восстановить отдельные таблицы с ошибками. Перезагрузка таблиц не повлияет на временную шкалу CDC, которая сбрасывается при использовании функции Пересоздать таблицы. Изменения метаданных не распространяются при перезагрузке таблиц.

• Чтобы перезагрузить выбранные таблицы, выберите их в нижней половине вкладки Мониторинг и нажмите Перезагрузить таблицы.

  Вам требуются те же разрешения, которые необходимы для запуска задачи данных, то есть роль Владелец или Может управлять.

Кнопка Перезагрузить таблицы доступна после первого запуска задачи данных. Если методом обновления является Перезагрузить и сравнить, кнопка Перезагрузить таблицы недоступна во время выполнения задачи данных.

Задачи данных последующего хранения будут синхронизированы при следующем запуске. Если для задачи хранения включена история, она будет сохранена.

Если восстановление путем перезагрузки таблиц невозможно, следующим шагом является исправление задачи данных.

Перезагрузка всех таблиц в целевой объект

Вы можете перезагрузить все таблицы в целевой объект, если возникнут проблемы с CDC, которые невозможно решить путем перезагрузки отдельных таблиц. Примерами проблем являются пропущенные события, проблемы, вызванные реорганизацией исходной базы данных, или сбой при чтении событий исходной базы данных.

1. Остановите задачу данных и все задачи, которые ее используют.

2. Откройте задачу данных и перейдите вкладку Мониторинг.

3. Щелкните ..., а затем Перезагрузить цель.

В результате этого все таблицы будут перезагружены в цель с использованием операции «Отбросить-Создать» (Drop-Create), а также будут перезапущены все процессы захвата изменений данных с этого момента.

• Задачи хранения, которые используют эту задачу промежуточного хранения, будут перезагружены в режиме «Сравнить и применить» для синхронизации при следующем запуске. Существующая история будет сохранена. История типа 2 будет обновлена с учетом изменений после выполнения процесса «Перезагрузка и сравнение».

  Метка времени для начальной даты в истории типа 2 будет отражать дату перезагрузки, а не фактическую дату внесения изменения в источник.

• Виды хранения в реальном времени не будут надежными во время операции перезагрузки цели и до окончания синхронизации. Хранилище полностью синхронизируется, когда:

  • все таблицы перезагружаются в режиме «Сравнить и применить»,

  • один цикл изменений выполняется для каждой таблицы.

Мониторинг задач хранения, преобразования, витрины данных, зеркалирования, и витрины знаний

Вы можете отслеживать статус и ход выполнения задачи хранения, преобразования, витрины данных, зеркалирования, или витрины знаний.

Доступны следующие сведения о мониторинге:

• Информация

• Полная загрузка

• Пакет

Сведения о мониторинге Информация

Вы можете просмотреть общую информацию о задаче, Идентификатор запуска и время обновления данных.

Сведения о мониторинге Полная загрузка

Вы можете просмотреть следующую статистику для задачи данных в разделе Полная загрузка:

• Всего наборов данных

  Количество загруженных наборов данных.

• Наборы данных с ошибками

  Количество наборов данных с ошибками.

• Общая пропускная способность

  Пропускная способность целевого объекта в килобайтах в секунду. Это указывает на то, насколько быстро записи изменений загружаются в целевую конечную точку.

Сведения о мониторинге Пакет

Вы можете просмотреть статистику для пакетов изменений:

• Всего наборов данных

  Количество загруженных наборов данных.

• Наборы данных с ошибками

  Количество наборов данных с ошибками.

• Общая задержка

  Текущая задержка задачи (чч:мм:сс). Эта длительность представляет собой время с момента появления изменения в источнике до момента его применения и доступности в целевом объекте или промежуточном хранении.

• Общая пропускная способность

  Пропускная способность целевого объекта в килобайтах в секунду. Это указывает на то, насколько быстро записи изменений загружаются в целевую конечную точку.

• Источник

  Задержка и пропускная способность в источнике.

• Целевой объект

  Задержка и пропускная способность в целевом объекте.

• Всего входящих изменений

  Количество изменений, присутствующих в источнике и ожидающих обработки. Вы можете просмотреть, сколько изменений накопилось в источнике и сколько применяется.

• Всего примененных изменений

  Количество изменений, примененных к целевому объекту или промежуточному хранению. Вы можете просмотреть количество добавлений, удалений и обновлений.

Просмотр статуса и хода выполнения

Вы можете просмотреть следующие сведения для каждого набора данных или изменения в разделе Наборы данных:

• Имя

  Имя целевого набора данных.

• Состояние

  Состояние таблицы будет одним из следующих: В очереди, Загрузка, Завершено или Ошибка.

• Время начала

  Время начала загрузки.

• Время окончания

  Время окончания загрузки.

• Длительность

  Длительность загрузки в формате чч:мм:сс.

• Записи

  Количество записей, которые были записаны в целевой объект во время загрузки.

  Примечание к информации

  При фильтрации исходных наборов данных раздел Записи будет заменен следующими разделами:

  • Прочитанные записи: Количество записей, прочитанных из исходных наборов данных перед фильтрацией.

  • Записанные записи (после фильтрации): Количество записей, фактически записанных в целевой объект после фильтрации.

  Для получения информации о фильтрации наборов данных см. Фильтрация набора данных.

• Сообщение

  Отображает сообщение об ошибке, если загрузка не была успешно обработана.

Данные из всех исходных транзакций до времени, указанного в поле Задача данных обновлена по состоянию на, доступны для использования из этой задачи данных. Эта информация становится доступной для задачи данных после загрузки всех таблиц и применения первого набора изменений. Если вы выбрали создание динамических представлений, вы также можете просматривать время обновления динамических представлений.

Если пакет изменений поступает до завершения первоначальной загрузки, значение поля Задача данных обновлена по состоянию на не будет обновлено до тех пор, пока не завершится первоначальная загрузка и не будет применен первый пакет изменений. Например, предположим, что вы загружаете ресурс данных, который содержит набор данных заказов, содержащий 1 миллион заказов, и набор данных сведений о заказах, содержащий 10 миллионов сведений о заказах. Выполнение полной загрузки этих наборов данных занимает 10 и 20 минут соответственно. Сначала загружается набор данных заказов, а затем набор данных сведений о заказах. Во время загрузки набора данных заказов был вставлен новый заказ. Таким образом, когда загружаются сведения о заказе, они могут содержать сведения о новом заказе, которого еще нет в наборе данных заказов. Наборы данных заказов и сведений о заказах будут синхронизированы и полностью обновлены на одно и то же время только после применения первого пакета изменений.

Просмотр подробной информации

Вы можете просмотреть подробную информацию на уровне инструкций SQL.

1. Выберите наборы данных для подробного мониторинга.

2. Нажмите Сведения о мониторинге.

Отобразится раздел Сведения о мониторинге, и вы сможете просмотреть команды, выполняемые для каждого шага процесса загрузки или изменения. Вы можете нажать на команду, чтобы просмотреть полные инструкции SQL, которые были выполнены.

• Нажмите Экспорт в CSV, чтобы экспортировать текстовый файл с полными инструкциями SQL для всех перечисленных команд.

Поле Задача данных обновлена по состоянию на для представлений

Поле Задача данных обновлена по состоянию на показывает время, на которое обновлено самое старое представление.

• Стандартные представления

  Поле Задача данных обновлена по состоянию на показывает время, на которое обновлено самое старое стандартное представление.

  Например, предположим, что у задачи есть две таблицы: Orders и Order details. Таблица Orders обновлена до 10:01 записями от 10:00 и 10:01, а таблица Order details содержит записи только от 10:00. В этом случае задача данных обновлена по состоянию на 10:00. Это не следует путать со временем начала и окончания загрузки задачи данных, которое может быть с 10:02 до 10:03.

• Динамические представления (задачи данных хранения)

  Поле Задача данных обновлена по состоянию на показывает время, на которое обновлено самое старое динамическое представление.

  Например, предположим, что у задачи есть таблица Orders. Таблица Orders в промежуточном хранении обновлена до 10:01 записями от 10:00 и 10:01, но таблица Orders в хранилище обновлена записями только от 10:00. В этом случае динамические представления для Orders обновлены до 10:01, а стандартные представления — до 10:00.

Просмотр истории запусков

Вы можете просмотреть историю запусков задачи, чтобы выявить первопричины и понять закономерности с течением времени.

• Нажмите История запусков в представлении Мониторинг для задачи.

• Нажмите История запусков в меню ... задачи в Представления мониторинга.

В истории запусков отображается до 100 выполнений в зависимости от выбранных фильтров. Уточните критерии фильтрации, чтобы просмотреть другие выполнения. Можно настроить фильтр по дате окончания выполнения и статусу задачи. Информация о запусках хранится в течение 13 месяцев. Метаданные набора данных в запусках хранятся в течение 30 дней.