Мониторинг задачи хранения Открытое озеро данных Qlik

Задача хранения в проектах Открытое озеро данных Qlik отличается от других проектов тем, что она выполняется непрерывно, а не в пакетном режиме. В результате метрики мониторинга различаются.

Общий обзор мониторинга

Представление мониторинга позволяет отслеживать статус и метрики задачи:

• Вкладки

  Переключайтесь между вкладками Информация, Полная загрузка и Обработка изменений для просмотра соответствующих метрик для каждого этапа задачи.

• Фильтр статуса наборов данных

  Линейчатая диаграмма над таблицей наборов данных показывает, сколько наборов данных находится в каждом статусе: В очереди, Загрузка, Завершено и Ошибка. Диаграмма обновляется динамически при изменении статусов наборов данных. Щелкните сегмент статуса, чтобы отфильтровать таблицу наборов данных и показать только наборы данных в этом статусе.

• Скрыть виджеты

  Нажмите Скрыть виджеты, чтобы свернуть виджеты метрик. Это освободит больше места для просмотра таблицы наборов данных ниже.

• Дата начала

  Дата и время начала текущего запуска задачи.

• Дата окончания

  Дата и время окончания запуска задачи. Отображается только для завершенных запусков задач.

• История запусков

  Нажмите История запусков, чтобы просмотреть список предыдущих запусков задач и их результаты.

Подробные сведения мониторинга информации

Раздел Информация содержит сводку общего статуса задачи:

• Запуск

  Отображает Идентификатор запуска текущего запуска.

• Данные

  Параметр Задача данных обновлена до отображает время, до которого обновлено самое старое представление. Он представляет собой последний момент времени, когда все изменения источника, зафиксированные до этого момента, уже доступны в целевых таблицах.

  Если новые изменения источника не обнаружены, для этого параметра устанавливается текущее время.

• Задача

  Отображает имя и статус кластера, на котором выполняется эта задача, а также общую информацию и статус задачи.

Подробные сведения мониторинга полной загрузки

В разделе Полная загрузка можно просмотреть следующую статистику для задачи данных:

• Всего наборов данных

  Количество загруженных наборов данных.

• Наборы данных с ошибками

  Количество наборов данных с ошибками.

• Входящие изменения

  Количество входящих изменений.

• Общая задержка

  Текущая задержка задачи (чч:мм:сс). Эта длительность представляет собой время с момента появления изменения в источнике до момента его применения и доступности в целевом объекте.

Можно просмотреть следующие сведения для каждой таблицы в задаче данных:

• Имя

  Имя целевой таблицы.

• Состояние

  Состояние таблицы будет одним из следующих: В очереди, Загрузка, Завершено или Ошибка.

• Время начала

  Время начала загрузки.

• Время окончания

  Время окончания загрузки.

• Длительность

  Длительность загрузки в формате чч:мм:сс.

• Записи

  Количество записей, реплицированных во время загрузки.

• Сообщение

  Отображает сообщение об ошибке, если загрузка не была успешно обработана.

Подробные сведения мониторинга обработки изменений

В разделе Обработка изменений можно просмотреть следующие сведения для задачи данных для мониторинга обработки изменений:

• Всего наборов данных

  Количество загруженных наборов данных.

• Наборы данных с ошибками

  Количество наборов данных с ошибками.

• Входящие изменения

  Количество входящих изменений.

• Обработанные изменения

  Количество обработанных изменений.

• Общая задержка

  Текущая задержка задачи (чч:мм:сс). Эта длительность представляет собой время с момента появления изменения в источнике до момента его применения и доступности в целевом объекте.

Можно просмотреть следующие сведения для каждой таблицы в задаче данных:

• Имя

  Имя целевой таблицы в активе промежуточного хранения.

• Состояние

  Состояние таблицы будет одним из следующих: Накопление изменений или Ошибка.

• Входящие изменения

  Количество изменений, обработанных задачей промежуточного хранения, которые ожидают применения задачей хранения.

• Обработанные изменения

  Общее количество изменений, примененных к целевому объекту с момента последней полной загрузки набора данных (в ходе первоначальной полной загрузки или действия перезагрузки).

• Последняя обработка

  Время последних данных источника, вставленных в целевой набор данных, переведенное в местное время.

• Неоптимизированные изменения

  Количество записей, доступных для запроса через представление, но еще не объединенных в оптимизированные разделы Iceberg. Большое количество записей может повлиять на производительность до завершения фоновой оптимизации.

  Это отражает количество записей, находящихся в данный момент в разделе изменений, которые еще не были применены к разделам текущий или история.

  Если это число постоянно велико, рассмотрите возможность увеличения вычислительной мощности кластера для ускорения оптимизации.

• Сообщение

  Отображает сообщение об ошибке, если изменения в таблице завершаются сбоем и не обрабатываются.

Просмотр истории запусков

Вы можете просмотреть историю запусков задачи, чтобы выявить первопричины и понять закономерности с течением времени.

• Нажмите История запусков в представлении Мониторинг для задачи.

• Нажмите История запусков в меню ... задачи в Представления мониторинга.

В истории запусков отображается до 100 выполнений в зависимости от выбранных фильтров. Уточните критерии фильтрации, чтобы просмотреть другие выполнения. Можно настроить фильтр по дате окончания выполнения и статусу задачи. Информация о запусках хранится в течение 13 месяцев. Метаданные набора данных в запусках хранятся в течение 30 дней.