Мониторинг и организация задач данных

Можно отслеживать состояние и хода выполнения задач данных с помощью видов мониторинга. Вид мониторинга позволяет просматривать состояние отфильтрованного подмножества доступных задач данных в клиенте. Можно создать несколько видов для отслеживания различных аспектов конвейеров данных.

• На главной странице Интеграция данных щелкните Мониторинг, чтобы открыть виды мониторинга.

Помимо создания пользовательских видов мониторинга, также можно использовать готовый вид Все задачи, чтобы просматривать все готовые к запуску задачи данных во всех проектах данных.

Создание вида мониторинга

Создайте пользовательский вид, чтобы отслеживать задачи данных.

1. Щелкните Создать вид мониторинга.

2. Введите имя и описание вида мониторинга, выберите пространство, в котором он будет создан и нажмите кнопку Создать, когда будете готовы.

   Откроется вид мониторинга.

3. В виде мониторинга отображаются все задачи данных из всех проектов данных с самого начала.

   Используйте фильтры, чтобы создать вид с задачами, которые требуется отслеживать. Списки фильтров включают только ресурсы, для просмотра которых у пользователя есть разрешение.

   Доступны следующие фильтры:

   • Проект данных

     Можно выбрать все проекты данных в одном или нескольких пространствах, можно выбрать отдельные проекты, либо настроить комбинированный вид из того и другого.

   • Тип задачи

   • Происхождение задачи

     Показывает происхождение вышестоящих задач для выбранных задач.

     Например, можно выбрать киоски данных из разных проектов данных. При этом будет выполняться мониторинг всех вышестоящих задач данных, которые влияют на выбранные киоски данных.

   • Воздействие задачи

     Показывает все нижестоящие задачи, на которые влияют выбранные задачи.

     Например, можно выбрать задачу промежуточного хранения данных в состоянии ошибки. При этом будет выполняться мониторинг всех нижестоящих задач данных, на которые влияет выбранная задача данных.

     Примечание к подсказкеФильтры Происхождение задачи и Воздействие задачи можно комбинировать. Например, можно отслеживать все задачи данных, которые участвуют в происхождении выбранного киоска данных и испытывают воздействие выбранной задачи промежуточного хранения в состоянии ошибки.

   • Шлюз данных

     Отображает все задачи данных, которые выполняют операции через один из выбранных шлюзов Перемещение данных. Примеры таких задач:

     • Задачи, которые подразумевают перемещение данных, такие как задачи промежуточного хранения данных или репликации.
     • Задачи извлечения, загрузки и преобразования данных (задачи ELT), выполняемые на платформе данных, которая недоступна напрямую из Qlik Cloud. К задачам ELT относятся задачи хранения, преобразования, регистрации и задачи киоска данных.

     Установите флажок Не используется шлюз данных, чтобы отображались задачи, не использующие шлюз данных. Это будет любая задача ELT, которая выполняется на платформе данных, напрямую доступная из Qlik Cloud.

     Примечание к информацииЗадачи, связанные с удаленным шлюзом, перестанут соответствовать фильтру Шлюз данных Чтобы увидеть такие задачи, необходимо снять флажок фильтра Шлюз данных.

   • Платформа данных/цель

     Показывает задачи с выбранными платформами данных (задачи конвейера данных) или целями (задачи репликации).

   • Источник

     Показывает задачи перемещения данных с выбранными источниками данных. Задачи перемещения данных могут быть следующими в зависимости от сценария применения:

     • Сценарий применения для конвейера данных: Задачи промежуточного хранения
     • Сценарий применения для репликации: Задачи репликации данных и задачи промежуточного хранения данных в озере

   • Владелец

   Например, выберите пространство в области Проект данных в списке Все проекты в пространствах: и выберите Промежуточное хранение в списке Тип задачи. При этом создается вид, где можно просматривать все задачи промежуточного хранения данных для всех проектов в выбранном пространстве.

4. По завершении нажмите кнопку Сохранить.

Теперь вид мониторинга создан и отображает все задачи, которые соответствуют фильтру и находятся в состоянии готовности к запуску. Это означает, что задачи в состоянии Новая или Готово к подготовке не отображаются в виде мониторинга. Если вносятся изменения в успешно подготовленную задачу или задача подготовлена с ошибками, в виде мониторинга отображается предыдущая версия задачи, которую можно запустить.

Клонирование вида мониторинга

Вид мониторинга также можно создать путем клонирования существующего вида мониторинга.

• Выберите команду Сохранить как и сохраните вид под новым именем. Также можно выбрать, в каком пространстве будет сохранен вид.

Этот метод можно использовать, к примеру, для следующих операций:

• Создание вида мониторинга на основе другого вида.

  Открытие вида мониторинга, изменение фильтров и сохранение под другим именем.

• Перемещение вида мониторинга в другое место

  Сохранение вида мониторинга под тем же именем в другом пространстве с последующим удалением исходного вида.

Управления видами мониторинга

На главной странице Интеграция данных щелкните Мониторинг, чтобы просмотреть все виды мониторинга. Можно фильтровать виды мониторинга по их значениям Пространства и Владелец. Щелкните вид мониторинга, чтобы открыть его.

• Чтобы изменить вид мониторинга, щелкните ... и выберите Изменить.

• Чтобы удалить вид мониторинга, щелкните ... и выберите Удалить.

Использование вида мониторинга

В виде мониторинга показаны следующие свойства для всех задач данных, отображаемых после применения фильтра.

• Имя задачи

• Проект данных

• Источник

  Показывает задачи перемещения данных с выбранными источниками данных.

• Платформа данных/цель

  Показывает задачи с выбранными платформами данных (задачи конвейера данных) или целями (задачи репликации).

• Пространство

• Состояние

• Сообщение

• Данные обновлены в

  Изменения хотя бы одного из источников задач применяется до этого момента.

• Наборы данных

• Наборы данных с ошибкой

• Дата следующего выполнения

• Последнее выполнение: Время начала

• Последнее выполнение: Длительность

• Последнее выполнение: Наборы данных

• Владелец

• Создано

• Изменено

• Действия

  Этот столбец содержит меню, где можно выполнить действие, такое как Запустить или Остановить, в зависимости от состояния задачи. Также можно открыть график и перейти непосредственно к проекту данных или к разработке задачи.

Выбор столбцов для отображения

Можно настроить отображаемые столбцы, щелкнув для столбца и выбрав Управление столбцами.

Можно скрыть один столбец, щелкнув для столбца и выбрав Управление столбцами.

Сортировка задач данных в виде мониторинга

Можно сортировать задачи данных, щелкая заголовок столбца. Повторно щелкните заголовок, чтобы переключиться между сортировкой по возрастанию и по убыванию. Также можно щелкнуть для столбца и выбрать Сортировка по возрастанию или Сортировка по убыванию.

Чтобы сортировать по нескольким столбцам, удерживайте клавишу Shift или Ctrl при выборе столбцов. На устройстве macOS используйте клавишу Command (⌘).

Закрепление столбцов

Можно закрепить столбцы у левого или правого края столбцов, чтобы они оставались видимыми при прокрутке по горизонтали.

• Щелкните для столбца и выберите Закрепить слева или Закрепить справа.

Чтобы открепить закрепленный столбец, щелкните для столбца и выберите Открепить.

Фильтрация задач в виде мониторинга

Также можно щелкнуть КПЭ, чтобы получить быстрый обзор состояния задач. Отдельный ключевой показатель эффективности можно использовать в качестве экспресс-фильтра. Доступны следующие ключевые показатели эффективности:

• Готово к запуску

  Включает все задачи, которые не были запущены, а также задачи, остановленные до завершения выполнения.

• Выполняется

• Завершено

  Включает все задачи, последний запуск которых был успешным.

• Внимание!

  Отображает все задачи с ошибками и задачи с отключенным агентом шлюза.

Переходные состояния, такие как Запуск..., включены в ближайший КПЭ.

Просмотр сведений о задаче данных

Можно просмотреть сведения о задаче данных.

1. Выберите задачу данных.

2. Щелкните Сведения.

Можно просматривать следующие сведения:

• Конвейер: отображается вид конвейера проекта данных, к которому относится задача данных.

Также можно перейти в индивидуальный вид мониторинга выбранной задачи данных, щелкнув команду Открыть мониторинг задач.

• Для получения дополнительной информации о мониторинге отдельных задач промежуточного хранения см. раздел Промежуточное хранение данных, полученных из источников данных.

• Для получения дополнительной информации о мониторинге других задач данных см. раздел Мониторинг индивидуальной задачи данных.

Операции с задачами данных

В виде мониторинга можно выполнять операции с задачами данных.

1. Выберите одну или несколько задач в виде мониторинга.

2. • Щелкните Запустить, чтобы запустить выбранные задачи.

   • Щелкните Остановить, чтобы остановить выбранные задачи.

Для получения дополнительной информации о выполнении операций с задачами данных см.:

• Операции с ресурсом данных промежуточного хранения

• Операции с задачей хранения данных