Перейти к основному содержимому Перейти к дополнительному содержимому
Ресурсы Qlik

Мониторинг и организация задач данных

Можно отслеживать состояние и хода выполнения задач данных с помощью видов мониторинга. Вид мониторинга позволяет просматривать состояние отфильтрованного подмножества доступных задач данных в клиенте. Можно создать несколько видов для отслеживания различных аспектов конвейеров данных.

  • Выберите Интеграция данных > Виды мониторинга, чтобы открыть виды мониторинга.

Помимо создания пользовательских видов мониторинга, также можно использовать готовый вид Все задачи, чтобы просматривать все готовые к запуску задачи данных во всех проектах.

Примечание к информацииПри использовании подписки Qlik Talend Cloud Starter пользовательские виды мониторинга не поддерживаются. Мониториг и выполнение задач данных осуществляется, как описано в Использование вида мониторинга, с использованием единого вида мониторинга. Можно фильтровать задачи и столбцы для отображения, но параметры сохраняться не будут.

Мониторинг индивидуальной задачи данных

Можно отслеживать состояние и ход выполнения индивидуальных задач данных, выбрав Мониторинг в раскрывающемся списке в верхнем левом углу окна задачи данных.

Настройка уведомлений об изменениях в работе

Можно настроить уведомления, чтобы получать оповещения об изменениях в работе конвейера данных. Можно получать уведомления данных в браузере, по электронной почте или как push-сообщения в Qlik Sense Mobile SaaS.

Устранение неполадок с задачами данных

В этом разделе описаны проблемы, которые могут произойти во время работы с задачами данных, а также способы их устранения.

Создание вида мониторинга

Создайте пользовательский вид, чтобы отслеживать задачи данных.

  1. Щелкните Создать вид мониторинга.

  2. Введите имя и описание вида мониторинга, выберите пространство, в котором он будет создан и нажмите кнопку Создать, когда будете готовы.

    Откроется вид мониторинга.

  3. В виде мониторинга отображаются все задачи данных из всех проектов с самого начала.

    Используйте фильтры, чтобы создать вид с задачами, которые требуется отслеживать. Списки фильтров включают только ресурсы, для просмотра которых у пользователя есть разрешение.

    Доступны следующие фильтры:

    • Проект

      Можно выбрать все проекты данных в одном или нескольких пространствах, можно выбрать отдельные проекты, либо настроить комбинированный вид из того и другого.

    • Тип задачи

    • Происхождение задачи

      Показывает происхождение вышестоящих задач для выбранных задач.

      Например, можно выбрать киоски данных из разных проектов. При этом будет выполняться мониторинг всех вышестоящих задач данных, которые влияют на выбранные киоски данных.

    • Воздействие задачи

      Показывает все нижестоящие задачи, на которые влияют выбранные задачи.

      Например, можно выбрать задачу промежуточного хранения данных в состоянии ошибки. При этом будет выполняться мониторинг всех нижестоящих задач данных, на которые влияет выбранная задача данных.

      Примечание к подсказкеФильтры Происхождение задачи и Воздействие задачи можно комбинировать. Например, можно отслеживать все задачи данных, которые участвуют в происхождении выбранного киоска данных и испытывают воздействие выбранной задачи промежуточного хранения в состоянии ошибки.

    • Шлюз данных

      Отображает все задачи данных, которые выполняют операции через один из выбранных шлюзов Перемещение данных. Примеры таких задач:

      • Задачи, которые подразумевают перемещение данных, такие как задачи промежуточного хранения данных или репликации.
      • Задачи извлечения, загрузки и преобразования данных, выполняемые на платформе данных, которая недоступна напрямую из Qlik Cloud. Это могут быть задачи хранения, преобразования, регистрации и задачи киоска данных.

      Установите флажок Не используется шлюз данных, чтобы отображались задачи, не использующие шлюз данных. Это будет любая задача ELT, которая выполняется на платформе данных, напрямую доступная из Qlik Cloud.

      Примечание к информацииЗадачи, связанные с удаленным шлюзом, перестанут соответствовать фильтру Шлюз данных Чтобы увидеть такие задачи, необходимо снять флажок фильтра Шлюз данных.

    • Платформа данных/цель

      Показывает задачи с выбранными платформами данных (задачи конвейера данных) или целями (задачи репликации).

    • Источник

      Показывает задачи перемещения данных с выбранными источниками данных. Задачи перемещения данных могут быть следующими в зависимости от сценария применения:

      • Сценарий применения для конвейера данных: Задачи промежуточного хранения
      • Сценарий применения для репликации: Задачи репликации данных и задачи промежуточного хранения данных в озере

    • Владелец

    Например, выберите пространство в области Проект в списке Все проекты в пространствах: и выберите Промежуточное хранение в списке Тип задачи. При этом создается вид, где можно просматривать все задачи промежуточного хранения данных для всех проектов в выбранном пространстве.

  4. По завершении нажмите кнопку Сохранить.

Теперь вид мониторинга создан и отображает все задачи, которые соответствуют фильтру и находятся в состоянии готовности к запуску. Это означает, что задачи в состоянии Новая или Готово к подготовке не отображаются в виде мониторинга. Если вносятся изменения в успешно подготовленную задачу или задача подготовлена с ошибками, в виде мониторинга отображается предыдущая версия задачи, которую можно запустить.

Примечание к информацииЕсли условиям фильтра соответствует более 300 задач, отображаются только первые 300 задач и предупреждение в начале списка. В таком случае используйте дополнительные фильтры, чтобы сократить число результатов.

Клонирование вида мониторинга

Вид мониторинга также можно создать путем клонирования существующего вида мониторинга.

  • Выберите команду Сохранить как и сохраните вид под новым именем. Также можно выбрать, в каком пространстве будет сохранен вид.

Этот метод можно использовать, к примеру, для следующих операций:

  • Создание вида мониторинга на основе другого вида.

    Открытие вида мониторинга, изменение фильтров и сохранение под другим именем.

  • Перемещение вида мониторинга в другое место

    Сохранение вида мониторинга под тем же именем в другом пространстве с последующим удалением исходного вида.

Управления видами мониторинга

Чтобы просмотреть виды мониторинга, выберите Интеграция данных > Виды мониторинга.

Можно фильтровать виды мониторинга по их значениям Пространства и Владелец. Щелкните вид мониторинга, чтобы открыть его.

  • Чтобы изменить вид мониторинга, щелкните ... и выберите Изменить.

  • Чтобы удалить вид мониторинга, щелкните ... и выберите Удалить.

Использование вида мониторинга

В виде мониторинга показаны следующие свойства для всех задач данных, отображаемых после применения фильтра.

  • Имя задачи

  • Проект

  • Источник

    Показывает задачи перемещения данных с выбранными источниками данных.

  • Платформа данных/цель

    Показывает задачи с выбранными платформами данных (задачи конвейера данных) или целями (задачи репликации).

  • Пространство

  • Состояние

  • Сообщение

  • Данные обновлены в

    Изменения хотя бы одного из источников задач применяется до этого момента.

  • Наборы данных

  • Наборы данных с ошибкой

  • Дата следующего выполнения

  • Последнее выполнение: время начала

  • Последнее выполнение: длительность

  • Последнее выполнение: наборы данных

  • Владелец

  • Создано

  • Изменено

  • Действия

    Этот столбец содержит меню, где можно выполнить действие, такое как Запустить или Остановить, в зависимости от состояния задачи. Также можно открыть график и перейти непосредственно к проекту или к разработке задачи.

Выбор столбцов для отображения

Можно настроить отображаемые столбцы, щелкнув Кнопка «Дополнительно» для столбца и выбрав Отображаемые столбцы. Затем можно выбрать, какие столбцы требуется показать, а какие скрыть.

Можно скрыть один столбец, щелкнув Кнопка «Дополнительно» для столбца и выбрав Скрыть столбец.

Сортировка задач данных в виде мониторинга

Можно сортировать задачи данных, щелкая заголовок столбца. Повторно щелкните заголовок, чтобы переключиться между сортировкой по возрастанию и по убыванию. Также можно щелкнуть Кнопка «Дополнительно» для столбца и выбрать Сортировка по возрастанию или Сортировка по убыванию.

Чтобы сортировать по нескольким столбцам, удерживайте клавишу Shift или Ctrl при выборе столбцов. На устройстве macOS используйте клавишу Command (⌘).

Закрепление столбцов

Можно закрепить столбцы у левого или правого края столбцов, чтобы они оставались видимыми при прокрутке по горизонтали.

  • Щелкните Кнопка «Дополнительно» для столбца и выберите Закрепить слева или Закрепить справа.

Чтобы открепить закрепленный столбец, щелкните Кнопка «Дополнительно» для столбца и выберите Открепить.

Фильтрация задач в виде мониторинга

Также можно щелкнуть КПЭ, чтобы получить быстрый обзор состояния задач. Отдельный ключевой показатель эффективности можно использовать в качестве экспресс-фильтра. Доступны следующие ключевые показатели эффективности:

  • Готово к запуску

    Включает все задачи, которые не были запущены, а также задачи, остановленные до завершения выполнения.

  • Выполняется

  • Завершено

    Включает все задачи, последний запуск которых был успешным.

  • Внимание!

    Отображает все задачи с ошибками и задачи с отключенным агентом шлюза.

Переходные состояния, такие как Запуск..., включены в ближайший КПЭ.

Просмотр сведений о задаче данных

Можно просмотреть сведения о задаче данных.

  1. Выберите задачу данных.

  2. Щелкните Сведения.

Можно просматривать следующие сведения:

  • Конвейер: отображается вид конвейера проекта, к которому относится задача данных.

Также можно перейти в индивидуальный вид мониторинга выбранной задачи данных, щелкнув команду Открыть мониторинг задач.

Операции с задачами данных

В виде мониторинга можно выполнять операции с задачами данных.

  1. Выберите одну или несколько задач в виде мониторинга.

    • Щелкните Запустить, чтобы запустить выбранные задачи.

    • Щелкните Остановить, чтобы остановить выбранные задачи.

Примечание к подсказкеТакже можно выполнить операции Запустить и Остановить для задачи, щелкнув меню ... в столбце Действия. Если столбец Действия не отображается, вероятно, он скрыт. Используйте инструмент «Управление столбцами» (Управление столбцами), чтобы отобразить его.

Для получения дополнительной информации о выполнении операций с задачами данных см.:

Помогла ли вам эта страница?

Если вы обнаружили какую-либо проблему на этой странице и с ее содержанием — будь то опечатка, пропущенный шаг или техническая ошибка, сообщите нам об этом, чтобы мы смогли ее исправить!

Оставьте свой отзыв здесь