Перейти к основному содержимому

Выполнения анализа происхождения данных вместе с анализом воздействия

НА ЭТОЙ СТРАНИЦЕ

Выполнения анализа происхождения данных вместе с анализом воздействия

Просматривайте происхождение источников данных и приложений с помощью анализа воздействия. Анализ воздействия позволяет вывести график происхождения набора данных или приложения, показывающий входные и выходные данные.

График происхождения показывает поток данных для приложений и данных в организации. Откройте график происхождения, щелкнув на приложении или наборе данных и выберите Анализ воздействия. Кроме того, к графику происхождения можно получить доступ из раздела Сведения набора данных.

График происхождения

График происхождения, демонстрирующий поток данных, проходящий через разные узлы

График происхождения показывает, как данные используются в приложениях и наборах данных. Он визуализирует приложения и наборы данных в виде узлов. Каждый узел соединен стрелками, которые показывают поток данных. Например, можно увидеть, какие узлы наборов данных используются узлами приложений или какие узлы приложений создают наборы данных, используемые другими приложениями. Можно наглядно просмотреть использование и зависимости приложений и наборов данных.

Разрешения

Для просмотра анализа воздействия для элемента из хаба необходимо иметь возможность просматривать приложение или набор данных. На графике происхождения можно просмотреть узлы, принадлежащие приложениям и наборам данных, к которым у пользователя нет доступа, но относящиеся к происхождению элемента, выбранного для анализа. У этих узлов можно просмотреть название, но нельзя открыть их или просмотреть сведения. Можно просмотреть анализ воздействия этих узлов, чтобы увидеть их происхождение.

Анализ воздействия недоступен в клиенте по умолчанию, и доступ к нему должен быть предоставлен администратором клиента. См. Управление анализом воздействия.

Роли

Графики происхождения поддерживают различные роли в организации.

Администраторы данных

Графики происхождения данных помогают администраторам данных понять происхождение данных, упростить добавление метаданных и устранить проблемы, связанные с качеством данных. С помощью графика можно определить потоки данных, характер их использования и возможные дубликаты, что позволяет улучить операционную эффективность.

Разработчики приложений и специалисты по моделированию данных

График происхождения данных повышает достоверность источников данных и улучшает понимание их структуры. На графике можно вывести полную историю набора данных, узнать о приложениях, использующих данные, и определить новую информацию, которую можно получить на основе имеющегося набора данных. Таким образом можно убедиться, что данные подходят приложению и модели данных.

График происхождения

На графике происхождения показаны узлы, соответствующие происхождению источника данных. Каждый узел — это этап в происхождении выбранного набора данных или приложения. Эта информация о происхождении собирается каждый раз, когда приложение загружает или перезагружает данные. Если приложение не перезагружалось в последнее время, происхождение может быть неполным или неточным.

На диаграмме происхождения данных выводятся узлы следующих типов:

  • Набор данных: наборы данных — это источники данных, такие как коннекторы или файлы данных. Зачастую наборы данных — это источники данных, добавленные в пространство или полученные из приложения в виде файла qvd. Узлы набора данных отображают местоположение набора данных и то, находится ли он в общем или управляемом пространстве.

  • Приложение: узлы приложений представляют аналитические приложения Qlik Sense, которые используют источники данных в происхождении. Узлы приложений отображают имя и местоположение приложения как QCS (Qlik Cloud).

Узлы, доступные на графике происхождения, являются входными потоками в выбранный набор данных или приложение или выходными потоками из него.

Выберите набор данных или приложение, чтобы назначить его корневым узлом для анализа воздействия. На графике происхождения он отмечен темно-серой рамкой.

Корневой узел

Корневой узел графика происхождения с темно-серой рамкой.

На графике происхождения отображается число входных и выходных узлов корневого узла. Входные узлы — это вышестоящие узлы по отношению к корневому. Типичные входные узлы включают источники данных, используемые корневым узлом, или приложения, которые создают наборы данных, используемые корневым узлом. Выходные узлы — это нижестоящие узлы по отношению к корневому. Типичными выходными узлами являются приложения, использующие корневой узел в качестве источника данных, или наборы данных, выводимые корневым узлом.

Выберите узел, щелкнув его мышью. Когда узел выбран, линия происхождения, ведущая к нему, выделяется зеленым цветом, и можно просмотреть доступные сведения об узле.

Выделенная линия происхождения выбранного узла со сведениями

Выбран узел, для него отображается полное происхождение через другие узлы, выделенные зеленым.

Сведения об узле

Сведения ограничиваются доступом пользователя к этому приложению или набору данных. В окне «Сведения» предоставляется следующая информация:

  • Имя

  • Описание

  • Теги

  • Местоположение

  • Пространство

  • Владелец

  • Создатель

  • Последнее изменение

Если у вас нет разрешения на просмотр приложения или набора данных, можно просмотреть только его имя.

Навигация по графику происхождения

Щелкните и перетащите график происхождения для перемещения по нему. Можно использовать также кнопки навигации. Можно щелкнуть Главная, чтобы в центре графика происхождения был корневой узел. Используйте кнопки «Назад» и «Вперед» для перемещения по выбранным местам.

Навигация по графику происхождения

Кнопки навигации по графику происхождения.

Чтобы изменить анализируемый корневой узел, выберите узел и затем Анализ воздействия на панели сведений.

Отфильтруйте график происхождения, чтобы он показывал только входные потоки или только выходные потоки корневого узла. Найдите конкретные узлы с помощью поля поиска.

Окно поиска и фильтры входных и выходных потоков

Окно поиска и фильтры входных и выходных потоков для графика происхождения.

Большие группы узлов, находящихся в одинаковом положении на графике происхождения, можно свернуть. Свернутую группу можно развернуть, чтобы отобразить все ее узлы. Также можно показать узел в свернутой группе, выполнив его поиск.

Узлы со свернутыми узлами под ними

Узлы со свернутыми узлами под ними.

Ограничения

Анализ воздействия и график происхождения имеют следующие ограничения:

  • Приложения, которые не были перезагружены после выпуска анализа воздействия в Qlik Sense SaaS, могут не содержать всей информации о происхождении до момента их перезагрузки. Сведения о некоторых узлах могут быть ограничены, если они не были загружены после включения анализа воздействия для этого клиента.

  • Сведения об узле для наборов данных за пределами клиента, такие как подключения к SQL Server или Google Drive, ограничиваются типом набора данных и его именем. Подключения REST только показывают, что это данные REST.

Использование графика происхождения

Отслеживайте источник и использование данных. Отслеживание происхождения данных помогает понять, откуда берутся данные, как они перемещаются и используются в организации.

Разработчики приложений могут использовать график происхождения данных для повышения достоверности источников данных и улучшения их понимания. Он позволяет ответить на такие вопросы, как:

  • Откуда взялся этот набор данных?

  • Какие приложения используют этот набор данных?

  • Существуют ли другие наборы данных, полученные на его основе?

Разработчики приложений могут найти несколько наборов данных, относящихся к той или иной предметной области. Просматривая происхождение набора данных, можно увидеть, откуда он взялся и какие другие приложения используют эти данные.

Администратор данных может использовать график происхождения, чтобы повысить эффективность работы, улучшить совместную работу и качество данных. Он позволяет ответить на такие вопросы, как:

  • Какие наборы данных не используются в приложениях?

  • Какие наборы данных являются потенциально дублирующимися?

  • Можно ли упростить конвейер данных и их преобразования?

  • Каковы дальнейшие последствия изменения набора данных в любой точке конвейера данных?

Пример: Нахождение наборов данных с помощью графика происхождения

Как разработчик приложений, ваш администратор данных может предоставить наборы данных, на основе которых будут разработаны приложения. В этом примере администратор данных указал, что нужно использовать файлы QVD, выведенные из приложения QVD Output-2. Глядя на общее пространство, куда выводятся файлы QVD, не сразу понятно, какие наборы данных следует использовать.

Пространство вывода QVD

Пространство вывода QVD, где отображаются все отсортированные файлы QVD.

Щелкните на одном из наборов данных, в данном случае EmployeeData, и выберите Анализ воздействия.

Анализ воздействия для набора данных EmployeeData

Анализ воздействия для файла QVD EmployeeData.

Следуя по линии происхождения вверх, видно, что этот набор данных является выводом из QVD Output-2. Выберите QVD-Output 2 и просмотрите анализ воздействия для него.

Анализ воздействия для QVD-Output-2

Анализ воздействия приложения QVD-Output2

Теперь можно просмотреть все выводы из QVD-Output-2 и понять, какие источники данных следует использовать в приложении.

Пример: выявление проблем с данными помощью графика происхождения

Клиент, являющийся разработчиком приложений и использующий одно из приложений, App7, сообщил, что некоторые данные в приложении кажутся устаревшими. При запуске скрипта загрузки все выглядит нормально, поэтому нужно открыть Анализ воздействия для приложения и просмотреть его входные потоки. При проверке сведений о каждом из исходных файлов QVD выяснилось, что один из них, Support, не загружался в течение семи дней.

Сведения о файле Support

Подробные сведения в графике происхождения для узла Support.qvd.

Можно определить владельца приложения, а затем связаться с ним для дальнейшего расследования.

Пример: оценка дальнейших воздействий

Администратор данных планирует обновить скрипт загрузки и выходные данные одного из своих старых приложений, которое обрабатывает данные коннектора. Анализ воздействия приложения-обработчика, QVD-Output-1, позволяет проверить его воздействие на последующие данные и посмотреть, какие выходные данные все еще используются.

Анализ воздействия для QVD-Output-1

Анализ воздействия для приложения QVD-Output-1.

Есть несколько нижестоящих приложений, использующих выходные данные из QVD-Output-1. Выберите приложения, чтобы просмотреть их владельцев.

Сведения об App1

Подробные сведения о приложении App1.

Прежде чем вносить запланированные изменения, нужно будет поговорить с владельцами этих приложений, чтобы убедиться, что эти изменения не повлияют на функциональность приложений.

Пример: выявление избыточности в конвейере данных

Администратор данных решает проанализировать конвейер данных, чтобы выявить возможности для его упрощения и консолидации. Известно, что есть два приложения, которые обрабатывают данные от одного из коннекторов. Выберите одно из приложений для анализа воздействия, а затем — коннектор данных для просмотра анализа его воздействия.

Анализ воздействия для коннектора данных

Анализ воздействия узла подключения к данным, демонстрирующий полное происхождение данных в нисходящем направлении.

Есть два приложения-обработчика, которые выводят файлы QVD из этого коннектора. В выходных данных этих двух приложений есть некоторое сходство. Здесь могут быть избыточные данные, которые можно объединить в одном приложении-обработчике и потенциально сократить количество выходных данных. Тщательно изучите эти приложения и их выходные данные, чтобы понять, можно ли их оптимизировать.