# Управление метаданными на уровне поля и профилирование данных

Метаданные на уровне поля позволяют применять к полям псевдонимы, описания и классификации; эти функции помогают идентифицировать конкретные данные и конфиденциальные поля.

Профилирование предлагает администраторам Data богатую техническую информацию о наборах данных. С помощью статистики профиля и выборки данных разработчики приложений получают идеи и указания для создания приложений и планирования визуализаций. Профилирование полей может помочь аналитикам данных и бизнес-пользователям получить наблюдения быстрее. Они могут быстро просмотреть и визуализировать ценные показатели профиля поля, не создавая приложение предварительно.

Примечание к информации

Qlik Cloud профилирует только до 12 миллионов строк в наборе данных на основе базы данных. Если набор данных на основе базы данных превышает 12 миллионов строк, профилируются только первые 12 миллионов строк. Метаданные для всех полей все равно добавляются независимо от количества профилируемых строк.

Процесс профилирования имеет ограничение по времени, применяемое как к файловым, так и к основанным на базах данных наборам данных, ограничивая профилирование 30-минутным временным окном. Профиль будет помечен как неудавшийся, если он превысит этот лимит времени.

## Разрешения

Для профилирования и создания выборки данных требуются разрешения. Для этого необходима роль в пространстве набора данных, которая позволяет профилировать источники данных. Для получения дополнительных сведений см. [Управление разрешениями в общих пространствах](https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Sense_Hub/Spaces/managing-shared-spaces.htm) или [Управление разрешениями в управляемых пространствах](https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Sense_Hub/Spaces/managing-managed-spaces.htm).

## Управление метаданными на уровне поля

На вкладке Профиль можно просматривать и редактировать метаданные для любого поля в наборе данных. Выберите любую карточку из the Плитка icon представления, любую строку из the Список icon представления, или любой столбец из the Данные icon представления, чтобы открыть панель Сведения этого поля справа от сетки. Поля метаданных на уровне поля (Псевдоним поля, Описание, Теги и Классификация) являются необязательными, их можно определять и редактировать на этой панели.

Поля метаданных на уровне поля

| Описание | Описание |
| --- | --- |
| Псевдоним поля | Введите необязательное альтернативное имя, чтобы в анализе профиля отображалось более значимое, понятное имя. Псевдонимы отображаются только в анализе профиля и не затрагивают технические имена столбцов.<br><br>Примечание к информацииПсевдоним не может совпадать с именем существующего поля или псевдонима в наборе данных. |
| Описание | Введите вспомогательную информацию для пользователей, просматривающих метаданные поля и профилирование для этого поля. |
| Теги | Введите фрагменты текста для определения и категоризации этого поля и его данных. |
| Классификация | Выберите одну или несколько соответствующих классификаций из выпадающего списка. Вы можете применить несколько классификаций к полю. |

Примечание к информацииВыбранные классификации на уровне полей отображаются на вкладке Обзор набора данных и перечислены по полям под техническими метаданными набора данных.

Примечание к информацииКлассификации, примененные к полям в файлах Excel с несколькими листами, перечисляются с указанием имени листа и имени поля (пример: Sheet1/EmpID).

Метаданные на уровне поля для файла XLSX с несколькими листами

Метаданные на уровне поля для файла XLSX с несколькими листами

Метаданные на уровне поля для файла XLSX с несколькими листами ![Выберите карту поля в мозаичном виде, чтобы открыть панель «Сведения»](https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Resources/Images/ui_FieldLevelMetaData-rev2.png)

Вы также можете связать поле с термином в вашем бизнес-глоссарии с панели Сведения. Дополнительные сведения см. в [Связывание полей набора данных с терминами бизнес-глоссария](https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Sense_Hub/Catalog/BusinessGlossary/linking-dataset-fields-glossary-terms.htm).

Поведение профилирования варьируется в зависимости от источника данных и размера файла для QVD и Parquet файлов. Дополнительные сведения см. в [Ограниченный вид профиля](https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Sense_Hub/Catalog/Profiling-data.htm#Limited).

## Профилирование данных

Статистика профиля предлагает различные виды анализа столбца, которые позволяют измерить частоту, диапазоны и значения, встречающиеся в наборах данных. Эти показатели описывают отношения между значениями полей, например:

* количество уникальных значений (кардинальность);
* образцы значений, наиболее распространенные значения и частота значения;
* избыточность, полезная при определении значений по умолчанию или возможных дублирующихся значений;
* количество значений NULL, строковых и числовых значений;
* информация о диапазонах значений, включая минимум, максимум, среднее, сумму и стандартное отклонение.

Каталог предлагает три различных вида для данных в профиле поля:

* Вид Плитки ― это визуальное представление полей на основе карточек, расположенных в виде сетки.

* Вид Список ― это сводная таблица с настраиваемой статистикой профиля.

* В виде Таблицы перечислены имена столбцов полей и максимум двадцать первых записей набора данных.

Выберите значок Tilethe List icon, the Данные icon или the Вид данных icon для переключения между видами профиля.

### Вид Плитки

Вид Profile tile (Мозаика профиля) — это визуальный профиль поля, разработанный для отображения самого информативного содержимого для этого типа поля. Показанный тип карточки вида по умолчанию определяется тем, больше числовых или текстовых значений в этом поле. Например, для полей, содержащих как текстовые, так и числовые значения, по умолчанию отображается тип карточки Most Common Values (Наиболее распространенные значения), если текстовых значений больше, и тип карточки распространения чисел Binned Frequency (Частота разбиения на группы), если в поле больше числовых значений. Переключатель с раскрывающимся списком предлагается, чтобы можно было переключиться на тип карточки Наиболее распространенные значения для любого поля, содержащего неуникальные значения, когда выбран the значок «Наиболее распространенные значения» icon; или можно переключиться назад на карточку распределения числовых данных, если выбран тип Частота разбиения на группыthe значок «Частота разбиения на группы» icon. Обратите внимание, что все типы карточки включают количество нулевых значений, если они есть в поле.

Вид плиток: поля профилируются по метрикам, которые являются значимыми для типа данных, содержащихся в этом поле (например, сравнение текстовых и числовых значений)

Вид плиток: поля профилируются по метрикам, которые являются значимыми для типа данных, содержащихся в этом поле (например, сравнение текстовых и числовых значений)

Вид плитокВид плиток: поля профилируются по метрикам, которые являются значимыми для типа данных, содержащихся в этом поле (например, сравнение текстовых и числовых значений) ![Профиль набора данных в виде плиток](https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Resources/Images/ui_ProfileTileView-rev2.png)

#### Карточка Образцы значений

Карточка Образцы значений отображается, когда все значения уникальны и являются только текстовыми. На ней представлены первые три значения (до трех значений) и общее количество дополнительных уникальных значений.

Карточка в виде плиток: Образцы значенийКарточка в виде плиток: Образцы значенийОбразцы значений![Плитка «Образцы значений»](https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Resources/Images/ui_SampleValuesTile.png)

Критерии профиля Образцы значений: на этой карточке представлены значения поля, когда кардинальность высока (все значения уникальные). В случае, если каждое значение текстовое и уникально, несколько образцов значения дают лучшее начальное представление о типе данных в поле.

На каждой карточке профиля Образцы значений показаны:

* Имя поля
* кардинальность (уникальные значения),
* До трех образцов значений (в полях может быть меньше трех значений)

#### Карточка Частота наиболее распространенных значений

На карточке Частота наиболее распространенных значений отображаются пять наиболее распространенных значений и их частота. Если наиболее распространенных значений больше пяти отдельных значений, они объединяются и отображаются как Другие. Если есть поля, в которых отсутствуют значения, в совокупности они отображаются как Null. Эта карточка профиля может быть применена к текстовым, числовым или смешанным значениям данных.

Карточка в виде плиток Частота наиболее распространенных значенийКарточка в виде плиток Частота наиболее распространенных значенийЧастота наиболее распространенных значений![Плитка «Частота наиболее распространенных значений»](https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Resources/Images/ui_MostCommonValuesFreq_611x365.png)

Критерии Частота наиболее распространенных значений: поля, которые содержат немного значений или в которых значения распределены неравномерно, профилируются с использованием карточки «Частота наиболее распространенных значений». Это профилирование применяется, только если есть несколько экземпляров тех же значений. Пользователи могут быстро понять распределение значений поля. Если данные поля включают как текстовые, так и числовые значения и текстовых значений больше, то отображается карточка Частота наиболее распространенных значений. Переключение на карточку Частота разбиения на группы предлагается, когда в поле больше трех числовых значений.

На каждой карточке профиля Частота наиболее распространенных значений отображаются:

* Имя поля
* кардинальность (уникальные значения),
* Наиболее распространенные значения и их частота
* пункт Другие — объединенная частота оставшихся значений.

#### Карточка Частота разбиения на группы

Карточка Частота разбиения на группы показывает сведения о распределении и профилировании, которые важны для числовых полей, включая минимальное, среднее и максимальное значения данных. Если данные поля включают как текстовые, так и числовые значения и числовых значений больше, то отображается карточка Binned frequency (Частота разбиения на группы). Тип карточки Most Common Values Frequency (Частота наиболее распространенных значений) доступен для всех полей, в которых есть неуникальные значения.

Карточка в виде плиток: Частота разбиения на группы — распределение числовых данных

Карточка в виде плиток: Частота разбиения на группы — распределение числовых данных

Карточка в виде плиток: Частота разбиения на группыЧастота разбиения на группы — распределение числовых данных ![Плитка «Частота разбиения на группы»](https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Resources/Images/ui_BinnedFrequencyTile.png)

На каждой карточке профиля Binned frequency (Частота разбиения на группы) показаны:

* Имя поля
* кардинальность (уникальные значения),
* Гистограмма, показывающая распределение числовых данных
* минимальное значение,
* Среднее значение (сумма чисел, разделенная на общее количество значений в наборе данных)
* максимальное значение.

### Вид списка

Вид списка профиля предлагает таблицу с вариантами статистики профиля. Пользователи проверяют интересующие их метрики, которые имеют наибольшее значение для набора данных в области «Управление столбцами» the значок «Столбцы» icon: для этого прокрутите таблицу до правого края. Первые девять статистических данных предварительно выбраны по умолчанию.

Вид списка: выберите нужную статистику профиля в раскрывающемся списке Управление столбцами, который находится у правого края таблицы

Вид списка: выберите нужную статистику профиля в раскрывающемся списке Управление столбцами, который находится у правого края таблицы

Вид спискаВид списка: выберите нужную статистику профиля в раскрывающемся списке Управление столбцами, который находится у правого края таблицы ![Профиль набора данных в виде списка](https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Resources/Images/ui_ProfileListView-rev.png)

[](https://help.qlik.com/en-US/cloud-services/Subsystems/Hub/Content/Sense_Hub/Catalog/Profiling-data.htm)

#### Доступная статистика профиля

Статистика профиля полей

| Статистика | Описание |
| --- | --- |
| Имя | Имя поля (пример: CategoryID) |
| Тип данных | Qlik Sense регистрирует данные из многих различных систем, универсальное сопоставление типов внешних данных с внутренними накладывается на данные полей (столбцов) в информационных целях. Поддерживаются следующие значения типов данных.<br><br><ul> <li> <p><span>Дата</span>: дата, содержащая месяц, день, год в формате ISO 8601 YYYY-MM-DD</p> </li> <li><span>Время</span>: значение времени, содержащее час, минуты, секунды в формате ISO 8601 hh.mm.ss.sss±hh:mm</li> <li><span>Дата и время</span>:&nbsp;значение даты и времени, содержащее год, месяц, день, час, минуту, секунду и доли в формате YYYY-MM-DDThh.mm.ss.sss</li> <li><span>Метка времени</span>:&nbsp;значение метки времени, содержащее год, месяц, день, час, минуту, секунду, доли и часовой пояс в формате YYYY-MM-DDThh.mm.ss.sssZ</li> <li><span>Строка</span>:&nbsp;символьные данные, представляющие текст</li> <li><span>Двойное число</span>: числовой тип данных с двойной точностью: 64-разрядный с плавающей запятой IEEE 754</li> <li><span>Десятичная дробь</span>: точный числовой тип данных, определенный точностью (общее количество цифр) и масштабом (количество цифр справа от десятичной точки)</li> <li><span>Целое число</span>: положительные или отрицательные целые числа</li> <li><span>Булево значение</span>: логическое значение (ИСТИНА/ЛОЖЬ)</li> <li><span>Двоичное значение</span>: категориальные данные, которые могут принимать ровно два возможных значения, такие как «1» и «2»</li> <li><span>Пользовательский</span>: тип, который находится за пределами сопоставленных типов, известных в системе</li> </ul> |
| Уникальные значения | кардинальность, количество уникальных значений, присутствующих в этом поле |
| Нулевые значения | Количество значений NULL |
| Образцы значений | Образцы значений (отображаются 3 образца значений) |
| Сумма | Сумма всех значений в этом поле (для строковых полей отображается «0») |
| Мин | Минимальное наблюдаемое значение для этого поля (числовые поля) |
| Макс | Максимальное наблюдаемое значение для этого поля (числовые поля) |
| Среднее | Среднее наблюдаемое значение для этого поля |
| Медианное | Медианное (или среднее) число в массиве чисел для этого поля |
| Системные теги | Теги файла, применяемые для определения кодового набора (например, $ascii, $text) |
| Стандартное отклонение | Стандартное отклонение для числовых полей |
| Положительные | Количество положительных значений |
| Отрицательные | Количество отрицательных значений |
| Нулевые значения | Количество значений «0» |
| Пустые строки | Количество пустых строк |
| Мин. длина | Самая маленькая наблюдаемая длина символа |
| Средняя длина | Средняя наблюдаемая длина символа |
| Макс. длина | Самая большая наблюдаемая длина символа |
| Первое сортированное значение | Первое (наименьшее) значение веса сортировки (строковые поля) |
| Последнее сортированное значение | Последнее (наибольшее) значение веса сортировки (строковые поля) |
| Числовые значения | Количество числовых значений |
| Текстовые значения | Количество текстовых значений |
| Самые часто встречающиеся значения | Три наиболее распространенных значения в поле |

### Вид Данные

Профиль в виде данных отображает набор данных в виде прямой таблицы с именами столбцов полей и первыми двадцатью значениями (максимум).

Вид данных: отображаются имена столбцов данных и первые двадцать записей

Вид данных: отображаются имена столбцов данных и первые двадцать записей

Вид данныхВид данных: отображаются имена столбцов данных и первые двадцать записей ![Профиль набора данных в виде данных](https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Resources/Images/ui_ProfileDataView-rev.png)

## Ограниченный вид профиля

Некоторые наборы данных отображают ограниченный вид профиля вместо полного профиля. Ограниченный профиль показывает имена полей, типы данных, уникальные значения, нулевые значения и примеры значений. Для QVD и Parquet файлов размером менее 1 ГБ в коннекторах облачного хранилища сначала отображается ограниченный профиль. Вы можете нажать Набор данных профиля, чтобы сгенерировать полный профиль. Для файлов размером 1 ГБ или более, QVD и Parquet файлы показывают только имена полей и типы данных. Подробная информация о профиле недоступна.

В следующей таблице показано поведение профилирования для коннекторов облачного хранилища по формату файла и размеру файла.

| Формат файла | Файл меньше 1 ГБ | Файл 1 ГБ или больше |
| --- | --- | --- |
| QVD, Parquet | Ограниченный просмотр профиля отображается первым. Нажмите набор данных профиля, чтобы получить полный профиль. | Имена полей и типы данных только. Подробная информация о профиле недоступна. |
| Другие форматы: | Полный профиль. | Профиль недоступен. Применяется ограничение в 1 ГБ. |

Примечание к информации

Это поведение применяется к коннекторам облачных хранилищ, включая Amazon S3, Amazon S3 V2, Azure Storage, Dropbox, Google Cloud Storage, Google Drive, Office 365 SharePoint, и SFTP.

Ограниченный профиль набора данных QVD

Ограниченный профиль набора данных QVD

Ограниченный профиль набора данных QVDQVD ![Ограниченный просмотр профиля набора данных QVD, показывающий имена полей, типы данных, уникальные значения, нулевые значения и примеры значений](https://help.qlik.com/ru-RU/cloud-services/Subsystems/Hub/Content/Resources/Images/ui_profile-limited-view.png)

[](https://help.qlik.com/en-US/cloud-services/Subsystems/Hub/Content/Sense_Hub/Catalog/Profiling-data.htm)

#### Доступная статистика профиля

Статистика в ограниченном профиле

| Статистика | Описание |
| --- | --- |
| Имя | Имя поля (пример: CategoryID) |
| Тип данных | Qlik Sense регистрирует данные из многих различных систем, универсальное сопоставление типов внешних данных с внутренними накладывается на данные полей (столбцов) в информационных целях. Поддерживаются следующие значения типов данных.<br><br><ul> <li> <p><span>Дата</span>: дата, содержащая месяц, день, год в формате ISO 8601 YYYY-MM-DD</p> </li> <li><span>Время</span>: значение времени, содержащее час, минуты, секунды в формате ISO 8601 hh.mm.ss.sss±hh:mm</li> <li><span>Дата и время</span>:&nbsp;значение даты и времени, содержащее год, месяц, день, час, минуту, секунду и доли в формате YYYY-MM-DDThh.mm.ss.sss</li> <li><span>Метка времени</span>:&nbsp;значение метки времени, содержащее год, месяц, день, час, минуту, секунду, доли и часовой пояс в формате YYYY-MM-DDThh.mm.ss.sssZ</li> <li><span>Строка</span>:&nbsp;символьные данные, представляющие текст</li> <li><span>Двойное число</span>: числовой тип данных с двойной точностью: 64-разрядный с плавающей запятой IEEE 754</li> <li><span>Десятичная дробь</span>: точный числовой тип данных, определенный точностью (общее количество цифр) и масштабом (количество цифр справа от десятичной точки)</li> <li><span>Целое число</span>: положительные или отрицательные целые числа</li> <li><span>Булево значение</span>: логическое значение (ИСТИНА/ЛОЖЬ)</li> <li><span>Двоичное значение</span>: категориальные данные, которые могут принимать ровно два возможных значения, такие как «1» и «2»</li> <li><span>Пользовательский</span>: тип, который находится за пределами сопоставленных типов, известных в системе</li> </ul> |
| Уникальные значения | кардинальность, количество уникальных значений, присутствующих в этом поле |
| Нулевые значения | Количество значений NULL |
| Образцы значений | Образцы значений (отображаются 3 образца значений) |

Связанные учебные материалы:

* [Как использовать Каталог данных для профилирования данных?](https://help.qlik.com/lnk/How_use_datacatalog_profile_data)

## Подробнее

* [Как использовать Каталог данных для профилирования данных?](https://help.qlik.com/lnk/How_use_datacatalog_profile_data)