Главная / Платформа / Self-Service ETL

Self-Service ETL

Используйте Self-Service ETL, чтобы упростить процесс преобразования данных перед загрузкой на платформу.

Модуль преобразования данных позволяет самостоятельно очищать данные, объединять таблицы из разных источников, добавлять и удалять столбцы в таблицах без привлечения ИТ-команды. Он доступен всем, кто может редактировать набор данных.

Модуль преобразования данных: панель инструментов, список запросов, предпросмотр таблицы и примененные шаги

Зачем нужен модуль преобразования данных

Перед загрузкой на платформу данные нужно обработать, например привести к нужному формату, отфильтровать, удалить дубликаты. Для пользователя гораздо удобнее, когда эти операции можно провести в интерфейсе платформы, не привлекая ИТ-команду.

Visiology предлагает решение этой задачи с помощью модуля подготовки и трансформации данных – Self-Service ETL, который значительно упрощает преобразование данных перед загрузкой. Интуитивная панель управления позволяет без труда выполнять операции над данными и экономит ресурсы пользователей.

Возможности Self-Service ETL

Преобразования:

  • Добавление столбца;
  • Удаление столбцов;
  • Замена значений;
  • Объединение запросов (таблицы из разных источников);
  • Форматирование;
  • Удаление дубликатов;
  • Фильтрация. Опции: «Равен», «Не равен», LIKE – позволяет искать строки, содержащие подстроку, «Входит в», «Является NULL», «Не является NULL»;
  • SQL-преобразование. Позволяет производить преобразования над таблицами из разных источников, не предусмотренные стандартным набором преобразований.

С Self-Service ETL доступны:

  • Преобразования над таблицами, в том числе:
    • таблицами из разных источников (все доступные источники),
    • новыми или ранее загруженными в набор данных таблицами;
  • Обновление данных:
    • принудительно,
    • по расписанию;
  • Редактирование шагов преобразования при необходимости.

Как получить доступ к модулю преобразования данных

В модуль преобразования данных можно перейти несколькими способами:

1

Со страницы построения модели данных

Страница построения модели данных: кнопка «Преобразовать данные» на панели
2

Со страницы дизайнера дашбордов

Дизайнер дашбордов: кнопка «Преобразовать данные» на панели инструментов
3

Со страницы предварительного просмотра загружаемой таблицы

  1. Нажмите кнопку «Данные» в дизайнере дашбордов или на странице построения модели данных.

    Кнопка «Данные» на панели
  2. Выберите источник данных и загрузите требуемую таблицу.

    Окно выбора источника данных
  3. Для перехода в модуль преобразования данных нажмите «Преобразовать данные».

    Предварительный просмотр таблицы с кнопкой «Преобразовать данные»

Как выглядит модуль преобразования данных

Модуль преобразования данных с отмеченными областями: 1 — панель инструментов, 2 — панель запросов, 3 — область предварительного просмотра, 4 — панель примененных шагов
1

Панель инструментов

Содержит различные инструменты, которые позволяют выполнять операции над данными, такие как объединение запросов, форматирование значений, фильтрация и так далее.

2

Панель запросов

Включает перечень запросов, которые используются для формирования итогового запроса. Запросы могут быть переименованы или удалены.

3

Область предварительного просмотра

Рабочее пространство, где вы можете видеть изменения, вносимые в запрос в реальном времени, что помогает контролировать процесс трансформации данных. В этой области вы также можете переименовать столбцы или изменить тип данных столбцов, нажав кнопку слева от названия столбца.

4

Панель примененных шагов

История операций преобразования. Панель отображает последовательность всех действий, которые были применены к данным, позволяя легко отслеживать все этапы обработки информации. Здесь вы также можете удалить или отредактировать шаги.

Вся документация Visiology находится в открытом доступе

К документации