Denvic Visual Transformer. Документация
Denvic Visual Transformer (DVT)
Архитектура и используемые технологии DVT
Минимальные требования к оборудованию
Релизы
Подробно о релизах
Дорожная карта
Начало работы
Доступ к личному кабинету демо-версии DVT
Установка DVT
Авторизация и редактирование пользователей
Развертывание DVT в Yandex Cloud
Интерфейс DVT
Ноды. Интерфейс и настройки
Подключение из DVT
Описание функционала нод
Расширения DVT
Подключения
Чтение данных
JSON
Трансформации
Add TimeDelta To DataFrame
Cast Column Types
Convert DateTime To Period Start
Drop Columns
Filter DataFrame
Fill NA/Null Values
Drop NA/Null Values (удалено)
Execute Python Code on DataFrame
GroupBy + Aggregation
Join DataFrames
Lag Columns
Normalize numeric columns DataFrames
Pivot DataFrame
Regex Replace
Rename Columns
Replace values
Select Columns
Set Timezone
Split Column
Union DataFrames
Unpivot DataFrame
Variables → DataFrame
Select Variables from DataFrame
Запись данных
Другое
Что умеет DVT?
Запуск нескольких проектов в рамках одного пайплайна
Объединение нескольких нод в субграф (субноду)
Добавление совместимой ноды
Просмотр датафреймов
Запуск проектов DVT по расписанию
Параллельная выгрузка датафреймов в несколько потоков (нода «Write Dataframe to DB»)
Создание и редактирование переменные проекта
Примеры работы с DVT
Выгрузка лидов из Битрикс24
Выгрузка задач, их времени, истории и результатов
Инкрементальная выгрузка из Битрикс24 с использованием «Переменных»
Пример очистки данных
Пример замены значений поля по «словарю»
Глоссарий
Схемы DVT и Denvic ETL
Общая архитектура всех компонентов Denvic ETL
Экстрактор 1C → DVT - взаимодействие
Описание функционала нод
/
Трансформации
Replace values
Нода позволяет заменить значения в выбранной колонке.
Rename Columns
Select Columns