logo
Практические работы

1.4. Аналитические технологии, реализованные в Deductor

В Deductor реализовано большинство аналитических технологий – от ETL и хранилищ данных до алгоритмов Data Mining. В качестве языка визуального моделирования используются структуры в виде деревьев. В табл. 1 перечислены возможности Deductor 5.1 (5.2).

Таблица 1.1

Технологии, реализованные в Deductor 5.1 (5.2)

Аналитические задачи

Deductor

Консолидация данных

Реляционное хранилище данных ROLAP (схемы «звезда» и «снежинка»), виртуальное хранилище данных

Трансформация данных

Фильтрация, группировка, разгругппировка и замена данных, скользящее окно, квантование, слияние, расчетные поля, нормализация. Разнообразные схемы кодирования: уникальными значениями и битовой маской

Визуализация данных

ОLАР-кубы, диаграммы, графики, гистограммы, правила, деревья, многомерные карты, матрицы классификации, диаграммы рассеяния, статистика, ретропрогноз

Очистка и предобработка данных

Фильтр Калмана, вейвлеты, равномерный случайный сэмплинг, заполнение пропусков средним значением, корреляционный анализ, метод главных компонент

Data Mining: задача ассоциации

Алгоритм a priori

Data Mining: кластеризация

Сети и карты Кохонена, алгоритм k-means

Data Mining: классификация и регрессия

Линейная и логистическая регрессия, дерево решений (алгоритм С4.5), многослойный персептрон (алгоритмы ВРгор и RProp)

Анализ и прогнозирование временных рядов

«Наивные» и базовые эконометрические модели, пользовательские модели, расчет АФК, выделение тренда, регрессионные и нейросетевые модели

Ансамбли моделей

Сценарный подход, поддерживающий создание однородных ансамблей и ансамблей на основе различных типов моделей, стэкинг и бэггинг

Сравнение моделей

ROC-анализ

Вся работа в Deductor Studio построена на создании сценариев обработки данных при помощи трех мастеров – импорта, обработки и экспорта. Для настройки подключений к разнообразным источникам данных (от СУБД до специализированных учетных систем и веб-серверов) используется мастер подключений.

На рис. 1 представлено главное окно Deductor Studio: слева расположена область построения сценариев, а справа – область отображения визуализаторов.

Рис. 1.1. Deductor Studio – рабочее место аналитика