1. Аналитическая платформа Deductor

Deductor – это аналитическая платформа, основа для создания законченных прикладных решений в области анализа данных. Реализованные в Deductor технологии позволяют на базе единой архитектуры пройти все этапы построения аналитической системы: от консолидации данных до построения моделей и визуализации полученных результатов.

До появления аналитических платформ анализ данных осуществлялся в основном в статистических пакетах. Их применение требовало от пользователя высокой квалификации. Большинство алгоритмов, реализованных в статистических пакетах, не позволяло эффективно обрабатывать большие объемы информации. Для автоматизации рутинных операций приходилось использовать встроенные языки программирования.

В конце 80-х гг. произошел стремительный рост объемов информации, накапливаемой на машинных носителях, и увеличились потребности бизнеса в применении анализа данных. Ответом стало появление новых парадигм в анализе, таких как хранилища данных, машинное обучение, Data Mining, Knowledge Discovery in Databases. Это позволило популяризировать анализ данных, поставить его на промышленную основу и решить огромное число бизнес-задач с большим экономическим эффектом.

Венцом развития анализа данных стали специализированные программные системы – аналитические платформы, которые полностью автоматизировали все этапы анализа от консолидации данных до эксплуатации моделей и интерпретации результатов.

Первая версия Deductor увидела свет в 2000 г., и с тех пор идет непрерывное развитие платформы. В 2007 г. выпущена пятая по счету версия системы (5.0 и 5.1), в 2009 г. – версия 5.2. Разработчик – компания BaseGroup Labs (Россия).

Сегодня Deductor – яркий представитель как настольной, так и корпоративной системы анализа данных последнего поколения.

1.2. Общие сведения о Deductor

Аналитическая платформа Deductor состоит из пяти частей:

• Warehouse – хранилище данных, консолидирующее информацию из разных источников;
• Studio – приложение, позволяющее пройти все этапы построения прикладного решения, рабочее место аналитика;
• Viewer – рабочее место конечного пользователя, одно из средств тиражирования знаний (то есть построенные аналитиком модели применяют пользователи, не владеющие технологиями анализа данных);
• Server – служба, обеспечивающая удаленную аналитическую обработку данных;
• Client – клиент доступа к Deductor Server. Обеспечивает доступ к серверу и управление его работой из сторонних приложений.

• Enterprise;
• Professional;
• Academic.

• серверные компоненты Deductor Server и Deductor Client;
• интерфейс доступа к Deductor через механизм OLE Automation;
• традиционное хранилище данных Deductor Warehouse на основе трех СУБД: Firebird, SQL, Oracle;
• виртуальное хранилище данных Deductor Virtual Warehouse.

• отсутствует пакетный запуск сценариев, то есть работа в программе может вестись только в интерактивном режиме;
• отсутствует импорт из промышленных источников данных: 1С, СУБД, файлы Excel (имеется возможность импорта только из текстовых файлов и Deductor Warehouse на базе Firebird);
• отсутствуют некоторые другие возможности.

Аналитическая платформа Deductor

Deductor является аналитической платформой – основой для создания законченных прикладных решений в области анализа данных. Реализованные в Deductor технологии позволяют на базе единой архитектуры пройти все этапы построения аналитической системы: от создания хранилища данных до автоматического подбора моделей и визуализации полученных результатов.

Deductor состоит из шести частей

Deductor Warehouse

многомерное хранилище данных, аккумулирующее всю требуемую для анализа предметной области информацию. Использование единого хранилища позволяет обеспечить непротиворечивость данных и централизованное хранение, а также автоматически обеспечивает всю необходимую поддержку процесса анализа. Deductor Warehouse оптимизирован для решения именно аналитических задач, что положительно сказывается на скорости доступа к данным. В ряде случаев имеет смысл отказаться от традиционного хранилища и воспользоваться альтернативой – виртуальным хранилищем Virtual Warehouse;

Deductor Studio

программа, реализующая функции импорта, обработки, визуализации и экспорта данных. Она может функционировать и без хранилища, получая информацию из любых других источников, но наиболее оптимальным является их совместное использование. В Deductor Studio включен полный набор механизмов, позволяющий получить информацию из произвольного источника данных, провести весь цикл обработки (очистку, трансформацию данных, построение моделей), отобразить полученные результаты наиболее удобным образом (OLAP, таблицы, диаграммы, деревья и т. д.) и экспортировать их в наиболее распространенные форматы;

Deductor Viewer

программа, ориентированная на конечного пользователя и предназначенная для просмотра подготовленных при помощи Deductor Studio отчетов. Deductor Viewer позволяет минимизировать требования к пользователю системы, т. к. все требуемые операции выполняются автоматически при помощи подготовленных ранее сценариев обработки. Пользователю Deduсtor Viewer нужно только выбрать и настроить вариант отображения полученных результатов;

Deductor Analytic Server

служба, обеспечивающая удаленную аналитическую обработку данных. Она позволяет автоматически обрабатывать данные и переобучать модели на сервере, оптимизирует выполнение сценариев за счет кэширования проектов и использования многопоточной обработки;

Deductor Integration Server

служба, обеспечивающая интеграционное взаимодействие компонентов;

Deductor Client

клиент доступа к Deductor Server. Он обеспечивает доступ к серверу из сторонних приложений и управление его работой. Реализованная в Deductor архитектура позволяет добиться максимальной гибкости при создании законченного решения. Благодаря данной архитектуре можно собрать в одном аналитическом приложении все необходимые инструменты анализа и реализовать автоматическое выполнение подготовленного сценария. Технологическая платформа включает средства, позволяющие максимально сократить сроки разработки, быстро создавать и выводить на рынок новые прикладные решения, а также адаптировать их в соответствии с изменяющимися требованиями предприятий. Создание законченного решения занимает очень мало времени: достаточно получить данные, определить сценарий обработки и задать место для экспорта полученных результатов. Наличие мощного набора механизмов обработки и визуализации позволяет двигаться по шагам, от наиболее простых способов анализа к наиболее мощным. Первые результаты пользователь получает практически сразу, но при этом можно легко наращивать мощность решения.

Платформа Loginom

В 2018 году мы выпустили новую версию нашей платформы, которая называется Loginom. Подробнее о ней можно узнать на сайте loginom.ru. У новой платформы есть бесплатная редакция Community Edition, которую можно свободно скачать loginom.ru/downloads. А в нашем блоге вы можете почитать о сравнении Loginom vs Deductor.

Deductor

Продвинутая аналитика без программирования

От простейших формул до Data Mining алгоритмов: поиск скрытых закономерностей, машинное обучение, математическая статистика. Подробнее

Комбинирование и исследование данных на лету: хранилища данных, учетные системы, базы данных, веб-сервисы, файлы… Подробнее

Визуальное проектирование логики без написания кода, при помощи мастеров. Всего 4 операции: импорт, экспорт, обработка, визуализация. Подробнее

Документация и техническая поддержка на русском языке. Углубленные курсы обучения. Проектный опыт 15+ лет. Подробнее

Задачи анализа любых структурированных данных: консолидация, отчетность, очистка данных, анализ рисков, оптимизация запасов. Подробнее

Стоимость лицензий, доступная даже для небольших компаний. Возможность бесплатно опробовать современные методы анализа на своих данных. Подробнее

Возможности платформы

• Интеграция данных
• Визуализация
• Очистка данных
• Data Mining
• Сценарный подход

• Доступ к разнородным источникам: офисные приложения, 1C:Предприятие, СУБД, ERP-, CRM-системы, файлы, веб-сервисы.
• Консолидация данных в хранилище: быстрый, унифицированный и непротиворечивый источник информации для анализа.
• Удобный семантический слой хранилища данных для извлечения информации с применением привычных бизнес-терминов.
• Визуальная настройка извлечения, трансформации и загрузки данных в хранилище с возможностью очистки.

• OLAP-модуль: кросс-таблицы и кросс-диаграммы для многомерного анализа данных.
• Десятки способов визуализации, позволяющие проводить разведочный и сравнительный анализ, выявлять тенденции.
• Панели отчетов для удобного представления информации конечным пользователям, не знакомых с аналитикой.
• Поддержка нерегламентированных «ad-hoc» запросов к хранилищу данных с последующей удобной визуализацией.

• Контроль качества данных с автоматическим предложением действий по исправлению выявленных проблем.
• Выявление ошибок: встроенные алгоритмы поиска пропусков, аномалий, дубликатов и противоречий, обнаружения шумов.
• Исправление ошибок в данных на основе алгоритмов машинного обучения, статистики или по жестким правилам.
• Дедупликация данных: оценка схожести объектов, обогащение данных и объединение в единую корректную запись.

• Самообучающиеся алгоритмы и машинное обучение: деревья решений, нейронные сети, самоорганизующиеся карты, ассоциативные правила.
• Анализ временных рядов: выявления сезонности, тренда и случайной составляющей.
• Множество способов оценки качества моделей с возможностью выбора лучшей.
• Специализированные визуализаторы, облегчающие интерпретацию и повышающих доверие к результатам.

• Визуальное проектирование логики обработки при помощи мастеров без программирования.
• Реализация всего цикла анализа: подготовка данных, выбор информативных признаков, очистка, моделирование, прогнозирование, постобработка и интерпретация результатов.
• Возможность произвольным образом комбинировать любые механизмы обработки.
• Перебор, сравнение и выбор лучших сценариев очистки, моделирования, прогнозирования.

Задачи аналитики

• Банки и финансы
• Розничная торговля
• Оптовая торговля
• Телекоммуникации
• Государственные
  органы
• Промышленность
• Информационные
  технологии
• Наука и образование
• Медицина

Преимущества

Для руководителя Минимизация затрат:
любая аналитика — одна платформа Эволюционное развитие
от отчётности до оптимизации Апробированная платформа —
сотни внедренных проектов Для аналитика Все технологии анализа:
Data Warehouse, OLAP, Data Mining. Аналитика от простых формул
до самообучающихся алгоритмов Разработка сценариев анализа
без привлечения программистов Для IT-специалиста Встроенная интеграция с десятками
источников данных Высокая производительность Техническая поддержка
непосредственно от разработчиков

Состав комплекса

• Studio
• Viewer
• Warehouse
• Analytic Server
• Integration Server

Deductor Studio

Studio – рабочее место аналитика.

Он предназначен для визуального проектирования логики принятия решений. Все действия настраиваются при помощи всего 4-х мастеров: импорт, экспорт, обработка и визуализация.

Studio позволяет аналитику автоматизировать рутинные операции по обработке данных, сосредоточиться на интеллектуальной работе и формализация правил принятия решений.

Deductor Viewer

Viewer – рабочее место конечного пользователя.

Программа позволяет получить результирующие отчеты без необходимости погружения в сложную логику обработки: достаточно выбрать ранее настроенный аналитиком отчет.

Viewer исключает возможность модификации данных, пользователю доступны только функции настройки отображения результатов, экспорта в офисные приложения и печати.

Deductor Warehouse

Warehouse – хранилище данных. Оно позволяет пользователю, не имеющему специальных знаний, оперировать привычными бизнес-терминами: поставщик, канал продаж, прибыль и т.п. Deductor сформирует необходимый запрос и извлечет из базы данных интересующую информацию.

Использование единого хранилища позволяет обеспечить удобный доступ, высокую скорость обработки, непротиворечивость информации и централизованное хранение.

Deductor Analytic Server

Analytic Server – служба, обеспечивающая возможность «прогона» данных через сценарии анализа, переобучения моделей, обработки больших массивов информации. Высокая производительность достигается за счет механизмов кэширования, управления очередями, балансировки нагрузки, параллельной обработки.

Analytic Server позволяет интегрировать продвинутую аналитику в сторонние приложения и управлять процессом расчетов.

Deductor Integration Server

Integration Server – веб-сервис, функционирующий поверх Analytic Server и реализующий протокол SOAP.

Это удобный механизм обмена данными со сторонними приложениями, реализации сервис-ориентированной архитектуры (SOA) и встраивания в корпоративные системы, построенные на базе Enterprise Service Bus. Применение Integration Server обеспечивает большую гибкость интеграции, простоту масштабирования и переноса.

Оцените возможности

В бесплатной образовательной версии доступны все алгоритмы и способы визуализации, включенные
в коммерческую поставку. Deductor Academic – лучший способ знакомства с продвинутой аналитикой.

При подготовке материала использовались источники:
https://studfile.net/preview/2592958/
https://www.wikipro.ru/wiki/analiticheskaya-platforma-deductor/
https://basegroup.ru/deductor/description