ETL-система: инструменты ETL для анализа больших данных от компании Megaputer

Инструменты ETL и BI для анализа больших данных

как правило, в любой компании анализом данных занимается узкий круг специалистов, а потенциальных потребителей результатов аналитических проектов может быть много. Речь идет о сотрудниках, которые отвечают за процесс принятия решений. Они часто не имеют специальных технических навыков и прямого доступа к проектам. Все это усложняет преобразование данных в полезные знания о бизнес-процессах.

Инструменты ETL и BI для преобразования данных и конструирования веб-отчетов PolyAnalyst ETL & BI позволяет решить эту проблему, предоставляя пользователям средства low-code трансформации данных, а также отображения результатов сложных алгоритмов анализа в виде интерактивных графических отчетов, доступных для понимания неспециалистов.

Смотреть видео-презентацию>>

ДОСТУПНА ВСЯ ПАЛИТРА ETL-ИНСТРУМЕНТОВ

В etl-системе практически любая задача по преобразованию данных может быть решена за счет применения инструментов последовательной предобработки PolyAnalyst. Очистка или преобразование данных представляют собой сценарий, состоящий из определенных функциональных узлов (этапов), который можно сохранять, повторять и изменять по необходимости:

Объединение – аналог SQL JOIN;
Конкатенация – аналог SQL UNION;
Агрегирование данных – аналог SQL GROUP BY;
Дополнение – формирование таблицы из записей, имеющихся в одной таблице, но отсутствующих в другой;
Расчет и вывод новых производных вычисляемых атрибутов;
Внешнее обогащение данных – привлечение дополнительной информации из внешних источников;
Внутреннее обогащение данных – поиск групп подобных строк и создание новых строк, содержащих обогащенные значения, полученные на основе обнаруженных групп подобных строк;
Интеллектуальное заполнение пропущенных значений;
Преобразование данных – изменение типа данных, замена строковых значений, замена устойчивых сочетаний символов;
Сопоставление имени, типа и значения атрибута;
Консолидирование данных – генерация новых колонок данных, содержащих агрегированные значения исходных колонок;
и еще два десятка инструментов для работы с данными.

В рамках концепции «PolyAnalyst — открытая среда разработки» в ETL системе реализован функционал по включению в сценарии анализа кода на языке Python, а также предусмотрена возможность вызова из внешних библиотек стандартных функций. Это позволяет расширить набор ETL инструментов для создания сценариев преобразования данных и использовать накопленный ранее опыт заказчика.

ГАЛЕРЕЯ ОТЧЕТОВ, РАЗРАБОТАННЫХ В POLYANALYST

Набор визуальных интерактивных дашбордов, созданных в конструкторе отчетов BI-модуля системы PolyAnalyst. Ознакомьтесь с возможность визуального представления результатов анализа больших данных, в том числе с применением алгоритмов машинного обучения и обработки данных на естественном языке.

Интеллектуальная аналитика розничных продаж

Интерактивный отчет для анализа структуры и динамики продаж розничной точки. Кроме того, отчет включает результат работы предиктивной модели, строящей прогноз реакции клиентов на проведение промокомпании, а также результат интеллектуального анализа покупательских корзин.

Анализ отзывов о продукции - Принтеры

Отчет демонстрирует ключевые темы и анализ пользовательского опыта в интернет-отзывах о принтерах четырех крупнейших производителей. Вы можете проанализировать разницу в рейтинговых позициях брендов на разных площадках и изучить причины этого.

Модель развития эпидемии COVID-19 в России

Визуализация модели прогноза масштабов и сроков заболеваемости COVID-19 в России. Визуализированы данные по новым случаям, общем количестве активных случаев, числу летальных исходов и выздоровлений. Данные представлены в общем по РФ и по регионам.

ПРИМЕРЫ BI ДАШБОРДОВ POLYANALYST

Загрузка, трансформация, очистка, обогащение и графическое предоставление данных в одной системе, без необходимости сопряжения различных программных продуктов;
Несколько десятков Low-code инструментов преобразования данных;
Возможность интеграции кода и моделей, разработанных на языках Python и R;
Оперативное self-service создание пользовательских отчетов;
Богатая коллекция графических инструментов;
Удобный веб-интерфейс для работы в браузере;
Возможность многомерного представления результатов;
Гибко настраиваемая ролевая модель, разграничивающая доступ к данным и отчетам;
Высокая масштабируемость и производительность: поддержка крупных массивов данных и большого количества пользователей;
Возможность полностью автономной работы системы в закрытом контуре заказчика или публикации отчетов в Интернете с использованием безопасного шифрованного канала доступа.

Как работает ETL / BI -система

Традиционные инструменты создания отчетности, как правило, не предоставляют пользователю возможности серьезного преобразования и анализа данных, а большинство систем глубокого анализа данных, в основном, предлагают весьма посредственные инструменты создания отчетов. PolyAnalyst BI — дополнительный набор инструментов, которые могут быть интегрированы в аналитический клиент PolyAnalyst. Комплексное использование обеих систем позволяет решить эту проблему: вы сможете легко создавать пользовательские отчеты на основе результатов, полученных в ходе выполнения сложных аналитических проектов.

PolyAnalyst BI обладает интуитивным пользовательским интерфейсом, поддерживающим функцию drag-and-drop. Имеются широкие возможность по выбору и настройке цветовой схемы, типа визуализации, области детализации, отображения логотипа компании и многое другое. Интерфейс, предназначенный для работы в браузере, позволяет скачивать любой отчет, открывать к нему доступ других сотрудников, распечатывать его для руководства, коллег или клиентов.