Text Analytics

Текстовый анализ для работы с Excel: как легко превратить «сырые» таблицы в чистые данные Каждый, кто работает с данными, знает эту боль. Вы получаете Excel-файл от коллег или из внешней системы, а внутри — хаос: несколько таблиц на одном листе, объединённые ячейки, «шапки», занимающие три строки, и, конечно же, никаких шаблонов. Прежде чем начать анализ, нужно потратить часы на форматирование. Но что, если бы этот процесс можно было полностью хотя бы частично автоматизировать? PolyAnalyst, благодаря своим инструментам текстового анализа, действует как «интеллектуальный робот-аналитик», который не просто читает текстовое содержимое таблиц Excel, а понимает структуру и содержание документа. Он самостоятельно находит все таблицы, правильно их интерпретирует и преобразует в структурированный вид, готовый к анализу. Автоматическая обработка «сырых» данных Инструменты текстового анализа PolyAnalyst автоматически обнаруживают и сегментируют таблицы на листе Excel. Система не требует, но и не исключает, ручного указания диапазона ячеек (например, A1:D10). Текстовые алгоритмы автоматически сканируют весь лист Excel, идентифицируют…

Обновление PolyAnalyst 31ХХ:Зацикливаемся на аналитике! Компания Мегапьютер, представила очередную стабильную версию системы интеллектуального анализа данных PolyAnalyst 6.5. 31ХХ. Ключевые нововведения ✅ Циклы – автоматизация повторяющихся процессов. ✅ Накопление данных – сохранение результатов между запусками. ✅ Улучшенный импорт/экспорт Excel – работа с листами и именованными диапазонами. ✅ Обновление модуля OCR — подсчет печатей и подписей в документах, и интеграция с Vision-Language Model (VLM)✅ Новые визуализации – хордовые диаграммы, радиальные столбчатые, японские свечи и многое другое! Запись презентации обновления Запись на Youtube Запись на VK Video Презентация из вебинара ДРУГИЕ НОВОСТИ И СТАТЬИ МИРЭА и Мегапьютер запускают совместную образовательную программу по анализу данных с использованием PolyAnalyst Институт информационных технологий РТУ МИРЭА и Мегапьютер начинают подготовку специалистов по аналитике данных на PolyAnalyst. Компания Мегапьютер, разработчик платформы для… Читать далее 29.05.2025 Конференция «Современные тенденции исследования социальных настроений граждан: теория и практика» Представитель Мегапьютер выступил с докладом «Большая языковая модель + классический text mining: гибридный…

Институт информационных технологий РТУ МИРЭА и Мегапьютер начинают подготовку специалистов по аналитике данных на PolyAnalyst. Компания Мегапьютер, разработчик платформы для интеллектуального анализа данных PolyAnalyst, и МИРЭА — Российский технологический университет заключили соглашение о научно-образовательном сотрудничестве. В рамках партнёрства для студентов вуза будут запущены актуализированы и обновлены две новые дисциплины, направленные на подготовку специалистов в области data science и предиктивной аналитики. Ключевые направления сотрудничества 1. Первая дисциплина называется «Интеллектуальный анализ данных». Курс посвящён работе с PolyAnalyst как с low-code платформой для обработки преимущественно неструктурированных текстовых данных. Студенты освоят: Основы ETL-процессов: импорт данных, поиск аномалий и выбросов, очистка, нормализация. Визуализацию и статистику: построение графиков, сводных таблиц, расчёт корреляций. Продвинутые методы: Текстовая аналитика: обучение моделей классификации текстовых данных, извлечение именованных сущностей и фактов. Кластеризация больших наборов текстовых данных. Автоматизацию созданных аналитических решений. В практической части планируется реализация проектов по анализу текстовых данных, в том числе данных из соцсетей, нормативно-правовых актов и научных публикаций….

Представитель Мегапьютер выступил с докладом «Большая языковая модель + классический text mining: гибридный подход для анализа и обработки текстовых данных». 21 мая 2025 года в Москве, на площадке Координационного центра Правительства Российской Федерации, состоялась конференция «Современные тенденции исследования социальных настроений граждан: теория и практика», организованная Аналитическим центром при Правительстве Российской Федерации. Компанию «Мегапьютер» на мероприятии представлял Дмитрий Гольцов. Он выступил с докладом на тему «Большая языковая модель + классический text mining: гибридный подход для анализа и обработки текстовых данных». Методология и технологические решения В докладе был рассмотрен гибридный подход, реализованный в аналитической платформе PolyAnalyst, который сочетает: Большие языковые модели (LLM), включая собственную модель компании — MegaGPT; Классические методы text mining (извлечение именованных сущностей, текстовая кластеризация, семантическое сравнение данных). Практические применения Автоматизированное составление классификаторовС помощью гибридного подхода разработан трехуровневый классификатор новостных материалов без участия человека. Решение применимо к любым текстовым данным и позволяет: Автоматически категоризировать контент; Формировать многоуровневую структуру классификатора; Адаптироваться к изменениям…

Компания Мегапьютер продолжает новую рубрику “PolyAnalyst Podcast” Выпуск 3. PolyAnalyst vs. Excel. Компания «Мегапьютер» продолжает цикл видеоинтервью «PolyAnalyst Podcast» с экспертами в области ETL, анализа данных и ИИ. В третьем выпуске советник генерального директора по процессам цифровизации компании «СИБЕР» (входит в корпорацию «Ростех») Мария Ментова, расскажет о применении российской low-code платформы PolyAnalyst в качестве замены Microsoft Excel для подготовки управленческой отчётности. Решение позволило без написания программного кода и макросов автоматизировать процесс подготовки сводных отчетов. Альтернативная ссылка на запись на Youtube Альтернативная ссылка на запись на VK Video Предлагаем вам скачать брошюру, в которой описывается механизм применения «классических» инструментов Excel в нашей системе PolyAnalyst. Скачать «PolyAnalyst стал для нас спасением. Раньше специалисты месяцами проверяли отчёты вручную. Теперь система не только находит ошибки в данных, но и полностью заменяет Excel-макросы, которые мы годами разрабатывали. Это критически важно в условиях санкционных рисков» , – отметила Мария Ментова. Как low-code заменил Excel и избавил аналитиков от необходимости…

Компания Мегапьютер продолжает новую рубрику “PolyAnalyst Podcast” Выпуск 2. Перспективы Low-Code аналитики, прототипирование аналитических решений на PolyAnalyst. Компания Мегапьютер продолжает рубрику «PolyAnalyst Podcast» — цикл видеоинтервью с экспертами в области аналитики и искусственного интеллекта. В первом выпуске доктор социологических наук, проректор по развитию на основе анализа данных Вятского государственного университета Екатерина Митягина  рассказала как технологии ИИ и NLP расширяют возможности качественной социологии. Во втором выпуске рубрики, Михаил Акулов, менеджер проектов в интересах компании OCS Distribution, расскажет о перспективах Low-Code систем, обеспечивающих быстрое создание прототипов аналитических решений без программирования (совсем или почти). Сегодня в мире наблюдается взрывной рост темпов появления новых аналитических решений и моделей искусственного интеллекта. В технологической гонке участвуют как глобальные ИТ-корпорации и крупнейшие финансовые институты, так и стартапы, удивляющие мир высокоэффективными моделями генеративного ИИ. Скорость разработки новых решений становится критическим фактором успеха. Low-Code подход позволяет специалистам без навыков программирования создавать продвинутые бизнес-решения с помощью визуальных интерфейсов и готовых…

Компания Мегапьютер открывает новую рубрику “PolyAnalyst Podcast” Выпуск 1. Технологии ИИ в социологии. Интервью с Екатериной Митягиной, ВятГУ. Компания Мегапьютер запускает новую рубрику «PolyAnalyst Podcast» — цикл видеоинтервью с учеными и экспертами в области аналитики и искусственного интеллекта. В формате дружеской беседы с ведущим, Михаилом Ананяном, гости рубрики делятся бесценным опытом решения практических задач и использования аналитических инструментов для обеспечения цифровой трансформации организации. Зрители познакомятся с передовыми методиками анализа данных, узнают об успехах и перспективах развития ИИ, о практических решениях, реализованных на платформе PolyAnalyst. «PolyAnalyst Podcast будет охватывать широкий спектр тем: от фундаментальных принципов трансформации и очистки данных (ETL), машинного обучения (ML), обработки естественного языка (NLP), больших языковых моделей (AI), машинного зрения и визуальной аналитики (BI), до практических примеров использования результатов анализа и применения прогнозных моделей для автоматизации бизнес-процессов» — говорит Дмитрий Гольцов, директор коммерческого блока, Мегапьютер. Первый выпуск рубрики — интервью с Екатериной Митягиной, доктором социологических наук, проректором по…

Мегапьютер и К2Тех обеспечат российские компании комплексными решениями для управления данными 20 августа 2024 Разработчик Мегапьютер и ИТ-интегратор К2Тех заключили стратегическое партнерство. В его рамках стороны будут совместно развивать и внедрять системы аналитики больших данных с учетом специфики отраслей и потребностей заказчиков. Цель сотрудничества – обеспечить российские компании комплексными решениями для анализа и управления данными в интересах бизнеса.  PolyAnalyst, фокусный продукт разработчика Мегапьютер, представляет собой  многофункциональную аналитическую систему. Платформа использует современные алгоритмы машинного обучения и искусственного интеллекта для обработки больших объемов данных. Инструменты для визуализации информации, построения предсказательных моделей и глубокого анализа позволяют выявлять тренды и закономерности, составлять прогнозы на основе накопленных данных, предвосхищать риски и увеличивать прибыль компании. Последние пять лет ИТ-интегратор К2Тех активно  развивает направление инновационных технологий. За это время компания реализовала более 30 проектов по созданию и внедрению решений и эксплуатируемых систем на базе искусственного интеллекта для заказчиков enterprise-сегмента из различных отраслей: государственные организации, ритейл, банки, добывающие…

Освоение языковых моделей: подробный разбор входных параметров 23 января 2024 Если вам когда-либо приходилось использовать языковую модель в интерактивной среде или через API, то скорее всего ваша работа начиналась с выбора нескольких входных параметров. Однако, у многих из нас возникают вопросы по поводу назначения и правильного использования этих параметров. Эта статья поможет вам научиться использовать параметры для решения проблемы выдачи неверной информации (галлюцинаций) и однообразия в результатах работы языковых моделей. Мы также рассмотрим другие тонкие настройки, оптимизирующие поведение моделей. Как и в случае с промпт-инжинирингом, правильная настройка параметров поможет вам добиться от модели 110% эффективности. В данной статье подробно рассматриваются пять основных входных параметров: температура (temperature), параметры семплинга top-p и top-k, штрафы за частоту и присутствие (frequency penalty и presence penalty). Вы узнаете, как эти параметры помогают достичь баланса между качеством и разнообразием результатов работы модели. Устраивайтесь поудобнее, мы начинаем! Содержание Вводная информация Качество, разнообразие и температура Семплирование с помощью…

Мегапьютер и НОРБИТ (входит в группу ЛАНИТ) заключили соглашение о партнерстве 13 декабря 2023 Объединив усилия, компании будут работать над повышением доступности инновационных инструментов для аналитики больших данных и принятия управленческих решений на ее основе. Фокусным продуктом, на котором будет сконцентрировано внимание, станет платформа PolyAnalyst. В рамках сотрудничества НОРБИТ и «Мегапьютер» будут укреплять и расширять ее функционал, продвигая в новые рыночные сегменты и обеспечивая инновационными решениями клиентов. PolyAnalyst помогает бизнесу получать ценные инсайты из оперативных и исторических данных, прогнозировать тренды, автоматически извлекать информацию из больших объемов документов. При этом для эффективного использования не требуются навыки программирования, работа пользователя проводится в графическом low-code интерфейсе, а результаты специалисты получают в виде визуализированных интерактивных веб-отчетов. Алексей Русских, генеральный директор компании «Мегапьютер»: «Сегодняшний рынок аналитических систем стал невероятно сложным и конкурентным. Чтобы сохранять и укреплять свои позиции, необходимы новые стратегические партнерства, ориентированные на развитие и успех. Технические компетенции и бизнес-опыт НОРБИТ вместе с нашими высококлассными…