Data Mining

Институт информационных технологий РТУ МИРЭА и Мегапьютер начинают подготовку специалистов по аналитике данных на PolyAnalyst. Компания Мегапьютер, разработчик платформы для интеллектуального анализа данных PolyAnalyst, и МИРЭА — Российский технологический университет заключили соглашение о научно-образовательном сотрудничестве. В рамках партнёрства для студентов вуза будут запущены актуализированы и обновлены две новые дисциплины, направленные на подготовку специалистов в области data science и предиктивной аналитики. Ключевые направления сотрудничества 1. Первая дисциплина называется «Интеллектуальный анализ данных». Курс посвящён работе с PolyAnalyst как с low-code платформой для обработки преимущественно неструктурированных текстовых данных. Студенты освоят: Основы ETL-процессов: импорт данных, поиск аномалий и выбросов, очистка, нормализация. Визуализацию и статистику: построение графиков, сводных таблиц, расчёт корреляций. Продвинутые методы: Текстовая аналитика: обучение моделей классификации текстовых данных, извлечение именованных сущностей и фактов. Кластеризация больших наборов текстовых данных. Автоматизацию созданных аналитических решений. В практической части планируется реализация проектов по анализу текстовых данных, в том числе данных из соцсетей, нормативно-правовых актов и научных публикаций….

Представитель Мегапьютер выступил с докладом «Большая языковая модель + классический text mining: гибридный подход для анализа и обработки текстовых данных». 21 мая 2025 года в Москве, на площадке Координационного центра Правительства Российской Федерации, состоялась конференция «Современные тенденции исследования социальных настроений граждан: теория и практика», организованная Аналитическим центром при Правительстве Российской Федерации. Компанию «Мегапьютер» на мероприятии представлял Дмитрий Гольцов. Он выступил с докладом на тему «Большая языковая модель + классический text mining: гибридный подход для анализа и обработки текстовых данных». Методология и технологические решения В докладе был рассмотрен гибридный подход, реализованный в аналитической платформе PolyAnalyst, который сочетает: Большие языковые модели (LLM), включая собственную модель компании — MegaGPT; Классические методы text mining (извлечение именованных сущностей, текстовая кластеризация, семантическое сравнение данных). Практические применения Автоматизированное составление классификаторовС помощью гибридного подхода разработан трехуровневый классификатор новостных материалов без участия человека. Решение применимо к любым текстовым данным и позволяет: Автоматически категоризировать контент; Формировать многоуровневую структуру классификатора; Адаптироваться к изменениям…

Компания Мегапьютер продолжает новую рубрику “PolyAnalyst Podcast” Выпуск 3. PolyAnalyst vs. Excel. Компания «Мегапьютер» продолжает цикл видеоинтервью «PolyAnalyst Podcast» с экспертами в области ETL, анализа данных и ИИ. В третьем выпуске советник генерального директора по процессам цифровизации компании «СИБЕР» (входит в корпорацию «Ростех») Мария Ментова, расскажет о применении российской low-code платформы PolyAnalyst в качестве замены Microsoft Excel для подготовки управленческой отчётности. Решение позволило без написания программного кода и макросов автоматизировать процесс подготовки сводных отчетов. Альтернативная ссылка на запись на Youtube Альтернативная ссылка на запись на VK Video Предлагаем вам скачать брошюру, в которой описывается механизм применения «классических» инструментов Excel в нашей системе PolyAnalyst. Скачать «PolyAnalyst стал для нас спасением. Раньше специалисты месяцами проверяли отчёты вручную. Теперь система не только находит ошибки в данных, но и полностью заменяет Excel-макросы, которые мы годами разрабатывали. Это критически важно в условиях санкционных рисков» , – отметила Мария Ментова. Как low-code заменил Excel и избавил аналитиков от необходимости…

Компания Мегапьютер продолжает новую рубрику “PolyAnalyst Podcast” Выпуск 2. Перспективы Low-Code аналитики, прототипирование аналитических решений на PolyAnalyst. Компания Мегапьютер продолжает рубрику «PolyAnalyst Podcast» — цикл видеоинтервью с экспертами в области аналитики и искусственного интеллекта. В первом выпуске доктор социологических наук, проректор по развитию на основе анализа данных Вятского государственного университета Екатерина Митягина  рассказала как технологии ИИ и NLP расширяют возможности качественной социологии. Во втором выпуске рубрики, Михаил Акулов, менеджер проектов в интересах компании OCS Distribution, расскажет о перспективах Low-Code систем, обеспечивающих быстрое создание прототипов аналитических решений без программирования (совсем или почти). Сегодня в мире наблюдается взрывной рост темпов появления новых аналитических решений и моделей искусственного интеллекта. В технологической гонке участвуют как глобальные ИТ-корпорации и крупнейшие финансовые институты, так и стартапы, удивляющие мир высокоэффективными моделями генеративного ИИ. Скорость разработки новых решений становится критическим фактором успеха. Low-Code подход позволяет специалистам без навыков программирования создавать продвинутые бизнес-решения с помощью визуальных интерфейсов и готовых…

Компания Мегапьютер открывает новую рубрику “PolyAnalyst Podcast” Выпуск 1. Технологии ИИ в социологии. Интервью с Екатериной Митягиной, ВятГУ. Компания Мегапьютер запускает новую рубрику «PolyAnalyst Podcast» — цикл видеоинтервью с учеными и экспертами в области аналитики и искусственного интеллекта. В формате дружеской беседы с ведущим, Михаилом Ананяном, гости рубрики делятся бесценным опытом решения практических задач и использования аналитических инструментов для обеспечения цифровой трансформации организации. Зрители познакомятся с передовыми методиками анализа данных, узнают об успехах и перспективах развития ИИ, о практических решениях, реализованных на платформе PolyAnalyst. «PolyAnalyst Podcast будет охватывать широкий спектр тем: от фундаментальных принципов трансформации и очистки данных (ETL), машинного обучения (ML), обработки естественного языка (NLP), больших языковых моделей (AI), машинного зрения и визуальной аналитики (BI), до практических примеров использования результатов анализа и применения прогнозных моделей для автоматизации бизнес-процессов» — говорит Дмитрий Гольцов, директор коммерческого блока, Мегапьютер. Первый выпуск рубрики — интервью с Екатериной Митягиной, доктором социологических наук, проректором по…

Мегапьютер и К2Тех обеспечат российские компании комплексными решениями для управления данными 20 августа 2024 Разработчик Мегапьютер и ИТ-интегратор К2Тех заключили стратегическое партнерство. В его рамках стороны будут совместно развивать и внедрять системы аналитики больших данных с учетом специфики отраслей и потребностей заказчиков. Цель сотрудничества – обеспечить российские компании комплексными решениями для анализа и управления данными в интересах бизнеса.  PolyAnalyst, фокусный продукт разработчика Мегапьютер, представляет собой  многофункциональную аналитическую систему. Платформа использует современные алгоритмы машинного обучения и искусственного интеллекта для обработки больших объемов данных. Инструменты для визуализации информации, построения предсказательных моделей и глубокого анализа позволяют выявлять тренды и закономерности, составлять прогнозы на основе накопленных данных, предвосхищать риски и увеличивать прибыль компании. Последние пять лет ИТ-интегратор К2Тех активно  развивает направление инновационных технологий. За это время компания реализовала более 30 проектов по созданию и внедрению решений и эксплуатируемых систем на базе искусственного интеллекта для заказчиков enterprise-сегмента из различных отраслей: государственные организации, ритейл, банки, добывающие…

Освоение языковых моделей: подробный разбор входных параметров 23 января 2024 Если вам когда-либо приходилось использовать языковую модель в интерактивной среде или через API, то скорее всего ваша работа начиналась с выбора нескольких входных параметров. Однако, у многих из нас возникают вопросы по поводу назначения и правильного использования этих параметров. Эта статья поможет вам научиться использовать параметры для решения проблемы выдачи неверной информации (галлюцинаций) и однообразия в результатах работы языковых моделей. Мы также рассмотрим другие тонкие настройки, оптимизирующие поведение моделей. Как и в случае с промпт-инжинирингом, правильная настройка параметров поможет вам добиться от модели 110% эффективности. В данной статье подробно рассматриваются пять основных входных параметров: температура (temperature), параметры семплинга top-p и top-k, штрафы за частоту и присутствие (frequency penalty и presence penalty). Вы узнаете, как эти параметры помогают достичь баланса между качеством и разнообразием результатов работы модели. Устраивайтесь поудобнее, мы начинаем! Содержание Вводная информация Качество, разнообразие и температура Семплирование с помощью…

Мегапьютер и НОРБИТ (входит в группу ЛАНИТ) заключили соглашение о партнерстве 13 декабря 2023 Объединив усилия, компании будут работать над повышением доступности инновационных инструментов для аналитики больших данных и принятия управленческих решений на ее основе. Фокусным продуктом, на котором будет сконцентрировано внимание, станет платформа PolyAnalyst. В рамках сотрудничества НОРБИТ и «Мегапьютер» будут укреплять и расширять ее функционал, продвигая в новые рыночные сегменты и обеспечивая инновационными решениями клиентов. PolyAnalyst помогает бизнесу получать ценные инсайты из оперативных и исторических данных, прогнозировать тренды, автоматически извлекать информацию из больших объемов документов. При этом для эффективного использования не требуются навыки программирования, работа пользователя проводится в графическом low-code интерфейсе, а результаты специалисты получают в виде визуализированных интерактивных веб-отчетов. Алексей Русских, генеральный директор компании «Мегапьютер»: «Сегодняшний рынок аналитических систем стал невероятно сложным и конкурентным. Чтобы сохранять и укреплять свои позиции, необходимы новые стратегические партнерства, ориентированные на развитие и успех. Технические компетенции и бизнес-опыт НОРБИТ вместе с нашими высококлассными…

Мегапьютер завершил реализацию проекта доработки PolyAnalyst GRID при поддержке РФРИТ 19 июля 2022 Компания Мегапьютер успешно завершила все заявленные этапы реализации проекта «Доработка кластерной системы интеллектуального анализа данных PolyAnalyst GRID». Проект реализуется в рамках государственной программы поддержки проектов по разработке российских решений в сфере ИТ, и в том числе за счет грантовой поддержки Российского фонда развития информационных технологий РФРИТ. Проект предусматривал выполнение 49 мероприятий календарного плана. С новыми функциональными модулями PolyAnalyst GRID, которые были разработаны и добавлены в систему в рамках проекта, можно ознакомиться на сайте Мегапьютер в специальном разделе, посвященном проекту доработки. ПОДРОБНЕЕ О ПРОЕКТЕ ДРУГИЕ НОВОСТИ И СТАТЬИ Мегапьютер завершил реализацию проекта доработки PolyAnalyst GRID при поддержке РФРИТ Read More 37 вузов Университетского консорциума исследователей больших данных приняли участие в семинаре-презентации сервиса РосНавык, разработанного на платформе PolyAnalyst Read More Мегапьютер завершил первый этап проекта доработки PolyAnalyst GRID при поддержке РФРИТ Read More Load More ВСЕ НОВОСТИ

37 вузов Университетского консорциума исследователей больших данных приняли участие в семинаре-презентации сервиса РосНавык 26 мая 2023 25 мая представители вузов-участников Университетского консорциума исследователей больших данных встретились на семинаре-презентации сервиса “РосНавык”, разработанного на базе платформы PolyAnalyst. В ходе встречи участники семинара обсудили важность анализа рынка труда при разработке образовательной программы, а представители ТГУ рассказали об успешных кейсах по проектированию образовательных продуктов с опорой на данные РосНавыка. РосНавык — платформа для мониторинга и анализа востребованных на рынке труда профессий и навыков, предложений работодателей и общих тенденций рынка. Вся информация на платформе представлена в виде графиков, карт и диаграмм. Для актуализации этих данных команда РосНавык привлекла 90 экспертов из 30 отраслей, которые верифицируют информацию и классифицируют навыки по каждой профессии. Партнерами сервиса РосНавык выступают Университетский консорциум больших данных, ВЦИОМ, HeadHanter, Высшая школа экономики и компания Мегапьютер. «РосНавык» за последние месяцы прошел серьезный апгрейд. Помимо того, что у него наконец-то появилось имя, он обзавелся…