Мегапьютер стал членом отраслевого комитета «Инновации и Производительность труда» Делового объединения кластеров России. Компания «Мегапьютер Интеллидженс», один из ведущих отечественных...
Читать далее
Представитель Мегапьютер выступил с докладом «Большая языковая модель + классический text mining: гибридный подход для анализа и обработки текстовых данных».
21 мая 2025 года в Москве, на площадке Координационного центра Правительства Российской Федерации, состоялась конференция «Современные тенденции исследования социальных настроений граждан: теория и практика», организованная Аналитическим центром при Правительстве Российской Федерации. Компанию «Мегапьютер» на мероприятии представлял Дмитрий Гольцов. Он выступил с докладом на тему «Большая языковая модель + классический text mining: гибридный подход для анализа и обработки текстовых данных».
Методология и технологические решения
В докладе был рассмотрен гибридный подход, реализованный в аналитической платформе PolyAnalyst, который сочетает:
- Большие языковые модели (LLM), включая собственную модель компании — MegaGPT;
- Классические методы text mining (извлечение именованных сущностей, текстовая кластеризация, семантическое сравнение данных).
Практические применения
- Автоматизированное составление классификаторов
С помощью гибридного подхода разработан трехуровневый классификатор новостных материалов без участия человека. Решение применимо к любым текстовым данным и позволяет:- Автоматически категоризировать контент;
- Формировать многоуровневую структуру классификатора;
- Адаптироваться к изменениям в содержании данных.
- Анализ тенденциозности и кликбейтности новостных статей
Платформа PolyAnalyst с использованием MegaGPT позволяет:- Определять степень эмоциональности в текстах, а также их тенденциозность;
- Формировать дайджест инфоповодов за интересующий период;
- Выявлять кликбейтные заголовки и попытки манипуляции вниманием.
- Прогнозирование социальных трендов
На примере анализа Telegram-каналов продемонстрировано, как гибридный подход помогает отслеживать миграционные настроения на основе обсуждений планируемой или совершенной эмиграции.
ДРУГИЕ НОВОСТИ И СТАТЬИ
Узел PolyAnalyst «Анонимизация сущностей»: как работать с данными, не нарушая приватность.
Узел «Анонимизация сущностей»: как работать с данными, не нарушая приватность. Команда Мегапьютер подготовила и публикует новое видео, которое раскрывает потенциал...
Читать далее
От Excel-таблиц к живым формам! Загружайте демо-решение для сбора данных из маркетплейса PolyAnalyst
От Excel-таблиц к живым формам! Загружайте демо-решение для сбора данных из маркетплейса PolyAnalyst! Мы часто говорим о продвинутой аналитике, искусственном...
Читать далее