ISSN 2311-4908
Язык: ru

ПРИКЛАДНАЯ МАТЕМАТИКА И ФУНДАМЕНТАЛЬНАЯ ИНФОРМАТИКА

РЕАЛИЗАЦИЯ АВТОМАТИЧЕСКОГО РЕФЕРИРОВАНИЯ СОДЕРЖИМОГО ВЕБ-СТРАНИЦЫ (2023)

Исследуется задача разработки краткого описания текста веб-страницы. Краткое описание создано за счет использования архитектуры машинного обучения Transformer, которая в предварительно обученном состоянии позволяет суммаризировать текст. По ходу реализации исследована модель генерирующего реферирования текста. Исследованы возможности модели, за счет каких особенностей она способна обрабатывать и аннотировать текст. Проанализированы результаты работы модели и сравнены с итогами работы других моделей реферирования, благодаря чему объясняется выбор изученной модели.

Тип: Статья
Автор (ы): Дробов Денис Андреевич, Морарь Елена Витальевна
Ключевые фразы: обработка естественного языка, ФУНКЦИЯ ПОТЕРЬ ПЕРЕКРЕСТНОЙ ЭНТРОПИИ, механизм внимания, СОКРАЩЕНИЕ ВЕСОВ, GPT, BERT

Идентификаторы и классификаторы

УДК
004.032.26. Нейронные сети
Текстовый фрагмент статьи