Информационно - коммуникационные и химические технологии

Том_ 4 № 29 (2025) / 2025-12-30 / Кол. просмотров: 395

ОБЗОР РЕАЛЬНЫХ ПРИМЕНЕНИЙ ИДЕНТИФИКАЦИИ КЛЮЧЕВЫХ СЛОВ НА ОСНОВЕ NLP

Авторы

Astana IT University
https://orcid.org/0009-0008-0116-859X
Astana IT University
https://orcid.org/0000-0002-8410-7758

Ключевые слова

извлечение ключевых слов, языки с низкими ресурсами, термины, ключевые слова, алгоритмы, методы, идентификация

DOI ссылка:

https://doi.org/10.58805/kazutb.v.4.29-1085

Как цитировать

Ганиулы, Д., и Д. Кайбасова. «ОБЗОР РЕАЛЬНЫХ ПРИМЕНЕНИЙ ИДЕНТИФИКАЦИИ КЛЮЧЕВЫХ СЛОВ НА ОСНОВЕ NLP». Вестник КазУТБ, т. 4, вып. 29, декабрь 2025 г., doi:10.58805/kazutb.v.4.29-1085.

Аннотация

Извлечение ключевых слов является важной задачей в области обработки естественного языка, поскольку оно поддерживает процессы суммирования, индексирования, контент-анализа и информационного поиска. Со временем был разработан широкий спектр методов, позволяющих автоматически определять ключевые концепции в тексте. В данном исследовании рассмотрены основные группы методов извлечения ключевых слов, включая статистические подходы, алгоритмы на основе графов, модели на основе эмбеддингов, а также методы, использующие нейронные представления. Помимо анализа существующих исследований, работа оценивает ряд широко применяемых инструментов, таких как TF-IDF, YAKE, KeyBERT, KPMiner, TextRank, TopicRank и MultipartiteRank, и рассматривает, как их преимущества и ограничения проявляются при обработке реальных образовательных материалов. Особое внимание уделено проблемам, возникающим в многоязычной и низкоресурсной среде, особенно для языков с ограниченным количеством размеченных данных. Анализ выявляет закономерности поведения алгоритмов, различия в степени семантического охвата и факторы, влияющие на эффективность в зависимости от структуры учебных программ и дисциплин. Полученные результаты предназначены для того, чтобы помочь исследователям и практикам выбирать подходящие методы извлечения ключевых слов для образовательных, многоязычных и специализированных задач.