Генерация поисковых запросов на основе нейронных сетей
Аннотация:
Исследованы модификации рекуррентных нейронных сетей – сети с долгой краткосрочной памятью (Long Short-Term Memory) и сети с управляемым рекуррентным блоком (Gated Recurrent Unit) с добавлением механизма внимания в обе сети, а также модель Transformer в задаче генерации запросов к поисковым системам. Проведены латентно-семантический анализ для выявления семантического сходства между корпусом пользовательских запросов и запросов, сгенерированных нейронными сетями, и экспертный анализ для оценки согласованности слов в искусственно созданных запросах.
Ключевые слова:
обработка естественного языка, генерация естественного языка, машинное обучение, нейронные сети