Представляет собой разновидность нейронных языковых моделей, созданных для обучения на объемных текстовых корпусах. Благодаря этому моделям удается создавать текстовые последовательности, максимально приближенные к человеческой речи, что делает их незаменимыми для различных задач генерации и обработки естественного языка.