«OpenAI» научился создавать правдоподобные тексты на любую тему.

Команда исследователей создали алгоритм «OpenAI», который умеет создавать осмысленные тексты. Также алгоритм может отвечать на вопросы без спецификации необходимой задачи в процессе обучения.

Ученые хотели создать алгоритм, который бы умел решать множество различных текстовых задач без спецификации их при обучении. Для этого был собрал датасет «WebText», который содержит 40 гигабайт текста. Информацию взяли с восьми миллионов страниц в Интернете. Алгоритм способен генерировать новые слова на основании прочитанного.

У созданного «OpenAI» есть и свои ограничения. Исследователи поручили ему написать эссе о переработке мусора, алгоритм смог выдать убедительный текст о только с 25 попытки. при этом алгоритм все же совершал различные лексические ошибки. Исследователи отмечают, что «OpenAI» может выдавать неточный результат, резко менять тему повествования и совершать различные ошибки в тексте. Разработчики опробовали алгоритм на других задачах: ответе на случайные вопросы, переводе текста и вопросах на понимание прочитанного.