3

OpenAI создали алгоритм, генерирующий осмысленные тексты

18 февраля 2019
Кот-император
18.02.2019
216
1 минута на чтение
OpenAI создали алгоритм, генерирующий осмысленные тексты

OpenAI — некоммерческая исследовательская компания, которая занимается вопросами искусственного интеллекта, распознавания образов и тренировкой нейросетей. Её сформировали ещё в 2015 году, причём одним из основателей был предприниматель Илон Маск. С тех пор команда исследователей несколько раз демонстрировала любопытные результаты в области изучения ИИ — например, в 2017-м бот OpenAI победил сильнейших игроков в Dota2.

Команда учёных под руководством Алека Рэдфорда (Alec Radford) создала алгоритм GPT-2, который научился генерировать осмысленные тексты — на основе уже прочитанного материала. Исследователи собрали базу данных WebText из 40 гигабайт с восьми миллионов страниц в интернете. Авторы опирались не только на новостные заметки, а на самые разные материалы, в том числе и на заметки с Reddit. Программа рассматривала посты, собравшие больше трёх «плюсов».

После того, как обучение было завершено, исследователи обнаружили, что алгоритму можно «скормить» небольшой отрывок текста, а на выходе получить материал, основанный на первоначальной идее.

Вот такой текст показали алгоритму в одном из примеров:

Шокирующая находка — учёные нашли стадо единорогов, обитающих в удалённой, ранее не исследованной долине в Андах. Ещё большей неожиданностью стало то, что единороги разговаривают на идеальном английском.

GPT-2 сгенерировал девять абзацев. Мы перевели первые три:

Учёные назвали эту популяцию в честь выдающегося рога — единороги Овида. Эти четверорогие серебристо-белые единороги ранее не были известны науке.

Теперь, спустя почти два века, загадка возникновения этого удивительного феномена наконец-то разрешена.

Доктор Хорге Перетц, биолог-эволюционист из университета Ла-Пас, вместе с несколькими компаньонами занимались исследованием Анд, когда они обнаружили небольшую долину, где не было животных или людей. Перетц заметил нечто похожее на естественный фонтан, окружённый двумя скалистыми пиками и серебристым снегом.

Исследователи не выложили программный код обученной модели целиком, поскольку они боятся «недобросовестного использования». Вместо этого они опубликовали лишь упрощённую модель и описали проделанную работу в статье.

Оставляя комментарии на сайте «Мира фантастики», я подтверждаю, что согласен с пользовательским соглашением Сайта.

Статьи

Мультсериал «Волшебники: Истории Аркадии». Как Гильермо Дель Торо снял своих «Мстителей: Финал» 1
0
32564
Мультсериал «Волшебники: Истории Аркадии». Как Гильермо Дель Торо снял своих «Мстителей: Финал»

Заключительный мультсериал «Историй Аркадии» получился динамичным и масштабным, но очень сумбурным. Старых героев превратили в функции, а новых толком не раскрыли.

Читаем книгу: Майя Лидия Коссаковская «Сеятель ветра»
0
48506
Читаем книгу: Майя Лидия Коссаковская «Сеятель ветра»

Эпическое сражение сил Света и Тьмы.

Майя Лидия Коссаковская «Сеятель ветра»
0
101385
Майя Лидия Коссаковская «Сеятель ветра»: фэнтези на основе христианской мифологии

Неровное, но интересное героическое фэнтези про Рай и Ад.

Комиксы августа 2020: фэнтези и фантастика 10
0
105307
Комиксы августа 2020: фэнтези и фантастика

Рисованные истории по «Бегущему по лезвию», «Очень странным делам» и «Звёздным войнам», волшебная история про фантастических тварей, будни космического почтальона и немного биографии Думгая.

В Dungeons & Dragons якобы запрещают слово «раса». Что происходит?
0
188992
В Dungeons & Dragons якобы запрещают слово «раса». Что происходит?

Разбираемся, откуда пошли слухи, что на самом деле стоит за изменениями, как обстоят дела в других НРИ и почему этот конфликт важен для русскоязычного комьюнити.

Чарльз Стросс «Каталог катастрофы»: книга про тайную организацию гиков и программистов
0
167850
Чарльз Стросс «Каталог катастрофы»: книга про тайную организацию гиков и программистов

Смесь современной НФ, ужасов Лавкрафта, городского фэнтези и шпионских детективов, приправленная классическим офисным юмором.

Святой Грааль
0
427013
Святой Грааль: что это и где его найти

Кубок, блюдо, котёл, камень или женщина? А может быть, лестница или ключ к Царству Небесному?

Что почитать: «Прачечная» Стросса, славянское фэнтези и «расисткая» книга
0
218656
Читаем книгу: Чарльз Стросс «Каталог катастрофы»: хакеры и магия

Фантастика и о шпионах и хакерах, где городское фэнтези и элементы киберпанка переплетаются с лавкрафтианскими ужасами.

Спецпроекты

Top.Mail.Ru

Сообщить об опечатке

Текст, который будет отправлен нашим редакторам: