Подписаться на новости
brand brand
logo logo
Сообщество робототехников

Disney научила нейросеть создавать анимацию по текстовому сценарию

Disney-научила-нейросеть-создавать-анимацию-по-текстовому-сценарию
Среда, 17 Апреля 2019, в 15:06
Искусственный интеллект

Программисты из компании Disney Research разработали нейросеть, которая создает анимационные ролики по реальными текстовым сценариям фильмов и театральных постановок.

Система с искусственным интеллектом делится на несколько модулей. Каждый из них выполняет определенную функцию. Благодаря работе первых двух генерируется упрощенный вариант сценария.

Так, исходное литературное произведение получает модуль, который осуществляет предварительную обработку текста. Он выделяет ключевые предложения из описания сцен. Эта информация передается компоненту ИИ-системы, который упрощает текст. Алгоритм делит предложения таким образом, чтобы в каждом содержалось по одному действию. Некоторые слова он заменяет синонимами.

В упрощенном варианте сценария ИИ-система прописывает технические данные: эмоции героев, время, когда начинается действие, и т. д. Затем очередной модуль, основываясь на полученной информации, генерирует 3D-анимацию. Нейросеть сопоставляет объекты и действия в сценарии с аналогами из библиотеки, которая содержит 92 анимированных блока.

 

Disney-научила-нейросеть-создавать-анимацию-по-текстовому-сценарию

Схема работы алгоритма

Эффективность работы искусственного интеллекта от Disney Research проверили при помощи BLEU-метода. Три человека создали анимацию по тому же принципу, что и нейросеть. Специалисты сравнили, как с этой задачей справились программа и люди. Оказалось, что качество преобразования сценария программой изменялось в зависимости от типа слов в тексте. Наибольшая схожесть с человеческой работой наблюдалась, когда ИИ-система описывала эмоции героев.

Кроме того, работу алгоритма оценили добровольцы. 45,2% участников эксперимента согласились с тем, что искусственный интеллект смог правильно визуализировать записанный в сценарии текст.

 

Disney-научила-нейросеть-создавать-анимацию-по-текстовому-сценарию

Подробнее о разработке читайте здесь.

рейтинг

4060

просмотров

1

комментариев

порекомендовать друзьям

ЧИТАТЬ НА ЭТУ ТЕМУ

Loading

комментарии

Гость

лол

17 Апреля 2019, в 17:16
Гость

Дорогие друзья! Помните, что администрация сайта будет удалять:

  • Комментарии с грубой и ненормативной лексикой
  • Прямые или косвенные оскорбления героя поста или читателей
  • Короткие оценочные комментарии ("ужасно", "класс", "отстой")
  • Комментарии, разжигающие национальную и социальную рознь
brand brand