Подписаться на новости
brand brand
logo logo
Сообщество робототехников

Nvidia представила технологию замедленной съемки высокого качества

Nvidia-представила-технологию-замедленной-съемки-высокого-качества
Среда, 20 Июня 2018, в 12:14
Искусственный интеллект

Компания Nvidia в сотрудничестве с исследователями из Массачусетского и Калифорнийского университетов создала технологию, которая может превратить любое видео в кадры замедленного действия, не жертвуя качеством изображения.

Решение основано на работе двух сверточных нейронных сетей. Они взаимосвязаны и определяют направление движения объектов и место, которое они займут через несколько кадров. Одна определяет оптический поток – то есть изображение движения объектов, поверхностей и краев вперед и назад. После она предсказывает, как пиксели будут передвигаться между кадрами, создавая двумерный вектор оптического потока для каждого из них. Вторая нейросеть интерполирует оптический поток и делает его поле точным, устраняя все пиксельные артефакты вокруг объектов.

Nvidia работала с YouTube-каналом The Slow Mo Guys, чтобы протестировать технологию на видео с высокой частотой кадров, например, 240 кадров в секунду.

Для проверки разработки исследователи использовали графический процессор Nvidia Tesla V100 и механизм глубокого обучения PyTorch, улучшенный с помощью cuDNN. Они сняли 11 000 видео со скоростью 240 кадров в секунду, а система самостоятельно заполняла отсутствующие кадры в замедленном режиме.

 

Nvidia-представила-технологию-замедленной-съемки-высокого-качества-1

 

Результат удивил: конечные видео со скоростью 30 кадров в секунду имеют хорошее качество и плавные переходы, чего невозможно было добиться с применением искусственного эффекта.

Благодаря этому решению каждому видео можно придать любую частоту кадров. Однако чем больше замедлять скорость, тем больше времени потребуется на заполнение пустых промежуточных кадров в видео.

Технология выглядит многообещающе, но создатели считают, что она еще не готова для массового использования: ей требуется оптимизация. Свою разработку компания представит на Computer Vision and Pattern Referencing conference.

 

Читайте также: «Искусственный интеллект Nvidia восстановит поврежденное изображения»

рейтинг

1047

просмотров

0

комментариев

порекомендовать друзьям

ЧИТАТЬ НА ЭТУ ТЕМУ

Loading

комментарии

Нет комментариев

Гость

Дорогие друзья! Помните, что администрация сайта будет удалять:

  • Комментарии с грубой и ненормативной лексикой
  • Прямые или косвенные оскорбления героя поста или читателей
  • Короткие оценочные комментарии ("ужасно", "класс", "отстой")
  • Комментарии, разжигающие национальную и социальную рознь
brand brand