Nvidia
22 авг 2018 19:40 #71519
от ICT
ICT создал тему: Nvidia
Компания Nvidia разработала нейросетевой алгоритм, способный реалистично переделывать видеоролики из одного стиля в другой. Статья, посвященная этому проекту, была опубликована на сайте
ArXiv.org
. Как поясняет
N+1
, разработка нейросетевых алгоритмов для работы с видео представляет более сложную задачу, чем создание алгоритмов для изображений, поскольку для каждого кадра видеоролика важно не только корректно воссоздать объекты на нем самом, но и учитывать расположение, цвет и другие характеристики этих объектов на соседних кадрах. В противном случае, изображение на сгенерированном видео будет дерганным. Разработчикам из Nvidia удалось создать алгоритм, умеющий аккуратно изменять кадры исходного ролика, чтобы новое видео было стабильным и реалистичным. Этот алгоритм представляет собой генеративно-состязательную нейросеть, которая включает генератор, создающий изображения, и дискриминатора, предназначенного для того, чтобы отличать созданные генератором кадры от объектов из обучающей базы видеороликов. Результатом обработки исходного видео является новый ролик, каждый кадр которого частично создан путем деформации предыдущих кадров, а частично "придуман" неройсетью. Для демонстрации результатов работы в Nvidia создали несколько моделей для генерации фотореалистичных роликов из видеозаписей поездок в автомобилях, роликов с моделями лиц и моделями двигающихся тел людей. Позднее свыше 80% опрошенных добровольцев назвали синтезированные видеоролики более качественными, чем настоящие. Это не первая разработка Nvidia в сфере работы с видеороликами. Ранее в компании создали нейросеть, способную
реалистично замедлять
обычные видеоролики, дорисовывая недостающие кадры, а также
алгоритм
для изменения фотографий и видео, способный превратить зиму на видео в лето, а день в ночь.
Ссылка на источник
Пожалуйста Войти или Регистрация, чтобы присоединиться к беседе.
Похожие статьи
Тема | Релевантность | Дата |
---|---|---|
Новый графический процессор на базе архитектуры NVIDIA Pascal NVIDIA Titan X [видео] | 9.79 | Вторник, 26 июля 2016 |
NVIDIA отзывает планшеты NVIDIA SHIELD | 9.48 | Пятница, 31 июля 2015 |
: NVidia Arm $40 | 6.8 | Понедельник, 14 сентября 2020 |
: FTC Nvidia $40 | 6.8 | Пятница, 03 декабря 2021 |
Анонс: NVIDIA во всеоружии | 6.65 | Вторник, 15 ноября 2016 |
: Nvidia Mellanox Technologies , $7 | 6.65 | Понедельник, 11 марта 2019 |
Nvidia выкупает ARM у SoftBank | 6.65 | Понедельник, 14 сентября 2020 |
Nvidia вышла из бизнеса LTE-модемов | 6.57 | Пятница, 08 мая 2015 |
Прибыль Nvidia упала в разы | 6.57 | Пятница, 07 августа 2015 |
Nvidia представила мобильный "суперчип" Tegra X1 | 6.5 | Понедельник, 05 января 2015 |