Разработчики NVIDIA смогли с помощью ИИ получить slow-mo видео из 30 FPS

Коротко:
Разработчики из NVIDIA создали систему на основе глубокого машинного обучения, способную обрабатывать и создавать высококачественное видео категории "slow motion" из роликов, снятых обычной камерой. Подробности и примеры роликов внутри новости.
Разработчики компании NVIDIA смогли с помощью глубокого машинного обучения создать систему по обработке и созданию видеороликов категории "slow motion" ("замедленное движение") имея в качестве исходного ролики, снятые на рядовые камеры с характеристиками от 30 FPS (Frame per Second, кадры в секунду). Полученный результат, при этом, может превосходить тот, которые достигается специализированным дорогостоящим оборудованием.

Своё решение специалисты NVIDIA презентовали на конференции Computer Vision and Pattern Recognition (CVPR) в Солт-Лейк Сити. В сопроводительном к проекту пресс-релизе разработчики написали: "В нашей жизни происходит много памятных событий, которые мы хотели бы запечатлеть камерой замедленной съёмки, потому что такие события трудно рассмотреть отчётливо и ясно имеющимися у нас глазами: первые шаги ребёнка, трудной трюк на скейт-борде, собака, ловящая на лету мяч. Хотя сегодня есть возможность снимать ролики на 240 FPS-камеру некоторых мобильных телефонов, снимать всё высокоскоростной съёмкой непрактично, т.к. потребует больших объёмов памяти и электропитания для мобильного устройства."

Используя в своём решении графические сопроцессоры NVIDIA Tesla V100 и cuDNN-ускоренную платформу глубокого машинного обучения PyTorch, команда разработчиков тренировали свою систему ежедневно на более, чем 11000 видеороликов и снимков спортивных событий камерами 240 FPS. Натренированная система декодирования смогла "предсказывать" дополнительные и недостающие для формирования плавной замедленной съёмки видеокадры. Для отработки и подтверждения точности работы системы разработчики использовали набор вводных из ранее не задействованного ряда видеороликов. В результате получилось создать более естественный и качественный видеоряд замедленной съёмки с меньшим эффектом размытия.

"В применяемом нами подходе создаётся множество промежуточных кадров, связанных в пространстве и времени" - комментируют разработчики - "Наш мультикадровый подход неизменно превосходит результаты самых передовых однокадровых методов".

В качестве демонстрации своих исследований, разработчики использовали видеоклипы из тематического YouTube шоу-канала "The Slow Mo Guy", и ещё больше уменьшили скорость размещённых замедленных роликов.

Как было сказано выше, метод позиционируется как возможность замедлить повседневные видеоролики с запоминающимися событиями и придать им кинематографичености, интриги, выразительности и ощущения предчувствия. Добавим, что помимо определённого бума и разрастания соответствующего сегмента видеоканалов на YouTube, подобное решение может очень серьёзным образом озадачить индустрию по производству дорогостоящей видео и обрабатывающей аппаратуры для ускоренной съёмки.

Команда разработчиков NVIDIA: (Huaizu Jiang, Deqing Sun, Varun Jampani, Ming-Hsuan Yang, Erik Learned-Miller, Jan Kautz)

Подписывайтесь на наши социальные сети и добавляйте новостной раздел в закладки, чтобы ничего не пропустить. 
По вопросам консультации и приобретения обращайтесь к нашим специалистам:
+7 (495) 981-60-70
sales@t-mash.ru

Коротко:
Разработчики из NVIDIA создали систему на основе глубокого машинного обучения, способную обрабатывать и создавать высококачественное видео категории "slow motion" из роликов, снятых обычной камерой. Подробности и примеры роликов внутри новости.
Последние Новости
База знаний
subNew
05.09.2022
Обзоры

Обзор ТСД Point Moblie PM75 от Клеверенс


Предлагаем к прочтению технический обзор терминала сбора данных (ТСД) Point Moblie PM75 от Алеси Януш, эксперта по техническим статьям, анализу и тестированию работы ТСД в компании "Клеверенс". В обзоре приводятся краткие технические характеристики, распаковка, даётся оценка фактическим рабочим характеристикам и подводятся итоги с плюсами / минусами устройства.
subNew
05.04.2022
Статьи

АСКОН объявляет о выходе бета-версии КОМПАС-3D v21


Коллеги из компании АСКОН, российский разработчик САПР, объявили об открытом бета-тестировании новой версии своего флагманского решения КОМПАС-3D v21, выход которого ожидается летом 2022г. Сам период бета-тестирования начался с 01 апреля и завершится 31 мая 2022г. Ввиду текущего геополитического контекста, мы со своей стороны призываем коллег со стороны заказчиков присоединиться к инициативе и внести свой вклад в появлении на рынке конкурентного продукта.
subNew
31.03.2022
Обзоры

Шасси для медиаконвертеров D-Link DMC-1000/RU, собранные в Рязани


Коллеги из российского представительство D-Link объявили о начале поставок с 4 апреля 2022 года шасси для медиаконвертеров DMC-1000/RU, собранных на производственных мощностях в Рязанской области. Тематика локализации производства иностранных производителей и доступности к приобретению радиоэлектронной продукции является крайне актуальной. Предлагаем к прочтению обзор от коллег из D-Link технических характеристик и комплектации DMC-1000/RU.
subNew
25.02.2021
Обзоры

Обзор маршрутизаторов серии Cisco Catalyst 8000


В марте 2021г. становятся доступными к заказу в Российскую Федерацию анонсированные в октябре 2020г. маршрутизаторы серии Cisco Catalyst 8000. К этому событию коллеги из российского представительства Cisco Systems подготовили небольшую авторскую статью, в которой коротко изложили позиционирование и особенности моделей в серии Catalyst 8000 и сравнили их с моделями маршрутизаторов из серий Cisco ASR 1000 и Cisco ISR 4000. Предлагаем к прочтению.
subNew
12.11.2020
Статьи

Axis Communications увеличивает срок бесплатного гарантийного обслуживания продуктов до 5 лет


С 01 октября 2020г компания Axis Communications увеличила стандартный срок гарантии на свою продукцию с 3-х до 5-ти лет. Правило применяется ко всей продукции, отгруженной с 01 апреля 2020г. Официальный пресс-релиз производителя, ссылки на тематические разделы и брошюры производителя, а также наш перевод секции "вопросы-ответы" внутри статьи.
subNew
13.02.2020
Видео

"Это нормально - любить свою СХД" ролик от HPE к 14 февраля


Компания HPE поздравила своих клиентов с 14 февраля коротким шуточным роликом "Идеальный компаньон. Это нормально - любить свою СХД".
subNew
11.02.2020
Статьи

Изменение в модели лицензирования продуктов VMware по процессорам


В феврале 2020г компания VMware официально анонсировала изменения в политике лицензирования своих продуктов, использующих принцип ценообразования из расчёта количества процессоров платформы. Изменения вступят в силу с апреля 2020г. В статье мы даём перевод официального заявления VMware, раздел "вопросы и ответы" и схему с примерами: имеется важная информация о льготах и существенных нюансах для владельцев серверов с многоядерными процессорами
subNew
10.02.2020
Статьи

Принцип лицензирования QVR Pro от QNAP


Небольшая информационная статья-памятка от коллег из российского офиса QNAP о принципе лицензирования платформы QVR Pro, программного решения для управления видеорегистраторами и системами видеонаблюдения.
subNew
27.01.2020
Статьи

GoMiner мутирует и распространяется через облачные хранилища


Авторская статья специалиста Juniper по противодействию вредоносному программному обеспечению и обратному воспроизведению кода. В материале рассказывается о вредоносном криптомайнере GoMiner, отличительной способностью которого является распространение через поставщиков облачных хранилищ и сменные накопители, а также особые средства защиты, включая мутацию.
subNew
22.08.2018
Обзоры

Обзор тонкого клиента Dell Wyse 5070


В мае 2018 на проходившей в Лас-Вегасе конференции Dell Technologies World был представлен новый тонкий клиент Dell Wyse 5070. Презентация прошла на фоне большого оптимизма и воодушевления сотрудников, с заявлениями о революционном продукте. О том, почему у сотрудников Dell были на это некоторые основания и что из себя представляет Dell Wyse 5070 – читайте в обзоре.