Nvidia разработала нейросеть, синтезирующую реалистичные видеоролики

Компанией Nvidia был разработан искусственный интеллект, который умеет правдоподобно "переснимать" видеоролики из одного стиля в другой. Статья об этом появилась в издании ArXiv.

Специалисты говорят, что создание нейросетей для работы с видео затруднительнее, чем аналогичная задача для картинок, так как в случае с видео нужно правильно восстановить объекты не только на каждом отдельном кадре, но и принять в расчет расположение, цвет и прочие характеристики этих объектов на "близлежащих" кадрах. Если этого не сделать, изображение на созданной записи будет дерганым.

Эксперты Nvidia разработали ИИ, который скрупулезно меняет кадры исходного ролика, чтобы новый видеоряд был стабильным и правдоподобным. Всю работу выполняет генеративно-состязательная нейросеть, включающая генератор изображений и дискриминатор. Последний нужен, чтобы отличать сгенерированные кадры от объектов из обучающей базы. В итоге получается новое видео, каждый кадр в котором в чем-то использует предыдущие кадры, изменяя их, а в чем-то "придуман" алгоритмом.

Отмечается, что при тестировании опрошенные люди признали синтезированные ролики качественнее исходников.

Читайте далее

Microsoft анонсировала сервис, генерирующий HTML-код на основе рукописных набросков

Новое оформление для вина избавляет от мук выбора

Нестандартные ходы веб-дизайна

Принят новый стандарт авторизации WebAuthn, который избавит пользователей от ввода паролей