Text-to-Video. Visper – новая платформа визуальных персонажей для создания видеоконтента

Text-to-Video. Visper – новая платформа визуальных персонажей для создания видеоконтента

SberDevices запустила открытое бета-тестирование платформы Visper, где можно легко превратить текст в видеоролики с визуальными персонажами. Это может быть полезно, например, при создании презентаций, обучающих видео, новостных выпусков, контента для пабликов в социальных сетях и должно упростить и удешевить продакшен.

Образ визуального персонажа можно сформировать под свою задачу, выбрав одежду, причёску и даже голос. Чтобы ролики было интереснее смотреть, прямо по тексту можно расставлять жесты – в нужный момент виртуальный аватар поздоровается со зрителями или обратится к ним во время рассказа. Очень скоро мы добавим автоматический подбор жестов: пользователю достаточно будет загрузить текст и проверить, правильные ли подсказки визуальный персонаж получил от алгоритмов.

У платформы Visper есть удобная фича – можно создавать видео из файлов в формате pdf, загружая, например, готовые презентации.

Прототипом для цифровых аватаров послужила виртуальная ведущая Елена. Владельцы SberBox и SberPortal, а также читатели онлайн-портала Ferra.ru знакомы с ней
по новостным выпускам, которые она там ведёт.

Внешность виртуальной ведущей мы «позаимствовали» у реальной девушки-актрисы. Чтобы собрать все данные, необходимые для создания аватара, потребовалось
около шести часов съёмок: актриса читала на камеру специально разработанные нами тексты, которые призваны максимально раскрыть особенности человеческого
артикуляционного аппарата. В итоге мы получили парный датасет – он состоит из голоса и соответствующих ему кадров видео. Используя этот датасет, мы обучаем
нейросеть по звуку генерировать соответствующее ему положение губ. Такая синхронизация звука и движений губ называется липсинк (Lip sync).

В скором времени возможности платформы существенно расширятся, в том числе пополнятся решениями для геймдев-индустрии, когда на базе инструментов Visper
разработчики смогут создавать аватаров и персонажей для игр.

Чтобы создать собственное видео с цифровым ведущим, достаточно зарегистрироваться на сайте visper.tech. На этапе бета-тестирования доступ к платформе для
пользователей будет открыт бесплатно.

Больше не нужно искать и обзванивать диджитал-агентства!
Создайте тендер и получите предложения по цене и срокам от лучших веб-студий Украины.
Это бесплатно и займет 2 минуты. В каталоге 1500+ диджитал-агенств, готовых помочь в реализации ваших задач. Выберите и сэкономьте до 30% времени и бюджета!
Создать тендер
Популярные статьи в разделе Разное
Разное
Разное
23-06-2021
Google разрабатывает поиск утерянных Android-смартфонов по аналогии с Find My IT рейтинг UA
Google занялась разработкой собственной функции, которая станет аналогом Apple Find My для Androi...
Разное
Разное
18-06-2021
Мультиполезность Apple Watch: основные параметры и преимущества IT рейтинг UA
За последние пару лет в условиях мировой пандемии функциональность и полезность гаджетов возросла...
Разное
Разное
16-06-2021
Виды и особенности выбора хостинга для запуска сайта на WordPress IT рейтинг UA
При запуске нового интернет-проекта в первую очередь следует определиться с выбором хостера. От т...
Bug