`

СПЕЦІАЛЬНІ
ПАРТНЕРИ
ПРОЕКТУ

Чи використовує ваша компанія ChatGPT в роботі?

BEST CIO

Определение наиболее профессиональных ИТ-управленцев, лидеров и экспертов в своих отраслях

Человек года

Кто внес наибольший вклад в развитие украинского ИТ-рынка.

Продукт года

Награды «Продукт года» еженедельника «Компьютерное обозрение» за наиболее выдающиеся ИТ-товары

 

Леонід Бараш

Новый инструмент, генерирующий видео из тематического текста

+22
голоса

Глобальная команда компьютерных ученых разработала «Write-A-Video», новый инструмент, который генерирует видео из тематического текста. Используя редактирование слов и текста, инструмент автоматически определяет, какие сцены или кадры выбираются из репозитория, чтобы проиллюстрировать желаемую сюжетную линию.

В мире начинающих фотографов и видеооператоров, захвативших поток контента через свои смартфоны и портативные устройства, существует потребность в интеллектуальном, простом в использовании инструменте для автоматизации создания фильмов и видеомонтажей. На сегодняшний день многие качественные видео по-прежнему опираются на профессиональные инструменты редактирования на основе кадров, чтобы манипулировать необработанными кадрами и создавать связное видео с увлекательной сюжетной линией.

Глобальная команда компьютерных ученых из университетов Цинхуа и Бейхан в Китае, Гарвардского университета в США и IDC Herzliya в Израиле разработала «Write-A-Video», новый инструмент, который генерирует видео из тематического текста. Используя редактирование слов и текста, инструмент автоматически определяет, какие сцены или кадры выбираются из репозитория, чтобы проиллюстрировать желаемую сюжетную линию. Этот инструмент позволяет начинающим пользователям создавать качественные видеомонтажи простым и удобным способом, не требующим профессиональных навыков производства и редактирования видео.

В то время как существующие инструменты редактирования видео все еще требуют знаний в области обработки и редактирования, новый метод исследователей позволяет новичкам создавать видео, которые рассказывают истории более естественно. По словам исследователей, запись в формате A-Video позволяет пользователям создавать видеомонтаж, просто редактируя текст, сопровождающий видео. Например, добавление или удаление текста, а также перемещение предложений вокруг преобразуют в операции редактирования видео, такие как поиск соответствующих снимков, вырезание и реорганизация снимков и создание окончательного результата видеомонтажа.

«Write-A-Video использует современные достижения в области автоматического понимания видео и уникальный пользовательский интерфейс, позволяющий создавать более естественное и простое видео, - говорит проф. Ариэль Шамир (Ariel Shamir), декан Школы информатики Efi Arazi при IDC Herzliya. - С помощью нашего инструмента пользователь обеспечивает ввод в основном в форме редактирования текста. Инструмент автоматически ищет семантически совпадающие кадры-кандидаты из репозитория видео, а затем использует метод оптимизации для сборки видеомонтажа, автоматически обрезая и переупорядочивая кадры».

«Write-A-Video также позволяет пользователям исследовать визуальные стили для каждой сцены с помощью кинематографических идиом, генерирующих, например, фильмы с более быстрым или медленным темпом, меньшим или большим движением контента и т. д.», - объясняет доктор Мяо Ван (Miao Wang) из Университета Бейхан.

При выборе подходящих снимков из видеохранилища метод также учитывает эстетическую привлекательность снимков, выбирая те, которые идеально освещены, хорошо сфокусированы и не являются размытыми или нестабильными. «В любой момент пользователь может воспроизвести фильм и просмотреть результат видеомонтажа с сопровождающим закадровым комментарием». - говорит профессор Ши-Мин Ху (Shi-Min Hu) из Университета Цинхуа.

Исследования группы показывают, что интеллектуальные цифровые инструменты, объединяющие способности людей, и алгоритмы, могут помочь пользователям в творческом процессе. «Наша работа демонстрирует потенциал автоматического визуально-семантического сопоставления в вычислительном редактировании на основе идиом, предлагая интеллектуальный способ сделать создание видео более доступным для непрофессионалов», - говорит проф. Шамир.

Для исследования подход был протестирован на различных фрагментах тематических видео и текстовых репозиториев с количественной оценкой и пользовательскими исследованиями. Пользователи, не имеющие опыта редактирования видео, могут создавать удовлетворительные видео с помощью инструмента Write-A-Video, иногда даже быстрее, чем профессионалы, использующие программное обеспечение для покадрового редактирования.

writeAVideo from Ariel Shamir on Vimeo.

Ready, set, buy! Посібник для початківців - як придбати Copilot для Microsoft 365

+22
голоса

Напечатать Отправить другу

Читайте также

 

Ukraine

 

  •  Home  •  Ринок  •  IТ-директор  •  CloudComputing  •  Hard  •  Soft  •  Мережі  •  Безпека  •  Наука  •  IoT