| Разработчики: | |
| Дата премьеры системы: | январь 2024 г. |
| Отрасли: | Интернет-сервисы |
2024: Запуск нейросети
В январе 2024 года Google запустила открытую нейросеть для создания видео на основе текста. Сервис получил название Lumiere.
По словам разработчиков, в отличие от конкурирующих проектов Lumiere создает видео от начала до конца в рамках одного процесса. Другие похожие сервисы сначала генерируют ключевые части кадров, после чего увеличивают их разрешение.
Lumiere работает в нескольких режимах, например, производит преобразование текста в видео, конвертирует статические изображения в динамические, создаёт видеоролики в заданном стиле на основе образца, позволяет редактировать существующее видео по письменным подсказкам, анимирует определенные области статического изображения или редактирует видео фрагментарно — например, может изменить предмет гардероба на человеке.
Как сообщается на сайте проекта, ИИ-модель T2V, которая лежит в основе Lumiere, обучена на 30 миллионах видеороликов с текстовыми описаниями. Видео имеют длину 80 кадров с частотой 16 кадров в секунду, а его разрешение составляет 128 х 128 пикселей.Игорь Лейпи, ГК Softline: Объем поставок российских операционных систем в ближайшие годы увеличится как минимум вдвое 
Судя по демонстрациям, Lumiere обладает самыми продвинутыми возможностями рисования. Можно закрыть часть изображения, и Lumiere автоматически заполнит эту область — так органично, что вмешательство искусственного интеллекта будет невозможно заметить. Видеоролики, созданные с помощью Lumiere, реалистичные, но очень короткие. Их продолжительность не превышает 5 секунд. Предполагается, что в будущем временной лимит повысят.
К январю 2024 года Lumiere доступна всем желающим, но является исследовательским проектом, что избавляет Google от необходимости ограничивать систему в рамках политик авторских прав, дезинформации, безопасности, ненависти, наготы, конфиденциальности и т.д. Гипотетически, она может быть использована для создания видео-дипфейков высокого качества на абсолютно любые темы.[1]
Примечания
