Dreamina, приложение ByteDance для генерации медиаконтента, объявило 26 октября о запуске своей студии коротких драм, объединяющей три собственные модели в единый производственный рабочий процесс, ориентированный на формат вертикальных видеодрам.
Первая — DreamScript, модель для создания сценариев. Она генерирует сценарии в различных форматах, доминирующих в жанре, включая оригинальные истории, адаптации, зарубежные версии и ролики в стиле комментариев. Она также предлагает функцию, которую компания называет «диагностикой хитов», сравнивая черновик с трендами платформы для предложения структурных изменений, и может читать и анализировать тексты объемом до 100 000 символов.
Вторая — Anycook, модель изображений, специально настроенная для арт-дирекшена коротких драм. Dreamina утверждает, что она откалибрована для создания персонажей, которые остаются визуально отличимыми и последовательными на протяжении всей постановки, а также для создания сцен в различных визуальных стилях, соответствующих разным сюжетным настройкам.
Третья — DreamShot, модель для создания раскадровок. Она работает в двух режимах: свободный холст и структурированная раскадровка, и поддерживает глобальные правки, так что изменение, внесенное в диалоге с инструментом, распространяется повсеместно, а не по одному кадру за раз. 3D-стол режиссера позволяет создателю разместить виртуальную камеру, настроить ее движение и предварительно просмотреть получившийся кадр до рендеринга, а система может объединять ключевые кадры в черновой анимированный проход для проверки темпа и непрерывности.
Вокруг трех моделей находится слой постобработки. Отдельные кадры можно переснять на месте, не перегенерируя весь материал. Аудиоинструмент отделяет диалоги от фонового звука, чтобы сцену можно было переозвучить. Функция разделения кадров автоматически разбивает длинную последовательность на редактируемые единицы. Ассеты, созданные в других частях Dreamina, переносятся в студию, а изменения применяются по всей цепочке.
Функция, наиболее явно ориентированная на дистрибуцию, — это режим ремейка. Загрузите существующую короткую драму, и система идентифицирует ее персонажей, декорации, реквизит и структуру кадров, затем регенерирует визуальные эффекты в выбранном стиле, соотношении сторон и целевом регионе, сохраняя при этом оригинальный темп и язык камеры. На практике это конвейер локализации для формата, который китайские студии активно экспортируют.
ByteDance подходила к этому рынку с разных сторон: от видеомоделей до стимулов для платформ, создающих драмы с помощью ИИ. Объединение моделей сценариев, изображений и раскадровок в одну студию — это первый раз, когда компания предложила всю цепочку в одном продукте.
Всегда имейте в виду, что редакции могут придерживаться предвзятых взглядов в освещении новостей.
Автор – Pandaily
