OpenAI може згортати свої зусилля на ринку генерації відео із закриттям додатку Sora, але ByteDance у четвер підтвердила, що їхня нова аудіо- та відеомодель Dreamina Seedance 2.0 впроваджується в їхній платформі для редагування CapCut.
ByteDance стверджує, що модель дозволяє творцям створювати, редагувати та синхронізувати відео- та аудіоконтент за допомогою підказок, зображень або референсних відео.
Поетапне впровадження розпочнеться з користувачів CapCut у Бразилії, Індонезії, Малайзії, Мексиці, на Філіппінах, у Таїланді та В’єтнамі, а з часом додаватимуться й інші ринки.
Новина про запуск у CapCut з’явилася після нещодавнього повідомлення про те, що глобальне розгортання моделі буде призупинено, поки вона працюватиме над вирішенням питань інтелектуальної власності, які викликали критику з боку Голлівуду через ймовірне порушення авторських прав. Це, ймовірно, пояснює обмежену кількість ринків, на яких модель зараз доступна в CapCut.
У Китаї модель доступна користувачам додатку Jianying від ByteDance.
Модель генерації відео працює без референсних зображень, навіть якщо творець використовує лише кілька слів, щоб описати сцену, яку він має на увазі, повідомляє ByteDance у своєму анонсі. CapCut також добре відтворює реалістичні текстури, рухи та освітлення в різних візуальних перспективах і ракурсах, що, на думку компанії, можна використовувати для редагування, покращення або виправлення власних кадрів творців.
Ще одним варіантом використання було б дозволити творцям тестувати потенційні ідеї на основі ранніх концепцій або ескізів перед зйомкою реального відео.
Крім того, Dreamina Seedance 2.0 може використовуватися для широкого спектру контенту, включаючи кулінарні рецепти, фітнес-уроки, огляди бізнесу чи продуктів, а також відео з рухом або динамічним контентом, з яким історично виникали труднощі у відеомоделей ШІ, пояснює компанія.
На момент запуску модель підтримує кліпи тривалістю до 15 секунд у шести співвідношеннях сторін.
У CapCut модель з’явиться в різних областях, включаючи функції редагування, такі як AI Video, та інструменти генерації, як Video Studio. Вона також з’явиться на платформі генерації ШІ ByteDance, Dreamina, та їхній маркетинговій платформі Pippit.
Враховуючи здатність створювати реалістичний контент, ByteDance каже, що додала обмеження безпеки, тому модель не матиме змоги створювати відео із зображень або відео, що містять реальні обличчя. CapCut також блокуватиме несанкціоноване використання об’єктів інтелектуальної власності. (Однак, якби обмеження працювали належним чином, модель була б доступна зараз і в Сполучених Штатах. Імовірно, все ще тривають додаткові доопрацювання.)
Контент, створений Dreamina Seedance 2.0, також міститиме невидимий водяний знак, який допоможе ідентифікувати контент, створений за допомогою моделі, коли він поширюється за межами платформи, додала ByteDance. Це може допомогти в таких речах, як запити на видалення від правовласників у разі, якщо модель дозволила пройти захищеному авторським правом контенту.
ByteDance заявляє, що партнеруватиме з експертами та творчими спільнотами в міру розгортання моделі, щоб удосконалювати та покращувати її можливості.
Залишити відповідь