← Окно

Аватары: как добиться лучшего результата

Модель оживляет картинку по звуку: двигает губы, голову, глаза и немного плечи. Почти всё, что видно в готовом ролике, зависит от двух файлов, портрета и звука. Ниже описано, как их подготовить и что писать в настройках.

Коротко
  1. Портрет: лицо крупно, анфас или вполоборота, рот закрыт, хороший свет.
  2. Звук: чистая речь одним голосом, без музыки и шума.
  3. Длинный текст режьте на ролики по 10–15 секунд на паузах и кладите в один заказ.
  4. Для длинного непрерывного плана берите 480p: внешность держится стабильнее.
  5. В промпте описывайте поведение персонажа, а не внешность.

01Портрет

Внешность, позу и фон модель берёт с картинки. Чего на ней нет, модель дорисует сама и не всегда удачно, поэтому всё важное должно быть в кадре сразу.

Хорошо
  • Лицо крупно и по центру
  • Анфас или лёгкий поворот, взгляд в камеру
  • Рот закрыт или чуть приоткрыт, нейтральное выражение
  • Ровный свет, резкое изображение
  • Поза и руки уже такие, какими должны быть в ролике
  • Фото, 3D, рисунок, аниме, животные: подходит любой стиль
Хуже
  • Профиль или сильный поворот головы
  • Рот закрыт рукой, микрофоном или волосами
  • Широкая улыбка или открытый рот: губам труднее попадать в речь
  • Тёмные очки, размытие, мелкое лицо на общем плане
  • Несколько лиц в кадре
  • Надписи на картинке: они могут поплыть

При загрузке выберите пропорции кадра (9:16, 3:4, 1:1, 16:9) и сдвиньте картинку так, чтобы лицо было крупно.

02Звук

Губы и мимика следуют за звуком, поэтому от записи зависит больше, чем от любой настройки.

  • Чистая речь. Музыка, уличный шум и эхо комнаты смазывают артикуляцию. Фоновую музыку накладывайте на готовый ролик в монтаже.
  • Один голос. Модель оживляет одного персонажа, поэтому диалог разрежьте на реплики.
  • Ровная громкость без перегруза. Синтезированный голос подходит отлично.
  • Короткая тишина по краям, до полусекунды. В долгой паузе персонаж просто стоит.

03Длина ролика и разрешение

Ролик генерируется порциями, и каждая продолжает предыдущую. На длинных роликах мелкие ошибки копятся: примерно после 15 секунд внешность может начать уплывать. Например, меняется разрез глаз или персонаж постепенно задирает голову. В 720p это заметнее, в 480p слабее.

  • Режьте речь на ролики по 10–15 секунд на паузах между фразами, а не посреди слова.
  • Кладите все куски в один заказ: для всех кусков берётся одна и та же картинка, поэтому персонаж в них одинаковый.
  • Склеивайте куски в монтаже, лучше через смену плана или перебивку.
  • Если нужен один длинный непрерывный план, берите 480p. Короткие ролики и крупный план лучше делать в 720p.

04Промпт: как персонаж себя ведёт

Поле необязательное: без промпта персонаж спокойно говорит в камеру. Внешность модель уже видит на картинке, повторять её не нужно. Опишите манеру, движения и настроение, коротко, в одно-два предложения. Писать можно по-русски.

«Спокойно говорит в камеру, лёгкие кивки, иногда моргает»

«Эмоционально рассказывает, живая мимика, наклоняет голову»

«Сидит за столом, руки неподвижно лежат на столе, смотрит в камеру»

Просите только то, что возможно из этой позы: если рук на картинке нет, жестов не будет.

05Антипромпт: чего избегать

Типичные огрехи мы уже убираем сами: высунутый язык, губы трубочкой, случайные субтитры. Ваш текст добавляется к нашему. Пишите сюда то, что не понравилось в прошлой попытке.

«резкие движения головой, закатывает глаза»

06Сид: повтор и варианты

Сид задаёт случайность. С тем же сидом, картинкой, звуком и промптом получится тот же ролик.

Понравились движения, но хотите поправить промпт? Оставьте сид прежним. Нужен другой вариант при тех же файлах? Поменяйте сид на любое другое число.

07Порядок работы

  1. Проба. Сделайте несколько коротких кусков в 480p и посмотрите, как модель справляется с вашим персонажем и голосом.
  2. Разбор. Если плохо двигается рот, проверьте звук. Если уплыла внешность, режьте ролик короче. Если движения не те, поправьте промпт или антипромпт. Если просто неудачный дубль, смените сид.
  3. Чистовой заказ. Все куски одним заказом в нужном разрешении. В истории есть кнопка «Повторить с этими настройками».

ПопробоватьТо же через API