Замена лица стримера для facecam-клипов

Вебкамерный материал почти всегда имеет что-то, пересекающее лицо, и это «что-то» решает, выдержит ли рендер. Дужки гарнитуры, микрофон на штанге и рука на клавиатуре — три привычных. Включите модель окклюзии, прежде чем трогать что-либо ещё: замена лица стримера, которая игнорирует окклюзию, даёт лицо, плывущее поверх амбушюра, и потом это не чинит никакое размытие маски. Проверьте кадр, где рука проходит по подбородку: там провал виден первым.

Хромакей играет на вас, а не против. Чистый ключ даёт детектору высококонтрастный край вокруг головы, поэтому детекция держится стабильной, когда вы наклоняетесь или поворачиваетесь в кресле. Пережжённый ключ с зелёной бахромой на линии волос делает обратное: бахрома читается как кожа, маска тянется к ней, шов светится. Почините ключ в редакторе, прежде чем запускать замену лица стримера. Десять секунд цветокора сверху экономят три потерянные задачи снизу.

Круглый кроп вебкамы кажется маленьким на экране, но лицо внутри обычно большое в собственном кадре, и это хороший случай. Плохой случай — полноэкранный игровой захват с facecam в углу шириной 240 пикселей. Вырежьте этот угол, запустите замену лица стримера только на кропе, чтобы у детектора были настоящие пиксели, затем снова соберите заменённую facecam поверх игры в редакторе.

Разрыв разрешения путает людей. Источник на 6000 пикселей против клипа в 1080p не помогает: область обмена ресэмплится к цели, лишняя деталь отбрасывается. Помогает источник, где лицо занимает хорошую долю собственного кадра. Улучшение лица восстанавливает текстуру внутри области обмена, улучшение кадра поднимает всё вокруг — это не даёт замене лица стримера сидеть сверхрезко внутри мягкого захвата. Ни одно не стоит лишних кредитов — только лишние минуты.

Мигание между кадрами — типичный провал стримерских клипов, и почти всегда значит, что порог детектора слишком высок для материала. Motion blur быстрого поворота головы оставляет кадр ниже порога, обмен пропадает на два кадра, глаз ловит это мгновенно. Чуть опустите порог — трекинг выдержит поворот. Замена лица стримера, которая мигает, — задача порога гораздо чаще, чем задача модели.

Если инструмент хватает не то лицо, когда в кадре гостевая камера или аватар чата, выведите селектор из режима многих лиц, зафиксируйте позицию референса на лице, которое хотите, и сожмите дистанцию референса. Жёсткая линия на линии роста значит, что маска слишком тугая: поднимите размытие маски и добавьте немного отступа. Меняйте один параметр за попытку. Два изменения сразу ничему не учат о том, что сработало.