프레임 단위로 처리하는 AI 영상 얼굴 합성

20 크레딧은 1초가 아니라 작업 한 건을 삽니다. 그래서 첫 결정은 어떤 프레임이 정말로 필요한지입니다. 트림 시작 프레임과 종료 프레임이 그 때문에 있습니다. 영상 얼굴 합성을 시작하기 전에 아이디어를 실어 나르는 컷까지 소재를 줄이십시오. 10초짜리 컷은 약 1분 만에 돌아오고, 2분짜리 장면은 15분 대기 한계에 가까워지면서 비용은 똑같습니다. 먼저 자르고, 그다음에 파라미터를 생각하십시오.

프레이밍은 스틸보다 여기서 더 중요합니다. 피사체가 움직이면서 얼굴 크기가 바뀌기 때문입니다. 컷 시작에서 화면을 가득 채우다가 끝에서 40픽셀로 줄어드는 얼굴은 클립의 절반만 깔끔하게 얼굴 교체되고 나머지는 무너집니다. 얼굴이 쓸 만한 크기로 유지되는 구간까지 자르거나, 검출 크기를 올려 작은 얼굴도 잡히게 하십시오. 넓은 설정 샷은 모델에게 건넬 수 있는 가장 어려운 소재입니다.

깜빡임은 블렌딩 단계에서 시작되는 일이 거의 없습니다. 검출에서 옵니다. 몇 프레임에서 얼굴이 검출 점수 임계값 아래로 떨어지고, 그 프레임이 합성되지 않은 채 통과하면서 시퀀스가 번쩍입니다. 검출 점수를 낮추면 그 경계선상의 프레임이 다시 줄을 맞춥니다. 모션 블러, 급한 측면 전환, 얼굴을 지나는 그림자가 흔한 세 가지 원인이고, 셋 모두 다른 스왑 모델보다 낮은 임계값에 답합니다. 영상 페이스스왑에서 이 조정값 하나가 가장 많은 문제를 해결합니다.

두 번째 불안정 요인은 두 사람 이상이 있는 컷에서의 정체성 이동입니다. 셀렉터를 다중 얼굴에 둔 채로 두면, 피사체가 화면을 벗어나는 순간 엔진이 합성을 다른 사람에게 넘길 수 있습니다. 셀렉터를 레퍼런스 모드로 옮기고, 피사체를 착각할 수 없는 프레임으로 레퍼런스 프레임 번호를 지정한 뒤, 레퍼런스 위치와 거리를 맞춰 영상 페이스스왑이 끝날 때까지 대상이 고정되게 하십시오.

영상 얼굴 합성은 언제나 다시 인코딩합니다. 파이프라인은 소스를 디코딩하고 픽셀을 다시 쓰고 새 파일을 내보내므로, 원본이 이미 지고 있던 손실 압축 위에 두 번째 세대가 얹힙니다. 출력 영상 인코더와 프리셋과 품질이 그 두 번째 과정의 대가를 정합니다. 깨끗하게 시작한 영상에서 품질을 낮게 둔 것이, 기술적으로 완벽한 얼굴 교체를 시작한 소재보다 못하게 보이도록 만드는 가장 빠른 방법입니다.

프레임 레이트도 같은 주의가 필요합니다. 출력 FPS는 바꾸지 않으면 소스를 따르고, 바꾸면 리샘플이 강제되면서 저더가 생길 수 있습니다. 얼굴 작업이 완벽해도 그 저더가 합성 결함으로 읽힙니다. 구체적인 이유가 없다면 FPS는 그대로 두십시오. 소스가 정말로 흐릿하다면 프레임 향상이 클립을 업스케일하고 얼굴 향상이 합성 영역의 질감을 다시 세우며, 크레딧이 아니라 프레임당 처리 시간으로 값을 치릅니다.