살아있는 수많은 표정을 만드는 AI, ‘라이브 포트레이트’

라이브 포트레잇(Live Portrait)은 살아 움직이는 초상화를 생성할 수 있는 혁신적인 도구로, 사용자의 사진을 애니메이션으로 변환해 주는 기술입니다. 이 기술은 이미지를 재구성하여 비디오 애니메이션을 생성하며, 다양한 사용자의 표정을 실시간으로 모방할 수 있습니다.

라이브 포트레잇은 D-ID 기술에 기반한 AI 비디오 플랫폼의 한 부분으로, 사진을 동영상으로 변환하는 기능을 제공합니다. 이 기술은 ‘운전자’ 비디오를 사용하여 정지된 사진 속 인물의 머리 움직임, 표정, 감정 및 심지어 목소리까지 정확하게 매치하여 애니메이트하는 데 사용됩니다. 이로 인해 사진과 이미지가 완전히 새롭고 신선한 방식으로 보여집니다​ (D-ID)​.

D-ID의 기술은 특히 e-러닝, 기업 교육, 마케팅 커뮤니케이션, AI 보조기구, 역사 및 메타버스와 같은 분야에서 개인화된 미디어 생성을 가능하게 하는 혁신적인 기능을 제공합니다. 사용자는 텍스트 또는 오디오 입력만으로도 현실적인 ‘말하는 초상화’를 생성할 수 있으며, 이는 교육적 비디오나 마케팅 자료로 활용될 수 있습니다​ (D-ID)​.

  1. 라이브 포트레이트를 사용하기 위해서는 아래의  지정된 사이트에서 파일(6개)을 모두 다운 받아줍니다
    <https://huggingface.co/Kijai/LivePortrait_safetensors/tree/main>

2. 미리 컴퓨터에 설치되어 있는 ComfyUI 프로그램의 ‘model’ 폴더로 들어가 ‘liveportrait’를 새로 하나 만들어 주고 그 안에 다운로드 받은 파일을 모두 넣어줍니다

3. 얼굴 표정을 바꾸어주는 기능을 하는 ‘insightface’라는 파일이 필요합니다.

-파이썬을 사용하는 경우 : pip install insightface
-ComfyUI Portable를 사용하는 경우 : CompyUI Portable –

‘python_embeded’-python.exe에 가서 명령창에서 cmd명령후 아래의 명령어를 실행합니다.

“-m pip install insightface”

4. ComfyUI를 시작하고 ‘Manager’-‘Install custom Node'(livepo를 검색해서 Kijai를 찾아서 install로 설치합니다)-

5. 아래 사이트로 다시 갑니다.
<https://huggingface.co/Kijai/LivePortrait_safetensors/tree/main>

그리고


‘examples 폴더안에 있는 ‘liveportrait_example01.json’파일을 다운로드 받아 줍니다

6. ComfyUI를 다시 시작하고 다운받아 두었던 위의 파일을 드래그하여  화면 중앙으로 옮겨놓습니다.

7. 원본 그림과 변화될 영상을 각각 입력하여 변화를 살펴봅니다.

<이하 광고>

© 2023 나의 웹 페이지