라이브 포트레잇(Live Portrait)은 살아 움직이는 초상화를 생성할 수 있는 혁신적인 도구로, 사용자의 사진을 애니메이션으로 변환해 주는 기술입니다. 이 기술은 이미지를 재구성하여 비디오 애니메이션을 생성하며, 다양한 사용자의 표정을 실시간으로 모방할 수 있습니다.
라이브 포트레잇은 D-ID 기술에 기반한 AI 비디오 플랫폼의 한 부분으로, 사진을 동영상으로 변환하는 기능을 제공합니다. 이 기술은 ‘운전자’ 비디오를 사용하여 정지된 사진 속 인물의 머리 움직임, 표정, 감정 및 심지어 목소리까지 정확하게 매치하여 애니메이트하는 데 사용됩니다. 이로 인해 사진과 이미지가 완전히 새롭고 신선한 방식으로 보여집니다 (D-ID).
D-ID의 기술은 특히 e-러닝, 기업 교육, 마케팅 커뮤니케이션, AI 보조기구, 역사 및 메타버스와 같은 분야에서 개인화된 미디어 생성을 가능하게 하는 혁신적인 기능을 제공합니다. 사용자는 텍스트 또는 오디오 입력만으로도 현실적인 ‘말하는 초상화’를 생성할 수 있으며, 이는 교육적 비디오나 마케팅 자료로 활용될 수 있습니다 (D-ID).
- 라이브 포트레이트를 사용하기 위해서는 아래의 지정된 사이트에서 파일(6개)을 모두 다운 받아줍니다
<https://huggingface.co/Kijai/LivePortrait_safetensors/tree/main>
2. 미리 컴퓨터에 설치되어 있는 ComfyUI 프로그램의 ‘model’ 폴더로 들어가 ‘liveportrait’를 새로 하나 만들어 주고 그 안에 다운로드 받은 파일을 모두 넣어줍니다
3. 얼굴 표정을 바꾸어주는 기능을 하는 ‘insightface’라는 파일이 필요합니다.
-파이썬을 사용하는 경우 : pip install insightface
-ComfyUI Portable를 사용하는 경우 : CompyUI Portable –
‘python_embeded’-python.exe에 가서 명령창에서 cmd명령후 아래의 명령어를 실행합니다.
“-m pip install insightface”
4. ComfyUI를 시작하고 ‘Manager’-‘Install custom Node'(livepo를 검색해서 Kijai를 찾아서 install로 설치합니다)-
5. 아래 사이트로 다시 갑니다.
<https://huggingface.co/Kijai/LivePortrait_safetensors/tree/main>
그리고
‘examples 폴더안에 있는 ‘liveportrait_example01.json’파일을 다운로드 받아 줍니다
6. ComfyUI를 다시 시작하고 다운받아 두었던 위의 파일을 드래그하여 화면 중앙으로 옮겨놓습니다.
7. 원본 그림과 변화될 영상을 각각 입력하여 변화를 살펴봅니다.
<이하 광고>
- 캐릭터 일관성 rendernet.ai
- 캐릭터를 현장에 투입 시키는 사이트 dzine.ai
- 캐릭터 사진(한국 남자 대학생 후)
- 웹툰 캐릭터의 일관성 유지하는 AI 툴
- 뉴스 전달 웹툰 시장의 발전 전망
- 일본 만화 및 소설의 무료 다운로드 플랫폼 : 888DL
- (11) 유저 주도의 웹툰 플랫폼의 중요성
- 웹툰 시장을 위한 최상위 도메인은?
- (10) 타겟 오디언스 분석
- (9) 매력적인 주인공 만들기
- (8) 만화 인물 발굴
- (7) 만화의 배경
- AI 웹툰 제작 (2) : 만화 스타일 16개 익히기
- 살아있는 수많은 표정을 만드는 AI, ‘라이브 포트레이트’
- 유머나 코미디 스크립트도 AI가 생성해 줄까요?
- (6) 만화 인물의 중요성
- (5) 만화 연출 포인트
- (4) 스토리 진행의 중요성
- (3) 매력적인 인물 만들기
- (2) 카툰 제작을 위한 8 가지 유의 사항
- (1) 만화 스타일 16 가지