지금쯤 여러분은 실제로 존재하지 않는 영화의 동영상을 본 적이 있으실 것입니다. 예를 들어, 톰 크루즈가 토니 스타크/아이언 맨을 연기한다면 다음과 같을 것입니다.
이것은 차원 간 케이블의 한 형태처럼 보일 수 있지만, 사실은 훨씬 더 접근하기 쉬운 ‘딥페이크’입니다.
딥페이크란 무엇인가요?
‘딥 러닝(Deep Learning)’과 ‘가짜(Fake)’의 합성어인 딥페이크(Deepfake)는 디지털 변형 미디어의 한 형태로 한 사람의 모습을 다른 사람으로 교체하는 것을 말합니다. 딥페이크는 보통 속이기 위한 목적으로 사용되며, 정치인, 연예인 또는 일반인이 실제로 일어나지 않은 말과 행동을 한 것처럼 묘사할 수 있습니다.
딥페이크는 어떻게 작동하나요?
딥페이크는 머신 러닝을 기반으로 하여 처음 봤을 때 현실과 구별하기 어려운 미디어를 사실적으로 생성합니다. 이 기술은 얼굴 교체뿐만 아니라, 안면 모방, 음성 모방, 립싱크, 전신 모션까지 가능합니다.
기본적으로 머신 러닝 및 인공 지능 프로그램은 일련의 입력 이미지를 제공받은 다음 영상 또는 오디오를 생성합니다. 시스템이 받는 입력이 많을수록 생성된 미디어는 더욱 정확해집니다.
딥페이크를 직접 만드는 방법은 다음과 같이 아주 간단합니다.
- 원하는 앱을 다운로드하세요. Windows, macOS, iOS, Android에서 이용할 수 있는 수많은 무료 및 유료 옵션이 있습니다.
- 앱을 사용해 얼굴의 다양한 이미지를 캡처하세요.
- 얼굴을 적용시킬 클립 또는 이미지를 찾거나 선택하세요.
- AI가 딥페이크를 생성할 때까지 기다리세요.
다운로드한 딥페이크 앱의 사용 및 개인 정보 보호 정책을 확인하는 것이 좋습니다. 이러한 앱의 개발자는 앱에 입력된 많은 사용자 데이터에 접근할 수 있습니다. 사용자 데이터는 일단 수집되면 광고에 명시된 앱의 범위에서 벗어난 머신 러닝 알고리즘을 훈련하는 데 사용될 수 있습니다. 적어도 앱이 이미지를 처리하고 딥페이크를 제공한 후에 사용자 데이터는 개발자의 서버에서 삭제되어야 합니다.
더 보기: 딥페이크 앱 Top 6: 딥페이크 앱은 안전한가요?
영화 내 딥페이크 이용 사례
최근 몇 년 동안 딥페이크 기술은 영화에서 배우들을 늙거나 젊게 만들기 위해, 혹은 연기자들에게 완전히 다른 신체를 적용하기 위해 사용돼왔습니다.
이에 대한 좋은 예는 캡틴 마블(2019)에서 볼 수 있었습니다. 이 영화는 1995년을 배경으로 하며, 69세의 새뮤얼 L. 잭슨은 다른 마블 스튜디오 영화에 나오는 ‘닉 퓨리’ 캐릭터의 어린 시절을 연기했습니다. 딥페이크 기술은 잭슨을 약 25년 젊게 만드는 데 사용되었습니다.
왼쪽: 어벤저스(2012)에서 닉 퓨리(62세)를 연기한 새뮤얼 L. 잭슨(64세)
오른쪽: 캡틴 마블(2019)에서 닉 퓨리(45세)를 연기한 새뮤얼 L. 잭슨(69세)
반대의 효과를 이용한 예도 있습니다. 어벤져스: 엔드게임(2019)에서 크리스 에반스는 두 가지 다른 나이대의 스티브 로저스를 연기했습니다:
왼쪽: 스티브 로저스(약 39세)를 연기한 크리스 에반스(38세)
오른쪽: 스티브 로저스(약 113세)를 연기한 크리스 에반스(38세)
또 다른 예로 영화 프리 가이(2021년)에 등장하는 ‘듀드’라는 캐릭터는 라이언 레이놀즈의 얼굴과 목소리를 이용하고 보디빌더 아론 W. 리드의 몸을 이용했습니다.
유용한 딥페이크의 예
딥페이크 기술은 연예 산업에서의 이용과는 별개로 실질적이고 긍정적인 방식으로 현실에 적용하는 데 큰 진전을 이루었습니다. AI와 머신 러닝은 교육부터 활동주의, 사별, 보조 기술에 이르기까지 다양한 분야에 혁신의 기회를 제공했습니다.
딥 페이크는 또한 활동가들이나 위험에 처한 사람들의 신원을 보호하기 위해 사용되어 왔습니다. 그 예로 체첸의 LGBTQ+ 활동가들의 여정을 따라간 HBO 다큐멘터리 웰컴 투 체첸에서 시각 효과 감독관 라이언 래니는 활동가들의 정체성을 보호하기 위해 폭력 피해자들의 얼굴 위에 다른 얼굴들을 덧씌웠습니다.
스페인의 초현실주의 화가 살바도르 달리는 “나는 죽음의 일반적인 개념은 믿지만, 달리의 죽음만큼은 절대로 믿지 않는다”라고 말했습니다. 플로리다에 있는 살바도르 달리 박물관에서는 달리가 세상을 떠난 지 30년 만인 2019년에 전시회를 위해서 달리를 되살렸습니다.
이와 비슷하게 딥페이크 기술은 파킨슨병과 같이 말하는 능력이 손상되는 의학적 문제를 가진 사람들에게 목소리를 돌려주는 데 도움이 될 수 있습니다. 또한 사별 치유에 이용되어 가까운 사람들을 잃은 사람들에게 위안을 줄 수 있습니다.
또한 딥페이크는 활동가들이나 위험에 처한 사람들의 신원을 보호하기 위해 사용돼왔습니다. 예를 들어, 체첸 LGBTQ+ 활동가들의 여정을 담은 HBO 다큐멘터리 웰컴 투 체첸에서 효과를 입히기 위해 사용되었습니다. 시각 효과 감독관 라이언 래니는 제작 과정에서 그들의 신원을 보호하기 위해 폭력 피해자들의 얼굴에 다른 얼굴들을 덮어씌웠습니다.
해로운 딥페이크의 예
그러나 딥페이크 기술에는 다음과 같은 악의적인 적용 사례가 훨씬 더 많습니다. 유명인 또는 리벤지 포르노, 가짜 뉴스 및 사기, 다양한 형태의 사기, 그리고 가장 나쁜 것으로 모의 아동 포르노가 있습니다. 불행하게도 딥페이크 기술은 이러한 부정적인 적용 사례에 압도적으로 많이 이용됩니다.
2022년 중순, 유럽 도시의 여러 시장들은 키이우 시장 비탈리 클리츠코와 영상 통화를 했다고 믿었으나 사실은 가짜였습니다. 각각의 경우, 시장들이 자신과 대화를 나누고 있는 사람이 클리츠코가 아니라 익명의 사기꾼이라고 의심하게 되면서 통화가 종료되었습니다.
비슷한 시기에 테슬라와 스페이스X의 창립자인 일론 머스크의 딥페이크 영상이 트위터에 퍼졌습니다. 이 영상에서 머스크는 사람들에게 ‘비트벡스’라는 암호화폐 플랫폼에 투자할 것을 권했습니다. 사실 이 영상은 가능한 한 많은 사람들이 해당 거래소에 투자하도록 만들기 위해 고안된 사기였습니다. 이 영상은 트위터에서 삭제되기 전까지 약 50만 회나 조회되었습니다.
더 보기: 신원 도용, 사기, 선전에 불길한 징조를 보이는 AI 신기술
딥페이크 동영상 구별하는 방법
이 기술이 발전하면서 딥페이크와 실제 영상을 구별하기가 점점 더 어려워지고 있습니다. 특히 잘 만들어진 딥페이크 영상은 구별이 더욱 어렵습니다. 하지만 인공지능이 딥페이크를 탐지하는 능력은 사람의 눈보다 정확하지 않기 때문에 AI의 딥페이크 탐지 가능성은 현재로서 먼 미래의 이야기입니다.
그러나 딥페이크라고 의심되는 영상이 진짜인지 아닌지를 탐지할 수 있는 몇 가지 방법이 있습니다. MIT Media Lab의 연구원들은 이 과정에서 특히 주의를 기울여야 하는 8가지를 추렸습니다.
- 얼굴: 딥페이크는 특히 조명에 있어서 또는 2D 이미지가 3D로 변환될 때 왜곡이나 변형을 거의 항상 수반합니다.
- 볼과 이마: 이 부위의 피부가 인위적으로 보이나요? 질감이 일관적이지 않나요?
- 눈과 눈썹: 눈썹과 눈 밑 주변의 그림자가 사실적으로 보이나요? 대상의 눈 색상이 정확한가요?
- 안경: 조명, 반사, 눈부심이 진짜처럼 보이나요?
- 얼굴 털(혹은 얼굴 털 없음): 얼굴 털이 올바르게 움직이나요?
- 얼굴 점: 얼굴 점의 위치와 움직임이 현실적인가요?
- 눈 깜박임: 눈이 유기적으로 깜박이나요? 깜박임이 부자연스럽나요?
- 립술: 입술이 해당 얼굴의 일부처럼 보이나요?
또한 MIT Media Lab은 딥페이크 탐지를 연습할 수 있는 재미있는 온라인 테스트를 개발했습니다.
아니면 다음과 같은 방법을 시도해볼 수도 있습니다.
원본 찾기
원본을 찾는 일은 쉬워 보일지 모르지만 생각보다 어렵습니다. 검색을 통해 영상 속 내용과 주장을 확인할 수 있는 다른 영상이나 이야기를 찾아보세요.
리버스 이미지 검색
보고 있는 영상의 스틸 사진을 여러 장 찍어 검색 결과가 나오는지 확인하세요. Google 이미지 검색, TinEye, SourceNAO, Bing 비주얼 검색을 통해 검색해볼 수 있습니다.
리버스 이미지 검색은 다른 누군가가 이전에 어떤 영상을 사용하거나 게시한 적이 있는지 확인하는 데 도움이 될 수 있습니다. 그다음 다른 곳에 게시된 영상과 상호 참조하여 해당 영상이 진짜인지 확인할 수 있습니다(특히 신뢰할 수 있는 출처에 게시된 경우).