'이 사진은 진짜? 가짜?'...심각해지는 딥페이크 위협

[AI요약]

펜타곤 근처 폭발, 비싼 흰색 패딩을 입은 프란치스코 교황, 도널드 트럼프 전 대통령의 체포 모습, 모두 AI 만들어낸 딥페이크다. 이제는 특정 이미지를 보고 해당 이미지가 진짜인지 아니면 AI가 생성한 이미지인지 판단할 수 없는 시대가 왔다. 심각한 파급력이 있는 딥페이크가 온라인으로 급속도로 퍼지면서 현실세계에 실질적인 타격이 되고 있다.

펜타곤 근처에서 폭발이 일어났다고 주장하는 딥페이크.

심각한 딥페이크 공격이 미국 대선까지 침투한 가운데 AI 생성이미지 감지 기술 전망에 대해 CNN 등 외신이 10일(현지시간) 보도했다.

지난달 미국에서는 펜타곤 근처에서 폭발이 일어났다고 주장하는 이미지가 소셜 미디어에 퍼지면서 공황 상태와 함께 사재기가 일어났다. 추후 미국 당국은 해당 이미지가 AI에 의해 생성된 이미지라고 공식 발표까지 했다.

최근 몇달 동안 비싼 흰색 패딩을 입은 프란치스코 교황의 딥페이크가 온라인에 퍼졌으며, 도널드 트럼프 전 대통령이 체포되기 직전 모습같은 딥페이크가 널리 공유되며 논란이 일기도 했다.

그러나 전문가들은 이러한 사건은 향후 다가올 사태에 비하면 빙산의 일각일 것이라고 우려하고 있다. 앞으로는 훨씬 더 많은 AI 생성 콘텐츠가 소셜 미디어에 등장하기 시작할 것이라는 관측이다.

도널드 트럼프 전 대통령이 체포되기 직전 상황처럼 보이는 딥페이크.
흰색 패딩을 입은 프란치스코 교황의 모습을 만든 딥페이크.

기업들은 이 문제를 해결하기 위한 광범위한 방법으로 두가지 접근 방식을 취하고 있다. 한 가지는 이미지가 온라인에서 제작 및 공유된후 AI 생성 이미지를 식별하는 프로그램 개발에 집중하는 것이다. 다른 하나는 일종의 디지털 서명을 사용해 이미지를 실제 또는 AI 생성으로 표시하는 데 중점을 둔다.

마이크로소프트의 지원을 받고 있는 디지털 콘텐츠 분석기업 트루에픽(Truepic)은 AI 생성 이미지를 탐지할 수 있는 기술을 제공하고 있다. 기업이 개발한 앱인 ‘트루에픽 렌즈’(Truepic Lens)는 날짜, 시간, 위치 및 이미지를 만드는 데 사용된 장치를 포함한 데이터를 캡처하고 디지털 서명을 적용해 이미지가 유기적인지 또는 AI에 의해 조작 또는 생성됐는지 확인할수 있다.

트루에픽과 같은 기술기업은 수년동안 온라인에서 잘못된 정보와 싸우기 위해 노력해 왔지만 사용자 프롬프트에 응답해 매력적인 이미지와 서면 작업을 신속하게 생성할 수 있는 새로운 AI 도구의 등장으로 긴급성이 추가됐다.

리얼리티디팬더(Reality Defender)와 하이브모더레이션(Hive Moderation)은 이미지가 온라인에서 공유된 후 AI 생성 이미지를 식별하는 프로그램을 개발하고 있다. 플랫폼을 통해 사용자는 스캔할 기존 이미지를 업로드한 다음 대량의 데이터를 기반으로 실제인지 또는 AI로 생성되었는지에 대한 가능성을 즉시 분석하는 기술이다.

예방적 접근도 있다. 일부 빅테크는 일종의 워터마크를 이미지에 통합해 미디어가 처음 생성될 때 실제 또는 AI로 생성된 것으로 인증하기 위해 노력하고 있다. 이러한 기술은 현재 C2PA(Coalition for Content Provenance and Authenticity)에 의해 주도되고 있으며, 기업은 디지털 미디어의 출처와 역사를 인증하는 기술 표준을 만들기 위해 2021년에 설립됐다.

구글은 두가지 접근 방식을 조금씩 취하는 방법을 채택했다. 구글은 최근 어바웃디스이미지(About this image)라는 도구를 발표했다. 이 도구는 사이트에서 발견된 이미지가 구글에 의해 원래 인덱싱된 시기, 이미지가 처음 표시되었을 수 있는 위치 및 온라인에서 찾을 수 있는 위치를 확인할 수 있는 기능을 사용자에게 제공한다.

딥페이크 문제가 기업과 개인에게 긴급한 관심사가 되면서 현실을 방어하는 기술이 잠재적으로 수익성 있는 사업이 될 전망이다.

그러나 AI 기술이 인간이 따라잡을 수 있는 것보다 더 빠르게 발전함에 따라 이러한 기술 솔루션이 문제를 완전히 해결할 수 있을지는 미지수다. 챗GPT(ChatGPT)를 만든 오픈AI(OpenAI)조차도 올해초 이미지가 아닌 AI가 생성한 글을 감지하는데 도움이 되는 자체적인 기술이 “불완전하다”고 인정했다.

심각한 문제들이 속출하고 있는데도 불구하고 많은 기술기업은 더 많은 AI 도구를 현실세계에 도입하기 위해 계속해서 전진하고 있는 중이다.

벤 콜맨 리얼리티디팬더 CEO는 “매월 딥페이크의 위험이 두배로 증가하고 있고 누구나 만들 수 있다”며 “한마디로 ‘가짜얼굴생성기’만 있으면 누구나 할 수 있는 것”이라고 지적했다.

류정민 기자

znryu@daum.net
기자의 다른 기사보기
저작권자 © Tech42 - Tech Journalism by AI 테크42 무단전재 및 재배포 금지

관련 기사

[인터뷰] 이정현 엠제이코퍼레이션 대표 “흩어진 데이터를 모아 물류 운영의 혁신을 가져올 ‘반드로’를 소개합니다”

국제 비즈니스와 물류를 전공한 이정현 엠제이코퍼레이션 대표는 미국 제약회사 구매팀에서 구매 담당자로 근무하며 커리어를 시작했다. 각각 시스템에서 내 놓은 이런 저런 엑셀표를 분석하며 다양한 관리 품목의 발주 시점과 수량을 판단하는 과정은 쉽지 않았다. 그렇게 현장의 문제를 절실히 깨달은 당시 경험은 이후 반드로 개발로 이어졌다. (사진=테크42)

애플, 9월 9일 '놀라움과 빛남' 아이폰 이벤트 개최…폴더블 시대 여나?

지난 8월 26일, 팀 쿡이 이끌던 애플의 마지막 장이 사실상 막을 내렸다. 존 터너스가 9월 1일 CEO직을 승계한 뒤 단 8일 만에 열리는 이번 이벤트는 애플 역사상 가장 극적인 전환기를 상징한다.

2,330개 클러스터에 6.5조 쏟아부었다…하지만, 티가 안난다?

전국 곳곳에 흩어진 2,330개의 클러스터. 지난 5년간 6조 5,449억 원이 투입됐지만, 정작 티는 나지 않는다. 그렇다면 클러스터는 제대로 작동하고 있을까?

[현장] AI에 돈 몰리는 실리콘밸리…투자 기준은 ‘기대’에서 ‘실적’으로

세계 스타트업 투자 시장으로 사상 최대 규모의 자금이 유입되고 있다. 그러나 모든 스타트업이 투자 확대의 혜택을 누린 것은 아니다. 오픈AI(OpenAI)와 앤트로픽(Anthropic) 두 회사가 상반기에 유치한 자금만 2170억달러로, 세계 스타트업 투자액의 43%를 차지했다. 2분기에 10억달러 이상을 유치한 16개 기업이 받은 자금도 1086억달러로 분기 전체 투자액의 53%에 달했다. 시장에 들어온 돈은 늘었지만 실제로는 소수의 대형 AI 기업이 자금을 가져간 것이다.