'이 사진은 진짜? 가짜?'...심각해지는 딥페이크 위협

[AI요약]

펜타곤 근처 폭발, 비싼 흰색 패딩을 입은 프란치스코 교황, 도널드 트럼프 전 대통령의 체포 모습, 모두 AI 만들어낸 딥페이크다. 이제는 특정 이미지를 보고 해당 이미지가 진짜인지 아니면 AI가 생성한 이미지인지 판단할 수 없는 시대가 왔다. 심각한 파급력이 있는 딥페이크가 온라인으로 급속도로 퍼지면서 현실세계에 실질적인 타격이 되고 있다.

펜타곤 근처에서 폭발이 일어났다고 주장하는 딥페이크.

심각한 딥페이크 공격이 미국 대선까지 침투한 가운데 AI 생성이미지 감지 기술 전망에 대해 CNN 등 외신이 10일(현지시간) 보도했다.

지난달 미국에서는 펜타곤 근처에서 폭발이 일어났다고 주장하는 이미지가 소셜 미디어에 퍼지면서 공황 상태와 함께 사재기가 일어났다. 추후 미국 당국은 해당 이미지가 AI에 의해 생성된 이미지라고 공식 발표까지 했다.

최근 몇달 동안 비싼 흰색 패딩을 입은 프란치스코 교황의 딥페이크가 온라인에 퍼졌으며, 도널드 트럼프 전 대통령이 체포되기 직전 모습같은 딥페이크가 널리 공유되며 논란이 일기도 했다.

그러나 전문가들은 이러한 사건은 향후 다가올 사태에 비하면 빙산의 일각일 것이라고 우려하고 있다. 앞으로는 훨씬 더 많은 AI 생성 콘텐츠가 소셜 미디어에 등장하기 시작할 것이라는 관측이다.

도널드 트럼프 전 대통령이 체포되기 직전 상황처럼 보이는 딥페이크.
흰색 패딩을 입은 프란치스코 교황의 모습을 만든 딥페이크.

기업들은 이 문제를 해결하기 위한 광범위한 방법으로 두가지 접근 방식을 취하고 있다. 한 가지는 이미지가 온라인에서 제작 및 공유된후 AI 생성 이미지를 식별하는 프로그램 개발에 집중하는 것이다. 다른 하나는 일종의 디지털 서명을 사용해 이미지를 실제 또는 AI 생성으로 표시하는 데 중점을 둔다.

마이크로소프트의 지원을 받고 있는 디지털 콘텐츠 분석기업 트루에픽(Truepic)은 AI 생성 이미지를 탐지할 수 있는 기술을 제공하고 있다. 기업이 개발한 앱인 ‘트루에픽 렌즈’(Truepic Lens)는 날짜, 시간, 위치 및 이미지를 만드는 데 사용된 장치를 포함한 데이터를 캡처하고 디지털 서명을 적용해 이미지가 유기적인지 또는 AI에 의해 조작 또는 생성됐는지 확인할수 있다.

트루에픽과 같은 기술기업은 수년동안 온라인에서 잘못된 정보와 싸우기 위해 노력해 왔지만 사용자 프롬프트에 응답해 매력적인 이미지와 서면 작업을 신속하게 생성할 수 있는 새로운 AI 도구의 등장으로 긴급성이 추가됐다.

리얼리티디팬더(Reality Defender)와 하이브모더레이션(Hive Moderation)은 이미지가 온라인에서 공유된 후 AI 생성 이미지를 식별하는 프로그램을 개발하고 있다. 플랫폼을 통해 사용자는 스캔할 기존 이미지를 업로드한 다음 대량의 데이터를 기반으로 실제인지 또는 AI로 생성되었는지에 대한 가능성을 즉시 분석하는 기술이다.

예방적 접근도 있다. 일부 빅테크는 일종의 워터마크를 이미지에 통합해 미디어가 처음 생성될 때 실제 또는 AI로 생성된 것으로 인증하기 위해 노력하고 있다. 이러한 기술은 현재 C2PA(Coalition for Content Provenance and Authenticity)에 의해 주도되고 있으며, 기업은 디지털 미디어의 출처와 역사를 인증하는 기술 표준을 만들기 위해 2021년에 설립됐다.

구글은 두가지 접근 방식을 조금씩 취하는 방법을 채택했다. 구글은 최근 어바웃디스이미지(About this image)라는 도구를 발표했다. 이 도구는 사이트에서 발견된 이미지가 구글에 의해 원래 인덱싱된 시기, 이미지가 처음 표시되었을 수 있는 위치 및 온라인에서 찾을 수 있는 위치를 확인할 수 있는 기능을 사용자에게 제공한다.

딥페이크 문제가 기업과 개인에게 긴급한 관심사가 되면서 현실을 방어하는 기술이 잠재적으로 수익성 있는 사업이 될 전망이다.

그러나 AI 기술이 인간이 따라잡을 수 있는 것보다 더 빠르게 발전함에 따라 이러한 기술 솔루션이 문제를 완전히 해결할 수 있을지는 미지수다. 챗GPT(ChatGPT)를 만든 오픈AI(OpenAI)조차도 올해초 이미지가 아닌 AI가 생성한 글을 감지하는데 도움이 되는 자체적인 기술이 “불완전하다”고 인정했다.

심각한 문제들이 속출하고 있는데도 불구하고 많은 기술기업은 더 많은 AI 도구를 현실세계에 도입하기 위해 계속해서 전진하고 있는 중이다.

벤 콜맨 리얼리티디팬더 CEO는 “매월 딥페이크의 위험이 두배로 증가하고 있고 누구나 만들 수 있다”며 “한마디로 ‘가짜얼굴생성기’만 있으면 누구나 할 수 있는 것”이라고 지적했다.

류정민 기자

znryu@daum.net
기자의 다른 기사보기
저작권자 © Tech42 - Tech Journalism by AI 테크42 무단전재 및 재배포 금지

관련 기사

[현장] 국회서 쏟아진 ‘AX 보안’ 대응법… “AI 확산 속도만큼 보안·법제도 함께 가야”

토론회의 문제의식은 분명했다. AX 시대의 보안은 더 이상 시스템 한켠에 붙는 방어 기능이 아니라 산업 경쟁력과 사회적 신뢰를 지탱하는 핵심 인프라라는 점이다. AI 기술이 기업과 공공, 일상 서비스 전반으로 빠르게 스며드는 상황에서 보안이 뒤따라가는 구조로는 더 이상 대응이 어렵다는 현실 인식도 자리 잡고 있었다. 이날 국회에서 나온 논의는 결국 “AI를 전제로 한 사회에서 어떤 안전 체계를 먼저 갖출 것인가”라는 질문으로 모였다.

‘링크의 시대’에서 ‘답변의 시대’로…구글 ‘서치 라이브’가 바꾸는 검색의 질서

서치 라이브는 검색 결과를 읽는 경험보다, 검색과 ‘대화하는’ 경험에 가깝다. 사용자는 구글 앱 안에서 음성으로 질문을 이어가고, 필요하면 카메라로 사물을 비추며 실시간 도움을 받을 수 있다. 이는 검색이 단발성 쿼리에서 벗어나 문맥을 유지하는 세션형 인터페이스로 이동하고 있음을 보여준다.

‘AI’를 향한 아마존의 거대한 ‘20년 승부수’

[AI요약] 20년전 생소한 개념의 클라우드 컴퓨팅 서비스인 AWS를 출시한 후, 해당 서비스를 인터넷 기반 도구에 의존하는 거의 모든 기업에게 필수불가결한...

[AI, 이제는 현장이다③] AI가 커질수록 공격도 빨라진다… 기업 보안이 다시 ‘기본기’로 돌아가야 하는 이유

AI를 말하면서 이제 보안을 따로 떼어놓기는 어렵다. AI가 기업 전반으로 퍼질수록 공격자도 같은 기술을 손에 넣고 있기 때문이다. 문제는 공격의 방향이 완전히 새로워졌다는 데 있지 않다. 오히려 익숙한 공격이 더 빨라지고, 더 값싸지고, 더 넓게 퍼질 수 있게 됐다는 점이 더 중요하다.