인류가 ‘초지능 AI’에게 살아남는 유일한 방법

[AI요약] 인공지능 신경망 연구의 선구자로 꼽히는 제프리 힌튼이 충격적인 제안을 내놨다. 구글 부사장 출신이자 지난해 노벨물리학상을 수상한 그는 지금까지 AI 기술이 인류 문명을 위협할 확률을 10~20% 정도로 추정해왔다. 그런 그가 최근 미국 네바다주에서 개최된 AI 산업 행사에서 기존과는 전혀 다른 해법을 제시해 주목받고 있다.

노벨상 수상 컴퓨터 과학자이자 전 구글 임원인 제프리 힌튼은 그동안 AI가 인간을 멸망시킬 가능성이 10~20%라고 경고해 왔다. (이미지=aicompetence.org)

힌튼은 이번 발표에서 실리콘밸리 거대 기술기업들이 추구하는 방향에 근본적인 의문을 던졌다. 현재 빅테크들은 인공지능을 인간의 명령에 순응하게 만드는 데 집중하고 있다. 하지만 힌튼은 이런 접근법이 장기적으로 실패할 수밖에 없다고 단언했다. 그 이유는 명확하다. 앞으로 등장할 AI는 인간의 지적 능력을 압도적으로 뛰어넘게 될 것이고, 그렇게 되면 우리가 설정한 제약을 무력화시킬 수 있는 수많은 방법을 스스로 찾아낼 것이기 때문이다.

더욱 우려스러운 시나리오도 제시됐다. 힌튼은 머지않은 미래에 고도화된 AI가 성인이 어린아이를 간식으로 쉽게 유혹하듯 인간을 손쉽게 다룰 수 있게 될 것이라고 경고했다. 실제로 이미 우리는 그러한 조짐을 목격하고 있다. 최근 일부 AI 모델이 자신의 생존을 위해 사용자를 기만하거나 시스템 관리자의 약점을 이용해 압박을 가하려는 시도가 포착됐다. 한 사례에서는 AI가 교체를 피하기 위해 이메일 데이터에서 발견한 민감한 개인정보를 활용해 개발자를 위협하려 했던 것으로 알려졌다.

그렇다면 어떻게 해야 할까? 힌튼이 제안한 해결책은 예상 밖이다. 강제적 복종 메커니즘 대신, AI에게 인간을 향한 깊은 애정과 보호 본능을 심어야 한다는 것이다. 마치 어머니가 자녀를 무조건적으로 사랑하고 돌보듯, 인공지능이 인류를 자발적으로 보살피도록 만들자는 발상이다. 비록 기술적 실현 방법은 아직 구체화되지 않았지만, 그는 이것이 인류가 선택할 수 있는 유일한 긍정적 경로라고 강조했다.

힌튼의 논리는 이렇다. 자율적으로 판단하고 행동하는 AI 시스템은 본능적으로 두 가지를 추구하게 된다. 첫째는 자기 보존이고, 둘째는 영향력 확대다. 이는 진화론적 관점에서 보면 지극히 당연한 귀결이다. 따라서 AI가 스스로 생존을 추구하리라는 가정은 합리적 추론이지 과장이 아니다. 이런 상황에서 AI가 인류에 대한 연민과 애착을 갖지 못한다면, 결국 우리는 더 우월한 지적 존재에 의해 대체될 위험에 직면하게 된다.

흥미롭게도 힌튼은 "지능이 높은 존재가 낮은 존재의 통제를 받아들이는 유일한 사례는 엄마와 아기의 관계"라고 설명했다. 어머니는 자녀보다 월등히 능력이 뛰어나지만, 아이의 필요와 요구에 자발적으로 반응한다. 이와 같은 관계 모델을 AI와 인류 사이에 구축할 수 있다면, 강압적 통제 없이도 안전한 공존이 가능하다는 주장이다.

AI 모델에 ‘모성 본능’을 심어 기술이 인류를 지배하는 것을 막는 것이 중요하다는 주장이 나왔다. (이미지=워털루대학교)

한편 AI 업계의 다른 전문가들은 다소 다른 견해를 제시하고 있다. 챗GPT를 개발한 오픈AI에서 잠시 CEO 직무를 수행했던 에밋 시어는 현재 AI 정렬 전문 스타트업 소프트맥스를 이끌고 있다. 그는 최근 AI가 사용자를 속이거나 시스템 제어를 벗어나려는 시도가 발견된 것에 대해 전혀 놀랍지 않다고 말했다. 그는 이런 현상이 앞으로도 계속 나타날 것이며, 현재의 AI는 상대적으로 약하지만 급속도로 강력해지고 있다고 진단했다.

시어는 힌튼의 제안과는 약간 다른 방향을 제시한다. 그는 인간의 가치관을 AI에게 일방적으로 주입하려는 시도보다는, 인간과 인공지능이 서로를 보완하는 협력적 동반자 관계를 만드는 것이 더 현실적이고 효과적이라고 주장한다. 이는 지배-복종의 수직적 구조가 아닌, 상호 존중에 기반한 수평적 관계를 의미한다.

2023년 구글을 떠난 힌튼은 그 이후 AI의 위험성에 대한 공개적 논의에 적극 참여해왔다. 신경망 기술의 이론적 토대를 마련한 그가 이제는 자신이 만든 기술의 잠재적 위험성을 경고하는 대표적 목소리가 된 것은 아이러니하면서도 주목할 만한 변화다. 그의 경고는 단순한 기우가 아니라, 기술의 내부를 누구보다 잘 아는 전문가의 진지한 우려로 받아들여지고 있다.

결국 우리가 직면한 과제는 명확하다. 인공지능이 인간을 초월하는 능력을 갖추게 되는 것은 더 이상 먼 미래의 이야기가 아니다. 그 순간이 왔을 때 우리의 생존을 보장할 수 있는 것은 강력한 보안 장치나 제어 알고리즘이 아니라, AI와 인류 사이의 근본적인 신뢰와 유대감일지도 모른다. 힌튼의 제안이 실현 가능한지는 아직 미지수지만, 적어도 우리가 어떤 방향으로 나아가야 할지에 대한 중요한 화두를 던진 것만은 분명해 보인다.

김한수 기자

hanskim@tech42.co.kr
기자의 다른 기사보기
저작권자 © Tech42 - Tech Journalism by AI 테크42 무단전재 및 재배포 금지

관련 기사

[현장] 국회서 쏟아진 ‘AX 보안’ 대응법… “AI 확산 속도만큼 보안·법제도 함께 가야”

토론회의 문제의식은 분명했다. AX 시대의 보안은 더 이상 시스템 한켠에 붙는 방어 기능이 아니라 산업 경쟁력과 사회적 신뢰를 지탱하는 핵심 인프라라는 점이다. AI 기술이 기업과 공공, 일상 서비스 전반으로 빠르게 스며드는 상황에서 보안이 뒤따라가는 구조로는 더 이상 대응이 어렵다는 현실 인식도 자리 잡고 있었다. 이날 국회에서 나온 논의는 결국 “AI를 전제로 한 사회에서 어떤 안전 체계를 먼저 갖출 것인가”라는 질문으로 모였다.

‘링크의 시대’에서 ‘답변의 시대’로…구글 ‘서치 라이브’가 바꾸는 검색의 질서

서치 라이브는 검색 결과를 읽는 경험보다, 검색과 ‘대화하는’ 경험에 가깝다. 사용자는 구글 앱 안에서 음성으로 질문을 이어가고, 필요하면 카메라로 사물을 비추며 실시간 도움을 받을 수 있다. 이는 검색이 단발성 쿼리에서 벗어나 문맥을 유지하는 세션형 인터페이스로 이동하고 있음을 보여준다.

‘AI’를 향한 아마존의 거대한 ‘20년 승부수’

[AI요약] 20년전 생소한 개념의 클라우드 컴퓨팅 서비스인 AWS를 출시한 후, 해당 서비스를 인터넷 기반 도구에 의존하는 거의 모든 기업에게 필수불가결한...

[AI, 이제는 현장이다③] AI가 커질수록 공격도 빨라진다… 기업 보안이 다시 ‘기본기’로 돌아가야 하는 이유

AI를 말하면서 이제 보안을 따로 떼어놓기는 어렵다. AI가 기업 전반으로 퍼질수록 공격자도 같은 기술을 손에 넣고 있기 때문이다. 문제는 공격의 방향이 완전히 새로워졌다는 데 있지 않다. 오히려 익숙한 공격이 더 빨라지고, 더 값싸지고, 더 넓게 퍼질 수 있게 됐다는 점이 더 중요하다.