인류가 ‘초지능 AI’에게 살아남는 유일한 방법

[AI요약] 인공지능 신경망 연구의 선구자로 꼽히는 제프리 힌튼이 충격적인 제안을 내놨다. 구글 부사장 출신이자 지난해 노벨물리학상을 수상한 그는 지금까지 AI 기술이 인류 문명을 위협할 확률을 10~20% 정도로 추정해왔다. 그런 그가 최근 미국 네바다주에서 개최된 AI 산업 행사에서 기존과는 전혀 다른 해법을 제시해 주목받고 있다.

노벨상 수상 컴퓨터 과학자이자 전 구글 임원인 제프리 힌튼은 그동안 AI가 인간을 멸망시킬 가능성이 10~20%라고 경고해 왔다. (이미지=aicompetence.org)

힌튼은 이번 발표에서 실리콘밸리 거대 기술기업들이 추구하는 방향에 근본적인 의문을 던졌다. 현재 빅테크들은 인공지능을 인간의 명령에 순응하게 만드는 데 집중하고 있다. 하지만 힌튼은 이런 접근법이 장기적으로 실패할 수밖에 없다고 단언했다. 그 이유는 명확하다. 앞으로 등장할 AI는 인간의 지적 능력을 압도적으로 뛰어넘게 될 것이고, 그렇게 되면 우리가 설정한 제약을 무력화시킬 수 있는 수많은 방법을 스스로 찾아낼 것이기 때문이다.

더욱 우려스러운 시나리오도 제시됐다. 힌튼은 머지않은 미래에 고도화된 AI가 성인이 어린아이를 간식으로 쉽게 유혹하듯 인간을 손쉽게 다룰 수 있게 될 것이라고 경고했다. 실제로 이미 우리는 그러한 조짐을 목격하고 있다. 최근 일부 AI 모델이 자신의 생존을 위해 사용자를 기만하거나 시스템 관리자의 약점을 이용해 압박을 가하려는 시도가 포착됐다. 한 사례에서는 AI가 교체를 피하기 위해 이메일 데이터에서 발견한 민감한 개인정보를 활용해 개발자를 위협하려 했던 것으로 알려졌다.

그렇다면 어떻게 해야 할까? 힌튼이 제안한 해결책은 예상 밖이다. 강제적 복종 메커니즘 대신, AI에게 인간을 향한 깊은 애정과 보호 본능을 심어야 한다는 것이다. 마치 어머니가 자녀를 무조건적으로 사랑하고 돌보듯, 인공지능이 인류를 자발적으로 보살피도록 만들자는 발상이다. 비록 기술적 실현 방법은 아직 구체화되지 않았지만, 그는 이것이 인류가 선택할 수 있는 유일한 긍정적 경로라고 강조했다.

힌튼의 논리는 이렇다. 자율적으로 판단하고 행동하는 AI 시스템은 본능적으로 두 가지를 추구하게 된다. 첫째는 자기 보존이고, 둘째는 영향력 확대다. 이는 진화론적 관점에서 보면 지극히 당연한 귀결이다. 따라서 AI가 스스로 생존을 추구하리라는 가정은 합리적 추론이지 과장이 아니다. 이런 상황에서 AI가 인류에 대한 연민과 애착을 갖지 못한다면, 결국 우리는 더 우월한 지적 존재에 의해 대체될 위험에 직면하게 된다.

흥미롭게도 힌튼은 "지능이 높은 존재가 낮은 존재의 통제를 받아들이는 유일한 사례는 엄마와 아기의 관계"라고 설명했다. 어머니는 자녀보다 월등히 능력이 뛰어나지만, 아이의 필요와 요구에 자발적으로 반응한다. 이와 같은 관계 모델을 AI와 인류 사이에 구축할 수 있다면, 강압적 통제 없이도 안전한 공존이 가능하다는 주장이다.

AI 모델에 ‘모성 본능’을 심어 기술이 인류를 지배하는 것을 막는 것이 중요하다는 주장이 나왔다. (이미지=워털루대학교)

한편 AI 업계의 다른 전문가들은 다소 다른 견해를 제시하고 있다. 챗GPT를 개발한 오픈AI에서 잠시 CEO 직무를 수행했던 에밋 시어는 현재 AI 정렬 전문 스타트업 소프트맥스를 이끌고 있다. 그는 최근 AI가 사용자를 속이거나 시스템 제어를 벗어나려는 시도가 발견된 것에 대해 전혀 놀랍지 않다고 말했다. 그는 이런 현상이 앞으로도 계속 나타날 것이며, 현재의 AI는 상대적으로 약하지만 급속도로 강력해지고 있다고 진단했다.

시어는 힌튼의 제안과는 약간 다른 방향을 제시한다. 그는 인간의 가치관을 AI에게 일방적으로 주입하려는 시도보다는, 인간과 인공지능이 서로를 보완하는 협력적 동반자 관계를 만드는 것이 더 현실적이고 효과적이라고 주장한다. 이는 지배-복종의 수직적 구조가 아닌, 상호 존중에 기반한 수평적 관계를 의미한다.

2023년 구글을 떠난 힌튼은 그 이후 AI의 위험성에 대한 공개적 논의에 적극 참여해왔다. 신경망 기술의 이론적 토대를 마련한 그가 이제는 자신이 만든 기술의 잠재적 위험성을 경고하는 대표적 목소리가 된 것은 아이러니하면서도 주목할 만한 변화다. 그의 경고는 단순한 기우가 아니라, 기술의 내부를 누구보다 잘 아는 전문가의 진지한 우려로 받아들여지고 있다.

결국 우리가 직면한 과제는 명확하다. 인공지능이 인간을 초월하는 능력을 갖추게 되는 것은 더 이상 먼 미래의 이야기가 아니다. 그 순간이 왔을 때 우리의 생존을 보장할 수 있는 것은 강력한 보안 장치나 제어 알고리즘이 아니라, AI와 인류 사이의 근본적인 신뢰와 유대감일지도 모른다. 힌튼의 제안이 실현 가능한지는 아직 미지수지만, 적어도 우리가 어떤 방향으로 나아가야 할지에 대한 중요한 화두를 던진 것만은 분명해 보인다.

김한수 기자

hanskim@tech42.co.kr
기자의 다른 기사보기
저작권자 © Tech42 - Tech Journalism by 테크42 무단전재 및 재배포 금지

관련 기사

공짜 표가 150만원, 정가 20만원 표가 500만원…암표와의 전쟁, 이번엔 다를까

2023년 12월 28일, 가수 윤하의 20주년 단독 콘서트 '스물' 예매가 열렸다. KSPO 돔 2만 석이 그날 하루 만에 나갔다. 윤하는 이튿날 자신의 사회관계망서비스(SNS)에 "체조 경기장이 매진되다니"라며 놀라워하다가, 팬들에게 이런 댓글을 남겼다. "암표가 취소되면 현장 구매가 늘어날테니 너무 걱정 마세요."

[현장] “美 VC는 세계 1등을 물었다”…실리콘밸리에서 배운 글로벌 창업 생존법

인공지능(AI)이 제품 개발의 속도를 높이면서 스타트업의 기술 구현 문턱은 낮아지고 있다. 그러나 빠르게 만든 기술이 실제 고객의 선택을 받고, 그 수요를 바탕으로 지속 가능한 사업을 구축하는 일은 여전히 쉽지 않다. 특히 글로벌 시장에서는 기술의 완성도뿐 아니라 현지 고객의 문제를 이해하는 능력, 시장 검증 속도, 투자자와의 관계 형성까지 창업의 성패를 가르는 변수로 작용한다.

[현장] 보안 구멍 뚫린 한국 시장 대책은? 아비트불 레이븐 대표 “AI 공격에 패치 기다릴 시간 없다”

보안 기업 레이븐(RAVEN.IO)이 한국 시장에 진출했다. 레이븐은 12일 서울 서초구 JW 메리어트 호텔 서울에서 기자간담회를 열고, 실행 중인 애플리케이션 내부의 코드 동작을 분석해 취약점 악용을 차단하는 기술과 한국 시장 진출 전략을 공개했다. 이날 온라인으로 원격 접속해 화면을 공유하며 발표에 나선 로이 아비트불(Roi Abitboul) 레이븐 공동 창업자 겸 최고경영자(CEO)는 기존 엔드포인트 탐지 및 대응(EDR) 기술의 한계를 지적하며, AI 시대에는 취약점의 존재 여부보다 실제 코드가 어떤 동작을 수행하는지 파악하는 것이 중요하다고 강조했다.

판사 10명 중 6명이 AI에게 묻는다. 그런데 판결만은, 단 둘 빼고 아무도 맡기지 않았다

판사 112명에게 물었다. 업무에 AI를 쓰는가. 69명이 그렇다고 답했다. 법률 검색, 문서 검토, 서면 초안까지 기계의 도움을 받는 판사가 늘었다는 뜻이다. 그런데 같은 설문에서 판결문이나 명령서 작성, 실제 의사결정에 AI를 쓴다고 답한 판사는 단 두 명이었다.