‘오픈AI’ 자체보고서: 사용자 감정적 의존 우려되는 ‘챗GPT 인간음성 모드’

[AI요약] 오픈AI는 자사가 개발한 새로운 챗GPT 인간음성 모드 때문에 사용자가 챗봇에 지나치게 의존하게 될까봐 우려하고 있다. 사용자가 AI와 사회적 관계를 형성해 인간 상호 작용에 대한 필요성을 줄일수 있으며, 이는 건강한 관계에 악영향을 미칠 수 있다는 것이다. 일부 사용자들은 이미 AI 챗봇과 ‘낭만적인 관계’를 형성하고 있으며, 이는 전문가들의 우려를 불러일으키고 있다.

새로운 챗GPT 인간음성 모드가 사용자의 감정적 의존이 우려된다는 오픈AI의 보고서가 공개됐다. (이미지=링크드인)

개발사가 먼저 나서 우려하는 새로운 챗GPT 인간음성 모드는 어느 정도일까.

오픈AI가 새로운 ‘챗GPT 인간음성 모드’를 사용하는 사람들의 감정적 의존 우려가 담긴 보고서에 대해 CNN 등 외신이 10일(현지시간) 보도했다.

개발사가 자사의 챗봇을 실제로 우려하고 있다는 사실은 오픈AI가 최근 유료 사용자에게 출시를 시작한 도구의 안전성 검토와 이를 실행하는 대규모 언어 AI 모델에 대한 지난주 보고서를 통해 밝혀졌다.

챗GPT의 고급 음성 모드는 놀라울 정도로 실제 인간과 비슷한 음성을 낸다. 실시간으로 응답하는 것은 물론 방해를 받아도 적응할 수 있으며, 웃음이나 ‘음’과 같이 대화 중에 사람이 낼법한 소리를 낸다. 또한 음성톤을 기준으로 화자의 감정 상태를 판단할 수도 있다.

오픈AI가 올해 초 이벤트에서 해당 기능을 발표한지 몇분 만에 챗봇은 2013년 영화 ‘Her’의 AI 디지털 비서와 비교됐는데, 주인공이 AI인 ‘그녀’와 사랑에 빠지지만 사실 AI가 다른 수백 명의 사용자와도 관계가 있다고 인정하자 깊게 상심하게 내용이 담긴 영화다.

보고서에서 오픈AI는 사용자가 챗GPT의 음성모드와 대화할때 도구와 ‘공유된 유대감을 표현하는’ 언어로 대화하는 것을 관찰했다고 분석했다. 이는 기업이 영화와 같은 허구의 이야기가 현실이 될수도 있다는 우려를 표명한 것으로 보인다.

오픈AI 보고서를 통해 “사용자는 AI와 사회적 관계를 형성해 인간 상호 작용에 대한 필요성을 줄일수 있다”며 “이는 외로운 개인에게는 이롭지만 건강한 관계에는 영향을 미칠 수 있다”고 우려했다.

보고서는 AI가 실수할 가능성이 큼에도 불구하고, 사용자가 인간처럼 들리는 봇으로부터 정보를 얻게될 경우 도구를 필요 이상으로 신뢰할 가능성도 있다고도 덧붙였다.

오픈AI의 보고서는 결국 인공 지능을 둘러싼 ‘큰 그림’의 위험을 강조하고 있다. 빅테크는 우리의 생활, 업무, 사교 및 정보 검색 방식을 뒤집을 수 있다고 말하는 AI 도구를 대중에게 신속하게 출시하기 위해 경쟁하고 있다. 그러나 문제는 그들 중 누구도 그러한 의미가 무엇인지 실제로 이해하기 전에 기술을 먼저 도입하고 있다는 점이다.

많은 기술 발전과 마찬가지로 기업은 도구를 어떻게 사용해야 하는지에 대한 제한된 아이디어를 홍보하지만, 사용자는 의도치 않은 결과를 초래하는 다른 수많은 잠재적 응용 프로그램을 생각해내는 것이 일반적이다.

특히 일부 사용자들은 이미 AI 챗봇과 ‘낭만적인 관계’를 형성하고 있으며, 이는 전문가들의 우려를 불러일으키고 있다.

전문가들은 이미 AI 챗봇과 ‘낭만적인 관계’를 형성하고 있는 일부 사용자들을 우려하고 있다. (이미지=링크드인)

기술과 인간 소통을 연구하는 리젤 샤라비 애리조나 주립대 교수는 “기업이 윤리적이고 책임감 있는 방식으로 이를 탐색하는데 많은 책임이 있는 가운데, 현재 모두 실험 단계에 있다”며 “장기적으로 존재하지 않을 수 있고 끊임없이 진화하는 기술과 정말 깊은 관계를 형성하는 사람들이 우려된다”고 언론을 통해 비판했다.

실제로 오픈AI는 사용자가 챗GPT의 음성 모드와 상호 작용하는 방식이 시간이 지남에 따라 사회적 상호 작용에서 정상적인 것으로 간주되는 것에 영향을 미칠 수도 있다고도 관측했다.

오픈AI는 “챗봇은 공손하며 사용자가 언제든지 방해하고 끼어들수 있도록 허용하는데, 이는 AI에서는 가능하지만 인간 상호 작용에서는 규범에 어긋난다”며 “현재 AI를 안전하게 구축하는 데 전념하면서 사용자가 해당 도구에 감정적으로 의존할 가능성에 대한 연구를 계속 진행할 계획”이라고 보고서를 통해 밝혔다.

오픈AI는 “초기 테스트에서 사용자가 기술과 연결을 형성하고 있음을 나타낼 수 있는 언어를 사용했다”며 “해당 사례는 무해해 보이지만 이러한 효과가 장기간에 걸쳐 어떻게 나타날지에 대한 지속적인 조사가 필요하다는 신호”라고 강조했다.

류정민 기자

znryu@daum.net
기자의 다른 기사보기
저작권자 © Tech42 - Tech Journalism by AI 테크42 무단전재 및 재배포 금지

관련 기사

"2년 쓴 폰, 오후 3시면 방전"…배터리 수명, 진짜 문제는 따로 있다

스마트폰을 오래 쓰면 뜨겁다. 게임을 하거나 동영상을 계속 틀어놓으면 기기 온도가 올라가는데, 이게 배터리 수명에 직격탄을 날린다.

[K-AX는 지금] “제조 AI 병목은 ‘분석’ 아닌 ‘실행’”…한요한 디밀리언 대표가 ‘판단하는 AI’를 움직이는 법

2024년 설립된 디밀리언은 바로 이 지점을 제조 AI의 핵심 과제로 본다. 스마트팩토리와 제조 AI 분야에서 약 10년간 현장을 경험한 한요한 디밀리언 대표는 현장 데이터와 숙련자의 암묵지를 AI가 이해할 수 있는 구조로 바꾸고, AI의 판단을 설비와 로봇의 행동까지 연결하는 자율제조를 사업 방향으로 잡았다. 이에 테크42는 한 대표를 만나 좀 더 자세한 이야기를 들어봤다.

동대문 짝퉁, 이젠 SNS로 숨었다…매일 밤 라이브방송이 '신 전쟁터'

2023년 7월 어느 새벽. 동대문 새빛시장 노란천막 앞에 승합차 한 대가 멈춰섰다. 차량 번호판은 검은 천으로 가려져 있었다. 안에서 조심스러운 움직임으로 한 남성이 내렸다. 그는 노점에 상표 없는 가방 견본만 늘어놓았다.

[현장] ‘드론 1만대 군집’까지 상정하는 전장…국방 AI, ‘똑똑한 무기’ 넘어 ‘전장 전체의 AI화’로

최근 서울 강남구 웨스틴 서울 파르나스에서 열린 ‘ATTENTION 2026’의 국방 AI 트랙에서도 이 같은 변화가 집중적으로 다뤄졌다. 올해 ATTENTION은 ‘AI, 현장에 착륙하다(AI Has Landed)’를 주제로 제조·반도체·에너지·국방 등 실제 산업 현장으로 확장되는 AI를 조명했다. 특히 국방 AI 세션에서는 김상희 KAIST 을지연구소 교수, 김민성 마키나락스 국방사업본부장, 박용민 LG AI연구원 사업개발팀 리더 등이 각각 국방 AI의 기술 발전 방향과 운영체계, 산업 AI의 국방 적용 전략을 제시하는 것으로 시작을 알렸다.