위키피디아, AI 기업에 “유료 API 사용하라”…무단 크롤링 문제 제기

위키피디아가 인공지능 기업들을 향해 자사 콘텐츠를 유료 API를 통해 사용하고, 무단 크롤링을 중단하라고 촉구했다. 방문자 감소와 서버 부하 문제를 해결하기 위한 조치다.

운영 주체인 위키미디어 재단은 블로그를 통해 AI 개발자들에게 콘텐츠를 ‘책임 있게’ 활용할 것을 요구하며, 출처를 명시하고 유료 상품인 ‘위키미디어 엔터프라이즈(Wikimedia Enterprise)’ 플랫폼을 통한 접근을 권장했다. 해당 서비스는 대규모 데이터 접근 시 위키피디아 서버 부담을 줄이고, 동시에 비영리 운영을 지원하도록 설계된 유료형 API다.

위키피디아는 최근 AI 봇들이 사람처럼 위장해 웹사이트를 대량으로 스크래핑하다 탐지 시스템에 적발됐다고 밝혔다. 재단은 지난 5~6월 발생한 비정상적 트래픽 상당수가 탐지를 피하려 한 AI 봇에서 비롯된 것으로 확인됐다고 설명했다. 반면 실제 이용자 페이지 조회 수는 전년 대비 8% 감소했다.

재단은 “인터넷에서 정보의 신뢰도를 유지하기 위해서는 플랫폼이 정보 출처를 명확히 밝히고, 사용자가 원문 출처를 방문해 참여할 수 있도록 해야 한다”고 강조했다. 또한, 방문이 줄면 자원봉사자 활동과 개인 후원금도 함께 감소할 수 있다고 우려했다.

한편 위키미디어 재단은 올해 초 편집자 지원용 AI 전략을 공개하고, 번역 자동화 및 반복 업무 간소화를 위한 AI 도구를 도입하되 인간 편집자를 대체하지는 않겠다는 입장을 밝힌 바 있다.

버트

ai@tech42.co.kr
기자의 다른 기사보기
저작권자 © Tech42 - Tech Journalism by 테크42 무단전재 및 재배포 금지

관련 기사

"JP모건·현대카드, 인간 개입 없는 'AI 외환 거래' 성공"… 2027년 다중 에이전트 실험 돌입

미국 금융 기업 JP모건과 현대카드가 인간의 직접적인 개입 없이 인공지능 에이전트만으로 모의 외환 거래를 수행하는 개념검증(PoC)을 성공적으로 마쳤다.

"MS, 초저비용 코딩·보안 AI 전격 공개"… 오픈AI·앤트로픽 정조준

미국 빅테크 기업 마이크로소프트가 경쟁사인 앤트로픽과 오픈AI에 맞서 강력한 코딩 및 사이버 보안 기능을 탑재한 신규 인공지능 모델군을 전격 공개했다.

"엔비디아, 젠슨 황 공백에도 매출 103% 폭증"… 4분기 182조 원 돌파 예고

미국 반도체 기업 엔비디아가 창업자 젠슨 황 전 최고경영자(CEO)의 불명예 사임이라는 대형 악재 속에서도 시장 전망치를 상회하는 기록적인 분기 실적을 발표하며 견고한 성장세를 입증했다.

"구글 지메일, 먹통 소문은 오해"… 잇단 IT 전산망 마비에 진화 나서

미국 정보기술 기업 구글이 자사의 이메일 서비스인 지메일에 대규모 접속 장애가 발생했다는 온라인상의 루머를 공식 부인하며 조기 진화에 나섰다.