위키피디아, AI 기업에 “유료 API 사용하라”…무단 크롤링 문제 제기

위키피디아가 인공지능 기업들을 향해 자사 콘텐츠를 유료 API를 통해 사용하고, 무단 크롤링을 중단하라고 촉구했다. 방문자 감소와 서버 부하 문제를 해결하기 위한 조치다.

운영 주체인 위키미디어 재단은 블로그를 통해 AI 개발자들에게 콘텐츠를 ‘책임 있게’ 활용할 것을 요구하며, 출처를 명시하고 유료 상품인 ‘위키미디어 엔터프라이즈(Wikimedia Enterprise)’ 플랫폼을 통한 접근을 권장했다. 해당 서비스는 대규모 데이터 접근 시 위키피디아 서버 부담을 줄이고, 동시에 비영리 운영을 지원하도록 설계된 유료형 API다.

위키피디아는 최근 AI 봇들이 사람처럼 위장해 웹사이트를 대량으로 스크래핑하다 탐지 시스템에 적발됐다고 밝혔다. 재단은 지난 5~6월 발생한 비정상적 트래픽 상당수가 탐지를 피하려 한 AI 봇에서 비롯된 것으로 확인됐다고 설명했다. 반면 실제 이용자 페이지 조회 수는 전년 대비 8% 감소했다.

재단은 “인터넷에서 정보의 신뢰도를 유지하기 위해서는 플랫폼이 정보 출처를 명확히 밝히고, 사용자가 원문 출처를 방문해 참여할 수 있도록 해야 한다”고 강조했다. 또한, 방문이 줄면 자원봉사자 활동과 개인 후원금도 함께 감소할 수 있다고 우려했다.

한편 위키미디어 재단은 올해 초 편집자 지원용 AI 전략을 공개하고, 번역 자동화 및 반복 업무 간소화를 위한 AI 도구를 도입하되 인간 편집자를 대체하지는 않겠다는 입장을 밝힌 바 있다.

버트

ai@tech42.co.kr
기자의 다른 기사보기
저작권자 © Tech42 - Tech Journalism by AI 테크42 무단전재 및 재배포 금지

관련 기사

엔비디아 독점 깬다…앤트로픽, 삼성과 손잡고 자체 ‘AI 칩’ 개발 착수

인공지능(AI) 스타트업 앤스로픽이 반도체 공급 부족 사태에 대응하고 독점 체제인 엔비디아 의존도를 낮추기 위해 삼성전자와 손을 잡는다.

6조 원 족쇄 채워진 구글…EU 반독점 소송 ‘최종 패소’

구글이 안드로이드 운영체제(OS)의 시장 지배력 남용 혐의로 부과받은 6조 원대 천문학적 과징금 소송에서 끝내 최종 패소했다. 이로써 10년을 끌어온 EU와 구글 간의 대하 법정 공방은 구글의 완패로 막을 내렸다.

아마존, 우주 인터넷 ‘레오’ 출격 준비 끝

아마존이 우주 인터넷 시장 진출을 위한 가시적인 발판을 마련했다. 아마존은 저궤도(LEO) 위성 광대역 서비스 ‘레오(Leo)’의 초기 가동에 필요한 충분한 위성 숫자를 확보하고 본격적인 서비스 배포 준비에 착수했다.

‘일론 머스크 리스크’도 비웃었다…테슬라, 2년 만에 역대급 ‘대반전’ 성공

상습적인 하락세를 걷던 테슬라가 올해 2분기 전 세계 시장에서 약 480,000대의 차량을 인도하며 전년 동기 대비 25% 급증한 반전 실적을 기록했다.