제도와 권리

AI 스크래핑 봇, 대학 도서관 접근 방해

GeekNews·2026-11-07

요약

AI 학습용 데이터를 수집하는 스크래핑 봇이 대학 도서관 웹사이트를 느려지게 하거나 중단시켜 학생, 연구자, 일반 시민의 자료 접근을 방해하고 있다. 일부 봇은 robots.txt 지침을 무시하고 초당 수천 건의 문서를 요청하며, 수천 개의 IP 주소를 사용해 기존 IP 차단 방식으로는 대응이 어렵다. University of North Carolina at Chapel Hill에서는 하루에 핀란드 음악 검색이 1만 1,000건 이상 발생해 학생과 교직원이 도서관 목록에 주기적으로 접근하지 못했다. CAPTCHA와 로그인 요구가 봇 차단 수단으로 쓰이고 있지만, 이는 동시에 일반 이용자의 접근도 어렵게 만든다.

큐레이터 노트

원문에 없는 맥락입니다

봇을 막기 위한 CAPTCHA·로그인 장벽이 일반 이용자의 접근까지 함께 제한한다는 점에서, 공공 자료의 개방성과 AI 데이터 수집 방지 사이의 충돌을 보여주는 사례다.

다른 매체는 이렇게 썼다

같은 사안을 다룬 다른 곳의 보도입니다

"한 번 설정으로 AI 학습 거부"...오픈AI·구글·MS·앤트로픽 동참
ZDNet Korea · 2026-11-01

오픈AI, 구글, 마이크로소프트, 앤트로픽이 웹사이트의 AI 학습 거부 의사를 공통 신호로 전달할 수 있는 체계를 도입하기로 했다. IETF 'AI선호도(AIPREF)' 작업반 논의를 기반으로, robots.txt 파일에 'User-Agent: __usage_ai-training'과 '…

OpenAI·구글·MS·앤트로픽, AI 스크래핑 차단 표준 합의
The Verge AI · 2026-10-30

OpenAI, 구글, 마이크로소프트, 앤트로픽이 AI 학습을 위한 웹 스크래핑을 거부할 수 있는 새로운 공통 표준을 채택하기로 했다고 밝혔다. 이 표준은 앤트로픽의 표준 담당 기술 리더 케빈 켈리가 국제인터넷표준화기구(IETF)에 제안한 '정책 토큰' 신호로, 웹사이트의 robots.t…

메타, 10월30일 약관개정…AI오류·크롤링 책임 고객에 전가
CIO Korea · 2026-10-20

메타가 10월 30일 시행하는 상업용 약관 개정을 통해 자사 AI 기능의 오류에 대한 책임을 기업 고객에게 넘기고, 협력사·대행사의 행위까지 고객 책임으로 규정했다. 새 약관은 메타가 고객 도메인과 관련된 콘텐츠를 크롤링·수집해 광고 및 비즈니스 제품에 활용할 권한도 명시했다. 메타 측…

이 글에 나온 말

용어집 전체 →
학습
학습은 모델이 데이터를 반복적으로 살펴보며 예측 오차를 줄이는 방향으로 내부 파라미터를 조정해 나가는 과정을 말한다.

관련 법·제도

정책 트래커 →

이 분야 브리핑

여러 매체가 함께 다룬 사안을 한 번에

이 페이지는 원문을 요약·재서술하고 이 사이트가 쌓은 기록을 덧붙인 큐레이션입니다. 원문 본문은 싣지 않으며, 수치와 표기는 원문 기준을 유지했습니다. 이 글은 AI의 도움을 받아 작성했습니다.

GeekNews 원문 전체 보기 →

같은 분야의 다른 소식

전체 뉴스 →