3층 · 무료 도구

내 사이트가 AI 크롤러를 막고 있나요? (robots.txt 체커)

사이트 주소를 넣으면 robots.txt를 읽어 GPTBot·ClaudeBot·PerplexityBot·Google-Extended가 차단됐는지 판정합니다. AI 크롤러가 막혀 있으면 인용 확률은 0입니다.

브라우저 보안(CORS) 때문에 다른 사이트의 robots.txt를 직접 못 가져올 수 있습니다. 그럴 땐 주소창에 “사이트주소/robots.txt”를 직접 열어 내용을 복사한 뒤 아래에 붙여넣으세요.

또는 robots.txt 내용을 직접 붙여넣기 (CORS로 자동 가져오기가 막힐 때)