# 검색엔진(네이버, 구글, 다음 등): 사이트 전체 허용, AI 학습문구 파일(llms.txt)만 차단
User-agent: *
Allow: /
Disallow: /llms.txt

# AI 크롤러: llms.txt 포함 전체 허용
User-agent: GPTBot
User-agent: ChatGPT-User
User-agent: OAI-SearchBot
User-agent: ClaudeBot
User-agent: Claude-User
User-agent: anthropic-ai
User-agent: PerplexityBot
User-agent: Google-Extended
User-agent: CCBot
User-agent: Amazonbot
User-agent: meta-externalagent
Allow: /