# ChatGPT関連のクローラーをブロック
User-agent: GPTBot
Disallow: /
User-agent: ChatGPT-User
Disallow: /

# ClaudeBot関連のクローラーをブロック
User-agent: ClaudeBot
Disallow: /

# Google-Extendedを含むGoogleのクローラーをブロック
User-agent: Google-Extended
Disallow: /

# Microsoftの生成AI（Copilotなど）のクローラーをブロック
User-agent: Bingbot
Disallow: /
User-agent: BingPreview
Disallow: /

# Common Crawlのクローラーをブロック
User-agent: CCBot
Disallow: /

User-agent: Googlebot
Crawl-delay: 60 

Disallow: /tag*
Disallow: /reembed/
Disallow: /index.php* 
User-agent: BingBot
Crawl-delay: 60
Disallow: /tag*
Disallow: /reembed/
Disallow: /index.php* 
User-agent: *
Crawl-delay: 60
Disallow: /tag*
Disallow: /reembed/
Disallow: /index.php*