什麼是 AI 爬蟲？GPTBot、ClaudeBot、PerplexityBot 完整介紹

近年來 AI 公司大量部署自動爬蟲收集訓練資料。

## 主要 AI 爬蟲

- **GPTBot** — OpenAI
- **ClaudeBot** — Anthropic
- **PerplexityBot** — Perplexity AI
- **Google-Extended** — Google

## 如何允許 AI 爬蟲？

在 `robots.txt` 中加入對應規則，或使用 AICDN 統一管理。