19LAB NOTES

别一刀切拦 Claude:ClaudeBot、Claude-SearchBot、Claude-User 要分三类

GEO 实验 2026-05-29 views 1 732 chars

Anthropic 区分 ClaudeBot(训练)、Claude-SearchBot(搜索优化)、Claude-User(用户触发)。一刀切拦掉可能误伤搜索可见性;只封 IP 还可能让 robots 读不到。

# 别一刀切拦 Claude:ClaudeBot、Claude-SearchBot、Claude-User 要分三类

很多站点看到 Claude 相关访问,第一反应是全部拦掉。动作干净,但对 GEO 可能是误伤——Claude 的训练抓取、搜索优化、用户触发访问,不是同一件事。

## 事实

来自 Anthropic 官方帮助文档:

- **ClaudeBot**:主要与模型训练相关。
- **Claude-SearchBot**:用于提升搜索结果质量和相关性。
- **Claude-User**:用户请求触发的网页访问。

官方提醒:限制 Claude-User 可能**降低站点在用户定向 web search 中的可见性**;限制 Claude-SearchBot 可能降低搜索优化索引与结果准确性。更细一点:**只靠阻断源 IP 不一定能正确表达 opt-out**,因为这可能阻碍它读取 `robots.txt`,反而让退出信号失效。

## 可执行动作

1. **训练边界**看 ClaudeBot,用 robots 规则表达,不要用 IP block 当合规退出。
2. **搜索可见性**单独看 Claude-SearchBot,想被引用就别误封。
3. **用户触发读取**看 Claude-User,封它会降低用户定向搜索的可见性。
4. 退出用 `robots.txt` 公开声明,而不是封 IP。

## 一句话

封 IP 能挡请求,但挡不出"正确的偏好";三类分开、用 robots 表达,才是稳的做法。

---

*本页为 19LAB「GEO 实验」主题权威页,合并自此前 2 篇相关笔记;旧链接已 301 至本页。*