中文问答
robots.txt 能拦截 ChatGPT-User 吗?
ChatGPT-User 有用户触发访问场景,因此不应把它完全等同于自动抓取策略控制。
实操建议
- 搜索可见性主要看
OAI-SearchBot规则。 ChatGPT-User更接近用户请求触发的访问行为。- 敏感内容应使用鉴权,不要只依赖 robots 规则。
中文问答
ChatGPT-User 有用户触发访问场景,因此不应把它完全等同于自动抓取策略控制。
OAI-SearchBot 规则。ChatGPT-User 更接近用户请求触发的访问行为。