Free Checker
AI 爬虫怎么对待你的网站?
输入域名,30 秒看清 GPTBot、ClaudeBot、PerplexityBot 等 10 个主流 AI 爬虫在你的 robots.txt 里的待遇,以及你有没有给 AI 准备 llms.txt。免费、无需注册。
只读取公开的 robots.txt 与 llms.txt,不抓取页面内容。
Free Checker
输入域名,30 秒看清 GPTBot、ClaudeBot、PerplexityBot 等 10 个主流 AI 爬虫在你的 robots.txt 里的待遇,以及你有没有给 AI 准备 llms.txt。免费、无需注册。
只读取公开的 robots.txt 与 llms.txt,不抓取页面内容。