Entity

AI爬虫可访问性

确保AI爬虫（如GPTBot、PerplexityBot、Google-Extended）能正常抓取页面内容的技术条件，包括robots.txt放行、SSR渲染、URL稳定、Sitemap提交等。