Robots 检测

Robots 检测 简介

抓取 robots.txt 解析规则并给出配置告警。「Robots 检测」来自 NTcp 站长工具的SEO 工具专区，免费在线使用，无需安装客户端、免登录注册。

相关工具

• SEO 综合诊断 - 抓取整页 + robots + sitemap，输出 24 项 SEO / 性能 / 安全评分，可导出 Markdown 报告
• TDK 提取 - 抓取任意网页的 Title / Description / Keywords 并给出长度建议
• Sitemap 检测 - 校验站点地图格式、URL 数量与可访问性
• 关键词密度 - 抓取整页正文，统计高频中文词组与英文单词的出现次数与密度
• UTM 链接构建 - 为投放链接附加 UTM 追踪参数
• 短链接生成 - 长链接转 ntcp.cn/go/ 短链，带点击统计与备注