文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    user-agent: LinkChecker 开始配置:LinkChecker
    disallow: 允许LinkChecker访问网站的任何部分
    crawl-delay: 1 允许LinkChecker访问1目录(包括子目录)
    user-agent: * 开始配置:所有搜索引擎
    disallow: /welcome/ 禁止所有搜索引擎访问/welcome目录
    disallow: /whatsnew/ 禁止所有搜索引擎访问/whatsnew目录
    Sitemap: http://www.firefox.com.cn/sitemap.xml Sitemap地址: http://www.firefox.com.cn/sitemap.xml