文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    Sitemap: https://www.infoq.com/sitemap.xml Sitemap地址: https://www.infoq.com/sitemap.xml
    User-agent: * 开始配置:所有搜索引擎
    Disallow: /metrics/ajaxMetricsLogAction.action 禁止所有搜索引擎访问/metrics目录下的ajaxMetricsLogAction.action文件
    Disallow: /fr/Flash 禁止所有搜索引擎访问/fr/Flash目录(包括子目录)
    Disallow: /br/Decorators 禁止所有搜索引擎访问/br/Decorators目录(包括子目录)
    Disallow: /jp/Flash 禁止所有搜索引擎访问/jp/Flash目录(包括子目录)
    Disallow: /social/ 禁止所有搜索引擎访问/social目录
    Disallow: /fr/social/ 禁止所有搜索引擎访问/fr/social目录
    Disallow: /br/social/ 禁止所有搜索引擎访问/br/social目录
    Disallow: /cn/social/ 禁止所有搜索引擎访问/cn/social目录
    Disallow: /jp/social/ 禁止所有搜索引擎访问/jp/social目录
    Disallow: /cn/ 禁止所有搜索引擎访问/cn目录
    Disallow: /url/ 禁止所有搜索引擎访问/url目录
    Crawl-delay: 3 允许所有搜索引擎访问3目录(包括子目录)
    User-agent: rogerbot 开始配置:rogerbot
    Disallow: /metrics/ajaxMetricsLogAction.action 禁止rogerbot访问/metrics目录下的ajaxMetricsLogAction.action文件
    Disallow: /CN1 禁止rogerbot访问/CN1目录(包括子目录)
    Disallow: /fr/Flash 禁止rogerbot访问/fr/Flash目录(包括子目录)
    Disallow: /br/Decorators 禁止rogerbot访问/br/Decorators目录(包括子目录)
    Disallow: /jp/Flash 禁止rogerbot访问/jp/Flash目录(包括子目录)
    Disallow: /social/ 禁止rogerbot访问/social目录
    Disallow: /fr/social/ 禁止rogerbot访问/fr/social目录
    Disallow: /br/social/ 禁止rogerbot访问/br/social目录
    Disallow: /cn/social/ 禁止rogerbot访问/cn/social目录
    Disallow: /jp/social/ 禁止rogerbot访问/jp/social目录
    Disallow: /cn/ 禁止rogerbot访问/cn目录
    Disallow: /url/ 禁止rogerbot访问/url目录
    Crawl-delay: 10 允许rogerbot访问10目录(包括子目录)
    User-agent: Baiduspider 开始配置:Baiduspider
    Disallow: /metrics/ajaxMetricsLogAction.action 禁止Baiduspider访问/metrics目录下的ajaxMetricsLogAction.action文件
    Disallow: /CN1 禁止Baiduspider访问/CN1目录(包括子目录)
    Disallow: /fr/Flash 禁止Baiduspider访问/fr/Flash目录(包括子目录)
    Disallow: /br/Decorators 禁止Baiduspider访问/br/Decorators目录(包括子目录)
    Disallow: /jp/Flash 禁止Baiduspider访问/jp/Flash目录(包括子目录)
    Disallow: /social/ 禁止Baiduspider访问/social目录
    Disallow: /fr/social/ 禁止Baiduspider访问/fr/social目录
    Disallow: /br/social/ 禁止Baiduspider访问/br/social目录
    Disallow: /cn/social/ 禁止Baiduspider访问/cn/social目录
    Disallow: /jp/social/ 禁止Baiduspider访问/jp/social目录
    Disallow: /cn/ 禁止Baiduspider访问/cn目录
    Disallow: /url/ 禁止Baiduspider访问/url目录
    Crawl-delay: 10 允许Baiduspider访问10目录(包括子目录)
    User-Agent: Sogou Spider 开始配置:Sogou Spider
    Disallow: /metrics/ajaxMetricsLogAction.action 禁止Sogou Spider访问/metrics目录下的ajaxMetricsLogAction.action文件
    Disallow: /CN1 禁止Sogou Spider访问/CN1目录(包括子目录)
    Disallow: /fr/Flash 禁止Sogou Spider访问/fr/Flash目录(包括子目录)
    Disallow: /br/Decorators 禁止Sogou Spider访问/br/Decorators目录(包括子目录)
    Disallow: /jp/Flash 禁止Sogou Spider访问/jp/Flash目录(包括子目录)
    Disallow: /social/ 禁止Sogou Spider访问/social目录
    Disallow: /fr/social/ 禁止Sogou Spider访问/fr/social目录
    Disallow: /br/social/ 禁止Sogou Spider访问/br/social目录
    Disallow: /cn/social/ 禁止Sogou Spider访问/cn/social目录
    Disallow: /jp/social/ 禁止Sogou Spider访问/jp/social目录
    Disallow: /cn/ 禁止Sogou Spider访问/cn目录
    Disallow: /url/ 禁止Sogou Spider访问/url目录
    Crawl-delay: 10 允许Sogou Spider访问10目录(包括子目录)
    User-Agent: Sogou* 开始配置:Sogou*
    Disallow: /metrics/ajaxMetricsLogAction.action 禁止Sogou*访问/metrics目录下的ajaxMetricsLogAction.action文件
    Disallow: /CN1 禁止Sogou*访问/CN1目录(包括子目录)
    Disallow: /fr/Flash 禁止Sogou*访问/fr/Flash目录(包括子目录)
    Disallow: /br/Decorators 禁止Sogou*访问/br/Decorators目录(包括子目录)
    Disallow: /jp/Flash 禁止Sogou*访问/jp/Flash目录(包括子目录)
    Disallow: /social/ 禁止Sogou*访问/social目录
    Disallow: /fr/social/ 禁止Sogou*访问/fr/social目录
    Disallow: /br/social/ 禁止Sogou*访问/br/social目录
    Disallow: /cn/social/ 禁止Sogou*访问/cn/social目录
    Disallow: /jp/social/ 禁止Sogou*访问/jp/social目录
    Disallow: /cn/ 禁止Sogou*访问/cn目录
    Disallow: /url/ 禁止Sogou*访问/url目录
    Crawl-delay: 10 允许Sogou*访问10目录(包括子目录)
    User-agent: ScoutJet 开始配置:ScoutJet
    Disallow: /metrics/ajaxMetricsLogAction.action 禁止ScoutJet访问/metrics目录下的ajaxMetricsLogAction.action文件
    Disallow: /CN1 禁止ScoutJet访问/CN1目录(包括子目录)
    Disallow: /fr/Flash 禁止ScoutJet访问/fr/Flash目录(包括子目录)
    Disallow: /br/Decorators 禁止ScoutJet访问/br/Decorators目录(包括子目录)
    Disallow: /jp/Flash 禁止ScoutJet访问/jp/Flash目录(包括子目录)
    Disallow: /social/ 禁止ScoutJet访问/social目录
    Disallow: /fr/social/ 禁止ScoutJet访问/fr/social目录
    Disallow: /br/social/ 禁止ScoutJet访问/br/social目录
    Disallow: /cn/social/ 禁止ScoutJet访问/cn/social目录
    Disallow: /jp/social/ 禁止ScoutJet访问/jp/social目录
    Disallow: /cn/ 禁止ScoutJet访问/cn目录
    Disallow: /url/ 禁止ScoutJet访问/url目录
    Crawl-delay: 20 允许ScoutJet访问20目录(包括子目录)
    User-agent: dotbot 开始配置:dotbot
    Disallow: /metrics/ajaxMetricsLogAction.action 禁止dotbot访问/metrics目录下的ajaxMetricsLogAction.action文件
    Disallow: /CN1 禁止dotbot访问/CN1目录(包括子目录)
    Disallow: /fr/Flash 禁止dotbot访问/fr/Flash目录(包括子目录)
    Disallow: /br/Decorators 禁止dotbot访问/br/Decorators目录(包括子目录)
    Disallow: /jp/Flash 禁止dotbot访问/jp/Flash目录(包括子目录)
    Disallow: /social/ 禁止dotbot访问/social目录
    Disallow: /fr/social/ 禁止dotbot访问/fr/social目录
    Disallow: /br/social/ 禁止dotbot访问/br/social目录
    Disallow: /cn/social/ 禁止dotbot访问/cn/social目录
    Disallow: /jp/social/ 禁止dotbot访问/jp/social目录
    Disallow: /cn/ 禁止dotbot访问/cn目录
    Disallow: /url/ 禁止dotbot访问/url目录
    Crawl-delay: 20 允许dotbot访问20目录(包括子目录)
    User-agent: dotbot 开始配置:dotbot
    Crawl-delay: 20 允许dotbot访问20目录(包括子目录)
    User-agent: trendkite-akashic-crawler 开始配置:trendkite-akashic-crawler
    Disallow: / 禁止trendkite-akashic-crawler访问网站的任何部分