文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    User-agent: * 开始配置:所有搜索引擎
    Disallow: /*/health/search/filter 禁止所有搜索引擎访问/*/health/search/filter目录(包括子目录)
    Disallow: /spartan 禁止所有搜索引擎访问/spartan目录(包括子目录)
    Disallow: /pt-ao 禁止所有搜索引擎访问/pt-ao目录(包括子目录)
    Disallow: /*preview=* 禁止所有搜索引擎访问所有包含preview=的文件
    Disallow: /*/autos/marketplace/product/* 禁止所有搜索引擎访问/*/autos/marketplace/product下的所有文件
    Disallow: /*/cars/marketplace/product/* 禁止所有搜索引擎访问/*/cars/marketplace/product下的所有文件
    Disallow: /*?item=*: 禁止所有搜索引擎访问所有带参数为item=*的页面
    Disallow: /*&item=*: 禁止所有搜索引擎访问所有包含&item=的文件
    Disallow: /*/channel/source/ 禁止所有搜索引擎访问/*/channel/source目录
    User-agent: AdsBot-Google 开始配置:AdsBot-Google
    Allow: / 允许AdsBot-Google访问网站的任何部分
    Disallow: /*/health/search/filter 禁止AdsBot-Google访问/*/health/search/filter目录(包括子目录)
    User-agent: Verity 开始配置:Verity
    Crawl-delay: 3 允许Verity访问3目录(包括子目录)
    User-agent: ias_crawler 开始配置:ias_crawler
    Crawl-delay: 0.5 允许ias_crawler访问根目录下的0.5文件
    User-agent: yandex.com/bot 开始配置:yandex.com/bot
    Crawl-delay: 1 允许yandex.com/bot访问1目录(包括子目录)
    Disallow: /*/weather/ 禁止yandex.com/bot访问/*/weather目录
    Disallow: /*/clima/ 禁止yandex.com/bot访问/*/clima目录
    Disallow: /*/cuaca/ 禁止yandex.com/bot访问/*/cuaca目录
    Disallow: /*/eltiempo/ 禁止yandex.com/bot访问/*/eltiempo目录
    Disallow: /*/el-tiempo/ 禁止yandex.com/bot访问/*/el-tiempo目录
    Disallow: /*/havadurumu/ 禁止yandex.com/bot访问/*/havadurumu目录
    Disallow: /*/idojaras/ 禁止yandex.com/bot访问/*/idojaras目录
    Disallow: /*/meteo/ 禁止yandex.com/bot访问/*/meteo目录
    Disallow: /*/meteorologia/ 禁止yandex.com/bot访问/*/meteorologia目录
    Disallow: /*/pocasi/ 禁止yandex.com/bot访问/*/pocasi目录
    Disallow: /*/pogoda/ 禁止yandex.com/bot访问/*/pogoda目录
    Disallow: /*/saa/ 禁止yandex.com/bot访问/*/saa目录
    Disallow: /*/vader/ 禁止yandex.com/bot访问/*/vader目录
    Disallow: /*/vejr/ 禁止yandex.com/bot访问/*/vejr目录
    Disallow: /*/weer/ 禁止yandex.com/bot访问/*/weer目录
    Disallow: /*/wetter/ 禁止yandex.com/bot访问/*/wetter目录
    User-agent: admantx-ussy04/3.2 开始配置:admantx-ussy04/3.2
    Allow: / 允许admantx-ussy04/3.2访问网站的任何部分
    User-agent: Amazonbot 开始配置:Amazonbot
    User-agent: anthropic-ai 开始配置:anthropic-ai
    User-agent: Applebot 开始配置:Applebot
    User-agent: CCBot 开始配置:CCBot
    User-agent: ChatGPT-User 开始配置:ChatGPT-User
    User-agent: Claude-Web 开始配置:Claude-Web
    User-agent: cohere-ai 开始配置:cohere-ai
    User-agent: FacebookBot 开始配置:FacebookBot
    User-agent: Google-Extended 开始配置:Google-Extended
    User-agent: GPTBot 开始配置:GPTBot
    User-agent: omgili 开始配置:omgili
    User-agent: Omgilibot 开始配置:Omgilibot
    User-agent: PerplexityBot 开始配置:PerplexityBot
    User-agent: Twitterbot 开始配置:Twitterbot
    User-agent: YouBot 开始配置:YouBot
    Disallow: / 禁止YouBot访问网站的任何部分
    Sitemap: https://www.msn.com/sitemaps/health/health-sitemap-index.xml Sitemap地址: https://www.msn.com/sitemaps/health/health-sitemap-index.xml
    Sitemap: https://www.msn.com/sitemaps/shopping/shopping-sitemap-index.xml Sitemap地址: https://www.msn.com/sitemaps/shopping/shopping-sitemap-index.xml
    Sitemap: https://www.msn.com/en-us/autos/marketplace/sitemap.xml Sitemap地址: https://www.msn.com/en-us/autos/marketplace/sitemap.xml
    Sitemap: https://www.msn.com/staticsb/statics/latest/0/casualgames/sitemaps/sitemap-index.xml Sitemap地址: https://www.msn.com/staticsb/statics/latest/0/casualgames/sitemaps/sitemap-index.xml