文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    User-agent: Applebot 开始配置:Applebot
    Crawl-delay: 1 允许Applebot访问1目录(包括子目录)
    User-agent: bingbot 开始配置:bingbot
    Crawl-delay: 1 允许bingbot访问1目录(包括子目录)
    User-agent: msnbot 开始配置:msnbot
    Crawl-delay: 1 允许msnbot访问1目录(包括子目录)
    User-agent: RavenCrawler 开始配置:RavenCrawler
    Crawl-delay: 1 允许RavenCrawler访问1目录(包括子目录)
    User-agent: Slurp 开始配置:Slurp
    Crawl-delay: 1 允许Slurp访问1目录(包括子目录)
    User-agent: GPTBot 开始配置:GPTBot
    Disallow: / 禁止GPTBot访问网站的任何部分
    User-agent: ChatGPT-User 开始配置:ChatGPT-User
    Disallow: / 禁止ChatGPT-User访问网站的任何部分
    User-agent: CCBot 开始配置:CCBot
    Disallow: / 禁止CCBot访问网站的任何部分
    User-agent: Omgilibot 开始配置:Omgilibot
    Disallow: / 禁止Omgilibot访问网站的任何部分
    User-Agent: omgili 开始配置:omgili
    Disallow: / 禁止omgili访问网站的任何部分
    User-agent: FacebookBot 开始配置:FacebookBot
    Disallow: / 禁止FacebookBot访问网站的任何部分
    User-agent: anthropic-ai 开始配置:anthropic-ai
    Disallow: / 禁止anthropic-ai访问网站的任何部分
    User-agent: cohere-ai 开始配置:cohere-ai
    Disallow: / 禁止cohere-ai访问网站的任何部分
    Sitemap: https://www.babypips.com/sitemaps/sitemap_index.xml.gz Sitemap地址: https://www.babypips.com/sitemaps/sitemap_index.xml.gz
    Sitemap: https://www.babypips.com/sitemaps/news/sitemap_index.xml.gz Sitemap地址: https://www.babypips.com/sitemaps/news/sitemap_index.xml.gz