文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    User-agent: Baiduspider 开始配置:Baiduspider
    Disallow: 允许Baiduspider访问网站的任何部分
    User-agent: Sosospider 开始配置:Sosospider
    Disallow: 允许Sosospider访问网站的任何部分
    User-agent: sogou spider 开始配置:sogou spider
    Disallow: 允许sogou spider访问网站的任何部分
    User-agent: 360spider 开始配置:360spider
    Disallow: 允许360spider访问网站的任何部分
    User-agent: YodaoBot 开始配置:YodaoBot
    Disallow: 允许YodaoBot访问网站的任何部分
    User-agent: * 开始配置:所有搜索引擎
    Disallow: / 禁止所有搜索引擎访问网站的任何部分
    Crawl-delay: 5 允许所有搜索引擎访问5目录(包括子目录)