文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    User-agent: * 开始配置:所有搜索引擎
    Disallow: /browse/search.php?keyword=* 禁止所有搜索引擎访问search.php,参数为keyword=*的页面
    Disallow: /.git/ 禁止所有搜索引擎访问/.git目录
    Disallow: /*.gif$ 禁止所有搜索引擎访问所有以*.gif结尾的文件
    Disallow: /*.md5$ 禁止所有搜索引擎访问所有以*.md5结尾的文件
    Disallow: /*.config$ 禁止所有搜索引擎访问所有以*.config结尾的文件
    Disallow: /*.sql$ 禁止所有搜索引擎访问所有以*.sql结尾的文件
    Disallow: /*.xsl$ 禁止所有搜索引擎访问所有以*.xsl结尾的文件
    Disallow: /api/ 禁止所有搜索引擎访问/api目录
    Disallow: /images/ 禁止所有搜索引擎访问/images目录
    Disallow: /img/ 禁止所有搜索引擎访问/img目录
    Disallow: /js/ 禁止所有搜索引擎访问/js目录
    Disallow: /htaccess 禁止所有搜索引擎访问/htaccess目录(包括子目录)
    User-agent: Bytespider 开始配置:Bytespider
    Disallow: / 禁止Bytespider访问网站的任何部分
    User-agent: bytespider 开始配置:bytespider
    Disallow: / 禁止bytespider访问网站的任何部分
    User-agent: bingbot 开始配置:bingbot
    Disaoolw: / 允许bingbot访问网站的任何部分
    User-agent: MJ12bot 开始配置:MJ12bot
    Disallow: / 禁止MJ12bot访问网站的任何部分
    User-agent: mj12bot 开始配置:mj12bot
    Disallow: / 禁止mj12bot访问网站的任何部分