文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    User-agent: * 开始配置:所有搜索引擎
    Disallow: /*?* 禁止所有搜索引擎访问任何带参数的页面
    Disallow: /demo 禁止所有搜索引擎访问/demo目录(包括子目录)
    Disallow: /demo2 禁止所有搜索引擎访问/demo2目录(包括子目录)
    Disallow: /demo3 禁止所有搜索引擎访问/demo3目录(包括子目录)
    Disallow: /products/industrial-gateway-601.html 禁止所有搜索引擎访问/products目录下的industrial-gateway-601.html文件