文件状态良好,请查看下面具体的报告。

    规则 解释 有效
    User-agent: Amazonbot 开始配置:Amazonbot
    Disallow: / 禁止Amazonbot访问网站的任何部分
    User-agent: CCBot 开始配置:CCBot
    Disallow: / 禁止CCBot访问网站的任何部分
    User-agent: claudebot 开始配置:claudebot
    Disallow: / 禁止claudebot访问网站的任何部分
    User-agent: GPTBot 开始配置:GPTBot
    Disallow: / 禁止GPTBot访问网站的任何部分
    User-agent: ChatGPT-User 开始配置:ChatGPT-User
    Disallow: / 禁止ChatGPT-User访问网站的任何部分
    User-agent: paloaltonetworks 开始配置:paloaltonetworks
    Disallow: / 禁止paloaltonetworks访问网站的任何部分
    User-agent: Go-http-client 开始配置:Go-http-client
    Disallow: / 禁止Go-http-client访问网站的任何部分
    User-agent: webprosbot 开始配置:webprosbot
    Disallow: / 禁止webprosbot访问网站的任何部分
    User-agent: python 开始配置:python
    Disallow: / 禁止python访问网站的任何部分
    User-agent: github 开始配置:github
    Disallow: / 禁止github访问网站的任何部分
    User-agent: libcurl 开始配置:libcurl
    Disallow: / 禁止libcurl访问网站的任何部分
    User-agent: fasthttp 开始配置:fasthttp
    Disallow: / 禁止fasthttp访问网站的任何部分
    User-agent: ZoominfoBot 开始配置:ZoominfoBot
    Disallow: / 禁止ZoominfoBot访问网站的任何部分
    User-agent: Knowledge AI 开始配置:Knowledge AI
    Disallow: / 禁止Knowledge AI访问网站的任何部分
    User-agent: RepoLookoutBot 开始配置:RepoLookoutBot
    Disallow: / 禁止RepoLookoutBot访问网站的任何部分
    User-agent: seokicks 开始配置:seokicks
    Disallow: / 禁止seokicks访问网站的任何部分
    User-agent: serpstatbot 开始配置:serpstatbot
    Disallow: / 禁止serpstatbot访问网站的任何部分
    User-agent: SurdotlyBot 开始配置:SurdotlyBot
    Disallow: / 禁止SurdotlyBot访问网站的任何部分
    User-agent: DataForSeoBot 开始配置:DataForSeoBot
    Disallow: / 禁止DataForSeoBot访问网站的任何部分
    User-agent: DigExt 开始配置:DigExt
    Disallow: / 禁止DigExt访问网站的任何部分
    User-agent: HttpClient 开始配置:HttpClient
    Disallow: / 禁止HttpClient访问网站的任何部分
    User-agent: MJ12bot 开始配置:MJ12bot
    Disallow: / 禁止MJ12bot访问网站的任何部分
    User-agent: AhrefsBot 开始配置:AhrefsBot
    Disallow: / 禁止AhrefsBot访问网站的任何部分
    User-agent: DotBot 开始配置:DotBot
    Disallow: / 禁止DotBot访问网站的任何部分
    User-agent: SemrushBot 开始配置:SemrushBot
    Disallow: / 禁止SemrushBot访问网站的任何部分
    User-agent: MegaIndex 开始配置:MegaIndex
    Disallow: / 禁止MegaIndex访问网站的任何部分
    User-agent: BLEXBot 开始配置:BLEXBot
    Disallow: / 禁止BLEXBot访问网站的任何部分
    User-agent: ExtLinksBot 开始配置:ExtLinksBot
    Disallow: / 禁止ExtLinksBot访问网站的任何部分
    User-agent: DnyzBot 开始配置:DnyzBot
    Disallow: / 禁止DnyzBot访问网站的任何部分
    User-agent: Web-Crawler 开始配置:Web-Crawler
    Disallow: / 禁止Web-Crawler访问网站的任何部分
    User-agent: Ezooms 开始配置:Ezooms
    Disallow: / 禁止Ezooms访问网站的任何部分
    User-agent: Linguee Bot 开始配置:Linguee Bot
    Disallow: / 禁止Linguee Bot访问网站的任何部分
    User-agent: WellKnownBot 开始配置:WellKnownBot
    Disallow: / 禁止WellKnownBot访问网站的任何部分
    User-agent: MauiBot 开始配置:MauiBot
    Disallow: / 禁止MauiBot访问网站的任何部分
    User-agent: HubSpot 开始配置:HubSpot
    Disallow: / 禁止HubSpot访问网站的任何部分
    User-agent: Criteo 开始配置:Criteo
    Disallow: / 禁止Criteo访问网站的任何部分
    User-agent: Barkrowler 开始配置:Barkrowler
    Disallow: / 禁止Barkrowler访问网站的任何部分
    User-agent: Grapeshot 开始配置:Grapeshot
    Disallow: / 禁止Grapeshot访问网站的任何部分
    User-agent: Yellowbrandprotectionbot 开始配置:Yellowbrandprotectionbot
    Disallow: / 禁止Yellowbrandprotectionbot访问网站的任何部分
    User-agent: FlightDeckReports 开始配置:FlightDeckReports
    Disallow: / 禁止FlightDeckReports访问网站的任何部分
    User-agent: Heritrix 开始配置:Heritrix
    Disallow: / 禁止Heritrix访问网站的任何部分
    User-agent: AwarioBot 开始配置:AwarioBot
    Disallow: / 禁止AwarioBot访问网站的任何部分
    User-agent: * 开始配置:所有搜索引擎
    Allow: / 允许所有搜索引擎访问网站的任何部分
    Disallow: /tag/ 禁止所有搜索引擎访问/tag目录