工具用的顺手吗?
你的反馈能帮助我们做得更好
通过 PTR 反向解析、正向 DNS 回验和公开 IP 网段,判断访问日志中的 IPv4 或 IPv6 是否能验证为已知搜索引擎爬虫。
输入日志中的来源 IP,查看完整验证链
概览
了解工具能解决的问题、计算或处理逻辑,以及数据边界。
检测对象是访问日志里的单个IPv4或IPv6地址。结果区域会显示地址版本、识别出的服务商,以及三类依据:IP反查得到的主机名、把识别主机名正向解析后得到的地址、是否命中公开的爬虫IP范围。
页面的域名匹配规则覆盖Google、Bing、百度和Yandex的若干已知后缀;公开地址范围检查覆盖Google common crawlers、Bingbot与DuckDuckBot。这里的覆盖名单是页面当前实现的范围,不代表所有搜索引擎、预览抓取器或自建爬虫。
命中已加载的公开地址范围,或反向解析得到受支持的爬虫主机名且正向解析包含原IP,结果为“已验证”。如果主机名像受支持的爬虫、但正向回验没有返回原IP,或域名与公开网段指向不同服务商,结果为“可疑”。没有形成这些证据时为“未验证”。
PTR反向DNS从地址查找主机名;正向回验再把匹配到的主机名解析为地址,并检查原IP是否在返回结果中。公开网段检查则把输入IP与公布的网络前缀逐项比较。三者回答的是来源身份问题,逻辑不同,所以结果卡会分开显示而不是只给一个无法追溯的标签。
来源:Google Search Central《Googlebot》;支持结论:User-Agent可伪造,Google建议以反向DNS或公开IP范围核验;核验日期:2026-09-25。
来源:Bing Webmaster Tools《How to Verify Bingbot》;支持结论:Bing说明PTR、正向DNS回验及公开范围等核验方式;核验日期:2026-09-25。
来源:DuckDuckGo《Is DuckDuckBot related to DuckDuckGo?》;支持结论:DuckDuckGo说明爬虫身份并公布来源IP地址;核验日期:2026-09-25。
指南
按步骤完成操作,并通过示例核对输入与结果。
从要调查的访问记录中找出来源IP,不要把User-Agent、域名或整条URL当作输入。
粘贴单个IPv4或IPv6地址;输入框不接受端口、方括号包裹的地址或额外文本。
提交后先读结果状态和服务商,再逐项查看反向DNS、正向DNS与公开IP范围证据。
需要检查另一条请求时,替换为另一条日志IP并再次查询;一次只处理一个地址。
页面提供了若干示例地址按钮,可用来熟悉结果卡片的显示方式;正式排查应使用相关时间段的实际日志。
场景
查看这项工具在不同工作与生活流程中的用法。
当日志中的User-Agent自称搜索引擎爬虫时,复制同一请求的来源IP,查看DNS证据和公开网段命中情况。
调整限速或防火墙规则前,可对单个争议地址留存核验结果,并与请求频率、路径及响应状态一起审阅。
若结果与请求记录不符,可先确认日志记录的是访客地址还是代理节点地址,再对正确来源IP重新检查。
问答
集中解答高频疑问与容易混淆的问题。
填写访问日志中的来源IP。User-Agent只是请求声明的文本,不是该输入框所检查的对象。
可以。输入单个IPv6地址即可;不要附加端口或把地址连同方括号一起粘贴。
不能。当前输入一次核验一个IP;如需排查多条记录,应逐条取出来源地址。
须知
使用前了解适用范围、结果限制与必要提醒。
“已验证”表示本次查询至少形成了一条受支持的身份证据,不等于请求行为没有风险,也不保证爬虫遵守抓取规则;“未验证”或“可疑”也不是恶意判定。DNS应答和公开地址范围可能变化,单次结果不适合直接作为永久白名单。若服务器位于CDN或反向代理之后,应按已配置的可信代理规则确定真实来源IP;把代理节点地址当成访客地址会得到无关结论。
页面没有覆盖所有搜索引擎或其他机器人,且上游DNS、网络或名单暂时不可用时证据可能不完整。对于访问控制,还需结合请求路径、频率、响应码和业务影响复核。
推荐
查找相关工具、专题与可用的 API 能力。