如何通过nslookup辨别百度蜘蛛真假

SEO基础 思享 2637浏览

通常情况下,模拟百度蜘蛛是比较少见的,但是当我们分享百度蜘蛛必须要在一个前提下,那就是必须是真的百度蜘蛛。所以在日志中获得一个IP后首先就是排除假蜘蛛这种情况。下面说一下通过nslookup反解IP来实现辨别真假蜘蛛

nslookup查询

运行——CMD——输入nslookup IP(例如nslookup 111.206.221.22)然后按一下enter键

nslookup反查

这个时候,就能查询到IP的hostname,如果是以 *.baidu.com的格式命名,则为百度蜘蛛,如果不是。表示为伪装的假蜘蛛

其他操作系统查询

linux

在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

MAC

在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

推荐阅读

百度蜘蛛抓取频次过大,导致服务器影响小程序正常访问怎么办?

如百度Spider抓取频次过大,影响了小程序正常访问,开发者可通过“智能小程序开发者平台>开发管理>设置>开发设置>小程序资源抓取设置”调整抓取频次上限,调整后次日生效,有效期为60天。特别提醒的是,如果抓取频次上限过低会导致......

什么是百度蜘蛛?什么是Baiduspider?

Baiduspider是百度搜索引擎的一个自动程序,它的作用是访问互联网上的网页,建立索引数据库,使用户能在百度搜索引擎中搜索到您网站上的网页。...

百度蜘蛛抓取会对网站服务器造成很大压力吗?

为了达到对目标资源较好的检索效果,Baiduspider需要对您的网站保持一定量的抓取。我们尽量不给网站带来不合理的负担,并会根据服务器承 受能力,网站质量,网站更新等综合因素来进行调整。如果您觉得baiduspider的访问行为有任何不合理的情况,......