<p>我们在分析网站日志的时候总会遇到一些伪装为百度user-agent:Baiduspider的IP地址,而这些对于我们观察追踪记录百度蜘蛛来访次数,访问页面数,抓取了多少了多少页面等等都会造成一定的干扰,,尤其是站长之家CHINAZ的一些工具都是伪装为百度蜘蛛的。所以我们必须要在分析网站日志的时候把这些伪蜘蛛去除掉,以便得到精准的数据。下面是亚文网络优化整理的一些伪装为百度user-agent的IP地址,这些在分析网站日志的时候可以用光年日志分析系统拆分出去。
站长之家伪装百度蜘蛛IP地址:
友链检测:link.chinaz.com IP:222.77.187.33
站长工具:tool.chinaz.com IP:125.90.88.96
我的工具:mytool.chinaz.com IP125.90.88.81
北京电信百度收藏蜘蛛IP: 220.181.51.210。
北京市电信集团公司伪装百度蜘蛛IP:
上次整理出来的一些IP,都是伪装为百度蜘蛛IP的,但是确都是电信集团(通过123查得到的信息)的:180