我相信很多时候，各位站长都会发现我们在分析网站日志的时候总会遇到一些伪装为百度user-agent：Baiduspider的IP地址假蜘蛛，其实这些假蜘蛛对我们网站来说，它们的危害是巨大的，不得不引起重视，不说别的首先会占用网站带宽，导致网站流量上升，增加额外开销，而且在有限带宽的前提下，阻碍了正常蜘蛛的抓取，并且误导了我们在对网站开展SEO工作时的思路，更部分伪装成假蜘蛛的采集工具剽窃了我们的工作，而这些对于我们观察追踪记录百度蜘蛛来访次数，访问页面数，抓取了多少了多少页面等等都会造成一定的干扰，，尤其是站长之家CHINAZ的一些工具都是伪装为百度蜘蛛的。所以我们必须要在分析网站日志的时候把这些伪蜘蛛去除掉，以便得到精准的数据。下面是笔者整理的一些伪装为百度user-agent的IP地址，这些在分析网站日志的时候可以用光年日志分析系统拆分出去。