精彩瞬间 2008-3-18 18:57
腾讯SOSO蜘蛛乱撒网
近日,124.115.0段的IP大量出现在LOG记录中,连接次数非常频繁,造成服务器CPU使用率上升,消耗大量资源。根据IP地址查询得知,此IP是陕西省 西安市(电信机房) 电信,并非百度,谷歌等搜索的爬虫。访问IP记录为普通用户访问,初步判断不是搜索引擎,多数站长认为是采集器、群发软件等,纷纷将此IP禁止访问。
被站长封杀的这个IP段,其实是腾讯SOSO的爬虫,因为SOSO一直使用GOOGLE的搜索技术,加之IP是西安市,而不是北京,或者深圳,没人去联想到这个结果。
目前SOSO新闻使用的IP是124.115.1段,与124.115.0段是同一个机房。
经过测试发现,搜搜除了网页搜索,其它如新闻,论坛,图片等都是自己的技术,上面提到的这个IP段正是SOSO爬取页面的服务器群。
前段时间有时访问很慢就是这个原因,现在已经把这个IP段切底封杀:@ :@
天堂里有颗草 2008-3-18 19:10
信息量要大,分类要合理就是好搜索~~
~喜欢百度是因为分类好,喜欢谷歌是因为容量大:victory:
白紫衣 2008-3-24 03:41
SOSO 要走的路还很长的说。
不过,SOSO的确不咋滴,偶宁愿用Live。cn