时间:2015-05-20 18:00:08 来源: 复制分享
一位软件开发者抱怨,自2013年3月起,来自中国的IP地址循环下载他的软件但根本不安装也不运行因为第一次运行会弹出“感谢你试用”的页面,他对此百思不得其解,不知道其中是否隐藏有阴谋。
鉴于反复的下载增加了带宽可能影响网站访问性能,他选择了在下载目录加入一个htaccess文件,屏蔽来自中国的IP地址。此后,中国的下载流量从每天30GB降至了每天100MB,他至今已经屏蔽了大约1700个中国IP。他调查了一个每天下载20次的IP 211.136.10.56,发现它是中国移动的一个爬虫。
类似的问题普遍存在,一些人推测原因可能是中国移动的服务器设置问题,中国移动某位用户下载了他的软件,这一活动被记录了下来,为了节省流量,中国移动的缓存服务器开始访问下载地址,但由于不合理的缓存设置导致爬虫频繁下载软件。