1. 爱易网页
  2. Java教程
  3. 有关网络爬虫速度,该怎么处理

有关网络爬虫速度,该怎么处理

日期：2014-05-20　 浏览次数：21241 次

有关网络爬虫速度
最近在写了个爬虫，在一个网站爬东西，但是爬取页面比较多，被封ip了，虽然他允许输入验证码解封，但是数据量比较大，不能一直这样做，如何降低自己的速度，或者流量之类的，防止出现这种情况

------解决方案--------------------
Thread.sleep(10*1000); 然线程歇个10秒

相关资料更多>

  1. 初学者提问：怎么定义正则表达式中的* " 等特殊字符字符
  2. 求教高人用apache poi读取WORD文档并保留完整格式的方法。解决思路
  3. 通过JNI怎么将JAVA Float转换成C的float类型 ，注意，JAVA类型是Float
  4. 问个String的有关问题，大家帮小弟我解答一下
  5. 使用 request.getRequestDispatcher(url).include(request,response); 可以弹出一个新窗口么！该怎么解决
  6. 求指点，笨鸟求指导
  7. 急 I/O输入输出流有关问题!跪求高手帮忙!
  8. JMF检测不到摄像头设备怎么处理
  9. session的有关问题