1. 爱易网页
  2. Java教程
  3. 有关网络爬虫速度,该怎么处理

有关网络爬虫速度,该怎么处理

日期：2014-05-20　 浏览次数：21361 次

有关网络爬虫速度
最近在写了个爬虫，在一个网站爬东西，但是爬取页面比较多，被封ip了，虽然他允许输入验证码解封，但是数据量比较大，不能一直这样做，如何降低自己的速度，或者流量之类的，防止出现这种情况

------解决方案--------------------
Thread.sleep(10*1000); 然线程歇个10秒

相关资料更多>

  1. 函数头有一句：@SuppressWarnings("unchecked")，是什么意思？解决办法
  2. 出的错误是：java.lang.IllegalArgumentException: argument type mismatch
  3. 急寻sosoo-core.jar包解决思路
  4. socket连接的小疑点
  5. eclipse3.4+tomcat6,myeclipse6.5+tomcat6配备,汉化
  6. 关于项目设计的一个有关问题.
  7. Http请求时的URL编码有关问题！中文字符是乱码
  8. 世界主要国家地区数据库解决方案
  9. 请帮忙见见这个输出