1. 爱易网页
  2. Java教程
  3. 有关网络爬虫速度,该怎么处理

有关网络爬虫速度,该怎么处理

日期：2014-05-20　 浏览次数：21196 次

有关网络爬虫速度
最近在写了个爬虫，在一个网站爬东西，但是爬取页面比较多，被封ip了，虽然他允许输入验证码解封，但是数据量比较大，不能一直这样做，如何降低自己的速度，或者流量之类的，防止出现这种情况

------解决方案--------------------
Thread.sleep(10*1000); 然线程歇个10秒

相关资料更多>

  1. 有哪位高手了解北京NTT DATA系统集成有限公司
  2. mysql编码有关问题
  3. JBOSS错误：javax.servlet.ServletException: non-HTTP request or response
  4. 亟需帮助！Caused by: java.sql.SQLException: No suitable driver found for jdbc:mysql:/
  5. List<User> userList = new ArrayList<User>();解决思路
  6. java Scanner是不是和其他流冲突？新人求解
  7. DTO字段类型与数据库列名不一致的有关问题
  8. 我想用JSP+Javabean做个留言板，具体的步骤应该如何做
  9. 成为一个出色的架构师，要学习哪些知识？如何做