929?1442652660

【缺陷】 爬虫遇到大量404页面会陷入死循环 正常


甘谊昂添加于 2014-12-12 12:00
已经处理,已经不会陷入无限循环状态。 所有404、503页面的url在数据库中会单独标示出来,其html页面不保存。 只有返回值为200的页面被保存。
回复
0?1470885445
登录后可添加回复
  • 当前状态 已解决
  • 选定优先级 正常
  • 指派给 甘谊昂
  • 里程碑 --
  • 开始日期 2014-12-12
  • 结束日期
  • 预计工时(H) 0.00 小时
  • 完成度 100%
  • 关联Commit

© Copyright 2007~2021 国防科技大学Trustie团队 & IntelliDE 湘ICP备 17009477号

问题和建议
还能输入50个字符 提交

加入QQ群

关注微信APP


×