首页   注册   登录
 beforeuwait 最近的时间轴更新

beforeuwait

V2EX 第 247894 号会员,加入于 2017-08-10 15:20:04 +08:00
beforeuwait 最近回复了
用 生成器呀
我以前抓携程的时候也遇到这种问题
程序就假死在那了。

后来,我做了一个断点续爬来解决这个问题。
4 天前
回复了 wsds 创建的主题 Python Python 中怎么执行 js?
phantomJS 就可以了啊
我有个类似的项目,一样的 js 算出一个 token 和一个 t,然后放到 cookie 里。
在拿到 js 后,写一个接收函数,然后 phantom 执行,输出 js 里的 token 和 t,然后请求
Failed to establish a new connection
遇到这种问题,写个 try except,报错休息 20 秒,再请求
楼上+1
24 天前
回复了 hardman 创建的主题 Python 话说大家写爬虫有用 python3 的嘛
入门时候是 py2,去公司开始生产就是 py3
这种情况哈,多代理的是必须的。
我也困惑
一楼说得对
关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   鸣谢   ·   1681 人在线   最高记录 3541   ·  
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.1 · 10ms · UTC 15:19 · PVG 23:19 · LAX 08:19 · JFK 11:19
♥ Do have faith in what you're doing.
沪ICP备16043287号-1