要实现一个模拟浏览器操作的工具，是用 Requests for #Python#呢，还是 Request for #Node#呢？
大致的工作流是这样的，分别模拟用户到两个不同的网站上去刷数据，比对后满足一定条件执行后续操作。要求高性能，能很好的处理 cookie ，因所有操作都是登录后。
大致的工作流是这样的，分别模拟用户到两个不同的网站上去刷数据，比对后满足一定条件执行后续操作。要求高性能，能很好的处理 cookie ，因所有操作都是登录后。
推荐学习书目
› Learn Python the Hard Way
Python Sites
› PyPI - Python Package Index
› http://diveintopython.org/toc/index.html
› Pocoo
值得关注的项目
› PyPy
› Celery
› Jinja2
› Read the Docs
› gevent
› pyenv
› virtualenv
› Stackless Python
› Beautiful Soup
› 结巴中文分词
› Green Unicorn
› Sentry
› Shovel
› Pyflakes
› pytest
Python 编程
› pep8 Checker
Styles
› PEP 8
› Google Python Style Guide
› Code Style from The Hitchhiker's Guide
This topic created in 3896 days ago, the information mentioned may be changed or developed.
 |
1
yaxin Oct 9, 2015
你熟悉哪种语言就用哪种
|
 |
2
plqws Oct 9, 2015 via Android
都可以，差别不大，熟悉什么用什么，刚开始学的话感觉 Python 坑会比较少
|
 |
3
imdjh Oct 9, 2015 via Android
我推荐用 nodejs 内建的 http.request 模块。
Pro: 相对 request 模块，更少 overhead ，自己管理最大并发量( http.agent)，但需要自己处理 cookie(手动设置发出去的 header ，异步(不清楚 py 的 requests 是不是)。 Cons: 但是就像楼上所说， agent ， header 会有坑可能要踩，而且国内文档不多。很无奈的是 nodejs 的 api 不太稳定，天晓得哪天发个 6.0.0 。还有就是内存， cpu 占用很高，这些都要考虑到。 |
 |
4
gamexg Oct 9, 2015
node 不熟悉， python Requests 能自动处理 cookie ，比较方便。
http://cn.python-requests.org/en/latest/user/advanced.html#id2 最后网页非常复杂的时候 python 还可以模拟浏览器运行 js ，甚至直接启动浏览器模拟访问。 |
 |
6
lei286394973 Oct 9, 2015  1
@imdjh selenium + phantomjs 就可以啊
|
 |
7
aisk Oct 9, 2015
gevent + requests + python
|
 |
8
magicdawn Oct 9, 2015
Node.js superagent 自动处理 cookie
|
 |
9
icedx Oct 9, 2015
Python 有硬伤 处理不好动态页面 最后还是要挂靠 Node
如果楼主两个水平差不多的话 推荐 Node |
Select Language