V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member Sign In
推荐学习书目
› Learn Python the Hard Way
Python Sites
› PyPI - Python Package Index
› http://diveintopython.org/toc/index.html
› Pocoo
值得关注的项目
› PyPy
› Celery
› Jinja2
› Read the Docs
› gevent
› pyenv
› virtualenv
› Stackless Python
› Beautiful Soup
› 结巴中文分词
› Green Unicorn
› Sentry
› Shovel
› Pyflakes
› pytest
Python 编程
› pep8 Checker
Styles
› PEP 8
› Google Python Style Guide
› Code Style from The Hitchhiker's Guide
This topic created in 2569 days ago, the information mentioned may be changed or developed.
某多多爬虫，anti_content 参数破解参考网上教程（因侵权问题，此处不公开链接），主要是通过是商品 API 完成商品信息的抓取，分析，存储，可视化等功能。
Github： https://github.com/Northxw/Pinduoduo 欢迎提交 issue
Supplement 1 · Apr 22, 2019
注意：这里抓取的站点是拼多多移动端链接。
 |
1
yepinf Apr 22, 2019 via iPhone
请教下，pdd 除了参数加密，还有什么注意点
有闲置服务器，想稳定爬它几个月看看 |
 |
2
showHand043 Apr 22, 2019
没有反爬措施嘛.比如汽车之家,大众点评那种
|
 |
3
AnjingJingan Apr 22, 2019
pdd.txt 不存在
|
 |
4
Northxw OP @AnjingJingan 跑一边程序就生成了，不可能把大文件放到 github 上啊。
|
|
6
Northxw OP @showHand043 反爬措施就是参数加密啊（注意：注意看我的抓取链接），汽车之家和大众点评是网页字体反爬。
|
|
7
AnjingJingan Apr 22, 2019
@Northxw 跑程序报了这个错
|
|
8
Northxw OP @AnjingJingan ？？？贴代码，我看看什么错误。
|
|
9
Northxw OP @AnjingJingan 或者你加我 QQ：2443498314, 密保问题：佩奇（备注来意）
|
 |
10
luanguang Apr 22, 2019
原本想 star 的，看到这么多有趣的爬虫，还是 follow 吧。
|
 |
12
stcasshern Apr 22, 2019
露珠下步计划是啥，感觉下步分析比较有趣
|
|
13
Northxw OP @stcasshern ？？？哈哈，你想要什么
|
 |
14
ricky0603 May 21, 2020
楼主的账号问题是怎么解决的？我一个账号抓 300+条数据就被 ban
|
 |
15
funtanstic Feb 5, 2024
大佬问题解决了么？账号很容易被 ban
|
|
16
Northxw OP @funtanstic 兄弟，几年前的问题了，我现在已经不搞爬虫了，账号被 ban 就挂代理（真实代理，贵一点的，或者自己维护 ip 池）
|
Select Language