V2EX › 爬
 |
想从一个网站爬一个下载链接 程序员 • ridgebin • 2025 年 1 月 9 日 • 最后回复来自 yunzaifei | 5 |
 |
Opensea 的数据如何爬（NFT 交易平台） Python • dogechai • 2023 年 11 月 22 日 • 最后回复来自 dayeye2006199 | 7 |
 |
水平有限，请教一下关于爬虫、脚本相关问题 程序员 • callmejoejoe • 2023 年 11 月 16 日 • 最后回复来自 callmejoejoe | 4 |
 |
家庭宽带对爬虫是不是有限制的？ 程序员 • hokman • 2023 年 9 月 5 日 • 最后回复来自 busier | 6 |
 |
做爬学校课程表和成绩那种爬虫应用犯法吗？ Java • tiRolin • 2023 年 8 月 28 日 • 最后回复来自 spannerc | 81 |
 |
微博上的谣言微博和非谣言微博如何区分爬取？ 问与答 • make1money • 2023 年 7 月 21 日 • 最后回复来自 ysc3839 | 12 |
 |
有爬虫大佬吗？请教下 问与答 • jack4536251 • 2023 年 7 月 10 日 • 最后回复来自 herozzm | 17 |
 |
写了个爬虫，爬了本站的所有帖子、评论和用户信息，简单分析了一下数据。公开数据库，开源
26 分享创造 • oldshensheep • 2023 年 7 月 17 日 • 最后回复来自 gpt5
|
120 |
 |
招懂爬虫的兄弟，最好是在爬虫行业 5 年以上
1 酷工作 • sotiery996006 • 2023 年 6 月 27 日 • 最后回复来自 opengps
|
12 |
 |
爬虫爬取社交软件法律问题 程序员 • huaxiaforming • 2023 年 6 月 8 日 • 最后回复来自 huaxiaforming | 19 |
 |
眼看你都要爬完了，这次就算了 分享发现 • huiyanpohundh123 • 2023 年 2 月 3 日 • 最后回复来自 XiFanL1 | 10 |
 |
爬虫爬 twitter 和 github 大家觉得现实不？ 程序员 • zhoudafa6780022 • 2022 年 11 月 29 日 • 最后回复来自 zhoudafa6780022 | 18 |
 |
这是进虫子了吗 Apple • siwadiya • 2022 年 9 月 5 日 • 最后回复来自 longgediyi999 | 9 |
 |
寻找爬虫开发人员，根据关键字爬取搜索引擎结果进行筛选入库 程序员 • jd186 • 2022 年 7 月 7 日 • 最后回复来自 jd186 | 6 |
 |
py 去爬对象数据，总是被封 ip，爬着爬着爬不动。是不是只能买 ip 代理数据库？太贵了 问与答 • spotsung • 2022 年 5 月 30 日 • 最后回复来自 sadfQED2 | 5 |
 |
新人学 Python 爬虫，用了 BS4，目前只会爬取具体的 url，求问如何爬取整个页面呢或者是某个日期呢 Python • kiko12324 • 2022 年 4 月 25 日 • 最后回复来自 AmberJiang | 6 |
 |
go 写的爬虫工具，求赞 程序员 • PeterYang1996 • 2022 年 1 月 20 日 • 最后回复来自 whyso | 18 |
 |
关于爬虫爬取数据的法律风险规避问题 问与答 • James369 • 2022 年 4 月 24 日 • 最后回复来自 Nostalgia | 16 |
 |
求教如何爬取油管评论呢？ 程序员 • sjmcefc2 • 2025 年 12 月 14 日 • 最后回复来自 gigode | 6 |
 |
在随想里爬了 73 页的楼 随想 • hellhyzcy66 • 2021 年 5 月 21 日 • 最后回复来自 hellhyzcy66 | 2 |
 |
这个网站是怎么反爬取的鸭 问与答 • happydebug • 2021 年 3 月 18 日 • 最后回复来自 cmostuor | 4 |
 |
有想要练习爬虫的嘛，专门练习爬虫的平台来啦！欢迎大家挑战！ 分享发现 • wendongZheng • 2021 年 3 月 4 日 • 最后回复来自 wendongZheng | 2 |
 |
想问个问题，怎么爬张大妈 程序员 • galileo1214 • 2020 年 12 月 23 日 • 最后回复来自 LikeMurphy | 8 |
 |
为什么 readhub 就可以爬大站，而不吃免费饭？
1 问与答 • i4oolish • 2020 年 12 月 2 日 • 最后回复来自 TimePPT
|
5 |
 |
这种应该就是爬虫爬的好的结果吧 科技 • yhyh • 2020 年 11 月 20 日 • 最后回复来自 123jiayue | 4 |
 |
爬虫还能这么用， 666
1 分享发现 • v2defy • 2020 年 11 月 5 日 • 最后回复来自 tuoov
|
4 |
 |
现在的公众号还能爬到信息吗 程序员 • gongfuxiongmao • 2020 年 9 月 29 日 • 最后回复来自 gongfuxiongmao | 13 |
 |
手上有 50 台云服务器，爬点什么数据好 问与答 • jwdstefani • 2020 年 7 月 25 日 • 最后回复来自 Seria | 10 |
 |
关于 scrapy 的几个问题 问与答 • 13936 • 2020 年 7 月 24 日 • 最后回复来自 13936 | 3 |
 |
大佬们，怎么提升爬虫和反爬技术啊 问与答 • yangva • 2020 年 7 月 16 日 • 最后回复来自 yangva | 19 |
 |
中国人在境内爬国外网站有法律风险吗？ 问与答 • glp664186796 • 2020 年 7 月 15 日 • 最后回复来自 mrrong | 2 |
 |
公司写爬虫到底是员工负责还是老板负责？
1 程序员 • jizhihaoSAMA • 2020 年 5 月 25 日 • 最后回复来自 xpresslink
|
41 |
 |
怎么实时爬取网页数据 问与答 • t1thshy • 2020 年 5 月 7 日 • 最后回复来自 mumbler | 5 |
|
现在爬虫有什么推荐学习的？ 程序员 • galileo1214 • 2020 年 4 月 30 日 • 最后回复来自 XxxxD | 23 |
 |
爬虫写得好，坐牢坐到老。现在大家还敢干爬虫的活吗？ 程序员 • suanbing • 2022 年 2 月 25 日 • 最后回复来自 yousabuk | 85 |
 |
有人试过批量爬某个元素的时候爬不下来但是单独爬的时候却可以爬的情况嘛 问与答 • Waihinchan • 2020 年 4 月 23 日 • 最后回复来自 Waihinchan | 3 |
 |
如何纯前端实现爬虫 问与答 • easylee1996 • 2020 年 4 月 15 日 • 最后回复来自 angryfish | 26 |
 |
开源爬虫框架是否有法律风险? 问与答 • rabbbit • 2020 年 3 月 7 日 • 最后回复来自 Rorysky | 4 |
 |
爬虫管理平台 Crawlab v0.4.7 发布（界面上配置 Scrapy + Git 同步）
1 程序员 • tikazyq • 2020 年 2 月 24 日 • 最后回复来自 tikazyq
|
2 |
 |
大家学爬虫的热情把文泉学堂爬挂了 Python • firejoke • 2020 年 2 月 5 日 • 最后回复来自 Carnival000 | 24 |
 |
帮别人爬虫该收费多少？ Python • MonsterTan • 2020 年 2 月 15 日 • 最后回复来自 aimoon16 | 45 |
 |
有人爬过探探吗？ 问与答 • Weixiao0725 • 2020 年 1 月 10 日 |
 |
有人能爬微博抽奖吗？ 问与答 • fbixiaoyu • 2019 年 11 月 14 日 • 最后回复来自 Lunatic1 | 4 |
 |
关于爬虫 IP 代理的疑问 问与答 • lysS • 2019 年 10 月 29 日 • 最后回复来自 lysS | 8 |
 |
北上广深等城市房价跟踪 20190920
2 微信 • yeshiwei • 2019 年 9 月 22 日 • 最后回复来自 shell314
|
53 |
 |
为什么诸位老哥的爬虫的都是自己写的，不用 scrapy 呢？ 问与答 • wellhome • 2019 年 9 月 18 日 • 最后回复来自 niknik | 26 |
|
如何快速搭建实用的爬虫管理平台
2 程序员 • tikazyq • 2019 年 8 月 14 日 • 最后回复来自 tikazyq
|
8 |
 |
可能是 JS 生成得验证码该如何爬取 Python • yth492300648 • 2019 年 8 月 7 日 • 最后回复来自 hongda0812 | 1 |
 |
关于复杂网站的前端并行爬取方式 分享创造 • webee • 2019 年 7 月 11 日 • 最后回复来自 yangweijie | 9 |
 |
生活不易， Python 后端，全栈，逆向爬虫接活～ 酷工作 • roberts • 2019 年 8 月 20 日 • 最后回复来自 boob | 32 |
 |
现在大家爬虫爬淘宝都是用什么办法能全站大量爬取啊?给个思路吧?能用手机 app 端爬取吗?
1 Python • z1421012325 • 2020 年 7 月 10 日 • 最后回复来自 gxlonline
|
49 |
 |
有人用 Java 写爬虫吗？ 程序员 • wz497345846 • 2019 年 6 月 11 日 • 最后回复来自 luozic | 11 |
 |
[爬虫与 5G] 5G 的到来会对爬虫速度有质的改变吗？？ Python • WaJueJiPrince • 2019 年 6 月 11 日 • 最后回复来自 locoz | 91 |
|
爬虫平台 Crawlab v0.2.2 发布 Python • tikazyq • 2019 年 5 月 30 日 |
|
[爬虫手记] 我是如何在 3 分钟内开发完一个爬虫的 Python • tikazyq • 2019 年 5 月 27 日 • 最后回复来自 tikazyq | 6 |
 |
请教 Python 爬虫，存在 js 反爬，除了 selenium 还有什么解决方案呢 Python • dylanhu • 2019 年 5 月 25 日 • 最后回复来自 huaerxiela6 | 11 |
|
爬虫平台 Crawlab v0.2 发布 Python • tikazyq • 2019 年 5 月 10 日 |
 |
大家对爬微信朋友圈有什么思路吗 2019 • zcsnbb • 2019 年 5 月 9 日 • 最后回复来自 misaka19000 | 2 |
 |
天猫爬虫封禁 一个都不给我 Python • Oane • 2019 年 3 月 7 日 • 最后回复来自 cruithne | 10 |
 |
互联网大厂里面都有爬虫团队吗，主要负责爬什么样的数据啊 程序员 • snappyone • 2019 年 3 月 2 日 • 最后回复来自 julyclyde | 13 |
 |
AI 爬虫 BEST 爬虫 程序员 • Outliver0 • 2019 年 3 月 1 日 • 最后回复来自 picone | 4 |
 |
关于爬虫爬取最新电影资源 问与答 • 13160919135 • 2019 年 2 月 25 日 • 最后回复来自 daqin | 7 |
 |
这个产品图片怎么爬下来？ Python • fan2006 • 2018 年 12 月 26 日 • 最后回复来自 15399905591 | 25 |
 |
爬虫工程师这个岗位是否对新手很不友好
1 Python • CharlieBrown • 2019 年 3 月 14 日 • 最后回复来自 roberts
|
44 |
 |
爬虫爬的太多了，大家一般怎么应对这个问题。
程序员 • nicoljiang PRO |
17 |
 |
跑爬虫程序, 每天都要跑几千万条数据, 公司想要租个服务器,V 友们可有什么推荐 ? 问与答 • studyaa • 2018 年 8 月 28 日 • 最后回复来自 tennc | 9 |
 |
记一次爬虫经历 Python • dzybiu • 2018 年 8 月 24 日 • 最后回复来自 xianxiaobo | 23 |
 |
爬虫如何实现增量爬取？ 酷工作 • PHPer233 • 2018 年 7 月 27 日 • 最后回复来自 fiht | 4 |
 |
如果爬取的网站源有几百多个，如何用 Python 建立爬虫? 问与答 • xanthu • 2018 年 7 月 10 日 • 最后回复来自 cyspy | 4 |
 |
pyspider 爬去文章列表问题 问与答 • just1 • 2018 年 7 月 5 日 • 最后回复来自 binux | 9 |
 |
怎么判断爬虫已经将网站的数据完整的爬取下来了 问与答 • diffworld • 2018 年 6 月 21 日 • 最后回复来自 icy37785 | 5 |
 |
Python 爬虫问题 Python • bestehen • 2020 年 6 月 1 日 • 最后回复来自 Dreamerwwr | 10 |
 |
Java 怎么爬取 websocket Java • richieboy • 2018 年 6 月 8 日 • 最后回复来自 xxxy | 2 |
 |
关于使用协程(asyncio+aiohttp)爬虫的疑惑 Python • frank065 • 2018 年 5 月 30 日 • 最后回复来自 rim99 | 3 |
Select Language