首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  程序员

[python3] B 站用户数据收集...(重发)

  •  2
     
  •   cwjokaka · 67 天前 · 2421 次点击
    这是一个创建于 67 天前的主题,其中的信息可能已经有所发展或是发生改变。

    前天发了一次贴,秒沉。果然还是在大众摸鱼日发合适一点。

    写了一个爬虫,用于收集 B 站用户数据,算是学 python 的实践项目吧^_^

    第 1 条附言  ·  67 天前

    欢迎提建议,打算业余时间会添加新特性(获取更丰富的数据、数据统计等)

    19 回复  |  直到 2019-07-16 08:26:24 +08:00
        1
    locoz   67 天前
    太惨了,帮你捞一下
        2
    cwjokaka   67 天前
    @locoz 感谢,我也自顶一下
        3
    Deteriorator   67 天前
    帮你捞一下
        4
    xwcs   67 天前
    帮你捞一下
        5
    i0error   67 天前
    捞一下
        6
    i0error   67 天前
    去看了一下,很基础啊......建议有数据了分析一波再发。
        7
    cwjokaka   67 天前
    @i0error 是的,目前只是爬取阶段,而且相关数据内容有些少
        8
    hzwjz   67 天前
    按理说,不应该是在原帖的基础之上,想办法么?重复发帖了吧
        9
    cwjokaka   67 天前
    @hzwjz 是可以,但前天发的贴沉到海底,应该上不来了←_←
        10
    SpiderXiantang   67 天前 via Android
    用 dfs 爬取的吗
        11
    cwjokaka   67 天前
    @SpiderXiantang 没有.只简单调下接口而已
        12
    hjq98765   67 天前
    捞一下,学习学习
        13
    lzj307077687   67 天前
    刚开始学 py 学习下~
        14
    cwjokaka   67 天前
        15
    cwjokaka   67 天前
    ↑上去↑
        16
    cwjokaka   67 天前
    有哪里写的不足(bug)的地方可以说一说←_←(个人顶帖行为)
        17
    telnetning   67 天前 via iPhone
    楼主,是不是应该主动显示关闭下数据库连接
        18
    cwjokaka   67 天前
    @telnetning 是有这个问题,但我发现 worker 线程根本不用停下来。。。数据库连接也就不管了
        19
    cwjokaka   66 天前 via Android
    最后一顶
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   1612 人在线   最高记录 5043   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.3 · 25ms · UTC 00:23 · PVG 08:23 · LAX 17:23 · JFK 20:23
    ♥ Do have faith in what you're doing.