V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
joker2026
V2EX  ›  外包

求爬虫脚本

  •  
  •   joker2026 · 214 天前 · 791 次点击
    这是一个创建于 214 天前的主题,其中的信息可能已经有所发展或是发生改变。

    爬虫地址: https://www.mouser.cn/c/semiconductors/memory-ics/eeprom/ 优点:典型的表格,翻页获取下一页,点击进去详情获取数据 难点:站点采用了反爬虫机制,抓两页之后就会出发 human verfiy

    要求:给出 python 脚本,抓取指定地址的所有产品的详情数据

    联系微信:martin20020312

    9 条回复    2023-10-11 20:41:20 +08:00
    aino
        1
    aino  
       214 天前
    这个站点用的 akamai 防护,你的预算多少
    aino
        2
    aino  
       214 天前
    perimeterx+akamai
    sr0miao
        3
    sr0miao  
       214 天前
    早些年搞过这些电子元件贸易网站,那时候竞品网站之间的竞争就很激烈了
    linpm
        4
    linpm  
       214 天前 via iPhone
    麻烦你重新留个联系,添加频繁
    gfswoquasfasd
        5
    gfswoquasfasd  
       214 天前
    很刑
    owltacklejaguar
        6
    owltacklejaguar  
       214 天前
    这里不是有下载表格
    ysb255236295
        7
    ysb255236295  
       213 天前
    搞这个能干嘛
    yagamil
        8
    yagamil  
       213 天前
    @aino 阿卡迈貌似没个几万块搞不下来。
    linpm
        9
    linpm  
       211 天前 via iPhone
    这是个白嫖的,二次转包一千多块就想爬下来
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   1444 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 27ms · UTC 17:27 · PVG 01:27 · LAX 10:27 · JFK 13:27
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.