V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
zzzkkk
V2EX  ›  PHP

PHP 与 go 交互

  •  
  •   zzzkkk · 213 天前 · 1665 次点击
    这是一个创建于 213 天前的主题,其中的信息可能已经有所发展或是发生改变。

    对于生产环境不允许 exec 函数调用外部程序的情况?

    以前知道有 goridge 这种东西 需要 go 启动服务并保持常在

    php 再用 http get/post 方式调用 go 服务 这样不是很烦?

    比如要用 go 爬 1 万条数据 每次都传 1 万条 这样调用的话无法显示进度 比如每隔一秒向浏览器显示爬了多少条数据

    18 条回复    2023-10-31 09:27:22 +08:00
    Rache1
        1
    Rache1  
       213 天前
    FFI
    maocat
        2
    maocat  
       213 天前
    加中间件,消息队列
    codehz
        3
    codehz  
       213 天前
    每次开进程损耗更大吧()
    8355
        4
    8355  
       213 天前
    消息队列是主流方案,方便快速扩容,无法独立部署的话可以用 redis stream 5.0 就可以用了。
    性能很快,指令都是 o1 ,消息量大的话不如 kafka 或者 mq ,每天百万级没大问题,前期有量可以切独立 redis 便宜的狠。
    zzzkkk
        5
    zzzkkk  
    OP
       213 天前
    @codehz

    对于很少用户的系统 根本不用关心 损耗

    而是用户体验第一

    这个进度条是多么重要啊
    Gota
        6
    Gota  
       213 天前 via iPhone
    可以放个 Redis 在中间,共享状态,消息队列,广播事件 Redis 都支持,很适合用在爬虫这样的异步任务平台。
    Nazz
        7
    Nazz  
       213 天前
    使用 sidecar 部署, 通过 http 通信
    QlanQ
        8
    QlanQ  
       213 天前
    你的这种方式,进度条准吗?
    进度条是在浏览器显示的与,go 和 php 的交互方式没有什么关系吧
    skiy
        9
    skiy  
       213 天前
    走 RPC ?或者走 MQ ( MQTT )。进度条不了解……这东西不要求精准啊。很多熟悉让你进度到 90%,就在那里卡你好久……
    awalkingman
        10
    awalkingman  
       213 天前
    进度条是锦上添花,最核心的是把任务完成了,进度条显示一个大概就好了。
    通信的话,找个中间件解耦一下是最方便的。
    zzzkkk
        11
    zzzkkk  
    OP
       213 天前 via Android
    进度条就是页面用 ajax 请求一个文本文件

    server 端 go 每隔一秒去更新这个文件 爬了多少条

    还有另一个文本文件 写了总数

    这进度是精准的

    就几个用户的系统 同一时间只有一个人执行爬虫 搞什么中间件 消息队列
    zzzkkk
        12
    zzzkkk  
    OP
       213 天前 via Android
    还好现在 server 都是我控制

    想起刚从业时 往图片写文字 gd 扩展用得焦头烂额 都是因为自己没服务器权限

    要是自己能管服务器 用 imagick 扩展一下子就解决了
    Gota
        13
    Gota  
       213 天前 via iPhone
    如果是临时用用的项目当然无所谓,正经项目里还是不建议用本地文件存状态。
    devopsdogdog
        14
    devopsdogdog  
       213 天前
    @zzzkkk 就几个用户的系统 同一时间只有一个人执行爬虫 搞什么中间件 消息队列

    你自己都说了,随便输出个日志到服务器能看就行了,是我最多做个 转圈圈 ,知道是执行还是执行完就行了。
    sunmoon1983
        15
    sunmoon1983  
       212 天前
    grpc ?
    dif
        16
    dif  
       212 天前
    跨语言目前我用的是 grpc ,java <> python
    zzzkkk
        17
    zzzkkk  
    OP
       212 天前 via Android
    java <> python 用 grpc 交互?
    guoguoyu
        18
    guoguoyu  
       179 天前
    go -> redis <- php-workerman -> 进度条 搞定
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   998 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 27ms · UTC 19:17 · PVG 03:17 · LAX 12:17 · JFK 15:17
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.