V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
AdminZ
V2EX  ›  问与答

最近做前端有个需求,小弟很迷茫,需求是页面获取摄像头,实时显示人像画面,然后分割出人像区,并且需要使用 AR.JS 能力,识别特定图片显示三维模型..

  •  
  •   AdminZ · 2023-08-24 17:19:33 +08:00 · 558 次点击
    这是一个创建于 450 天前的主题,其中的信息可能已经有所发展或是发生改变。
    最近做前端有个需求,小弟很迷茫,需求是页面获取摄像头,实时显示人像画面,然后分割出人像区,并且需要使用 AR.JS 能力,识别特定图片显示三维模型,,两者结合就是人像区能够遮挡住三维模型,我使用 TensorFlowJs 、AR.js 、aframe-ar-nft.js 实现了,但是在手机上的效果不好,例如点击按钮开始分割,在 PC 端能实现需求,但是在移动端就直接寄了,分割的人像图出不来,怎么办啊,另外有没有懂的大哥,虎牙的直播弹幕不挡脸是前端生成的人像分割图吗?还有哔哩哔哩的蒙版弹幕
    4 条回复    2023-08-29 14:15:51 +08:00
    webszy
        1
    webszy  
       2023-08-24 22:00:57 +08:00
    牛逼啊。。。一般这种需求不都是放在后端吗。pc 上肯定性能好,兼容性也好点,手机上兼容性问题很突出,有些性能也差。
    webszy
        2
    webszy  
       2023-08-24 22:04:41 +08:00
    我印象里 b 站那个好像就是后端生成到
    AdminZ
        3
    AdminZ  
    OP
       2023-08-25 15:40:46 +08:00
    @webszy 产品说是用户量大的话都由服务端生成蒙版,服务器会崩溃,他说哔哩哔哩是前端生成,我看了相关文章,哔哩哔哩的是上传视频,由服务端解析好每一帧的蒙版,这样用户在收看该视频时,会把这些蒙版下下来,再套上去,我这跟哔哩哔哩还不一样,算是实时分割人像,pc 端我已经实现,但是移动端,而且还是在小程序的 webview 里!偶尔连摄像头都打不开....
    webszy
        4
    webszy  
       2023-08-29 14:15:51 +08:00
    @AdminZ 这就是我说的兼容性问题,这在移动端是无解的,只能让后端解决
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2601 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 15:36 · PVG 23:36 · LAX 07:36 · JFK 10:36
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.