V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
daohuo
V2EX  ›  Python

关于获取两张图片中人体姿态的相似度,求大佬指点

  •  
  •   daohuo · 2023-11-27 17:04:09 +08:00 · 1478 次点击
    这是一个创建于 366 天前的主题,其中的信息可能已经有所发展或是发生改变。

    我用 mmpose 获取了图片中人体姿态的 keypoints (如下图)等数据,如何对比不同图片的 keypoints 的相似度 1701075495750.png

    已经尝试过余弦相似度等,也使用过生成人体姿态骨架图片(骨架图片如下)再进行特征对比,都不理想,有的还行,但总有姿态差距特别大的,相似度却很高的情况 1701075793131.png 作为一个完全的不懂算法和深度学习的萌新,借助网络上的资料和 chatgpt 走到这一步,后面实在走不下去了,已经卡了好几天了,恳请懂行的大佬指点方向,最好是基于开源项目

    3 条回复    2024-01-16 20:57:15 +08:00
    thinkershare
        1
    thinkershare  
       2023-11-27 17:10:18 +08:00
    干脆直接训练神经网络,你最终需要的输出是个几维的值? 你的样本足够多吗? 如果样本足够,感觉直接训练图像识别网络好了,将这个任务交给网络学习,不自己设计白盒算法。
    Muniesa
        2
    Muniesa  
       2023-11-27 17:23:47 +08:00 via Android   ❤️ 1
    mmpose 仓库里就有个舞蹈相似度评分的 https://github.com/open-mmlab/mmpose/tree/main/projects/just_dance
    ielonzh
        3
    ielonzh  
       316 天前
    我也在研究这个问题。可以看下这个算法,通过训练模型可以将不同视角的姿态转换成向量,然后可以进行比较。这个的主要问题就是没有预训练模型,需要自己搞数据训练。

    谷歌最新姿势识别模型 Pr-VIPE ,怎么变都能认得你 | ECCV2020 - 新智元的文章 - 知乎
    https://zhuanlan.zhihu.com/p/345130265
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3530 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 22ms · UTC 04:39 · PVG 12:39 · LAX 20:39 · JFK 23:39
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.