天天看点

空间绘画,拳头清晰屏幕,此手跟踪项目开火,在线播放

机器心脏报告

机器编辑部门的核心

写粉笔的学生更有可能掌握YoHa的使用技巧。

空中绘画是最近出现的一个有趣的应用,涉及复杂的手部跟踪技术,这些技术在成熟后可用于增强应用程序的交互体验。Machine Heart此前曾报道过有趣的项目"air-drawing",该项目允许用户使用深度学习工具在计算机端使用摄像头获得自己的手势手势估计图像。

最近,另一个具有类似功能的开源项目在reddit上受到抨击,名为YoHa-Your Hand Tracking。

空间绘画,拳头清晰屏幕,此手跟踪项目开火,在线播放

项目地址:https://github.com/handtracking-io/yoha

网站: https://handtracking.io/

与YoHa"在空中绘画和写作"的效果如下:

空间绘画,拳头清晰屏幕,此手跟踪项目开火,在线播放

以下是我们实际完成的工作,以及一项新技能:

空间绘画,拳头清晰屏幕,此手跟踪项目开火,在线播放

YoHa是一个基于TensorFlow框架的手部跟踪引擎,它是围绕用户和开发人员发现有用的特定手势开发的。YoHa旨在为使用手部跟踪的应用程序提供更多实质性价值,以构建新的多功能解决方案,以增强应用程序的交互体验,最终目标是成为支持任何手势的通用手部跟踪引擎。

YoHa 在设计时充分考虑了实际性能,可在各种笔记本电脑和台式机上提供实时用户体验。YoHa目前在移动设备上表现不佳,并将随着tensorFlow等推理框架的发展而得到改进.js。

如何使用它

首先,只需一行代码即可轻松安装YoHa:

npm install @handtracking.io/yoha

您也可以在演示页面上下载它:

空间绘画,拳头清晰屏幕,此手跟踪项目开火,在线播放

演示地址:https://handtracking.io/draw_demo/

与大多数用指尖操作绘制的手部跟踪引擎不同,YoHa的使用需要捏合和操纵"光标点"。这有点像用粉笔写字,需要一点技巧。

空间绘画,拳头清晰屏幕,此手跟踪项目开火,在线播放

首先,屏幕上有一个光标点,随着拇指和食指的位置移动,并用这两根手指做出捏合姿势来控制光标点,移动光标点进行绘画。

空间绘画,拳头清晰屏幕,此手跟踪项目开火,在线播放

只需握动拳头即可清除画布:

空间绘画,拳头清晰屏幕,此手跟踪项目开火,在线播放

有兴趣的小伙伴来试试吧!

相关链接:

https://www.reddit.com/r/MachineLearning/comments/q9hhqt/p_yoha_a_practical_hand_tracking_engine/

https://pythonrepo.com/repo/handtracking-io-yoha-python-deep-learning

继续阅读