天天看點

空間繪畫,拳頭清晰螢幕,此手跟蹤項目開火,線上播放

機器心髒報告

機器編輯部門的核心

寫粉筆的學生更有可能掌握YoHa的使用技巧。

空中繪畫是最近出現的一個有趣的應用,涉及複雜的手部跟蹤技術,這些技術在成熟後可用于增強應用程式的互動體驗。Machine Heart此前曾報道過有趣的項目"air-drawing",該項目允許使用者使用深度學習工具在計算機端使用攝像頭獲得自己的手勢手勢估計圖像。

最近,另一個具有類似功能的開源項目在reddit上受到抨擊,名為YoHa-Your Hand Tracking。

空間繪畫,拳頭清晰螢幕,此手跟蹤項目開火,線上播放

項目位址:https://github.com/handtracking-io/yoha

網站: https://handtracking.io/

與YoHa"在空中繪畫和寫作"的效果如下:

空間繪畫,拳頭清晰螢幕,此手跟蹤項目開火,線上播放

以下是我們實際完成的工作,以及一項新技能:

空間繪畫,拳頭清晰螢幕,此手跟蹤項目開火,線上播放

YoHa是一個基于TensorFlow架構的手部跟蹤引擎,它是圍繞使用者和開發人員發現有用的特定手勢開發的。YoHa旨在為使用手部跟蹤的應用程式提供更多實質性價值,以建構新的多功能解決方案,以增強應用程式的互動體驗,最終目标是成為支援任何手勢的通用手部跟蹤引擎。

YoHa 在設計時充分考慮了實際性能,可在各種筆記本電腦和桌上型電腦上提供實時使用者體驗。YoHa目前在移動裝置上表現不佳,并将随着tensorFlow等推理架構的發展而得到改進.js。

如何使用它

首先,隻需一行代碼即可輕松安裝YoHa:

npm install @handtracking.io/yoha

您也可以在示範頁面上下載下傳它:

空間繪畫,拳頭清晰螢幕,此手跟蹤項目開火,線上播放

示範位址:https://handtracking.io/draw_demo/

與大多數用指尖操作繪制的手部跟蹤引擎不同,YoHa的使用需要捏合和操縱"光标點"。這有點像用粉筆寫字,需要一點技巧。

空間繪畫,拳頭清晰螢幕,此手跟蹤項目開火,線上播放

首先,螢幕上有一個光标點,随着拇指和食指的位置移動,并用這兩根手指做出捏合姿勢來控制光标點,移動光标點進行繪畫。

空間繪畫,拳頭清晰螢幕,此手跟蹤項目開火,線上播放

隻需握動拳頭即可清除畫布:

空間繪畫,拳頭清晰螢幕,此手跟蹤項目開火,線上播放

有興趣的小夥伴來試試吧!

相關連結:

https://www.reddit.com/r/MachineLearning/comments/q9hhqt/p_yoha_a_practical_hand_tracking_engine/

https://pythonrepo.com/repo/handtracking-io-yoha-python-deep-learning

繼續閱讀