智能硬件產品經理的工作內容
有思想、有追求、有溫度的產品經理,應該熱情地去擁抱人工智能,同AI合作,發揮其最大的潛能。
AI時下有一種需求是AI助力硬件產品的現象,有用AI機器視覺能力檢測工件質量的,有用AI機器視覺檢測金屬表面凹凸的。
本文主要是基于AI視覺技術檢測人體骨架提取人體關節三維信息,對健身、無人零售等場景需識別人體最常見步態蹲姿行為進行抽象與建模,然后解決AI視覺技術捕捉人體細微動作變化檢測的產品經理工作內容。
一、搭建智能硬件產品極簡版需求
包含顯示屏、深度體感攝像頭、算法、服務端、小程序5個部分。如下圖:
深度體感攝像頭選擇微軟的Kinect,因為Kinect 深度傳感器能夠自動捕獲人體的深度圖像,并實時的跟蹤人體骨架,檢測到細微的動作變化。
一方面,Kinect 獲取的深度圖像不同于彩色圖像,它可以提供更多的空間信息,同時又能保護個人隱私。因此,通過分析深度圖像來識別和檢測人體姿勢的方法一直以來都倍受各家產品關注。
另一方面, 人體的骨骼特征也為行為識別、姿勢檢測等任務提供了重要的行為特征。Kinect 因上述功能和其具有的精確性與實用性等特點,已經使其成為一種多功能組件,可以集成到智能硬件的各種應用中。
筆者的人體體態識別產品利用Kinect 深度傳感器基于人體骨架信息來檢測非標準深蹲姿勢。
使用軀干角度、髖部角度、膝部角度和踝部角度作為深蹲期間的四個代表性特征。然后,把深蹲過程分為四個階段,并使用關鍵幀檢測技術,對每一階段的角度特征逐幀的計算和記錄。
最后,采用閾值比較的方法,對深蹲姿勢進行檢測判斷。
該產品無需佩戴任何的可穿戴傳感器,不會給鍛煉者帶來不便,且不需要使用訓練數據集,能夠做到實時準確的檢測。
二、產品經理進行特征定義
對基于人體骨架信息監測人體姿勢建模之前,首先產品經理要尋求健身教練或者人體專家按需建立可用于區分標準姿勢和非標準姿勢的界限。
產品經理協調專家繪制特征定義表如下圖:
如上圖表中描述的角度,產品協調人體健身專家定義如下: 軀干角度、髖部角度、膝部角度、踝部角度、軀干角度。
如上述角度值中的任何一個不在標準范圍內,則非正常姿勢可被檢測到。
三、產品跟進特征提取
我們懂技術的產品經理都知道在 RGB 圖像中提取人體骨架是一項艱巨繁瑣的任務,且僅能提供平面(二維)信息。而在 Kinect 中,能夠在深度圖像中,提取人體骨架的三維信息。
通過 Kinect所提供的 API 可以準確的提取并跟蹤人體骨架的總共 25 個關 節 點 。
Kinect 創建的是三維(three-dimensional,3D)的圖像空間,因此這 25 個關節點為3D 坐標信息。
對 25 個關節點進行組合相連即可組成相應的3D 骨架坐標。上面所提出的人體姿勢過程中五個代表性角度特征,可由這 25 個關節點中的肩關節、髖關節、膝關節、踝關節、足關節,5 個關節點構成。并通過余弦定理,計算其空間角度。
下圖為Kinect跟蹤人體骨架圖:
四、產品跟進技術計算
產品經理應了解的計算流程如下,方便在日后產品上市后出現數據問題時候找準原因,一遍快速解釋用戶的問題。
- 首先,當 Kinect 檢測到人體時,即可獲取人體的關節點,技術計算各矢量,并在深度圖像中繪制計算矢量線。
- 其次,可以通過幾何中的矢量平移理論將矢量復原。
- 第三,由于重力矢量總是垂直于地面,計算重力矢量。
- 最后,可以通過公式計算軀干角度。
另外對于髖部角度、踝部角度和膝部角度,可直接使用空間向量法計算。
五、產品需懂算法流程
算法流程如下圖:
總體而言,算法可分為兩個步驟。上圖中粗虛線的上半部分定義了人體行為動作期間中的四個階段,并且詳述了提取并計算算法中的代表性角度特征的關鍵步驟。
首先,當 Kinect檢測到人體時,則可獲取該人體的深度圖像并跟蹤該人體骨架。
接著,對人體行為期間行為階段的關鍵幀進行定義。而關鍵幀檢測是所有行為識別、姿勢檢測等方法的重大難題。
產品經理可以判斷團隊內的行為識別工程師的水平和意愿是否需要引進技術外援。
人體姿勢檢測的關鍵步驟如上圖中粗虛線的下半部分所示。單次的行為是一種短時間運動,為更好的觀察角度變化,人體需要在B動作結束時停留一段時間。因此單個或幾個不標準幀值不能作為判斷標準,建議產品經理協調算法工程師和人體健身專家采用閾值比較的方法。
如圖中筆者LineLian所示,當非標準幀與總幀數的比率大于 X%這一閾值時。人體姿勢為非正常的。也就是說,非正常幀比率在人體行為完成時被計算且與給定閾值進行比較。
當比率大于閾值(X%)時(X具體值可以聯系筆者或者閱讀暢銷人工智能書籍《AI賦能-AI重新定義產品經理》),人體姿勢被判斷為非正常,否則它是正常的。
六、AI視覺在智能硬件中應用小結
隨著AI在算法、數據、算力的基礎上逐步的發展,AI技術正在逐步優化我們手頭的產品和助力更多的場景。
筆者LianLian自己調教過上圖AI視覺助力健身姿勢更正確的產品小程序界面,如下圖:
在AI大環境下,產品經理應該優先擁抱AI,優先用AI助力產品創新。我們做的AI產品既不是被人嘲笑的,也不是破壞人力正產生活的,認識到AI既不善良也不卑鄙,更不應該被視為魔鬼。
像筆者LineLian文章中一樣機器視覺能夠幫助用戶更好的健身,能夠幫助無人零售商家監視店鋪節省勞動成本。
所以有思想、有追求、有溫度的產品經理,應該熱情地去擁抱人工智能,只有同AI合作才能發揮最大的潛能。
這同時也是對自己認知的了解和重構,任何一次改變,都是不斷地自我創新,都是一種成長,都可能造就一種新的生活方式。
未來也許決定產品經理薪資的將取決于你對產品運用AI的程度。
如果你想系統化入門AI產品經理,掌握AI產品經理的落地工作方法,戳這里>http://996.pm/7bjab
#專欄作家#
連詩路,公眾號:LineLian。人人都是產品經理專欄作家,《產品進化論:AI+時代產品經理的思維方法》一書作者,前阿里產品專家,希望與創業者多多交流。
本文原創發布于人人都是產品經理。未經許可,禁止轉載。
題圖來自Unsplash,基于CC0協議
想問下作者從事的是體測評估行業的嗎,確實感覺姿態算法對于產品力很關鍵
文不對題呀
之前采訪筆者時,通過調研得知,筆者不僅手撕代碼,還親自設計規劃產品,策劃推進智能硬件的多端協同,更令人佩服的是,筆者親自參與投資了文中所述的項目。筆者是真正的離CEO最近的產品經理。
確實有點文不對題
你的評論顯得沒有水平,因為筆者的意思你完全沒有領悟到,你可能不一定知道,智能硬件包含的知識面,智能硬件,每個硬件包含本體之外,如文中所述還包含軟件棧,軟件棧的概念這位讀者未必聽過。所以建議你可以從更淺顯一些的文章開始讀取,因為據我所知筆者近在硬件和軟件及智能硬件和軟件棧棧的工作時間和經驗估計比你預想的還要多的多。
有思想、有追求、有溫度的產品經理,應該熱情地去擁抱人工智能,同AI合作,發揮其最大的潛能。這一句話,不錯,其他和AI不怎么搭嘎,
填補了 我的認知空白
我是做移動互聯網PM的,也想進入智能硬件這個行業,請問對于一個新入行并且不懂技術的小白來說筆者大大可有相關的書籍推薦嗎? ??
看運氣,入坑
感覺有點文不對題呀…