哈囉大家好,我是橘白卯咪,歡迎大家來看看我能不能撐過30天
今天我們來看看github上有哪一些跟行為辨識相關的作品
要找到對的方向,首先要有一個對的關鍵字
我使用"action recognition" 關鍵字搜尋
今天先說說之後會介紹到哪一些作品
要能夠行為識別,首先要先得到人體姿態的資訊
獲得姿態資訊的方式有很多,有人使用穿戴裝置,例如:具有三軸加速器的手環
也有人用特殊的攝影設備,例如:有景深功能的x-box kinect鏡頭
從影像獲得人體節點的方式也有很多種,諸如光流法、RGB法...等
(以上來自滿滿的論文...研究生埋首paper堆 哭泣 的時光...
近年最有名的一套工具,非openpose莫屬
可以從一般的影片直接獲取姿態資訊
其他還有運用cmu架構建置的、可以在嵌入式系統安裝的 tf-pose-estimation
有了這些姿態資訊,再加上利用資料集訓練好的模型,便能使用行為辨識系統,來辨識影片
MMSkeleton這套工具的前身,是鼎鼎大名的st-gcn
可以看看它舊的readme
後面會詳細的講,安裝它的過程
不過最後的實作,使用的會是另一套系統,請讓我賣個關子
明天讓我們從openpose說起!