针对大部分嵌入式平台计算能力较弱、无法实时运行基于神经网络的应用程序的情况,提出了一种基于Anchor-Free轻量化卷积神经网络(CNN)的手势交互方法。该方法缓解了Anchor-Based检测的弊端,通过神经网络实时检测人体手部,并利用动态时间规整(DTW)算法对手势轨迹进行分类。神经网络参数量仅有0.22 M
在自建手部检测数据集上的平均精度均值(mAP)交并比(IoU)=0.50︰0.95可以达到68%。在RK3568嵌入式平台上,每帧推理和后处理时间仅有31 ms
Muneeb Ur Rehman,Fawad Ahmed,Muhammad Attique Khan,Usman Tariq,Faisal Abdulaziz Alfouzan,Nouf M. Alzahrani,Jawad Ahmad,6.Dynamic Hand Gesture Recognition Using 3D-CNN and LSTM Networks[J].Computers, Materials & Continua,2022.