玩转手势识别,你的数据准备好了吗?

几年前,QQ增强现实与电影《蜘蛛侠:英雄归来》进行合作。作为首次推出的三维手势识别产品,QQ增强现实会对用户划出的类似蜘蛛侠”吐丝”的手势进行扫描。

QQ增强现实与《英雄归来》合作的手势识别互动产品

手势是一种人类的基本特征,手势识别技术的发展为人机无接触交互提供了可能。

根据手势在时间和空间上的差异,手势可分为静态手势和动态手势。对静态手势识别的研究主要考虑手势的位置信息,而研究动态手势识别除了要考虑手势空间位置变化,还需要考虑手势在时序中的变化规律。

手势识别技术研究已经成为热门课题,基于手势识别技术的应用也开始渗透到人们生活的方方面面,这是一项技术走向成熟的标志。手势识别技术主要有下面几个应用场景:

手势识别与AR

用手势取代键盘和鼠标作为输入来控制自己的计算机,能够使人机交互得更加智能化、自然化。将人们日常生活中所获得的经验直接运用到交互活动中,能够充分提高虚拟世界中的可操作性。

电子游戏是这一场景下的典型应用。《BombU!》是Steam平台上首款支持Fingo手势识别的游戏。Fingo手势模式上线后,玩家们终于能够摆脱手柄限制,再也不用担心玩上头把手柄丢出去的惨剧了。

《BombU!》是一款支持Fingo手势识别的游戏

手势识别与家居

智能家居手势控制根据手部骨节坐标信息,可灵活定义业务场景中需要用到的手势,实现对智能电视、智能空调、智能音箱的远程手势操控。

例如,人们可以用左划或右划的手势充当遥控器进行电视换台,用指上、指下、握拳等手势控制空调的开关和温度的高低。

三星、康佳、TCL等电视厂商都已经推出了带有手势识别的电视机产品,用户可以直接用掌心挥动、握拳抓取、左右挥动、双拳合作等手势来完成移动控制、选择确认、切换页面、缩放和旋转等功能。

用户使用手势可以对智能电视进行远程控制

手势识别与车载

驾驶员与中控的互动一直被认为是驾驶不安全因素之一,其主要原因就在于分散驾驶员的注意力,手势识别作为一种替代方案受到越来越多的重视。

宝马在手势识别与智能车载的结合方面做了诸多努力。2015年,宝马推出了iDrive系统,用户可通过不同的手势实现车内接听电话、调节音量、切歌、控制导航等功能的操作。

新款宝马3系列已经使用了动态手势识别技术,支持包括主副驾驶、后排乘客交互的多种场景。

宝马在手势识别与智能车载的结合方面做了诸多努力

手势识别与手语

手语是聋哑人的主要表达方式,但对于未经过手语训练的人,理解这种语言并非易事。将手势识别技术应用到手语认知上,将大大提高聋哑人与普通人的交流质量。

针对这一问题,优图团队将计算机视觉技术应用到手语识别场景,发布了优图AI手语翻译机。该产品通过自研算法实现了对复杂手语表达的识别。

算法还参考了先进的手势识别、动作识别和序列翻译等技术,考虑了手语的地域性和多样性表达,包含了不同的表达习惯和速度。

优图AI手语翻译机界面

训练一个有效运行的AI系统,需要大量的数据。应用软件分析系统对数据集进行深度地分析、挖掘才能保障机器学习的效果。

手势识别也是如此,若想保障手势识别的准确率、提升相关产品的应用价值,用大量且优质的数据进行机器训练是必不可少的环节。

数据堂深耕人工智能数据服务领域多年,在深刻理解手势识别应用场景的基础上,推出了《180,718张手语手势识别数据》、《559,460段50种动态手势识别数据》和《314,178张18种手势识别数据》,为手势识别更广泛的落地应用提供助力。

180,718张手语手势识别数据

手语手势识别数据样例

该数据集包括静态手势83,013张和动态手势97,705张,采集多样性涵盖多种场景、41种静态手势、95种动态手势、多种拍摄角度和多种光照条件。

工作人员对21个关键点(每个关键点有可见不可见属性)、手势类别和手势属性(左手或右手)进行标注。在x,y方向上的点位置误差均控制在3个像素内,按关键点为单位,数据标注准确率超过95%。

559,460段50种动态手势识别数据

动态手势识别数据样例

该数据多样性包括多种场景(自然景观、街景、广场等)、50种动态手势、5种拍摄角度、多种光照条件和不同拍摄距离。

在标注方面,metadata中标注了采集场景、季节、时间、角度、设备、光照条件、视频数据格式、视频分辨率、视频帧率,以及被采集人的人种、性别和年龄。数据可用于智能家居、音响设备、车载系统的动态手势识别任务。

314,178张18种手势识别数据

18种手势识别数据样例

该数据的采集多样性涵盖多种场景、18种手势、5种拍摄角度、多年龄段、多种光照条件。

工作人员对21个关键点(每个关键点有可见不可见属性)、手势类别和手势属性进行标注。数据关键点标注准确率高达97%,手势类别、手势属性标注准确率超过97%。

AI 时代,手势识别交互方式的加入,让我们与机器有了更多互动的可能。可以预见的是,手势交互将是未来人机交互必不可少的一部分。数据堂一直致力提供高质量的人工智能数据产品和服务,期望能在 AI 时代助力相关企业为用户带来更加自然友好的交互体验。

Original: https://blog.csdn.net/weixin_44532659/article/details/120309304
Author: 数据堂官方账号
Title: 玩转手势识别,你的数据准备好了吗?

原创文章受到原创版权保护。转载请注明出处:https://www.johngo689.com/780344/

转载文章受原作者版权保护。转载请注明原作者出处!

(0)

大家都在看

亲爱的 Coder【最近整理,可免费获取】👉 最新必读书单  | 👏 面试题下载  | 🌎 免费的AI知识星球