肌电手势识别中的多流融合和多视图深度学习方
作者2019-03-27 10:21未知
手势是一种自然、直观且易于学习的人机交互手段。作为感知用户界面的一个重要组成部分,手势识别的核心问题是如何让计算机能够从输入信息中准确识别出用户的手势动作。基于表面肌电的人机界面凭借其良好的可穿戴性、对光照条件和遮挡的鲁棒性以及对细微动作较强的区分能力,成为感知用户界面领域的研究热点之一。随着人们对感知用户界面的精确性要求越来越高,深度学习方法在基于表面肌电的手势识别系统中得到了广泛应用,但依然面临以下问题:首先,相关研究表明,每个手势中只有一部分前臂肌群起到主导作用,且不同手势与前臂不同肌群的肌电信号之间具有较强关联性;其次,深度学习方法在基于高密度肌电信号的手势识别中普遍具有较高的性能,而在基于稀疏多通道肌电信号的手势识别中性能依然难以令人满意;最后,来自不同被试或采集会话的肌电信号之间存在个体差异,这种个体差异会导致手势识别中的训练数据和测试数据具有不同分布,使得从当前个体学习获得的分类器模型,难以有效扩展和应用到其他个体。本文重点在深度学习框架下围绕上述问题进行探索和尝试,主要研究内容包括:1).基于手势动作与肌群产生的肌电信号的关联性假设,提出一种面向肌电手势识别的多流融合深度学习方法,对前臂肌电信号生成的肌电图像进行多流表征,将得到的多个子图像分别输入多流卷积神经网络各个分支中进行建模,之后通过特征层多流融合,把多个分支学习到的深度特征融合在一起。在不同肌电数据集上的结果表明,在多流融合深度学习框架下对前臂不同肌群的肌电信号进行关联性建模,可以有效提高肌电手势识别的准确率。2).尝试在基于稀疏多通道肌电信号的手势识别中采用多视图学习方法以获得更高的手势识别性能。提出一种面向肌电手势识别的多视图深度学习方法,从稀疏多通道肌电信号中提取多个经典特征集构建为肌电信号不同视图的数据,然后通过一个深度学习框架下的视图选择过程,选取具有较优手势识别性能的视图,将其数据输入多视图卷积神经网络中进行建模。相比单视图学习,多视图学习可以充分利用原始数据多个视图下的信息,从而带来性能的提升。3).将会话间或被试间手势识别时肌电信号个体差异导致的训练数据和测试数据不同分布问题视为一个领域自适应问题,其中训练数据和测试数据分别属于不同的源域和目标域。尝试通过少量标定数据进行领域自适应,使得训练好的深度神经网络模型可以有效地扩展和应用到新用户或新会话。
最新更新
热门推荐
- [硕士论文]企业战略管理视角出发研
- 本文是 mba论文 ，本论文从企业战略管理的视角出发，依靠文献检索法、调查研究法、对比分析法对案例银行(乌鲁木齐银行)互联网金融竞争环境和因素(外延和内涵)进行了系统而又深入的研究，并综合运用SwOT 分析得出so战略应为乌鲁木齐银行首选的战略，同时给出了-些战略实施的保障措施,以帮助案例银行重新调整竞争模式和发展战略，创新传统的经营模式，以应对新形势下的挑...[全文]
- [硕士论文]传统商业银行发展互联网
- 本文是 mba论文 ，传统商业银行发展互联网金融的主要模式。在互联网金融的强力冲击下，商业银行的金融中介地位逐步弱化，收入来源一再受到冲击，传统的主要收入来源利差收入也难抵颓势。在这样的背景下，传统商业银行唯有积极结合互联网金融并开展相关业务，目前主要模式如下： （一）与互联网企业合作，资源共享 互联网+时代下，跨界合作成为趋势，传统商业银行与...[全文]
- [硕士论文]国外金融行业市场进展情
- 本文是 mba论文 ，随着互联网金融的蓬勃发展，人们分别通过理论研究、市场预测及统计分析等方法对互联网金融及其对传统金融机构的影响，以及在影响之下金融机构采取的战略转型进行了深入研究，并取得了丰硕的成果。下面分别介绍国外相关研究进展情况及发展趋势。 国外研究综述 （一）关于互联网金融对传统金融行业影响的研究 在国外，互联网形式的商业模式和金融业...[全文]
- [硕士论文]网络银行金融机构市场主
- 本文是 mba论文 ，在 20 世纪 90 年代中期，美国出现了一家名为安全第一网络银行（Security First Network Bank, SFNB），正式标志着互联网金融的诞生。随着越来越多的金融科技企业推出高效便捷的金融产品和服务，以网络贷款、网上银行等为代表的金融服务开始在美国金融市场迅速发展，互联网金融企业与传统金融机构开始相互竞争。截至目前，传统金融机构的市场主导地位没有发生...[全文]
- [硕士论文]【mpa论文】新媒体视角下
- 本文是 mpa论文 ，新媒体，从字面意思上理解，就是一种新的媒体形式，是相对于传统媒体而言的。New media是新媒体一词的英文翻译。新媒体概念的提出人是美国的戈尔德马克。从普遍意义上来说，新媒体是继报刊、广播和电视等传统媒体之后发展起来的媒体形态，是通过数字和网络技术，依托互联网平台，以微信、微博、贴吧、论坛等为渠道，向用户传播快捷、广泛的信息、为...[全文]
- [硕士论文]地方政府公信力mpa论文研
- 本文是 mpa论文 ，人无信不立，业无信不兴。同样，国无信必颓，政无信则衰。当前，我国经济和社会发展都取得了重大成就，人们的生活水平也逐步提高，公民参政议政的意识越来越强烈，对政府提出了新的期待。互联网时代，通讯媒体迅速发展，网络信息日益多元化，政府的行政行为都浮现在人们的视线中，一方面加强了对政府工作人员的监督，另一方面信息的多元化网民的...[全文]
