采用手势识别的智能输入系统设计

发布时间:2015-05-24 阅读量:864 来源: 我爱方案网 作者:

【导读】按照当今智能家居发展的趋势,Smartmouse智能手势输入系统分为手持端(手势数据采集模块)和主机端(数据接收处理模块),手持端和主机端通过无线方式连接。手持端可方便地佩戴在使用者手指上,对使用者的手势数据进行采集;主机端可实现与PC机接口,并可对手势数据进行接收和智能处理。


Smartmouse智能手势输入装置的功能框图如图1所示。

Smartmouse智能手势输入装置,可准确识别人的各种手势并依据手势流畅的进行如移动鼠标、左键、右键、删除、确定、取消、移动文件等等相应操作。信号采集端可实时完整的采集人手部动作的信息,经整理后以相应的数据格式通过2.4G无线频段传输给PC或接收机上的主机端;主机端可在无需任何驱动程序的前提下将自身例化为USB接口形式的鼠标键盘复合设备;接收数据后,对数据进行智能化处理,识别出手势所表达的意义,同时将相应操作反馈给PC或接收机。对手势的识别率应达到消费类电子的水平。
智能输入

图1 系统原理框图

1 系统功能实现原理

Smartmouse智能输入系统采用加速度传感器对使用者的手部动作数据进行采集和初步识别,结合无线通信和USB接口技术,通过自创的简单且智能的手势识别处理算法,将得到的手部动作信息通过USB接口传输给PC或接收机,使用户能够以更符合肢体动作习惯的方式对PC进行控制,给用户带来全新的操作体验。

Smartmouse智能输入系统硬件结构框图如下图2所示。
智能家居

图2 系统硬件结构框图

(1)手势数据采集

Smartmouse智能手势输入系统的手持端需对使用者手部动作数据进行连续且准确的采样,并将采集到的手部动作数据通过无线形式传输给连接在PC机USB接口上的主机端。本系统采用美新公司生产的双轴MEMS加速度传感器芯片MXC6202xMP作为主要的手势动作感知器件,在正确感知手部动作数据的同时,达到低功耗、高精度的要求。

(2)数据接收与处理

连接在PC机USB口上的主机端,即数据接收与处理模块,将自身例化为PC机的鼠标和键盘复合设备,同时将通过无线方式接收到的手势数据通过识别算法进行智能处理,将处理后的结果以鼠标键盘操作数据的形式传输给PC机。数据接收与处理模块与PC机的连接过程无需安装任何驱动,可实现即插即用。对手势数据的识别率能够满足消费类电子要求。本系统中以AVR单片机为核心处理单元,负责将设备按照USB协议枚举为USB复合设备,管理无线收发模块,并通过无线模块对手持端进行管理,同时将接收到的手势数据通过自创的手势识别算法进行分析,将结果发送给主机端。

(3)数据的传输


采集的手势数据的传输采用当前在消费类电子产品领域应用比较广泛的2.4G频段,在保证带宽的前提下准确传输数据和控制信息,同时可实现设备休眠等降低功耗的操作。

(4)主机端与PC接口

主机端即手势数据处理模块通过USB接口与PC机进行连接,将自身例化为PC机的键盘鼠标复合设备,在不需要任何驱动的前提下实现即插即用。

(5)电源供给

手持端采用微型锂电池作为电源,体积较小并可进行重复充电与使用。同时通过休眠、停机等操作降低系统功耗。

主机端通过主机USB接口供电,在长时间不使用情况下可进行休眠操作。

(6)智能识别率

Smartmouse智能手势输入系统需要流畅的对PC机进行操作,对手势的识别率有较高要求,同时能对现今比较流行的演示软件进行复杂操作。本设计中通过32位AVR单片机对接收到的手势数据进行处理,结合本团队自创的手势识别算法,识别出手势具有的意义。

2 硬件平台选用及资源配置

由于本系统所包含的模块众多、算法复杂,同时对功耗、稳定性又有很高要求,所以在平台的选择时分两个步骤进行:

功能实现阶段,主要为完善手势识别算法、USB接口协议、无线通讯协议等。各个部分均使用现成模块。无线收发部分采用TI公司生产的eZ430无线收发模块;算法硬件实现和USB接口等的管理采用Atmel公司提供的EVK1100开发板。

作品完善阶段,在实现手势识别算法、USB接口协议、无线通讯协议等的基础上,使用Atmel公司的生产的ATXMEGA32D4单片机和无线收发芯片AT86RF212自制手持端;采用AT32UC3L064单片机和无线收发芯片AT86RF212实现主机端的数据接收、手势识别算法和USB接口管理。

3 系统程序架构

本系统中,软件设计主要分为手势数据采集、无线通讯协议、手势数据识别算法和USB接口协议几部手势数据采集:在主机端的控制下对手势数据进行采集并按一定的格式打包准备进行传输;

无线通讯协议:管理手持端与主机端之间的连接和数据传输;

手势识别算法:为本系统中的算法核心,采用一种自创的基于加速度传感器数据的智能识别算法,对手势数据进行处理,得出手势所具有的意义;

USB接口协议:管理主机端与PC或接收机之间的连接,将主机端枚举为电脑的鼠标键盘复合设备,实现在无驱动条件下的即插即用。

4 系统程序流程

本系统中程序主要分为手持端程序和主机端程序,程序流程图如下图3所示。
智能家居

图3 程序运行流程图

5 系统预计实现结果

借助Atmel提供的EVK1100系列开发板和TieZ430无线模块实现样机一套,实现鼠标所有功能,并能对简单的浏览软件进行控制,同时达到识别准确率90%以上。自制产品初级模型一套,实现鼠标所有功能,同时具有“空中画笔”功能,能对简单的浏览软件进行流畅的控制,达到准确识别90%以上。

相关文章

Smartmouse手势识别智能输入系统设计方案

手势识别新玩法:超声波麦克风手势识别方案

浅谈穿戴设备的语音/手势识别技术
相关资讯
半导体产业升级战:三星电子新一代1c DRAM量产布局解析

在全球半导体产业加速迭代的背景下,三星电子日前披露了其第六代10纳米级DRAM(1c DRAM)的产能规划方案。根据产业研究机构TechInsights于2023年8月22日发布的行业简报,这家韩国科技巨头正在同步推进华城厂区和平泽P4基地的设备升级工作,预计将于2023年第四季度形成规模化量产能力。这项技术的突破不仅标志着存储芯片制程进入新纪元,更将直接影响下一代高带宽存储器(HBM4)的市场格局。

蓝牙信道探测技术落地:MOKO联手Nordic破解室内定位三大痛点

全球领先的物联网设备制造商MOKO SMART近期推出基于Nordic Semiconductor新一代nRF54L15 SoC的L03蓝牙6.0信标,标志着低功耗蓝牙(BLE)定位技术进入高精度、长续航的新阶段。该方案集成蓝牙信道探测(Channel Sounding)、多协议兼容性与超低功耗设计,覆盖室内外复杂场景,定位误差率较传统方案降低60%以上,同时续航能力突破10年,为智慧城市、工业4.0等场景提供基础设施支持。

财报季再现黑天鹅!ADI营收超预期为何股价暴跌5%?

半导体行业风向标企业亚德诺(ADI)最新财报引发市场深度博弈。尽管公司第三财季营收预期上修至27.5亿美元,显著超出市场共识,但受关税政策驱动的汽车电子产品需求透支风险显露,致使股价单日重挫5%。这一背离现象揭示了当前半导体产业面临的复杂生态:在供应链重构与政策扰动交织下,短期业绩爆发与长期可持续增长之间的矛盾日益凸显。

全球可穿戴腕带市场首季激增13%,生态服务成决胜关键

根据国际权威市场研究机构Canalys于5月23日发布的调研报告,2025年第一季度全球可穿戴腕带设备市场呈现显著增长态势,总出货量达到4660万台,较去年同期增长13%。这一数据表明,消费者对健康监测、运动管理及智能互联设备的需求持续升温,行业竞争格局亦同步加速重构。

RP2350 vs STM32H7:性能翻倍,成本减半的MCU革新之战

2025年5月23日,全球领先的半导体与电子元器件代理商贸泽电子(Mouser Electronics)宣布,正式开售Raspberry Pi新一代RP2350微控制器。作为RP2040的迭代升级产品,RP2350凭借双核异构架构(Arm Cortex-M33 + RISC-V)、硬件级安全防护及工业级性价比,重新定义了中高端嵌入式开发场景的技术边界。该芯片通过多架构动态切换、可编程I/O扩展及4MB片上存储等创新设计,解决了传统微控制器在实时响应能力、跨生态兼容性与安全成本矛盾上的核心痛点,为工业自动化、消费电子及边缘AI设备提供了更具竞争力的底层硬件方案。