基于RGB-D传感芯片与边缘控制的
所属分类:技术论文
上传者:wwei
文档大小:3981 K
标签: 三维唇语识别 RGB-D传感芯片 深度几何
所需积分:0分积分不够怎么办?
文档介绍:针对RGB唇语识别在暗光和大角度偏转下性能退化的问题,该文围绕RGB-D传感芯片、FPGA-ARM控制与识别算法的协同链路,量化深度几何信息的贡献开展研究。RGB-D模组同步输出彩色、深度及标定信息,FPGA-ARM完成统一触发、双缓冲、DMA搬运与环境状态封装,识别端依据照度、姿态及深度有效点率实施跨模态加权和深度支路门控,从而把传感数据质量、控制时序与算法决策联结为闭环。实验装置集成RGB CMOS、主动红外深度单元、FPGA-ARM控制板、照度闭环模块和姿态转台,基于20名说话人、3种光照和3种偏转角度构建18000个RGB-D样本。结果表明,正常正面条件下RGB-D模型较纯RGB模型提高6.8个百分点;50 lux暗光叠加60°偏转时,准确率由41.2%提升至72.5%,增益31.3个百分点。结果说明复杂环境下系统鲁棒性不仅来自RGB-D算法,还依赖双模态同步、有效深度供给与端侧门控的协同。该文据此提出RGB-D感知、FPGA-ARM控制与边缘识别的架构级协同链路。
现在下载
VIP会员,AET专家下载不扣分;重复下载不扣分,本人上传资源不扣分。