一种基于多模态感知技术的上下料系统.pdf
一只****呀盟
在线预览结束,喜欢就下载吧,查找使用更方便
相关资料
一种基于多模态感知技术的上下料系统.pdf
本发明公开了一种基于多模态感知技术的上下料系统,包括传送带、称重传感器、视觉传感器、光电传感器、温度传感器、声波传感器以及上下料系统,利用声波传感器,对执行上下料的机器人进行监控,解决上下料机器人故障信息反馈不及时的问题;利用视觉传感器检测加工完成的产品进行检测,有效解决人工检测误差大、传统接触式自动检测方法有位置盲区的问题;以光电传感器为定点位置传感器、以温度传感器检测加工环境温度和设备温度、以高精度重力传感器作为加工工件称重传感器,完善整个加工工件的生产流程。
一种基于多模态融合的自主系统感知方法及系统.pdf
一种基于多模态融合的自主系统感知方法及系统,其方法包括:获取多个车辆的传感器采集的数据,利用训练好的多模态数据融合框架对传感器采集的数据进行处理,将处理的结果进行融合,得到一级融合结果,基于目标识别业务,对一级融合结果进行处理,保留感兴趣区域信息,利用已有的多视角融合算法构建协作级融合架构,对多个车辆上传的感兴趣区域信息进行二次融合,得到二次融合结果,将二级融合结果下发至车辆,以供车辆根据二级融合结果做控制决策;本申请通过构建车辆级联协作数据融合框架,可通过级联框架提高和扩展环境视野,解决单个自动驾驶车辆
一种基于无网格传感平面的柔性多模态触觉感知系统.pdf
本发明公开了一种基于无网格传感平面的柔性多模态触觉感知系统,其中无网格柔性平面传感模块用于感知多模态触觉信息并转化为电阻信息,边缘电极模块包括N根电极,均嵌入在无网格柔性平面传感模块边缘,N根电极分布式排列,互相均不接触,任意两根电极组成一个电阻通道,电阻测量电路模块用于记录边缘电极模块中多路通道电阻变化信息并输入神经网络模块;神经网络模块用于输出多模态触觉信息。本发明的技术方案中采用多根边缘电极相互组成电阻测量通道,电阻测量通道数影响多模态触觉信息的感知精度,在保留精度的情况下能够显著减少电极数量,避免
一种水下目标多模态信息感知系统及方法.pdf
本发明涉及水下目标信息距离测量领域,公开了一种水下目标多模态信息感知系统及方法,该系统包括激光雷达子系统、视觉成像子系统,以及信号采集处理与控制模块;激光雷达子系统通过发射脉冲激光获取水下目标的距离信息;视觉成像子系统通过发射脉冲LED光获取水下目标的视觉图像信息;信号采集处理与控制模块对两个子系统进行控制,并进行信号采集与处理。本发明所公开的系统及方法将激光雷达和视觉成像相结合,可以同时获取水下目标的高精度三维点云信息和高清视觉图像信息,并通过设计两个子系统的工作时序,避免了两个光源之间的干扰,同时视觉
一种基于互补内容感知的多模态事件检测方法.pdf
本发明涉及多模态处理技术领域,提供了一种基于互补内容感知的多模态事件检测方法。该方法包括:将经过预处理的包括图像和文本的多模态数据集,随机划分成训练集和验证集;采用图像编码器和文本编码器提取图像和文本的特征,构建多模态图结构;基于多模态图结构,构建多模态事件检测模型;通过多模态事件检测模型损失函数和反向传播算法训练多模态事件检测;将多模态图结构输入至目标多模态事件检测模型,获得多模态事件检测结果。本发明的方案,拓展了多模态事件检测的思路,提高了事件检测的效果,弥补了复杂多模态关系建模不充分的缺陷。