上传时间:时间:2026-09-11 14:28:12
摘要:
随着人工智能技术的发展,基于视觉的物品识别作为构建物联网感知层的关键组成部分,与分拣机器人结合后,可广泛应用于各类货物分拣场景。然而,在物品混乱摆放的复杂环境中,由于目标物品与干扰物品间存在空间距离差异,仅依赖二维图像层面的物品识别算法难以有效区分二者,从而对机器人的正常抓取动作产生负面影响。为解决此问题,本文提出一种名为“3Deus”的轻量化复杂环境物品识别方法。该方法融合深度学习与三维点云数据处理技术,首先利用三维点云整体消除干扰物品所在平面,并基于改进的随机采样一致性算法区分目标物品平面与堆叠干扰物;其次,引入平面扩张机制确保目标物品平面点云的完整性;最后,借助物品识别算法获取目标识别框,并构建其与具体点云簇的映射关系。本文将3Deus部署于边缘计算设备,并通过构建多种实验场景验证其有效性与鲁棒性。实验结果表明,与传统随机采样一致性算法相比,3Deus能有效区分目标与干扰物品,准确率达95%以上;同时,其采用的平面扩张机制使目标物品的识别准确率提升了30.48个百分点。
关键词: 物品识别;3D点云探测;机器视觉;深度摄像头;平面检测
物品识别作为物联网感知层的核心任务之一,是实现环境信息采集与智能处理的关键技术。近年来,随着基于视觉的物品识别算法的快速发展,其已被广泛应用于违禁品检测、工业生产、交通运输等诸多领域。当前,物品识别算法主要分为基于传统视觉模型与基于深度学习模型两类。前者如Viola-Jones算法、基于Gabor与LDA结合的方法、基于SIFT特征与RANSAC匹配的算法等,通常依赖于工特征提取,应用场景有限。相比之下,深度学习模型凭借其强大的自动特征提取能力,展现出更高的鲁棒性,典型代表包括SAM2、YOLOv11、DN-FPN等。
然而,随着工业物联网应用场景对空间信息需求的日益增长,单一物品识别算法的局限性逐渐显现。此类算法通常处理的是二维图像,而二维图像仅能呈现物体在平面上的投影,难以利用空间距离信息区分处于不同平面的同类物品。以分拣机器人为例,其工作场景通常要求严苛。如图1所示的典型机械臂分拣作业场景中,待分拣物品被无规则放置于料架上,目标物品识别难度极大。由于单一物品识别算法无法依据空间特征区分目标与干扰物,当干扰物堆叠在目标周围并进入摄像头视野时,算法易将其误判为目标,导致错误分拣。
与此同时,深度摄像机技术的成熟与普及使得实时获取场景空间信息成为可能,并已逐步应用于医学成像、农业采摘、无人驾驶等领域。主流深度摄像机按其技术原理可分为三类:基于结构光技术(如Orbbec Gemini 2 L、Orbbec Astra 2)、基于双目视觉技术(如Intel RealSense D455系列)以及基于飞行时间测量技术(如微软Azure Kinect)。其中,结构光型深度摄像头需发射特定结构光线(如红外线)并接收反射光以实现主动探测。尽管其测量距离受光线强度影响,且易受环境光线及物体表面吸收特性的干扰,但因其具备低成本、低功耗及提供实时低分辨率三维点云数据的优势,通用性更强。三维点云由深度摄像头捕获,包含众多带有深度信息的点,用以表征场景的立体特征。如何利用三维点云中的空间特征来弥补二维图像识别算法在工业分拣场景中的不足,已成为当前研究热点。
针对上述问题,已有研究者尝试将深度学习应用于三维点云处理。例如,PointStaClu采用神经网络进行特征提取,并通过稳定聚类判别优化点云聚类任务。另一些方法则采用点云语义分割,将具有相似特征的点聚类为同质化区域。然而,三维点云通常由数万个点构成,即便经过下采样预处理,其数据规模依然庞大,导致模型在训练与推理阶段产生大量内存占用和时间消耗。因此,基于深度学习的三维点云处理模型难以直接部署于资源受限的嵌入式设备。
鉴于此,本文尝试将深度摄像机与物品识别算法相结合,提出一种基于三维点云探测的轻量化物品识别方法——3Deus。其核心在于利用三维点云数据构建精确的目标物品及其所处平面的点云模型(简称目标点云模型)。该方法通过串行聚类集合改进传统随机样本一致性(RANSAC)算法,实现目标点云模型的初步构建;继而引入平面扩张机制,解决平面点云破碎、边缘损坏及误删等问题,构建更精细、完整的目标点云模型。在物品识别层面,3Deus通过三维与二维空间的映射,实现立体空间信息与像素信息的一致性绑定;利用通用物品识别算法YOLOv11完成场景内所有物品的识别,并结合所构建的目标点云模型,从识别结果中剔除干扰物品,最终实现对目标物品的精准识别。
由于3Deus在点云探测过程中采用低复杂度的聚类等算法提取三维空间特征,且可灵活选择物品识别算法的模型规模,相较于基于深度学习的点云处理方法,其更为轻量化,无需桌面级高性能显卡支持,硬件成本更低。实验中,我们将3Deus分别部署于嵌入式边缘设备Jetson Nano和Jetson NX上,验证了其实时性,结果表明其更适用于物联网边缘设备。
本文的主要贡献如下:
提出一种基于串行聚类集合改进的RANSAC算法,解决了传统RANSAC算法在拟合平面时无法区分目标物品平面与堆叠物平面的问题。
提出平面扩张机制,在移除干扰点云的过程中,通过判断被删点的空间位置,保留原本属于目标平面的点云,从而提升平面的完整性,避免误删。
提出一种相较于点云深度学习方法更为轻量化的点云探测与分析方案,具有更低计算量、更低硬件成本和更高可嵌入性。
设计多种实验场景,系统验证了3Deus在区分目标与干扰物方面的准确性及其在嵌入式设备上的计算效率。在Jetson Nano与Jetson NX上的实时性测试表明,3Deus的处理时间达到了业界先进水平。
当前物品识别技术作为物联网感知层的重要组成部分,在应对复杂场景时适应性仍显不足。为此,本文提出了一种基于点云探测的复杂场景物品识别方法——3Deus。该方法利用聚类集合改进传统RANSAC算法,通过精准去除干扰物所在平面点云,获取目标台面点云。在此基础上,进一步结合凸包算法、平面扩张机制及三维空间关系,准确构建目标物品及其所处平面的点云模型。通过将物品识别模型的输出与点云探测结果相融合,实现了目标物品的高精度识别与干扰物的有效区分。对比实验证明,将3Deus应用于多个复杂场景后,去除干扰物能显著提升目标物品的识别精度,且该方法适合部署于计算资源受限的嵌入式设备。
未来工作将继续探索3Deus在实时性方面的进一步优化潜力,以期在更复杂的场景中实现更高效的物品识别。
智能电网是当今世界电力系统发展方向,也是我国电网升级改造的目标。针对我国现有电网管理的应用程序及系统呈现分布式和异构等特点,从国内外智能电网信息集成技术的研究现状出发,分析现有电网信息集成的不足以及智能电网信息集成的要求,提出智能电网异构信息集成框架的方案。 论文关键词:智能电网;信息集成;公共信息模型:CLS;平台 0引言 智能电网是当今世界电力系统发展变革的最新动向,是节能减排、可持续和...
软件项H的有效管理,对项目的成败具有至关重要的作用。软件项目的风险体现存些方血,如何回避这些风险,存本文中进行了探讨,最后指出建立合理的管理流程,对软件项目的管理来说,是非常重要的。 论文关键词:软件项目:管流程;风险分析 0引言 软件项目管理的提出是在2O世纪70年代中期的美国,当时美国国防部专研究了软件开发不能按时提交,预算超支和质量达到用户要求的原因,结果发现70%的项目是因为管理不善...
结合单位的实际,分析了现有计算机专业课程特点和不足,讨论了高师计算机专业学生开设信息安全法律法规课程的必要性、可行性,分析了信息安全技术课程、与信息安全有关法律法规课程的特点.给出了高师信息安全法律课程的教学目标定位、设置方法. 论文关键词:高师计算机专业;信息安全;法律法规课程 人类进入21世纪,现代信息技术迅猛发展,特别是网络技术的快速发展,互联网正以其强大的生命力和巨大的信息提供能力和检...
传统的高级英语教学模式以教师为中心,以课本为依托,学生通过教师的传授被动的接受知识。本文主要探讨如何在建构主义学习理论指导下,建立基于多媒体网络技术的高级英语教学模式,使课堂教学更具趣味性和真切性,扩展学生的知识面,提高学生发现问题、分析问题、解决问题的能力以及语言实际应用和交际的能力。一、建构主义学习理论指导下的高级英语信息时代的外语教学改革应将当代外语教学理念和实践与最前沿的多媒体和网络技术结...
网络信息安全中防火墙扮演着重要角色,而硬件防火墙对大型网络安全更是至关重要,研究硬件防火墙将为大型网络的安全增加砝码。通过对硬件防火墙工作原理的研究,明白为何大中型网络要使用硬件防火墙,理解硬件防火墙在网络中的工作原理和过程,知道硬件防火墙的基本配置考虑要素。了解硬件防火墙的选购标准,增强对硬件防火墙在网络信息安全中重要性的认识。 论文关键词:网络信息安全;大型网络;硬件防火墙;三次握手;过滤;...
企业局域网是一个采用lnternet技术建立的机构内联网络。它以TCP/IP协议作为基础。以Web为核心应用.构成统一和便利的信息交换平台。针对企业局域网络中存在的各种不安全因素.管理的不完善、人为的蓄意破坏以及技术上的漏洞等问题,设计一套符合企业局域网实际的安全方案.并阐述了方案的具体内容和作用 论文关键词:网络:安全技术;管理措施 1前言 随着企业科学管理水平的提高.企业管理信息化越来越...
新课程标准认定中学生的信息技术应用技能为非零起点。然而,现实情况是复杂多变的,由于受不同的环境和不同教育的影响,使得学生在信息技术的基础以及兴趣、意志等非智力因素上呈现了很大的差异。因此,教学总会面临学生水平参差不齐的状况。在差异存在且不可能消除的前提下,如何实施有差异的教学,培养学生的信息素养,是广大信息技术教师面临的一大课题。本文作者根据自己在初中信息技术教学中面对学生差异开展教学活动的策略所...
摘要:加强通信网建设研究,需要更新思维、注重效能、讲求效益、加强管理。关键词:民航通信网;工程建设;维护手段;新标准随着新技术、新设备、新手段的广泛运用,民航通信网的建设水平、发展速度、建设规模还不能完全适应信息技术发展的要求,不能完全满足信息化发展对民航通信保障的要求。对此,我们必须加强通信网建设研究。一、更新思维,确立工程建设的新模式目前,国内电信事业发展迅猛,数字化、高速率的通信网已经覆盖全...
本文根据电力企业信息化建设的要求,采用MPLSVPN技术建设安全、可靠、稳定、合理、经济、高效、扩容性好、兼容性强的电力数据网。文章从MPLSVPN理论出发,重点研究MPLSVPN在承德电力数据网中的部署方案。关键词:MPLSVPNOSPFIP路由电力数据网 0引言 鉴于国家电网公司“SG186”、华北电网公司“5E”的接入需求及变电站建设规...
有效的课堂师生互动是课堂焕发生命活力的重要途径。本文从教学环境的创设、教师教学观念的转变、相关内容的教师培训、教师课堂管理及对课堂生命要素的关注等五个方面论述了课堂师生互动的有效策略,旨在为课堂教学效率和质量的提高提供拙见。 当前,新课程已经在全国各地中小学实施。对新课程中师生角色行为的转变及师生课堂交往成为人们关注的问题,也成为教育领域讨论的热点问题。在新的课程理念中,凸显学生在课堂中的主体地...