一种农田专用除草机器人及其操控方法与流程_新闻中心_乐鱼vip下载/乐鱼体育平台

全国服务热线:18329589137

  • 一种农田专用除草机器人及其操控方法与流程

    时间: 2023-12-04 13:05:28 |   作者: 新闻中心

      众所周知,杂草一直是危害农田作物茁壮成长的一大田间杀手,杂草丛生不仅和农田作物竞争土壤养分,而且还夺取有限的生长空间和太阳光照,同时还容易诱发田间灾害,极度影响农田作物的生长,导致农田作物的减产。

      我国农业的田间除草主要以传统的方式来进行,例如人工喷洒农药、人工机械除草等,大量的喷洒农药不仅污染自然环境而且不利于农田作物的生长,同时也会存在药物残留问题,而人工机械除草的方式效率低下,劳动成本过高,不适合大田作业。

      随着我国农业现代化进程的不断加快,全民环保意识的慢慢地加强,传统的田间除草方式不再适用,同时现有的智能除草机器人智能化程度有待提升,为响应国家的号召,因此急需一种农田专用除草机器人及其操控方法来解决上述问题。

      本发明的目的是提供一种农田专用除草机器人及其操控方法,以解决上述背景技术中提出的问题。

      一种农田专用除草机器人,包括移动小车主体、行驶轮、除草机构和机械抓手,所述移动小车主体上安装有若干个行驶轮,行驶轮由安装在移动小车主体中的行驶轮驱动装置驱动运行,移动小车主体上安装有可调节除草机械臂机构,可调节除草机械臂机构上安装有除草机构和机械抓手,所述移动小车主体内置有用于控制可调节除草机械臂机构、行驶轮驱动装置、除草机构和机械抓手的工控机以及动力模块;

      所述移动小车主体和可调节除草机械臂机构上分别安装有深度相机一和深度相机二,深度相机一通过相机支架安装在移动小车主体上,深度相机一和深度相机二均与工控机电气连接。

      作为本发明再进一步的方案:所述深度相机一为基于tof原理的微软kinectv2,深度相机二为基于三角测量法的英特尔realsensed435。

      作为本发明再进一步的方案:所述动力模块为可充电电源,可充电电源为48v的可充电锂电池或者铅蓄电池,可充电电源可拆卸的安装在所述移动小车主体后方中间位置的凹槽内,凹槽处安装有电源罩,将可充电电源封装在内,移动小车主体上设有充电接口。

      作为本发明再进一步的方案:所述移动小车主体采用钣金材料制造成,移动小车主体上设有启动按钮、急停按钮。

      作为本发明再进一步的方案:所述行驶轮与移动小车主体可拆卸连接,所述行驶轮为直径250mm的越野实心橡胶轮胎。

      作为本发明再进一步的方案:所述可调节除草机械臂机构通过底座固定座固定在滑动挡板上,滑动挡板插接安装在固定于移动小车主体表面的u型固定板上,u型固定板的两侧壁上均开设有用于与滑动挡板相互配合的槽口。

      作为本发明再进一步的方案:还包括安装在移动小车主体前后侧的移动小车保险杠,移动小车保险杠采用合金材料制成。

      作为本发明再进一步的方案:所述的可调节除草机械臂机构包括底座、第一横臂、第一竖臂、第二横臂、第二竖臂和横轴,所述底座安装在底座固定座上,底座固定座内置用于驱动底座相对于底座固定座转动的伺服电机,第一横臂与底座转动连接,第一横臂由伺服电机驱动可相对于底座转动,第一横臂的自由端位置与第一竖臂固定连接,所述第二横臂的一端与第二竖臂转动连接,且第二横臂由其内置的伺服电机驱动可相对于第二竖臂转动,第二横臂的另一端与第一竖臂固定连接,第二竖臂的自由端位置固定连接横轴,横轴的两端位置分别安装有除草机构和机械抓手,且除草机构和机械抓手由横轴内置的伺服电机驱动,使得除草机构和机械抓手可相对于横轴转动。

      作为本发明再进一步的方案:所述整除草机构包括非常快速地旋转电机和安装在非常快速地旋转电机输出轴上的除草刀具;所述机械抓手包括机械手臂和安装在机械手臂上的液压手爪,液压手爪为电动液压抓手。

      s1、利用深度学习中的深度卷积神经网络,根据区域提议算法共享卷积特征,通过采集的数据集训练杂草和农作物分类与识别深度模型,以实现接近实时的帧率目标检测;

      s2、将训练得到的杂草和农作物分类与识别深度模型部署到工控机的操作系统中;

      s3、对深度相机一、深度相机二和可调节除草机械臂机构进行室外环境标定,实现室外空间三维立体建模;

      s4、通过相机支架上的深度相机一获取移动小车主体前方区域的杂草密度,并且确定其对应的三维空间坐标信息,实现粗略定位;

      s5、通过横轴上的深度相机二进一步的辅助定位,最终确定杂草的精确位置和姿态,实现精准定位;

      s6、通过将杂草的三维空间坐标信息转换成除草机器人的坐标信息,进而指导可调节除草机械臂机构完成精准的运动路径规划和除草操作。

      与现有技术相比,本发明的有益效果是:(1)支持可调节除草机械臂机构位置的调节和移动小车主体行驶轮的更换,使可调节除草机械臂机构和移动小车主体能适用于不同的杂草环境与田间场地,从机械原理的设计角度,采用更近实际的设计理念;

      (2)本发明可调节除草机械臂机构上的除草设备和机械抓手独立交互运行,区别于现有的机械臂除草设备,除草设备用来高效除草,机械抓手可以将所除杂草回收或者精准施肥,实现了机械臂末端的多功能交互操作;

      (3)本发明中深度相机的使用,通过两种深度相机相互配合精准识别杂草的位置和杂草的形态,一方面提高了杂草的识别和定位精度,另一方面更有助于除草机械臂装置的运动路径规划和除草操作,提高了农田除草的效率和精度;

      (4)本发明利用现代信息技术与农业深度的跨界融合,通过引入深度学习模型使传统意义上的智能除草机器人过度到智慧化的农业除草机器人,提高了除草机器人的工作效率与工作质量,大大的推动了智慧除草机器人的发展。

      图中:1、移动小车主体;2、行驶轮;3、行驶轮驱动装置;4、移动小车保险杠;5相机支架;6、深度相机一;7、u型固定板;8、滑动挡板;9、底座;10、第一横臂;11、第一竖臂;12、第二横臂;13、第二竖臂;14、横轴;15、除草机构;16、机械抓手;17、深度相机二;18、电源罩;19、充电接口;20、启动按钮;21、急停按钮;22、底座固定座。

      这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不意味着与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本实施例公开的一些方面相一致的装置和方法的例子。

      请参阅图1~7,本发明实施例中,一种农田专用除草机器人,包括移动小车主体1、行驶轮2、除草机构15和机械抓手16,所述移动小车主体1上安装有若干个行驶轮2,行驶轮2由安装在移动小车主体1中的行驶轮驱动装置3驱动运行,行驶轮驱动装置3由直流电机和直流电机座构成,所述直流电机安装在直流电机座上且输出轴与所述行驶轮2传动连接,移动小车主体1上安装有可调节除草机械臂机构,可调节除草机械臂机构上安装有除草机构15和机械抓手16,在本实施例中,可调节除草机械臂机构一种原因是用于作为除草机构15和机械抓手16的安装载体,另一方面除草机构15和机械抓手16亦可以由可调节除草机械臂机构带动实现方位的变化,使得除草机构15和机械抓手16按照设定好的运动路径和除草轨迹运动,所述移动小车主体1内置有用于控制可调节除草机械臂机构、行驶轮驱动装置3、除草机构15和机械抓手16的工控机以及动力模块,在本实施例中,工控机其实就是工业控制计算机,具有计算机的属性和特征,动力模块为可充电电源,可充电电源优选48v的可充电锂电池或者铅蓄电池,并且可拆卸的安装在所述移动小车主体1后方中间位置的凹槽内,用于整个除草机器人的供电,当然,凹槽处安装有电源罩18,将可充电电源封装在内;同时可充电电源能够最终靠预留的充电接口19进行充电,也能够最终靠将可充电电源取出,换上另一块可充电电源,然后通过外置的充电装置对要充电的可充电电源进行充电,当然,本实施例也能够使用别的类型的动力。

      在本实施例中,所述移动小车主体1和可调节除草机械臂机构上分别安装有深度相机一6和深度相机二17,其中,深度相机一6通过相机支架5安装在移动小车主体1上,优选的,相机支架5(铝合金材质)长为500mm,宽为20mm,高为800mm,距离相机支架5两侧各125mm处有两个长度为100mm的夹持架,用于安装深度相机一6,深度相机二17的安装方法可以与深度相机一6相同,亦可以直接安装在可调节除草机械臂机构前端,并通过可调节除草机械臂机构内置排线均与工控机电气连接。在本实施例中,深度相机一6优选基于tof原理的微软kinectv2,深度相机二17优选采用基于三角测量法的英特尔realsensed435,深度相机一6用于获取移动小车主体1前方区域的杂草密度,并且确定其对应的三维空间坐标信息,实现粗略定位,深度相机二17用于实现进一步的辅助定位,最终确定杂草的精确位置和姿态,实现精准定位,从而为除草机构15和机械抓手16的运动路径规划和除草操作进行先一步的铺垫。

      请参阅图1~5,本发明实施例中,一种农田专用除草机器人,在上述实施例的基础上:所述的移动小车主体1采用钣金材料制造成,移动小车主体1的长宽高分别为:1000mm、600mm和300mm,移动小车主体1在对应前后行驶轮2之间的位置处中空,用于固定工控机,移动小车主体1后方中间位置开凹槽,用于安装所述可充电电源,移动小车主体1的前后方分别对称平滑切割去边角,而且,移动小车主体1上还设有启动按钮20、急停按钮21,具体的,充电接口19、启动按钮20和急停按钮21设置在移动小车主体1后方的斜切面上。

      同时,为了适应不一样的地形,所述行驶轮2与移动小车主体1可拆卸连接,行驶轮2可以为多种不一样的轮胎,在本实施例中,所述行驶轮2为直径250mm的越野实心橡胶轮胎。

      请参阅图1~6,本发明实施例中,一种农田专用除草机器人,在上述实施例的基础上:所述可调节除草机械臂机构通过底座固定座22固定在滑动挡板8上,滑动挡板8插接安装在固定于移动小车主体1表面的u型固定板7上,u型固定板7的两侧壁上均开设有用于与滑动挡板8相互配合的槽口,此处,滑动挡板8(优选为钢制)的长宽厚分别为600mm、150mm和20mm,槽口的长度和孔径分别为300mm和20mm,必要的,滑动挡板8和u型固定板7上均开设有通孔,来作为可调节除草机械臂机构、除草机构15、机械抓手16以及深度相机二17的走线孔,方便排线内部,而且,为便于滑动挡板8的位置固定,能够最终靠螺母来实现锁紧,防止在运行时滑动挡板8等出现晃动的现象。

      请参阅图1~2,本发明实施例中,一种农田专用除草机器人,还包括安装在移动小车主体1前后侧的移动小车保险杠4,移动小车保险杠4的数量为两个,对称安装在所述移动小车主体1前后方,距离移动小车主体1底面100mm,其长为600mm,宽为50mm,厚度为15mm,两端呈45度角伸展30mm,中间三等分点处向外延伸50mm,厚度也为15mm,所选材料为合金。

      请参阅图1~9,本发明实施例中,一种农田专用除草机器人,在上述实施例的基础上:所述的可调节除草机械臂机构包括底座9、第一横臂10、第一竖臂11、第二横臂12、第二竖臂13和横轴14,所述底座9安装在底座固定座22上,底座固定座22内置用于驱动底座9相对于底座固定座22转动的伺服电机,在本实施例中,底座9要实现以移动小车主体1前进方向为基准线由伺服电机驱动可相对于底座9转动,第一横臂10的自由端位置与第一竖臂11固定连接,所述第二横臂12的一端与第二竖臂13转动连接,且第二横臂12由其内置的伺服电机驱动可相对于第二竖臂13转动,第二横臂12的另一端与第一竖臂11固定连接,第二竖臂13的自由端位置固定连接横轴14,横轴14的两端位置分别安装有除草机构15和机械抓手16,且除草机构15和机械抓手16由横轴14内置的伺服电机驱动,使得除草机构15和机械抓手16可相对于横轴14转动,此处,底座9与第一横臂10的轴线垂直,同样的,第一横臂10与第一竖臂11、第一竖臂11与第二横臂12、第二横臂12与第二竖臂13、第二竖臂13和横轴14的轴线均保持垂直,实际上,可调节除草机械臂机构是一个机械手,能实现多自由度的转动,以便能调整除草机构15和机械抓手16的运动路径和姿态。

      具体的:所述整除草机构15包括非常快速地旋转电机和安装在非常快速地旋转电机输出轴上的除草刀具,非常快速地旋转电机空载转速13500转/分钟,除草刀具的切割直径为200mm,除草刀具采用精工设计,类似柳叶对称设计,同时考虑切割刃平滑去倒角,确保其锋利,其支持刀片的更换,连接轴长50mm。

      所述机械抓手16包括机械手臂和安装在机械手臂上的液压手爪,液压手爪主要是用来实现杂草的抓取与释放,实际上,液压手爪是一种电动液压抓手,本发明对液压手爪的个数不做限制,为清楚表明结构本发明优选3个液压手爪。

      结合实施例1~5,易知本技术方案的工作原理:移动小车主体1通过四个行驶轮2以及对应的行驶轮驱动装置形成移动小车主体1的行进结构;移动小车主体1的前后面对称安装移动小车保险杠5构成智能小车的防碰撞结构;移动小车主体1后方中间位置开凹槽用于放置可充电电源,与对应的可拆卸电源罩18配合构成可拆电源结构;移动小车主体1的上表面靠近车头的位置安装可调节除草机械臂机构,可调节除草机械臂机构通过滑动挡板与带槽口的u型固定板7相配合构成载体;移动小车主体的上表面靠近车尾的位置安装有相机支架,相机支架上安装有事先调节好角度的深度相机一6,深度相机一6与深度相机二17配合形成移动小车主体1的远视深度场景结构。

      进一步需要说明,工控机电气连接有两个主控板(stm32f103rct6),一个主控板与移动小车主体1行驶轮驱动装置中的直流电机电气连接,而且四个直流电机两两对应安装在移动小车主体1两侧,本发明采用现有的两侧行驶轮正转与反转方式行驶,进而实现原位转向,具体过程不予赘述,另一个主控板与可调节除草机械臂机构中的各个伺服电机电气连接,控制各个伺服电机的转动圈数进而实现除草机构15和机械抓手16的姿态调节,具体过程也不予赘述;可充电电源通过与工控机电气连接进而给整个移动小车主体1供电;相机支架5上的深度相机一6(微软的kinectv2)通过排线与工控机电气连接,另一个深度相机二17(英特尔的realsensed435)通过可调节除草机械臂机构内置排线与工控机电气连接,以此来实现系统整体硬件电路原理结构。

      请参阅图10~11,本发明实施例中,还公开了一种农田专用除草机器人的操控方法,具体的,其包括以下步骤:

      s1、利用深度学习中的深度卷积神经网络,根据区域提议算法共享卷积特征,通过采集的数据集训练杂草和农作物分类与识别深度模型,以实现接近实时的帧率目标检测;具体为:采集杂草与农作物的高清图片各3000~5000张作为分类与识别深度模型的数据集,并对数据集进行人工标注形成标签样本集用于模型训练,其中训练集和验证集的比例为8:2,根据区域提议算法,基于vggnet模型,训练得到具有高识别率的杂草和农作物分类与识别深度模型;

      s2、将训练得到的杂草和农作物分类与识别深度模型部署到工控机的操作系统中,具体为:工控机优选基于linux的操作系统,硬件设备满足运行深度学习模型的配置,同时在操作系统中安装支持机器视觉相关交互平台,然后将杂草和农作物分类与识别深度模型封装到交互平台;

      s3、对深度相机一、深度相机二和可调节除草机械臂机构进行室外环境标定,实现室外空间三维立体建模;具体为:深度相机在室外环境按照“级线矫正”到“立体匹配”再到“三角化”的步骤建立三维模型,实现世界坐标系到相机坐标系的转化,可调节除草机械臂机构在深度相机一和深度相机二完成室外环境标定的前提下进行初始化,实际是对可调节除草机械臂机构的初始位置和末端的除草机构和机械抓手的位置坐标标定;

      s4、通过相机支架上的深度相机一获取移动小车主体前方区域的杂草密度,并且确定其对应的三维空间坐标信息,实现粗略定位;具体为:在深度相机一、深度相机二室外环境完成标定的前提下,利用图像处理和计算机视觉算法将杂草目标三维表示,实现相机坐标系转化为图像坐标系,粗略的确定杂草目标的位置坐标;

      s5、通过横轴上的深度相机二进一步的辅助定位,最终确定杂草的精确位置和姿态,实现精准定位;具体为:在粗略的确定杂草目标的位置坐标前提下,利用点云配准方法进一步的确定杂草目标的位置坐标,同时识别具体的姿态,精准定位实质是通过两次深度相机的使用,根据不同深度相机的优势,提高目标定位的精度,;

      s6、通过将杂草的三维空间坐标信息转换成除草机器人的坐标信息,进而指导可调节除草机械臂机构完成精准的运动路径规划和除草操作,具体为:在完成s1到s5的步骤后,得知杂草目标的精确位置坐标以及实际姿态,工控机进行实时的路径规划,控制可调节除草机械臂机构中的除草机构进行除草操作。

      在本实施例中:计算机视觉算法、点云配准方法均存在现存技术支撑,本技术方案也未对其进行算法的改进,因此,对具体的计算机视觉算法、点云配准方法的过程就未进行详细解释,但不影响本技术方案的完整性。

      计算机视觉算法很宽泛,有很多内容,比如目标跟踪、目标定位、目标边界识别等,计算机视觉研究的最大的目的是让计算机能利用图象和图象序列来识别和认知三维世界,其最终目标是让计算机具有“视觉”功能,以满足社会对计算机高级应用的需求。

      点云配准方法在点云数据只有三维坐标时进行配准,这样一个时间段,可提取到的就只有点云的几何特征,常用的特征包括:点云的曲率、点云中平面四边形的仿射不变性等特征。事实上不管是什么配准方法,都是基于特征匹配的原理。无论是从图像当中获取额外的辅助的信息,或者只是从三维点云当中提取的几何特征,都是为了更好得抽象出点云的特征以及两个点云之间的对应点。毫无疑问,若能够通过遍历点云的各个点基所对应的变换,肯定能找到最佳的变换,但是这个计算量是一个天文数字,在实际应用当中是不太可能的。

      现在很成熟的点云配准基本分为两部分,首先进行粗配准,粗配准的算法多样,粗配准的最大的作用是为后续的精准配准icp算法提供较好的迭代初始位置。经过粗配准之后,这两个点云的重合程度已经很高了,若要逐步提高,就需要后续的精准配准,现在一般都是采用icp(迭代最近点)算法或者其变种来进行的,通过多次迭代,可以进一步提升配准的精度,但是若是没有粗配准提供较好的迭代初始位置,icp算法往往会陷入局部区域的最优解,而得不到全局的最优解。

      本申请在进行粗定位后再次进行点云配准,实现精确的定位,而点云配准方法主要使用在在三维空间坐标,与本技术方案前步契合度高,因此使用点云配准方法较为合适。

      请参阅图12,当除草机器人正常工作时,深度相机一利用自带的视觉系统(其实是深度相机的深度镜头)经过inteld4视觉处理器的处理将实时获取的杂草和农作物深度图像信息通过对应的usb3.0接口传输至工控机,然后搭载有radeonrxvegamgh独立显卡的intelcorei7-8809g处理器的工控机根据图像处理和计算机视觉算法利用获取的杂草和农作物深度图像信息将杂草目标三维表示,粗略的确定杂草目标的位置坐标;于此同时工控机一方面通过对应的串口usart1经过串口通信电路(串口rs232转usart串口,利用max3232芯片将rs232电平转换成ttl电平)下发控运动制指令给对应的stm32f103rct6主控板,对应的stm32f103rct6主控板接收到运动控制指令后通过对应的i/o口驱动电路发送给直流电机驱动电路驱动直流电机控制电路工作,进而控制移动小车主体行驶,从而调整移动小车主体与杂草和农作物的相对距离;另一方面通过对应的串口usart2经过串口通信电路(串口rs232转usart串口,利用max3232芯片将rs232电平转换成ttl电平)下发机械臂控制指令给对应的stm32f103rct6主控板,对应的stm32f103rct6主控板接收到机械臂控制指令后通过对应的i/o口驱动电路发送给伺服电机驱动电路驱动伺服电机控制电路工作,进而控制除草机械臂的粗略运动规划。此时除草机械臂横轴上的深度相机二进一步的靠近杂草目标,利用自带的视觉系统经过ps1080系统级芯片的处理将实时获取的杂草和农作物深度图像信息通过其对应的usb3.0接口传输至工控机,然后搭载有radeonrxvegamgh独立显卡的intelcorei7-8809g处理器的工控机根据图像处理和计算机视觉算法利用获取的杂草和农作物深度图像信息将杂草目标三维表示,在粗略的确定杂草目标的位置坐标前提下,利用点云配准方法进一步的确定杂草目标的位置坐标,同时识别具体的姿态;然后工控机一方面通过对应的串口usart2经过串口通信电路(串口rs232转usart串口,利用max3232芯片将rs232电平转换成ttl电平)下发机械臂精准控制指令给对应的stm32f103rct6主控板,对应的stm32f103rct6主控板接收到机械臂精准控制指令后通过对应的i/o口驱动电路发送给伺服电机驱动电路驱动伺服电机控制电路工作,进而控制除草机械臂的精准运动规划靠近杂草目标;另一方面在得知杂草目标的精确位置坐标以及实际姿态,stm32f103rct6主控板通过其i/o口驱动电路发送非常快速地旋转电机启动指令至非常快速地旋转电机驱动电路,非常快速地旋转电机驱动电路则会驱动非常快速地旋转电机控制电路工作,进而控制可调节除草机械臂机构中的除草机构进行精准除草操作。同理,如果将杂草回收或者精准施肥,只需要将除草机构收回即可,然后液压手爪按照同样的工作原理与步骤即可。另外,48v可充电电源带路通过开关稳压电路给整个工控机供电,进而给整个除草机器人供电。

      需要特别说明的是:本发明一种农田专用除草机器人及其操控方法,作为信息技术与农业领域深层次地融合的必然产物,对于推动我们国家智慧农业的实际应用具有重大的现实意义,利用深度学习算法为基础的计算机视觉技术来处理实时视频数据,改变了传统方式的机械化除草,无论是从智能化的机械设计角度,还是从智能化的除草方式角度,本发明都做了重大的改进,提高了智能除草机器人设备的智能化程度。

      本领域技术人员在考虑说明书及实施例处的公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术方法。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。

      应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并能在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。