基于机器视觉的葡萄冬剪作业装置制作方法

刘灿, 杨庆华, 荀一, 贾挺猛

2012年10月3日

2012年4月13日

2012年4月13日

浙江工业大学

A01G3/08GK102696411SQ20121011045

冬剪 视觉 葡萄 作业 机器 基于 装置

1.一种基于机器视觉的葡萄冬剪作业装置，其特征在于包括自动导航车载平台、图像采集箱、整枝模块和剪枝模块，所述的图像采集箱安装于自动导航车载平台上，所述的图像采集箱分作业区和设备区两空间，整枝模块安装于工作区，剪枝模块安装于设备区； 所述的自动导航车载平台包括云台摄像机、驱动轮和从动轮，云台摄像机安装于自动导航车载平台正前方，用于获取路径图像信息；电机驱动器安装于自动导航车载平台内，用于驱动行走机构；所述电机驱动器与行走驱动电机连接，所述行走驱动电机与驱动轮联动； 所述的整枝模块包括切割锯和吹风机，切割锯用于切割过长的树枝吹风机，用于剪枝前吹落残留枯叶，切割机和吹风机均有电机驱动器控制，电机驱动器与切割电机和吹风电机连接； 所述的剪枝模块包括双目摄像机、农业剪枝机械臂和工控机，农业剪枝机械臂中自下而上依次连接基座、肩关节、大臂、肘关节、小臂和腕关节，所述腕关节与末端修枝剪连接，双目摄像机用于采集葡萄树枝图像，农业剪枝机械臂用于完成剪枝作业，工控机用于图像分析处理和机械臂轨迹规划2.如权利要求I所述的基于机器视觉的葡萄冬剪作业装置，其特征在于所述的图像采集箱包括背景墙、顶盖和设备间，所述的背景墙为一面单一纯白色视觉采集背景墙，用于隔离复杂背；吹风机设置于顶盖正中间；吹风机两侧装有两只高频荧光灯管作为顶光源；在设备间顶面正前方设有两只高频荧光灯作为正光源；设备间底面正前部设有农业剪枝机械臂；在农业剪枝机械臂两侧设有双目摄像机；在设备间底面正后方设有工控机3.如权利要求2所述的基于机器视觉的葡萄冬剪作业装置，其特征在于背景墙、顶盖和设备间两侧边缘位置设有切割锯安装空间，所述切割锯安装空间由隔板隔开4.如权利要求2或3所述的基于机器视觉的葡萄冬剪作业装置，其特征在于一辆自动导航车载平台上装载至少左右两个图像采集箱5.如权利要求2或3所述的基于机器视觉的葡萄冬剪作业装置，其特征在于所述顶盖与背景墙、设备间的连接采用螺栓固定

本发明涉及智能农业机械领域，尤其是一种葡萄冬剪作业装置

下面结合附图和本实施例对本发明作进一步详细的描述参照图I 图5，一种基于机器视觉的葡萄冬剪作业装置，包括自动导航车载平台I、图像采集箱2、整枝模块3、剪枝模块4本发明所述的图像采集箱安装于自导导航车载平台上，分作业区和设备区两空间，由背景墙5、顶盖6、设备间7三部分组成整枝模块3安装于工作区，剪枝模块4安装于设备区所述的自动导航车载平台I包括云台摄像机8、驱动轮9和从动轮10，云台控制器8安装于自动导航车载平台车头正前方，用于获取路径图像信息；电机驱动器安装于自动导航车载平台内，用于驱动行走机构；所述电机驱动器与行走驱动电机连接，所述行走驱动电机与驱动轮联动；所述电机驱动器由工控机通过运动控制卡控制所述的整枝模块3包括切割锯11和吹风机12，切割锯11用于切割过长的树枝，吹风机12用于剪枝前吹落残留枯叶，切割机11和吹风机12均有电机驱动器控制，电机驱动器与切割电机和吹风电 机连接所述电机驱动器由工控机通过运动控制卡控制所述的剪枝模块包括双目摄像机13、农业剪枝机械臂14和工控机15，农业剪枝机械臂14中自下而上依次连接基座18、肩关节19、大臂20、肘关节21、小臂22和腕关节23，所述腕关节与末端修枝剪连接，采用5自由度设计，即基座18旋转、肩关节19俯仰、肘关节21俯仰、腕关节23俯仰、腕关节23旋转双目摄像机13用于采集葡萄树枝图像，图像采集卡用于传送图像信息，农业剪枝机械臂14用于完成剪枝作业，工控机15用于图像分析处理和机械臂轨迹规划所述的图像采集箱2包括背景墙5、顶盖6和设备间7进一步，所述的图像采集箱2包括背景墙5、顶盖6和设备间7，所述的背景墙5为一面单一纯白色视觉采集背景墙，用于隔离复杂背景；吹风机12设置于顶盖6正中间；吹风机12两侧装有两只高频荧光灯管作为顶光源17 ;在设备间7顶面正前方设有两只高频荧光灯作为正光源16 ;设备间底面正前部设有农业剪枝机械臂14 ;在农业剪枝机械臂14两侧设有双目摄像机13 ;在设备间底面正后方设有工控机15背景墙5、顶盖6和设备间7两侧边缘位置设有切割锯11安装空间，所述切割锯11安装空间由隔板隔开一辆自动导航车载平台上装载至少左右两个图像采集箱另外，顶盖6与背景墙5、设备间7的连接采用螺栓固定本发明所述的剪枝作业方法为(1)，开启自动导航并整枝自动导航车载平台I沿着葡萄园单通道路移动，葡萄冬剪作业装置2也随之移动切割锯11切割过长的树枝，使进入工作区的树枝长度合理，便于后续的剪枝作业；吹风机12吹落枯叶，消除枯叶对于采集葡萄树枝图像时的遮挡干扰(2)，葡萄冬剪作业装置2移动到合理空间位置(一般位移为一块背景墙的宽度)，切割锯11停止，吹风机12停止(3)，采集葡萄树枝图像顶光源16和正光源17提供主动光源(正光源17可手动实现角度、位置调整)，消除背景墙上的阴影，开启双目摄像机13(4)，分析处理葡萄树枝图像双目摄像机13采集到的图像信息通过图像采集卡传送到工控机15工控机15对图像信息进行图像预处理、图像增强、图像分割、图像识别等处理步骤根据葡萄树枝枝干和主干在形态学上的差异来识别目标，分析并确定剪枝点，提取剪枝点二维坐标"[目息(5)，规划农业剪枝机械臂14运动轨迹根据剪枝点三维坐标信息，工控机15对农业剪枝机械臂14进行运动轨迹规划，计算出各关节最佳运动参数(6)，完成剪枝作业工控机15发送控制指令，通过运动控制卡实现对农业剪枝机械臂14各关节的动作控制，最终实现剪枝作业(7)，农业剪枝机械臂14恢复原始位姿剪枝作业完毕后，农业剪枝机械臂14收回至设备间7，恢复原始位姿，并发送剪枝结束指令到工控机15(8)，启动切割锯11和吹风机12收到剪枝结束指令后，工控机15发送指令至运动控制卡，启动切割锯11和吹风机12，开始下一工作位置的整枝工作(9)，启动自动导航车载平台I工控机15发送自动导航车载平台启动指令，自动导航车载平台I开始移动到下一工作位置并剪枝如此类推，重复作业(10)，剪枝作业结束待单排葡萄树全部完成剪枝作业后，停机本实施例中，切割锯11采用1380W的木材切割锯顶光源16由两只20W频闪为30kHz的高频荧光灯管组成，并排分布在顶盖6上正光源17主要采用两只高频荧光灯泡，两灯照明角度可以人工调整，结合实际光照环境，消除阴影干扰图像采集卡采用Morphis图像采集卡,双目摄像机13采用44W像素的CXD工业摄像机双目摄像机13固定在设备间底面前部，图像采集卡插入工控机15内的PCI槽，工控机15固定在设备间7底面后部 运动控制卡采用基于TMS320F2812的PCI总线通用运动控制卡运动控制卡插入工控机14内的PCI槽本发明涉及的一种基于机器视觉的葡萄冬剪作业装置能够有效解决复杂背景对于目标树枝采集时的干扰问题，简化了图像识别算法，提高了工作效率，增强了葡萄树枝识别和剪枝的实时性、准确性上面所述的实施例仅仅是对本发明的优选实施方式进行描述，并非本发明的构思和范围进行限定，对于本技术领域的技术人员，在不脱离本发明设计构思的前提下，可对本发明的技术方案做出的各种变型和改进，均落入本发明的保护范围