RTK辅助的单目视觉地图构建与恢复方法

针对单目视觉SLAM在复杂场景下跟踪失败导致地图丢失的问题,提出了一种利用RTK信息辅助单目视觉的自动化地图构建与恢复方法。在视觉跟踪失败后,设计了一种自动化恢复地图构建方法,基于RTK信息的辅助,采用坐标变换算法处理丢失前的地图并将其融合到当前地图构建中,在提高建图效率的同时,最大程度地减少了地图信息的缺失。实验仿真结果表明,该方法可以解决系统无法继续跟踪建图的问题,与原始地图相比,其融合后构建的地图在保证全局一致性和完整性的基础上,可以保持米级的估计精度。     

基于注意力模型的视觉/惯性组合里程计算法研究

由于外界环境的干扰和传感器精度的限制,视觉/惯性组合里程计的输入数据存在一定的噪声,这会增加里程计的解算误差,而且误差会随着时间积累。针对以上问题,设计了一种基于注意力模型的视觉/惯性组合里程计算法。该算法使用卷积神经网络和长短时记忆网络分别构建了视觉特征提取器与惯导信息特征提取器,同时引入了两种注意力模型:加权组合网络以及开关组合网络,对视觉特征信息和惯导特征信息的融合噪声进行降噪处理。通过在组合里程计算法中添加闭环校正环节,有效地抑制了里程计误差随时间的积累。对比实验结果表明,设计的组合里程计算法与其他算法相比,无论在性能上还是在精度上都有明显的提升。     

视觉/惯性组合导航技术发展综述

视觉/惯性组合导航技术是自主导航领域的重要研究方向之一。首先介绍了视觉/惯性组合导航技术的发展概况,然后从纯视觉导航(里程计、同步定位与构图)以及组合导航(滤波、非线性优化)2个层次介绍了传统的基于视觉几何与运动学模型的视觉/惯性组合导航方法,还介绍了近年来发展迅猛的基于机器学习的视觉/惯性组合导航方法。最后,简要介绍了视觉/惯性组合导航技术的典型应用及未来发展趋势。     

基于轴线投影精确模型的弯管立体视觉测量方法

利用立体视觉技术测量弯管轴线需精确计算弯管轴线在图像上的投影位置,现有方法将弯管图像轮廓中心线近似为空间轴线在像平面上的投影,这种近似计算存在误差。为获得弯管轴线的精确投影位置,提高三维测量精度,对弯管成像特征进行了深入研究。首先对弯管任意横截面建立透视投影模型,探索截面图像边缘点与空间轴线投影点间的几何关系,进而提出轴线上任意一点在像平面上投影位置的精确计算方法。采用双目视觉系统对某一航空管件进行重构测量。试验结果表明,相较于现有方法,采用本文方法计算轴线投影位置后,管件测量的重复性精度与前者相当,而测量精度平均提高14.5%。说明本文方法对轴线投影位置计算正确,可有效提高弯管轴线视觉测量精度。     

基于复合地标导航的动平台四旋翼飞行器自主优化降落技术

针对四旋翼飞行器在依靠地标导航完成动平台自主降落任务中存在的目标易丢失、地标定位死区大和降落可靠性差等问题,设计了一种基于复合地标导航的动平台四旋翼飞行器自主优化降落系统。该系统以圆环地标和二维码构成复合地标来解决仅用单一地标定位时存在的定位死区大和定位范围小等问题。针对地标识别丢失、动平台车轮打滑和码盘标定不精确等问题,建立动平台的精确运动模型同时考虑码盘包含未知测量偏差,基于扩展卡尔曼滤波器实现了对动平台连续位姿的在线估计。最终,基于动平台位姿估计结果以最小Jerk指标设计降落轨迹和降落策略,实现了四旋翼飞行器在动平台上高效平稳的降落。为验证所提系统的有效性,设计了仿真和实际降落实验,验证了所提复合地标实现摄像头距离在0.5~6.0 m内的综合完整定位;所设计的动平台状态估计器能在码盘存在未知测量偏差的情况下准确估计出平台的实时位姿,同时所提自主优化降落策略和轨迹规划算法保证了可靠的动平台降落。     

一种检测机场跑道辅助飞机着陆的系统设计

跑道作为机场的关键设施,是飞机着陆和减速滑行的区域,通过视觉定位方法计算飞机相对跑道的位置,可以作为辅助飞机快速平稳着陆的一种思路。视觉传感器所需成本较低,对安装环境要求不高,本文旨在设计一个仅靠视觉传感器对飞机进行定位的辅助着陆系统,运用目标检测和视觉定位两个模型,计算飞机相对跑道的位置。首先搭建出等比例微缩的机场跑道模型,视觉传感器产生运动模拟飞机飞行路径,目标检测模型通过机载视觉传感器获取的图像识别出跑道区域,随后视觉定位模型提取图像中跑道区域特征点,计算飞机相对跑道的位置。分别对目标检测和视觉定位两部分的实现原理及难点进行阐述,尝试将目标检测和视觉定位结合起来实现飞机降落时的定位,描述辅助着陆系统设计的整体思路。     

基于三频外差法的异构铸件三维测量系统

惯性平台中的台体和本体均为复杂异构铸件,目前多采用人工划线法建立多个基准来进行测量,效率和精度低,易漏检误检。基于多频外差法的三维光学测量系统已广泛应用于航空、航天等制造领域,根据被测铸件异构的特点,结合双目视觉和相位光栅法较高的检测效率和精度,搭建了一套三维测量系统。首先通过平板标定法得到系统的固定参数和可变参数,然后利用数字光栅投影仪向被测零件表面投射三套不同频率的相移条纹图,相机同步采集变形条纹图,再利用四步相移和三频外差法得到周期为1的相位分布,以此为基准展开得到连续分布的绝对相位,结合极线约束和相位匹配重建出被测零件的三维点云数据,最后在三维软件中完成点云处理、曲面重构和三维测量。实验结果表明,系统的绝对测量精度小于0.1mm,能够实现异构铸件的三维尺寸测量,具有较高的检测效率。     

面向装配对接的双视觉测量试验系统优化标定方法

针对航空航天、轨道交通零部件装配对接测量与定位过程,为解决测量视场范围大、多种测量设备组合使用步骤烦琐等问题,对面向装配对接的双视觉测量系统标定方法进行了研究。通过构建双视觉测量系统模型,分析系统间各相机参数的关系,在单个双目系统中引入闭环约束,结合LM算法对单个双目系统中的相机参数进行优化,另外采用改进的EPnP算法对双视觉系统进行标定,并结合自行设计的双面一维靶标完成了双视觉系统的全局标定和坐标转换。模拟对接试验的结果表明,该优化标定算法在精度上优于传统算法,并在使用过程中简化测量步骤,提高测量效率。     

融合视觉与力觉的卫星装配误差在线测量与补偿方法

针对机器人卫星装配阶段舱板与主框架装配精度低、装配干涉力过大的问题,提出了一种融合视觉与力觉的卫星装配误差在线测量与补偿方法。利用视觉检测装置建立卫星舱板与主框架装配误差在线测量系统,并完成了双目标定、机器人手眼标定、其他部件相对位姿的标定,提出了卫星舱板与主框架装配误差补偿控制方法,实现了装配误差实时测量与精确补偿;同时,通过力觉检测装置完成了机器人末端负载辨识与重力补偿,实时测量卫星舱板与主框架装配干涉力,实现了卫星柔性装配。试验结果表明,采用融合视觉与力觉的卫星装配误差在线测量与补偿方法后,卫星舱板与主框架装配误差控制在0.2 mm以内,装配干涉力小于50 N,满足了卫星装配的精度需求,证明本文所提方法的有效性和稳定性。     

基于双目立体视觉的直升机旋翼桨叶位移变形测量方法

为实现直升机旋翼桨叶位移变形的非接触测量,提出了基于双目立体视觉的三维测量方法。采用编码标记方式,在旋翼桨叶表面粘贴具有唯一编码信息的标记点,以高频激光器提供纳秒级瞬态照明,同步触发高速CCD相机采集桨叶瞬态图像,基于双目立体视觉原理计算标记点的三维坐标,进而计算得到旋翼桨叶的位移变形参数。试验结果表明:该测量方法的测量精度小于0.1 mm,测量准度小于0.3 mm,可满足直升机旋翼桨叶位移变形的高精度测量需求。