Nothing Special   »   [go: up one dir, main page]

CN106940186A - 一种机器人自主定位与导航方法及系统 - Google Patents

一种机器人自主定位与导航方法及系统 Download PDF

Info

Publication number
CN106940186A
CN106940186A CN201710082309.3A CN201710082309A CN106940186A CN 106940186 A CN106940186 A CN 106940186A CN 201710082309 A CN201710082309 A CN 201710082309A CN 106940186 A CN106940186 A CN 106940186A
Authority
CN
China
Prior art keywords
field picture
robot
dimensional point
dimensional
rgb image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710082309.3A
Other languages
English (en)
Other versions
CN106940186B (zh
Inventor
陶文兵
熊雄
郑龙玉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huazhong University of Science and Technology
Original Assignee
Huazhong University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huazhong University of Science and Technology filed Critical Huazhong University of Science and Technology
Priority to CN201710082309.3A priority Critical patent/CN106940186B/zh
Publication of CN106940186A publication Critical patent/CN106940186A/zh
Application granted granted Critical
Publication of CN106940186B publication Critical patent/CN106940186B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20—Instruments for performing navigational calculations
    • G01C21/206—Instruments for performing navigational calculations specially adapted for indoor navigation

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Image Analysis (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种机器人自主定位与导航方法及系统。其中，方法的实现包括：采集机器人在当前位置的RGB图像；将当前位置的RGB图像与室内三维点云地图进行特征点匹配，确定机器人在室内三维点云地图中的当前位置；将预存储的目的地RGB图像与室内三维点云地图进行特征点匹配，确定目的地在室内三维点云地图中的目的地位置；在室内三维点云地图中搜索从当前位置到目的地位置的最优路径，并驱动机器人按所述最优路径行走。本发明仅仅利用了视觉传感器完成了机器人的自主定位与导航，设备结构简单、成本较低、操作简便、路径规划实时性高，可用于无人驾驶、室内定位导航等多个领域。

Description

一种机器人自主定位与导航方法及系统
技术领域
本发明属于计算机视觉、机器人技术领域，更具体地，涉及一种机器人自主定位与导航方法及系统。
背景技术
室内机器人自主定位与导航是最近几年出现的一个比较热门的研究领域。主要包含以下三个部分：1)室内场景地图的重建与机器人状态的估计；2)机器人与目标对象重定位；3)机器人路径规划。对于室内机器人自主定位与导航来说，主要问题在于传感器的选择(即外界信息的获取)以及机器人的定位导航(即外界信息的处理)。目前是利用激光雷达或者惯性测量原件与视觉传感器结合来完成这一任务，但是所需成本较高。随着相机的普及与计算机视觉理论的发展，使用基于纯视觉的方法来完成这一任务成为主流的研究方向。
机器人定位与建图(Simultaneous Localization and Mapping，SLAM)，是指搭载传感器的机器人，在移动时建立对环境的描述模型，同时估计自己的运动。SLAM同时包含定位与建图两个问题，被认为是实现机器人自主性的关键问题之一，对机器人的导航、控制、任务规划等领域有重要的研究意义。
目前，对于实时定位与地图重建方法比较成熟的方案是激光雷达SLAM，即利用激光雷达传感器建立二维地图，进而完成机器人导航任务。然而该方法使用的扫描设备结构复杂、价格昂贵且不易操作，并且不能够实时重现室内三维场景，无法对地图产生直观的感受。
图定位(Image-based localization)能够从一张新拍的图片中精确定位相机相对于已有三维场景的位置(position)和旋转角(orientation)。随着行人导航、机器人导航、增强现实、运动恢复结构(Structure from Motion，SFM)等技术的发展，图定位受到了越来越多的关注。
使用实时定位与地图重建SLAM或运动恢复结构的技术中，由于生成的点云部分或全部点带有相应的特征点描述子，在此情景下图定位的实现方法一般分为三步，2D图像特征点和特征点描述子提取，对特征点点云和2D图像进行描述子邻近搜索和配对，利用基于随机抽样一致性方法(Random Sample Consensus，RANSAC)的n点透视问题解法(n-pointperspective pose problem，pnp)来估计相机相对于离线地图的位姿。
然而，由于真实场景下点云数量巨大，以及室内环境中重复人造物体的干扰，导致图定位技术在精度和运行速度上难以取得令人满意的效果，因此研究改进的特征点点云到2D图像的特征点匹配算法，提高图定位技术的精度和运行速度在理论和实际应用上都具有很高的价值。
机器人路径规划算法是根据机器人对环境感知得到的数据以及构建得到的地图模型，自行规划出一条安全的运行路线，并且高效地完成任务。地图构建路径规划技术是按照机器人自身传感器搜索的障碍物信息，将机器人周围区域划分为不同的网格空间(如自由空间和限制空间等)，计算网格空间的障碍物占有情况，再依据一定规则确定最优路径。
目前，地图构建技术已引起机器人研究领域的广泛关注，成为移动机器人路径规划的研究热点之一。但机器人传感器信息资源有限，使得网格地图障碍物信息很难计算与处理，同时由于机器人要动态快速地更新地图数据，在网格数较多、分辨率较高时难以保证路径规划的实时性。因此，地图构建方法必须在地图网格分辨率与路径规划实时性上寻求平衡。
随着机器人理论、计算机视觉理论的完善和视觉传感器的发展与普及，基于纯视觉的室内机器人定位和导航技术取得了很大的进展。因此，研究基于RGB-D相机的室内机器人定位导航策略，不仅有很强的理论意义，而且具有非常广阔的应用前景。
发明内容
针对现有技术的以上缺陷或改进需求，本发明提供了一种机器人自主定位与导航方法及系统，使得机器人能够独立完成从室内地图构建到机器人自身及目标重定位，再到机器人路径规划这一任务。由此解决现有技术中，设备结构复杂、价格昂贵、不易操作、数据量巨大、路径规划实时性较低等技术问题。
为实现上述目的，按照本发明的一个方面，提供了一种机器人自主定位与导航方法，包括：
(1)采集机器人在当前位置的RGB图像；
(2)将当前位置的RGB图像与室内三维点云地图进行特征点匹配，确定机器人在室内三维点云地图中的当前位置；将预存储的目的地RGB图像与室内三维点云地图进行特征点匹配，确定目的地在室内三维点云地图中的目的地位置；
(3)在室内三维点云地图中搜索从当前位置到目的地位置的最优路径，并驱动机器人按所述最优路径行走。
优选地，所述室内三维点云地图按照如下方式构建：
采集机器人在行进路线上拍摄得到的RGB图像和深度图像，其中，机器人的行进路线为闭合路线；
利用所述RGB图像和深度图像构建室内三维点云地图。
优选地，所述利用所述RGB图像和深度图像构建室内三维点云地图，具体包括：
(S1)将获取的起始帧图像作为第一帧图像，将与所述起始帧图像相邻的下一帧图像作为第二帧图像；
(S2)提取所述第一帧图像与所述第二帧图像的特征点，分别计算所述第一帧图像与所述第二帧图像上的关键点，针对关键点周围的像素点，计算所述第一帧图像的特征描述子以及所述第二帧图像的特征描述子；
(S3)采用所述第一帧图像中的特征点到所述第二帧图像的最近邻特征点距离与次近邻特征点距离的比值来对所述第一帧图像的特征描述子与所述第二帧图像的特征描述子进行匹配，得到所述第一帧图像与所述第二帧图像之间的特征点匹配对；
(S4)根据所述第一帧图像对应的RGB图像和深度图像以及所述第二帧图像对应的RGB图像和深度图像，利用针孔相机模型计算出所述第一帧图像对应的RGB图像和所述第二帧图像对应的RGB图像中的二维点所对应的三维点；
(S5)根据所述第一帧图像与所述第二帧图像之间的特征点匹配对对应的三维点，利用所述第一帧图像与所述第二帧图像之间的几何关系以及非线性优化方法估计出所述第一帧图像与所述第二帧图像之间的旋转平移矩阵，得到所述机器人从所述第一帧图像到所述第二帧图像之间的位姿变换；
(S6)将所述第二帧图像作为新的第一帧图像，将与所述第二帧图像相邻的下一帧图像作为新的第二帧图像，检测所述新的第一帧图像是否与所述起始帧图像重合，若不重合，则执行步骤(S2)，否则，执行步骤(S7)；
(S7)将封闭路径上的所有帧图像对应的机器人位姿构建一个姿态图，所述姿态图的节点代表机器人在每一个帧图像上的姿态，边表示节点之间的位姿变换，然后利用非线性优化方法对所述姿态图进行优化，得到机器人在每一帧图像的位姿，进而得到每一帧图像对应的三维点云图像；
(S8)拼接每一帧图像对应的三维点云图像，形成室内三维点云地图，并将所述室内三维点云地图转化为八叉树地图。
优选地，所述步骤(2)具体包括：
(2.1)使用聚类算法对所述室内三维点云地图中SIFT特征点的描述子进行聚类，得到词汇树；
(2.2)获取机器人当前位置的第一RGB图像和机器人接收到的第二RGB图像，并对所述第一RGB图像以及所述第二RGB图像进行SIFT特征点提取，然后使用聚类算法得到视觉词汇；
(2.3)进行2D-3D检索，对于所述第一RGB图像以及所述第二RGB图像中的每个2D特征点，根据该2D特征点对应的视觉词汇，在所述词汇树中查找与该2D特征点具有相同单词的候选三维匹配点；
(2.4)进行2D-3D匹配，对于所述第一RGB图像以及所述第二RGB图像中的每个2D特征点，计算该2D特征点与对应的候选三维匹配点在特征描述子空间上的距离；
(2.5)找到与该2D特征点对应的候选三维匹配点中在特征描述子空间上距离最近和距离次近的两个三维点，若最近距离与次近距离的比值小于第一预设阈值，则该2D特征点与在特征描述子空间上距离该2D特征点距离最近的目标三维点相匹配；
(2.6)对于与该2D特征点匹配的目标三维点，查找所述目标三维点在欧式空间上的若干个最近邻三维点；
(2.7)对每一个最近邻三维点，进行3D-2D匹配，在2D图像中查找与该最近邻三维点具有相同词汇的候选2D特征点，计算该最近邻三维点与候选2D特征点在特征描述子空间上的距离；
(2.8)找到与该最近邻三维点对应的候选2D特征点中在特征描述子空间上距离最近和距离次近的两个2D特征点，若最近距离与次近距离的比值小于第二预设阈值，则该最近邻三维点与在特征描述子空间上距离该最近邻三维点距离最近的目标2D特征点相匹配；
(2.9)检查当前找到的三维点和二维点的匹配个数，若达到第三预设阈值则执行步骤(2.10)，否则，执行步骤(2.3)；
(2.10)通过得到的3D与2D的匹配对计算得到机器人当前在室内三维点云地图中的位置和目的地在室内三维点云地图中的位置，进而得到八叉树地图内的机器人当前所处的位置和目的地的位置。
优选地，所述步骤(3)具体包括：
(3.1)将所述八叉树地图以及在所述八叉树地图内的机器人当前所处的位置和目的地的位置进行投影，得到二维平面的栅格地图；
(3.2)获取所述栅格地图中机器人当前所处的位置的投影点作为起点的所有邻近像元，并计算各邻近像元的F值，存入栈或队列中，其中F值表示邻近像元到目的地的距离值；
(3.3)将栈或队列中F值最小的点作为新起点，并将所有处理过的单元和栈或队列中的单元标记为已处理；
(3.4)检测新起点是否为目的地点，若不是，则获取新起点周围未经过处理的邻近像元的F值并存入栈中，然后执行步骤(3.3)，否则执行步骤(3.5)；
(3.5)将从机器人当前所处位置的投影点到目的地位置的投影点之间的所有新起点连接起来作为从机器人当前位置到目的地位置的最优路径；
(3.6)驱动机器人按所述最优路径进行行走，最终到达目的地位置完成导航任务。
按照本发明的另一方面，提供了一种机器人自主定位与导航系统，包括：
图像采集模块，用于采集机器人在当前位置的RGB图像；
重定位模块，用于将当前位置的RGB图像与室内三维点云地图进行特征点匹配，确定机器人在室内三维点云地图中的当前位置；将预存储的目的地RGB图像与室内三维点云地图进行特征点匹配，确定目的地在室内三维点云地图中的目的地位置；
导航模块，用于在室内三维点云地图中搜索从当前位置到目的地位置的最优路径，并驱动机器人按所述最优路径行走。
优选地，所述图像采集模块，还用于采集机器人在行进路线上拍摄得到的RGB图像和深度图像，其中，机器人的行进路线为闭合路线；
所述系统还包括：
室内地图构建模块，用于利用所述RGB图像和深度图像构建室内三维点云地图。
优选地，所述室内地图构建模块包括：
选取模块，用于将获取的起始帧图像作为第一帧图像，将与所述起始帧图像相邻的下一帧图像作为第二帧图像；
特征点提取模块，用于提取所述第一帧图像与所述第二帧图像的特征点，分别计算所述第一帧图像与所述第二帧图像上的关键点，针对关键点周围的像素点，计算所述第一帧图像的特征描述子以及所述第二帧图像的特征描述子；
特征点匹配模块，用于采用所述第一帧图像中的特征点到所述第二帧图像的最近邻特征点距离与次近邻特征点距离的比值来对所述第一帧图像的特征描述子与所述第二帧图像的特征描述子进行匹配，得到所述第一帧图像与所述第二帧图像之间的特征点匹配对；
三维点匹配模块，用于根据所述第一帧图像对应的RGB图像和深度图像以及所述第二帧图像对应的RGB图像和深度图像，利用针孔相机模型计算出所述第一帧图像对应的RGB图像以及所述第二帧图像对应的RGB图像中的二维点所对应的三维点；
位姿确定模块，用于根据所述第一帧图像与所述第二帧图像之间的特征点匹配对对应的三维点，利用所述第一帧图像与所述第二帧图像之间的几何关系以及非线性优化方法估计出所述第一帧图像与所述第二帧图像之间的旋转平移矩阵，得到所述机器人从所述第一帧图像到所述第二帧图像之间的位姿变换；
第一检测模块，用于将所述第二帧图像作为新的第一帧图像，将与所述第二帧图像相邻的下一帧图像作为新的第二帧图像，检测所述新的第一帧图像是否与所述起始帧图像重合，若不重合，则返回执行所述特征点提取模块的操作，直到所述新的第一帧图像与所述起始帧图像重合；
优化模块，用于将封闭路径上的所有帧图像对应的机器人位姿构建一个姿态图，所述姿态图的节点代表机器人在每一个帧图像上的姿态，边表示节点之间的位姿变换，然后利用非线性优化方法对所述姿态图进行优化，得到机器人在每一帧图像的位姿，进而得到每一帧图像对应的三维点云图像；
地图构建子模块，用于拼接每一帧图像对应的三维点云图像，形成室内三维点云地图，并将所述室内三维点云地图转化为八叉树地图。
优选地，所述重定位模块包括：
聚类模块，用于使用聚类算法对所述室内三维点云地图中SIFT特征点的描述子进行聚类，得到词汇树；
所述聚类模块，还用于获取机器人当前位置的第一RGB图像和机器人接收到的第二RGB图像，并对所述第一RGB图像以及所述第二RGB图像进行SIFT特征点提取，然后使用聚类算法得到视觉词汇；
2D-3D检索模块，用于进行2D-3D检索，对于所述第一RGB图像以及所述第二RGB图像中的每个2D特征点，根据该2D特征点对应的视觉词汇，在所述词汇树中查找与该2D特征点具有相同单词的候选三维匹配点；
2D-3D匹配模块，用于进行2D-3D匹配，对于所述第一RGB图像以及所述第二RGB图像中的每个2D特征点，计算该2D特征点与对应的候选三维匹配点在特征描述子空间上的距离；
所述2D-3D匹配模块，还用于找到与该2D特征点对应的候选三维匹配点中在特征描述子空间上距离最近和距离次近的两个三维点，若最近距离与次近距离的比值小于第一预设阈值，则该2D特征点与在特征描述子空间上距离该2D特征点距离最近的目标三维点相匹配；
3D-2D检索模块，用于对于与该2D特征点匹配的目标三维点，查找所述目标三维点在欧式空间上的若干个最近邻三维点；
3D-2D匹配模块，用于对每一个最近邻三维点，进行3D-2D匹配，在2D图像中查找与该最近邻三维点具有相同词汇的候选2D特征点，计算该最近邻三维点与候选2D特征点在特征描述子空间上的距离；
所述3D-2D匹配模块，还用于找到与该最近邻三维点对应的候选2D特征点中在特征描述子空间上距离最近和距离次近的两个2D特征点，若最近距离与次近距离的比值小于第二预设阈值，则该最近邻三维点与在特征描述子空间上距离该最近邻三维点距离最近的目标2D特征点相匹配；
第二检测模块，用于检查当前找到的三维点和二维点的匹配个数，若没有达到第三预设阈值则返回执行所述2D-3D检索模块及后续操作，直到匹配个数达到第三预设阈值；
重定位子模块，用于在匹配个数达到第三预设阈值时，通过得到的3D与2D的匹配对计算得到机器人当前在室内三维点云地图中的位置和目的地在室内三维点云地图中的位置，进而得到八叉树地图内的机器人当前所处的位置和目的地的位置。
优选地，所述导航模块包括：
投影模块，用于将所述八叉树地图以及在所述八叉树地图内的机器人当前所处的位置和目的地的位置进行投影，得到二维平面的栅格地图；
获取计算模块，用于获取所述栅格地图中机器人当前所处的位置的投影点作为起点的所有邻近像元，并计算各邻近像元的F值，存入栈或队列中，其中F值表示邻近像元到目的地的距离值；
第三检测模块，用于将栈或队列中F值最小的点作为新起点，并将所有处理过的单元和栈或队列中的单元标记为已处理，并检测新起点是否为目的地点，若不是，则获取新起点周围未经过处理的邻近像元的F值并存入栈中，然后执行所述获取计算模块及后续操作；
路径规划模块，用于在新起点为目的地点时，将从机器人当前所处位置的投影点到目的地位置的投影点之间的所有新起点连接起来作为从机器人当前位置到目的地位置的最优路径；
导航子模块，用于驱动机器人按所述最优路径进行行走，最终到达目的地位置完成导航任务。
总体而言，通过本发明所构思的以上技术方案与现有技术相比，主要有以下的技术优点：
(1)按照本发明实施的室内机器人定位与导航策略完全依赖于计算机视觉和机器人技术，其过程相较已有方法得到简化，从数据输入到模型输出仅在地图构建时需要驱动机器人，其它过程全部实现了自动化处理。
(2)实验设备价格适中、易于操作，所需要的数据形式单一、采集方便。
(3)使用一种2D-3D搜索和3D-2D搜索复合的主动搜索方法来做点云和2D图像特征点匹配，能够实现高精度的匹配和较少的计算时间，具有较好的实用性。
(3)整体策略能够仅以视觉信息为基础，完成机器人从构图到定位再到导航的任务，方案的完整度、可行性等指标上相较于以往的方案都有很大的改善。
附图说明
图1为本发明实施例公开的一种机器人自主定位与导航方法的流程示意图；
图2为本发明实施例公开的另一中机器人自主定位与导航方法的流程示意图；
图3为本发明实施例中室内三维地图构建和估计机器人位姿的流程图；
图4为本发明实施例中机器人自身以及目标重定位的流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。此外，下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。
本发明公开的方法涉及到特征点匹配、多视图几何、图优化、SLAM、图片重定位、路径规划，可以直接用于基于视觉传感器的机器在室内环境中建立三维地图，进而完成对自身以及目标位置的重定位和路径规划任务。因此该方法能够用于无人驾驶汽车、室内导航等多个领域。
如图1所示为本发明实施例公开的一种机器人自主定位与导航方法的流程示意图。在图1所示的方法中，包括以下操作：
(1)采集机器人在当前位置的RGB图像；
(2)将当前位置的RGB图像与室内三维点云地图进行特征点匹配，确定机器人在室内三维点云地图中的当前位置；将预存储的目的地RGB图像与室内三维点云地图进行特征点匹配，确定目的地在室内三维点云地图中的目的地位置；
作为一种可选的实施方式，室内三维点云地图按照如下方式构建：
采集机器人在行进路线上拍摄得到的RGB图像和深度图像，其中，机器人的行进路线为闭合路线；
利用上述RGB图像和深度图像构建室内三维点云地图。
(3)在室内三维点云地图中搜索从当前位置到目的地位置的最优路径，并驱动机器人按所述最优路径行走。
如图2所示为本发明实施例公开的另一种机器人自主定位与导航方法的流程示意图，从图2可以看出，作为输入的RGB图像、深度图像和目的地位置RGB图像数据需要经过室内地图构建、机器人和目标重定位、路径规划等几个步骤，最终完成室内机器人自主导航任务。其具体实施方式如下：
(1)采集机器人在行进路线上拍摄得到的RGB图像和深度图像，其中，行进路线为封闭路线；
机器人A处于一个室内环境中，驱动机器人使其在该环境中缓慢移动，同时驱动机器人上的RGB-D相机对机器人行径路线上的所有位置进行拍摄得到一系列RGB图像数据和深度图像数据。值得注意的是，因为机器人需要实时地建立室内环境地图所以需要很大的计算量，因此为了获取精确的地图应当使得机器人行进尽量缓慢。同时为了使得地图优化部分能够顺利完成，应当尽量使得机器人在行进过程中形成封闭的回路。
本发明实施例中对数据的形式不做限定，机器人所处场景的RGB-D数据可以是一段连续的视频也可以是连续的多帧图像，但是应该保证每一个关键帧都有其对应的深度图像。
(2)利用RGB图像和深度图像构建室内三维点云地图；
优选地，在本发明的一个实施例中，机器人自身位姿估计和室内场景地图构建SLAM采用RGB-D SLAM算法。除此之外，本发明实施例中使用的SLAM方法还可以任意选用能够建立稠密三维地图的SLAM方法如实时稠密跟踪和构图(Dense Tracking and Mappingin Real-Time，DTMP)、稠密视觉里程计(Dense Visual Odometry and SLAM，DVO)等。
优选地，在本发明的一个实施例中，步骤(2)的实现具体包括：
(2.1)将获取的起始帧图像作为第一帧图像，将与起始帧图像相邻的下一帧图像作为第二帧图像；
(2.2)提取第一帧图像与第二帧图像的特征点，分别计算第一帧图像与第二帧图像上的关键点，针对关键点周围的像素点，计算第一帧图像的特征描述子以及第二帧图像的特征描述子；
其中，为了提取彩色图像的SIFT特征，在机器人拍摄的第一帧与其相邻的下一帧的两幅RGB图像上分别计算关键点，针对这些关键点周围的像素点计算各自的SIFT描述子，这些描述子能够表达每一幅图像的特征。
(2.3)采用第一帧图像中的特征点到第二帧图像的最近邻特征点距离与次近邻特征点距离的比值来对第一帧图像的特征描述子与第二帧图像的特征描述子进行匹配，得到第一帧图像与第二帧图像之间的特征点匹配对；
其中，为了得到第一帧与第二帧之间的匹配关系，对两关键帧的特征描述子用最近邻算法进行匹配，计算得到两关键帧之间对应的匹配对。
(2.4)根据第一帧图像对应的RGB图像和深度图像以及第二帧图像对应的RGB图像和深度图像，利用针孔相机模型计算出第一帧图像对应的RGB图像和第二帧图像对应的RGB图像中的二维点所对应的三维点；
(2.5)根据第一帧图像与第二帧图像之间的特征点匹配对对应的三维点，利用第一帧图像与第二帧图像之间的几何关系以及非线性优化方法估计出第一帧图像与第二帧图像之间的旋转平移矩阵，得到机器人从第一帧图像到第二帧图像之间的位姿变换；
其中，旋转平移矩阵表示两关键帧的相对位姿变换，也即表示机器人从第一帧到相邻下一帧之间的位姿变换。
(2.6)将第二帧图像作为新的第一帧图像，将与第二帧图像相邻的下一帧图像作为新的第二帧图像，检测新的第一帧图像是否与起始帧图像重合，若不重合，则执行步骤(2.2)，否则，执行步骤(2.7)；
(2.7)将封闭路径上的所有帧图像对应的机器人位姿构建一个姿态图，该姿态图的节点代表机器人在每一个帧图像上的姿态，边表示节点之间的位姿变换，然后利用非线性优化方法对上述姿态图进行优化，得到机器人在每一帧图像的位姿，进而得到每一帧图像对应的三维点云图像；
(2.8)拼接每一帧图像对应的三维点云图像，形成室内三维点云地图，并将室内三维点云地图转化为八叉树地图。
由于后续的机器人导航无法通过三维点云图像来完成，所以需要将得到的稠密室内三维点云地图进行转化得到八叉树地图，将空间分解为相互连接且不重叠的空间单元，并且能够得到每一个单元中是否有物体占据，从而利于机器人导航任务的进行。如图2所示为本发明实施例中室内三维地图构建和估计机器人位姿的流程图。
(3)采集机器人在当前位置的第一RGB图像，将第一RGB图像与室内三维点云地图进行特征点匹配，确定机器人在室内三维点云地图中的当前位置；将预存储的第二RGB图像与室内三维点云地图进行特征点匹配，确定目的地在室内三维点云地图中的目的地位置；
其中，预存储的第二RGB图像以及机器人当前位置的第一RGB图像可以通过以下方式获得：实验人员B在室内环境中的任意一处位置拍摄RGB图像，将该RGB图像发送给机器人，同时机器人A在当前位置也拍摄RGB图像。值得注意的是RGB图像的拍摄尽量选取带有纹理的图像。
机器人和目的地的定位采用同样的方式，对当前的场景拍摄一张照片，通过图定位技术即可确定机器人相对于三维点云地图的初始位置和目的地相对于三维点云地图的位置。
优选地，在本发明的一个实施例中，图片特征点提取采用SIFT角点检测算法，除此之外，本发明中使用的特征点还可以任意选用具有局部显著性和稳定性的特征如二值鲁棒尺度不变特征点(Binary Robust Invariant Scalable Keypoints，BRISK)、加速分割试验特征(Features from Accelerated Segment Test，FAST)和加速稳健特征(Speed UpRobust Feature，SURF)等。
优选地，在本发明的一个实施例中，2D、3D点匹配采用2D-3D匹配结合3D-2D匹配的复合方法进行，除此之外，本发明实施例中使用的2D、3D点匹配可以任意选用能够成功找到准确、数量足够的2D、3D匹配的方法，如使用特征描述子直接进行树搜索查找近邻点、或只使用2D-3D匹配或3D-2D匹配进行检索。
优选地，在本发明的一个实施例中，步骤(3)的实现具体包括：
(3.1)使用聚类算法对室内三维点云地图中SIFT特征点的描述子进行聚类，得到词汇树；
优选地，在本发明的一个实施例中，可以使用近似K均值聚类算法对室内三维点云SIFT特征点的描述子进行聚类，得到一个词汇树。
(3.2)获取机器人当前位置的第一RGB图像和机器人接收到的第二RGB图像，并对第一RGB图像以及第二RGB图像进行SIFT特征点提取，然后使用聚类算法得到视觉词汇；
(3.3)进行2D-3D检索，对于第一RGB图像以及第二RGB图像中的每个2D特征点，根据该2D特征点对应的视觉词汇，在上述词汇树中查找与该2D特征点具有相同单词的候选三维匹配点；
(3.4)进行2D-3D匹配，对于第一RGB图像以及第二RGB图像中的每个2D特征点，计算该2D特征点与对应的候选三维匹配点在特征描述子空间上的距离；
(3.5)找到与该2D特征点对应的候选三维匹配点中在特征描述子空间上距离最近和距离次近的两个三维点，若最近距离与次近距离的比值小于第一预设阈值，则该2D特征点与在特征描述子空间上距离该2D特征点距离最近的目标三维点相匹配；
优选地，在本发明的一个实施例中，进行2D-3D匹配，对图片中每一个2D特征点，先使用线性搜索检索候选三维匹配点，然后使用距离检测决定候选点是否与该2D特征点匹配。具体包括以下操作：
(3.4.1)从第一RGB图像或第二RGB图像中读取一个2D特征点；
(3.4.2)在词汇树较低层查找与该2D特征点具有相同词汇的所有候选三维匹配点；
优选地，在本发明的一个实施例中选择在词汇树第3层查找候选三维匹配点。
(3.4.3)使用线性搜索在候选三维匹配点中找到与2D特征点在特征描述子空间上的最近点和次最近点，并计算他们与2D特征点的距离；
(3.4.4)若(3.4.3)中计算得到的最近距离和次最近距离的比值小于第一预设阈值，则认为该2D特征点和与其在特征描述子空间上距离最近的候选三维点相匹配，记入匹配。否则认为该2D特征点无三维点与其匹配。
(3.6)对于与该2D特征点匹配的目标三维点，查找目标三维点在欧式空间上的若干个最近邻三维点；
(3.7)对每一个最近邻三维点，进行3D-2D匹配，在2D图像中查找与该最近邻三维点具有相同词汇的候选2D特征点，计算该最近邻三维点与候选2D特征点在特征描述子空间上的距离；
(3.8)找到与该最近邻三维点对应的候选2D特征点中在特征描述子空间上距离最近和距离次近的两个2D特征点，若最近距离与次近距离的比值小于第二预设阈值，则该最近邻三维点与在特征描述子空间上距离该最近邻三维点距离最近的目标2D特征点相匹配；
优选地，在本发明的一个实施例中，对前述每一个最近邻三维点，进行3D-2D匹配，具体方法为在图片中查找与前述最近邻三维点相匹配的所有候选2D特征点，然后使用距离检测决定候选2D特征点是否与该最近邻三维点相匹配。具体包括以下操作：
(3.7.1)从(3.6)中获得的所有最邻近三维点中读入一个三维点；
(3.7.2)查找该三维点在(3.1)得到的词汇树的较高层中对应的词汇，并找到属于该词汇的所有2D特征点，成为该三维点的候选2D匹配特征点；
优选地，在本发明的一个实施例中使用词汇树的第5层查找词汇。
(3.7.3)使用线性搜索在候选2D特征点中找到与三维点在特征描述子空间上距离最近点和次最近点，并计算它们与三维点在前述空间上的距离；
(3.7.4)若(3.7.3)中计算得到的最近距离和次最近距离的比值小于第二预设阈值，则认为前述三维点和与其在特征描述子空间上距离最近的候选2D特征点相匹配，记入匹配；否则回到(3.7.1)，重新读入另外一个邻近三维点并进行3D-2D匹配检索。
(3.9)检查当前找到的三维点和二维点的匹配个数，若达到第三预设阈值则执行步骤(3.10)，否则，执行步骤(3.3)；
(3.10)通过得到的3D与2D的匹配对计算得到机器人当前在室内三维点云地图中的位置和目的地在室内三维点云地图中的位置，进而得到八叉树地图内的机器人当前所处的位置和目的地的位置。
优选地，在本发明的一个实施例中，对离线构建的三维点云和对场景拍摄的图片进行特征点匹配，并对N个匹配对使用基于6点直接线性变换算法(Direct LinearTransform，DLT)的随机抽样一致性算法(Random Sample Consensus，RANSAC)方法来估计当前相机位姿。如图3所示为本发明实施例中机器人自身以及目标重定位的流程图。
(4)在室内三维点云地图中搜索从当前位置到目的地位置的最优路径，并驱动机器人按上述最优路径行走。
优选地，可以利用A*算法求解得到最佳路径从而驱动机器人完成导航。
优选地，在本发明的一个实施例中，步骤(4)的实现具体包括：
(4.1)将八叉树地图以及在八叉树地图内的机器人当前所处的位置和目的地的位置进行投影，得到二维平面的栅格地图，该栅格地图每一个单元为一个正方形，代表了现实环境中的一定空间；
(4.2)获取栅格地图中机器人当前所处的位置的投影点作为起点的所有邻近像元，并计算各邻近像元的F值，存入栈或队列中，其中F值表示邻近像元到目的地的距离值；
其中，F值的计算通常的做法是起点到当前点的距离加上当前点到目的地点的距离。
(4.3)将栈或队列中F值最小的点作为新起点，并将所有处理过的单元和栈或队列中的单元标记为已处理；
(4.4)检测新起点是否为目的地点，若不是，则获取新起点周围未经过处理的邻近像元的F值并存入栈中，然后执行步骤(4.3)，否则执行步骤(4.5)；
(4.5)将从机器人当前所处位置的投影点到目的地位置的投影点之间的所有新起点连接起来作为从机器人当前位置到目的地位置的最优路径；
(4.6)驱动机器人按上述最优路径进行行走，最终到达目的地位置完成导航任务。
在本发明的一个实施例中，公开了一种机器人自主定位与导航系统，其中，该系统包括：
图像采集模块，用于采集机器人在当前位置的RGB图像；
重定位模块，用于将当前位置的RGB图像与室内三维点云地图进行特征点匹配，确定机器人在室内三维点云地图中的当前位置；将预存储的目的地RGB图像与室内三维点云地图进行特征点匹配，确定目的地在室内三维点云地图中的目的地位置；
导航模块，用于在室内三维点云地图中搜索从当前位置到目的地位置的最优路径，并驱动机器人按所述最优路径行走。
作为一种可选的实施方式，上述图像采集模块，还用于采集机器人在行进路线上拍摄得到的RGB图像和深度图像，其中，机器人的行进路线为闭合路线；
作为一种可选的实施方式，该系统还包括：室内地图构建模块，用于利用所述RGB图像和深度图像构建室内三维点云地图。
其中，各模块的具体实施方式可以参照方法实施例的描述，本发明实施例将不做复述。
本领域的技术人员容易理解，以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种机器人自主定位与导航方法，其特征在于，包括：
(1)采集机器人在当前位置的RGB图像；
(2)将当前位置的RGB图像与室内三维点云地图进行特征点匹配，确定机器人在室内三维点云地图中的当前位置；将预存储的目的地RGB图像与室内三维点云地图进行特征点匹配，确定目的地在室内三维点云地图中的目的地位置；
(3)在室内三维点云地图中搜索从当前位置到目的地位置的最优路径，并驱动机器人按所述最优路径行走。
2.根据权利要求1所述的方法，其特征在于，所述室内三维点云地图按照如下方式构建：
采集机器人在行进路线上拍摄得到的RGB图像和深度图像，其中，机器人的行进路线为闭合路线；
利用所述RGB图像和深度图像构建室内三维点云地图。
3.根据权利要求2所述的方法，其特征在于，所述利用所述RGB图像和深度图像构建室内三维点云地图，具体包括：
(S1)将获取的起始帧图像作为第一帧图像，将与所述起始帧图像相邻的下一帧图像作为第二帧图像；
(S2)提取所述第一帧图像与所述第二帧图像的特征点，分别计算所述第一帧图像与所述第二帧图像上的关键点，针对关键点周围的像素点，计算所述第一帧图像的特征描述子以及所述第二帧图像的特征描述子；
(S3)采用所述第一帧图像中的特征点到所述第二帧图像的最近邻特征点距离与次近邻特征点距离的比值来对所述第一帧图像的特征描述子与所述第二帧图像的特征描述子进行匹配，得到所述第一帧图像与所述第二帧图像之间的特征点匹配对；
(S4)根据所述第一帧图像对应的RGB图像和深度图像以及所述第二帧图像对应的RGB图像和深度图像，利用针孔相机模型计算出所述第一帧图像对应的RGB图像和所述第二帧图像对应的RGB图像中的二维点所对应的三维点；
(S5)根据所述第一帧图像与所述第二帧图像之间的特征点匹配对对应的三维点，利用所述第一帧图像与所述第二帧图像之间的几何关系以及非线性优化方法估计出所述第一帧图像与所述第二帧图像之间的旋转平移矩阵，得到所述机器人从所述第一帧图像到所述第二帧图像之间的位姿变换；
(S6)将所述第二帧图像作为新的第一帧图像，将与所述第二帧图像相邻的下一帧图像作为新的第二帧图像，检测所述新的第一帧图像是否与所述起始帧图像重合，若不重合，则执行步骤(S2)，否则，执行步骤(S7)；
(S7)将封闭路径上的所有帧图像对应的机器人位姿构建一个姿态图，所述姿态图的节点代表机器人在每一个帧图像上的姿态，边表示节点之间的位姿变换，然后利用非线性优化方法对所述姿态图进行优化，得到机器人在每一帧图像的位姿，进而得到每一帧图像对应的三维点云图像；
(S8)拼接每一帧图像对应的三维点云图像，形成室内三维点云地图，并将所述室内三维点云地图转化为八叉树地图。
4.根据权利要求3所述的方法，其特征在于，所述步骤(2)具体包括：
(2.1)使用聚类算法对所述室内三维点云地图中SIFT特征点的描述子进行聚类，得到词汇树；
(2.2)获取机器人当前位置的第一RGB图像和机器人接收到的第二RGB图像，并对所述第一RGB图像以及所述第二RGB图像进行SIFT特征点提取，然后使用聚类算法得到视觉词汇；
(2.3)进行2D-3D检索，对于所述第一RGB图像以及所述第二RGB图像中的每个2D特征点，根据该2D特征点对应的视觉词汇，在所述词汇树中查找与该2D特征点具有相同单词的候选三维匹配点；
(2.4)进行2D-3D匹配，对于所述第一RGB图像以及所述第二RGB图像中的每个2D特征点，计算该2D特征点与对应的候选三维匹配点在特征描述子空间上的距离；
(2.5)找到与该2D特征点对应的候选三维匹配点中在特征描述子空间上距离最近和距离次近的两个三维点，若最近距离与次近距离的比值小于第一预设阈值，则该2D特征点与在特征描述子空间上距离该2D特征点距离最近的目标三维点相匹配；
(2.6)对于与该2D特征点匹配的目标三维点，查找所述目标三维点在欧式空间上的若干个最近邻三维点；
(2.7)对每一个最近邻三维点，进行3D-2D匹配，在2D图像中查找与该最近邻三维点具有相同词汇的候选2D特征点，计算该最近邻三维点与候选2D特征点在特征描述子空间上的距离；
(2.8)找到与该最近邻三维点对应的候选2D特征点中在特征描述子空间上距离最近和距离次近的两个2D特征点，若最近距离与次近距离的比值小于第二预设阈值，则该最近邻三维点与在特征描述子空间上距离该最近邻三维点距离最近的目标2D特征点相匹配；
(2.9)检查当前找到的三维点和二维点的匹配个数，若达到第三预设阈值则执行步骤(2.10)，否则，执行步骤(2.3)；
(2.10)通过得到的3D与2D的匹配对计算得到机器人当前在室内三维点云地图中的位置和目的地在室内三维点云地图中的位置，进而得到八叉树地图内的机器人当前所处的位置和目的地的位置。
5.根据权利要求4所述的方法，其特征在于，所述步骤(3)具体包括：
(3.1)将所述八叉树地图以及在所述八叉树地图内的机器人当前所处的位置和目的地的位置进行投影，得到二维平面的栅格地图；
(3.2)获取所述栅格地图中机器人当前所处的位置的投影点作为起点的所有邻近像元，并计算各邻近像元的F值，存入栈或队列中，其中F值表示邻近像元到目的地的距离值；
(3.3)将栈或队列中F值最小的点作为新起点，并将所有处理过的单元和栈或队列中的单元标记为已处理；
(3.4)检测新起点是否为目的地点，若不是，则获取新起点周围未经过处理的邻近像元的F值并存入栈中，然后执行步骤(3.3)，否则执行步骤(3.5)；
(3.5)将从机器人当前所处位置的投影点到目的地位置的投影点之间的所有新起点连接起来作为从机器人当前位置到目的地位置的最优路径；
(3.6)驱动机器人按所述最优路径进行行走，最终到达目的地位置完成导航任务。
6.一种机器人自主定位与导航系统，其特征在于，包括：
图像采集模块，用于采集机器人在当前位置的RGB图像；
重定位模块，用于将当前位置的RGB图像与室内三维点云地图进行特征点匹配，确定机器人在室内三维点云地图中的当前位置；将预存储的目的地RGB图像与室内三维点云地图进行特征点匹配，确定目的地在室内三维点云地图中的目的地位置；
导航模块，用于在室内三维点云地图中搜索从当前位置到目的地位置的最优路径，并驱动机器人按所述最优路径行走。
7.根据权利要求6所述的系统，其特征在于，
所述图像采集模块，还用于采集机器人在行进路线上拍摄得到的RGB图像和深度图像，其中，机器人的行进路线为闭合路线；
所述系统还包括：
室内地图构建模块，用于利用所述RGB图像和深度图像构建室内三维点云地图。
8.根据权利要求7所述的系统，其特征在于，所述室内地图构建模块包括：
选取模块，用于将获取的起始帧图像作为第一帧图像，将与所述起始帧图像相邻的下一帧图像作为第二帧图像；
特征点提取模块，用于提取所述第一帧图像与所述第二帧图像的特征点，分别计算所述第一帧图像与所述第二帧图像上的关键点，针对关键点周围的像素点，计算所述第一帧图像的特征描述子以及所述第二帧图像的特征描述子；
特征点匹配模块，用于采用所述第一帧图像中的特征点到所述第二帧图像的最近邻特征点距离与次近邻特征点距离的比值来对所述第一帧图像的特征描述子与所述第二帧图像的特征描述子进行匹配，得到所述第一帧图像与所述第二帧图像之间的特征点匹配对；
三维点匹配模块，用于根据所述第一帧图像对应的RGB图像和深度图像以及所述第二帧图像对应的RGB图像和深度图像，利用针孔相机模型计算出所述第一帧图像对应的RGB图像以及所述第二帧图像对应的RGB图像中的二维点所对应的三维点；
位姿确定模块，用于根据所述第一帧图像与所述第二帧图像之间的特征点匹配对对应的三维点，利用所述第一帧图像与所述第二帧图像之间的几何关系以及非线性优化方法估计出所述第一帧图像与所述第二帧图像之间的旋转平移矩阵，得到所述机器人从所述第一帧图像到所述第二帧图像之间的位姿变换；
第一检测模块，用于将所述第二帧图像作为新的第一帧图像，将与所述第二帧图像相邻的下一帧图像作为新的第二帧图像，检测所述新的第一帧图像是否与所述起始帧图像重合，若不重合，则返回执行所述特征点提取模块的操作，直到所述新的第一帧图像与所述起始帧图像重合；
优化模块，用于将封闭路径上的所有帧图像对应的机器人位姿构建一个姿态图，所述姿态图的节点代表机器人在每一个帧图像上的姿态，边表示节点之间的位姿变换，然后利用非线性优化方法对所述姿态图进行优化，得到机器人在每一帧图像的位姿，进而得到每一帧图像对应的三维点云图像；
地图构建子模块，用于拼接每一帧图像对应的三维点云图像，形成室内三维点云地图，并将所述室内三维点云地图转化为八叉树地图。
9.根据权利要求8所述的系统，其特征在于，所述重定位模块包括：
聚类模块，用于使用聚类算法对所述室内三维点云地图中SIFT特征点的描述子进行聚类，得到词汇树；
所述聚类模块，还用于获取机器人当前位置的第一RGB图像和机器人接收到的第二RGB图像，并对所述第一RGB图像以及所述第二RGB图像进行SIFT特征点提取，然后使用聚类算法得到视觉词汇；
2D-3D检索模块，用于进行2D-3D检索，对于所述第一RGB图像以及所述第二RGB图像中的每个2D特征点，根据该2D特征点对应的视觉词汇，在所述词汇树中查找与该2D特征点具有相同单词的候选三维匹配点；
2D-3D匹配模块，用于进行2D-3D匹配，对于所述第一RGB图像以及所述第二RGB图像中的每个2D特征点，计算该2D特征点与对应的候选三维匹配点在特征描述子空间上的距离；
所述2D-3D匹配模块，还用于找到与该2D特征点对应的候选三维匹配点中在特征描述子空间上距离最近和距离次近的两个三维点，若最近距离与次近距离的比值小于第一预设阈值，则该2D特征点与在特征描述子空间上距离该2D特征点距离最近的目标三维点相匹配；
3D-2D检索模块，用于对于与该2D特征点匹配的目标三维点，查找所述目标三维点在欧式空间上的若干个最近邻三维点；
3D-2D匹配模块，用于对每一个最近邻三维点，进行3D-2D匹配，在2D图像中查找与该最近邻三维点具有相同词汇的候选2D特征点，计算该最近邻三维点与候选2D特征点在特征描述子空间上的距离；
所述3D-2D匹配模块，还用于找到与该最近邻三维点对应的候选2D特征点中在特征描述子空间上距离最近和距离次近的两个2D特征点，若最近距离与次近距离的比值小于第二预设阈值，则该最近邻三维点与在特征描述子空间上距离该最近邻三维点距离最近的目标2D特征点相匹配；
第二检测模块，用于检查当前找到的三维点和二维点的匹配个数，若没有达到第三预设阈值则返回执行所述2D-3D检索模块及后续操作，直到匹配个数达到第三预设阈值；
重定位子模块，用于在匹配个数达到第三预设阈值时，通过得到的3D与2D的匹配对计算得到机器人当前在室内三维点云地图中的位置和目的地在室内三维点云地图中的位置，进而得到八叉树地图内的机器人当前所处的位置和目的地的位置。
10.根据权利要求9所述的系统，其特征在于，所述导航模块包括：
投影模块，用于将所述八叉树地图以及在所述八叉树地图内的机器人当前所处的位置和目的地的位置进行投影，得到二维平面的栅格地图；
获取计算模块，用于获取所述栅格地图中机器人当前所处的位置的投影点作为起点的所有邻近像元，并计算各邻近像元的F值，存入栈或队列中，其中F值表示邻近像元到目的地的距离值；
第三检测模块，用于将栈或队列中F值最小的点作为新起点，并将所有处理过的单元和栈或队列中的单元标记为已处理，并检测新起点是否为目的地点，若不是，则获取新起点周围未经过处理的邻近像元的F值并存入栈中，然后执行所述获取计算模块及后续操作；
路径规划模块，用于在新起点为目的地点时，将从机器人当前所处位置的投影点到目的地位置的投影点之间的所有新起点连接起来作为从机器人当前位置到目的地位置的最优路径；
导航子模块，用于驱动机器人按所述最优路径进行行走，最终到达目的地位置完成导航任务。
CN201710082309.3A 2017-02-16 2017-02-16 一种机器人自主定位与导航方法及系统 Active CN106940186B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710082309.3A CN106940186B (zh) 2017-02-16 2017-02-16 一种机器人自主定位与导航方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710082309.3A CN106940186B (zh) 2017-02-16 2017-02-16 一种机器人自主定位与导航方法及系统

Publications (2)

Publication Number Publication Date
CN106940186A true CN106940186A (zh) 2017-07-11
CN106940186B CN106940186B (zh) 2019-09-24

Family

ID=59468651

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710082309.3A Active CN106940186B (zh) 2017-02-16 2017-02-16 一种机器人自主定位与导航方法及系统

Country Status (1)

Country Link
CN (1) CN106940186B (zh)

Cited By (78)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107451540A (zh) * 2017-07-14 2017-12-08 南京维睛视空信息科技有限公司 一种可压缩的3d识别方法
CN107478220A (zh) * 2017-07-26 2017-12-15 中国科学院深圳先进技术研究院 无人机室内导航方法、装置、无人机及存储介质
CN107483096A (zh) * 2017-09-18 2017-12-15 河南科技学院 一种面向复杂环境的自主排爆机器人通信链路重构方法
CN107491070A (zh) * 2017-08-31 2017-12-19 成都通甲优博科技有限责任公司 一种移动机器人路径规划方法及装置
CN107544504A (zh) * 2017-09-26 2018-01-05 河南科技学院 一种面向复杂环境的灾区救援机器人自主探测系统及方法
CN107741234A (zh) * 2017-10-11 2018-02-27 深圳勇艺达机器人有限公司 一种基于视觉的离线地图构建及定位方法
CN107796397A (zh) * 2017-09-14 2018-03-13 杭州迦智科技有限公司 一种机器人双目视觉定位方法、装置和存储介质
CN107908185A (zh) * 2017-10-14 2018-04-13 北醒（北京）光子科技有限公司 一种机器人自主全局重定位方法及机器人
CN108036793A (zh) * 2017-12-11 2018-05-15 北京奇虎科技有限公司 基于点云的定位方法、装置及电子设备
CN108460779A (zh) * 2018-02-12 2018-08-28 浙江大学 一种动态环境下的移动机器人图像视觉定位方法
CN108734654A (zh) * 2018-05-28 2018-11-02 深圳市易成自动驾驶技术有限公司 绘图与定位方法、系统及计算机可读存储介质
CN108804161A (zh) * 2018-06-21 2018-11-13 北京字节跳动网络技术有限公司 应用的初始化方法、装置、终端和存储介质
CN109029444A (zh) * 2018-06-12 2018-12-18 深圳职业技术学院 一种基于图像匹配和空间定位的室内导航系统及导航方法
CN109146972A (zh) * 2018-08-21 2019-01-04 南京师范大学镇江创新发展研究院 基于快速特征点提取及网格化三角形约束的视觉导航方法
CN109254579A (zh) * 2017-07-14 2019-01-22 上海汽车集团股份有限公司 一种双目视觉相机硬件系统、三维场景重建系统及方法
CN109282822A (zh) * 2018-08-31 2019-01-29 北京航空航天大学 构建导航地图的存储介质、方法和设备
CN109374003A (zh) * 2018-11-06 2019-02-22 山东科技大学 一种基于ArUco码的移动机器人视觉定位与导航方法
CN109460267A (zh) * 2018-11-05 2019-03-12 贵州大学 移动机器人离线地图保存与实时重定位方法
CN109459048A (zh) * 2019-01-07 2019-03-12 上海岚豹智能科技有限公司 用于机器人的地图加载方法及设备
CN109520509A (zh) * 2018-12-10 2019-03-26 福州臻美网络科技有限公司 一种充电机器人定位方法
CN109540142A (zh) * 2018-11-27 2019-03-29 达闼科技（北京）有限公司 一种机器人定位导航的方法、装置、计算设备
CN109636897A (zh) * 2018-11-23 2019-04-16 桂林电子科技大学 一种基于改进RGB-D SLAM的Octomap优化方法
CN109658373A (zh) * 2017-10-10 2019-04-19 中兴通讯股份有限公司 一种巡检方法、设备及计算机可读存储介质
CN109648558A (zh) * 2018-12-26 2019-04-19 清华大学 机器人曲面运动定位方法及其运动定位系统
CN109658445A (zh) * 2018-12-14 2019-04-19 北京旷视科技有限公司 网络训练方法、增量建图方法、定位方法、装置及设备
CN109697753A (zh) * 2018-12-10 2019-04-30 智灵飞（北京）科技有限公司 一种基于rgb-d slam的无人机三维重建方法、无人机
CN109920424A (zh) * 2019-04-03 2019-06-21 北京石头世纪科技股份有限公司 机器人语音控制方法、装置、机器人和介质
CN109993793A (zh) * 2019-03-29 2019-07-09 北京易达图灵科技有限公司 视觉定位方法及装置
CN110006432A (zh) * 2019-04-15 2019-07-12 广州高新兴机器人有限公司 一种基于几何先验信息下的室内机器人快速重定位的方法
WO2019140745A1 (zh) * 2018-01-16 2019-07-25 广东省智能制造研究所 机器人定位方法及装置
CN110068824A (zh) * 2019-04-17 2019-07-30 北京地平线机器人技术研发有限公司 一种传感器位姿确定方法和装置
CN110095752A (zh) * 2019-05-07 2019-08-06 百度在线网络技术（北京）有限公司 定位方法、装置、设备和介质
CN110146083A (zh) * 2019-05-14 2019-08-20 深圳信息职业技术学院 一种拥挤室内图像识别云导航系统
CN110176034A (zh) * 2019-05-27 2019-08-27 盎锐（上海）信息科技有限公司 用于vslam的定位方法及扫描终端
CN110264517A (zh) * 2019-06-13 2019-09-20 上海理工大学 一种基于三维场景图像确定车辆当前位置信息的方法与系统
CN110278714A (zh) * 2018-01-23 2019-09-24 深圳市大疆创新科技有限公司 障碍物检测方法、移动平台及计算机可读存储介质
CN110322512A (zh) * 2019-06-28 2019-10-11 中国科学院自动化研究所 结合小样本实例分割和三维匹配的物体位姿估计方法
CN110362083A (zh) * 2019-07-17 2019-10-22 北京理工大学 一种基于多目标跟踪预测的时空地图下自主导航方法
WO2019201228A1 (zh) * 2018-04-17 2019-10-24 菜鸟智能物流控股有限公司 位置测量方法和位置测量装置
CN110388924A (zh) * 2018-04-18 2019-10-29 法拉第未来公司 用于与自动导航有关的基于雷达的车辆定位的系统和方法
CN110502001A (zh) * 2018-05-16 2019-11-26 菜鸟智能物流控股有限公司 无人驾驶车辆自动装载或卸载货物的方法和装置以及无人驾驶物流车辆
CN110703771A (zh) * 2019-11-12 2020-01-17 华育昌(肇庆)智能科技研究有限公司 基于视觉的多设备之间的控制系统
CN110763232A (zh) * 2018-07-25 2020-02-07 深圳市优必选科技有限公司 一种机器人及其导航定位方法和装置
CN110780665A (zh) * 2018-07-26 2020-02-11 比亚迪股份有限公司 车辆无人驾驶控制方法及装置
CN110823171A (zh) * 2019-11-15 2020-02-21 北京云迹科技有限公司 一种机器人定位方法、装置及存储介质
CN110874100A (zh) * 2018-08-13 2020-03-10 北京京东尚科信息技术有限公司 用于使用视觉稀疏地图进行自主导航的系统和方法
CN110954134A (zh) * 2019-12-04 2020-04-03 上海有个机器人有限公司 陀螺仪偏差校正方法、校正系统、电子设备及存储介质
CN110968023A (zh) * 2019-10-14 2020-04-07 北京航空航天大学 一种基于plc与工业相机的无人机视觉引导系统及方法
CN110992258A (zh) * 2019-10-14 2020-04-10 中国科学院自动化研究所 基于弱色差信息的高精度rgb-d点云拼接方法和系统
CN111351493A (zh) * 2018-12-24 2020-06-30 上海欧菲智能车联科技有限公司 一种定位方法和系统
CN111402702A (zh) * 2020-03-31 2020-07-10 北京四维图新科技股份有限公司 地图构建方法、装置及系统
CN111551188A (zh) * 2020-06-07 2020-08-18 上海商汤智能科技有限公司 一种导航路线生成的方法及装置
CN111563138A (zh) * 2020-04-30 2020-08-21 浙江商汤科技开发有限公司 定位方法及装置、电子设备和存储介质
CN111602096A (zh) * 2017-09-22 2020-08-28 轨迹机器人公司 具有排除区的多分辨率扫描匹配
CN111638709A (zh) * 2020-03-24 2020-09-08 上海黑眸智能科技有限责任公司 自动避障跟踪方法、系统、终端以及介质
CN111656762A (zh) * 2017-12-05 2020-09-11 交互数字Ce专利控股公司 编码表示三维对象的点云的方法和装置
CN111680685A (zh) * 2020-04-14 2020-09-18 上海高仙自动化科技发展有限公司 一种基于图像的定位方法、装置、电子设备及存储介质
CN111862351A (zh) * 2020-08-03 2020-10-30 字节跳动有限公司 定位模型优化方法、定位方法和定位设备
CN111862337A (zh) * 2019-12-18 2020-10-30 北京嘀嘀无限科技发展有限公司 视觉定位方法、装置、电子设备和计算机可读存储介质
CN111854755A (zh) * 2020-06-19 2020-10-30 深圳宏芯宇电子股份有限公司 室内定位方法、设备及计算机可读存储介质
WO2020233724A1 (zh) * 2019-05-23 2020-11-26 全球能源互联网研究院有限公司 一种基于视觉slam的电网作业环境地图的构建方法及系统
CN112154303A (zh) * 2019-07-29 2020-12-29 深圳市大疆创新科技有限公司 高精度地图定位方法、系统、平台及计算机可读存储介质
CN112256001A (zh) * 2020-09-29 2021-01-22 华南理工大学 一种视角约束下的移动机器人视觉伺服控制方法
CN112598732A (zh) * 2020-12-10 2021-04-02 Oppo广东移动通信有限公司 目标设备定位方法、地图构建方法及装置、介质、设备
CN112634362A (zh) * 2020-12-09 2021-04-09 电子科技大学 一种基于线激光辅助的室内墙面抹灰机器人视觉精确定位方法
CN112720517A (zh) * 2020-12-22 2021-04-30 湖北灭霸生物环保科技有限公司 一种用于室内疫情消杀机器人的控制系统
CN112904908A (zh) * 2021-01-20 2021-06-04 济南浪潮高新科技投资发展有限公司 基于自动驾驶技术的空气加湿系统及实现方法
WO2021121306A1 (zh) * 2019-12-18 2021-06-24 北京嘀嘀无限科技发展有限公司 视觉定位方法和系统
WO2021143778A1 (zh) * 2020-01-14 2021-07-22 长沙智能驾驶研究院有限公司 一种基于激光雷达的定位方法
CN113237479A (zh) * 2021-05-10 2021-08-10 嘉应学院 一种室内导航方法、系统、装置及存储介质
CN113390409A (zh) * 2021-07-09 2021-09-14 广东机电职业技术学院 一种机器人全程自主探索导航实现slam技术的方法
CN113412614A (zh) * 2019-03-27 2021-09-17 Oppo广东移动通信有限公司 使用深度图像的三维定位
CN113487490A (zh) * 2021-05-24 2021-10-08 深圳亦芯智能视觉技术有限公司 一种立体视觉成像检测管道内部缺陷的方法及装置
CN113532431A (zh) * 2021-07-15 2021-10-22 贵州电网有限责任公司 一种用于电力巡检与作业的视觉惯性slam方法
WO2022036980A1 (zh) * 2020-08-17 2022-02-24 浙江商汤科技开发有限公司 位姿确定方法、装置、电子设备、存储介质及程序
WO2022089548A1 (zh) * 2020-10-30 2022-05-05 神顶科技（南京）有限公司 服务机器人及其控制方法、移动机器人及其控制方法
WO2022205618A1 (zh) * 2021-03-31 2022-10-06 上海商汤临港智能科技有限公司 定位方法、行驶控制方法、装置、计算机设备及存储介质
CN116030213A (zh) * 2023-03-30 2023-04-28 千巡科技(深圳)有限公司 一种多机云边协同地图创建与动态数字孪生方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103247075A (zh) * 2013-05-13 2013-08-14 北京工业大学 基于变分机制的室内环境三维重建方法
US8711206B2 (en) * 2011-01-31 2014-04-29 Microsoft Corporation Mobile camera localization using depth maps
CN104236548A (zh) * 2014-09-12 2014-12-24 清华大学 一种微型无人机室内自主导航方法
CN105843223A (zh) * 2016-03-23 2016-08-10 东南大学 一种基于空间词袋模型的移动机器人三维建图与避障方法
CN105913489A (zh) * 2016-04-19 2016-08-31 东北大学 一种利用平面特征的室内三维场景重构方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8711206B2 (en) * 2011-01-31 2014-04-29 Microsoft Corporation Mobile camera localization using depth maps
CN103247075A (zh) * 2013-05-13 2013-08-14 北京工业大学 基于变分机制的室内环境三维重建方法
CN104236548A (zh) * 2014-09-12 2014-12-24 清华大学 一种微型无人机室内自主导航方法
CN105843223A (zh) * 2016-03-23 2016-08-10 东南大学 一种基于空间词袋模型的移动机器人三维建图与避障方法
CN105913489A (zh) * 2016-04-19 2016-08-31 东北大学 一种利用平面特征的室内三维场景重构方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张毅等: "基于Kinect传感器的三维点云地图构建与优化", 《半导体光电》 *

Cited By (116)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107451540B (zh) * 2017-07-14 2023-09-01 南京维睛视空信息科技有限公司 一种可压缩的3d识别方法
CN109254579A (zh) * 2017-07-14 2019-01-22 上海汽车集团股份有限公司 一种双目视觉相机硬件系统、三维场景重建系统及方法
CN107451540A (zh) * 2017-07-14 2017-12-08 南京维睛视空信息科技有限公司 一种可压缩的3d识别方法
CN107478220A (zh) * 2017-07-26 2017-12-15 中国科学院深圳先进技术研究院 无人机室内导航方法、装置、无人机及存储介质
CN107478220B (zh) * 2017-07-26 2021-01-15 中国科学院深圳先进技术研究院 无人机室内导航方法、装置、无人机及存储介质
CN107491070A (zh) * 2017-08-31 2017-12-19 成都通甲优博科技有限责任公司 一种移动机器人路径规划方法及装置
CN107796397A (zh) * 2017-09-14 2018-03-13 杭州迦智科技有限公司 一种机器人双目视觉定位方法、装置和存储介质
CN107796397B (zh) * 2017-09-14 2020-05-15 杭州迦智科技有限公司 一种机器人双目视觉定位方法、装置和存储介质
CN107483096B (zh) * 2017-09-18 2020-07-24 河南科技学院 一种面向复杂环境的自主排爆机器人通信链路重构方法
CN107483096A (zh) * 2017-09-18 2017-12-15 河南科技学院 一种面向复杂环境的自主排爆机器人通信链路重构方法
CN111602096B (zh) * 2017-09-22 2023-08-04 轨迹机器人公司 具有排除区的多分辨率扫描匹配
CN111602096A (zh) * 2017-09-22 2020-08-28 轨迹机器人公司 具有排除区的多分辨率扫描匹配
CN107544504A (zh) * 2017-09-26 2018-01-05 河南科技学院 一种面向复杂环境的灾区救援机器人自主探测系统及方法
CN107544504B (zh) * 2017-09-26 2020-08-21 河南科技学院 一种面向复杂环境的灾区救援机器人自主探测系统及方法
CN109658373A (zh) * 2017-10-10 2019-04-19 中兴通讯股份有限公司 一种巡检方法、设备及计算机可读存储介质
CN107741234A (zh) * 2017-10-11 2018-02-27 深圳勇艺达机器人有限公司 一种基于视觉的离线地图构建及定位方法
CN107741234B (zh) * 2017-10-11 2021-10-19 深圳勇艺达机器人有限公司 一种基于视觉的离线地图构建及定位方法
CN107908185A (zh) * 2017-10-14 2018-04-13 北醒（北京）光子科技有限公司 一种机器人自主全局重定位方法及机器人
US11095920B2 (en) 2017-12-05 2021-08-17 InterDigital CE Patent Holdgins, SAS Method and apparatus for encoding a point cloud representing three-dimensional objects
CN111656762A (zh) * 2017-12-05 2020-09-11 交互数字Ce专利控股公司 编码表示三维对象的点云的方法和装置
CN108036793A (zh) * 2017-12-11 2018-05-15 北京奇虎科技有限公司 基于点云的定位方法、装置及电子设备
CN108036793B (zh) * 2017-12-11 2021-07-23 北京奇虎科技有限公司 基于点云的定位方法、装置及电子设备
WO2019140745A1 (zh) * 2018-01-16 2019-07-25 广东省智能制造研究所 机器人定位方法及装置
CN110278714A (zh) * 2018-01-23 2019-09-24 深圳市大疆创新科技有限公司 障碍物检测方法、移动平台及计算机可读存储介质
CN110278714B (zh) * 2018-01-23 2022-03-18 深圳市大疆创新科技有限公司 障碍物检测方法、移动平台及计算机可读存储介质
CN108460779A (zh) * 2018-02-12 2018-08-28 浙江大学 一种动态环境下的移动机器人图像视觉定位方法
CN108460779B (zh) * 2018-02-12 2021-09-24 浙江大学 一种动态环境下的移动机器人图像视觉定位方法
WO2019201228A1 (zh) * 2018-04-17 2019-10-24 菜鸟智能物流控股有限公司 位置测量方法和位置测量装置
CN110388922A (zh) * 2018-04-17 2019-10-29 菜鸟智能物流控股有限公司 位置测量方法和位置测量装置
CN110388924A (zh) * 2018-04-18 2019-10-29 法拉第未来公司 用于与自动导航有关的基于雷达的车辆定位的系统和方法
CN110388924B (zh) * 2018-04-18 2023-07-21 法拉第未来公司 用于与自动导航有关的基于雷达的车辆定位的系统和方法
CN110502001A (zh) * 2018-05-16 2019-11-26 菜鸟智能物流控股有限公司 无人驾驶车辆自动装载或卸载货物的方法和装置以及无人驾驶物流车辆
CN108734654A (zh) * 2018-05-28 2018-11-02 深圳市易成自动驾驶技术有限公司 绘图与定位方法、系统及计算机可读存储介质
CN109029444B (zh) * 2018-06-12 2022-03-08 深圳职业技术学院 一种基于图像匹配和空间定位的室内导航系统及导航方法
CN109029444A (zh) * 2018-06-12 2018-12-18 深圳职业技术学院 一种基于图像匹配和空间定位的室内导航系统及导航方法
CN108804161B (zh) * 2018-06-21 2022-03-04 北京字节跳动网络技术有限公司 应用的初始化方法、装置、终端和存储介质
CN108804161A (zh) * 2018-06-21 2018-11-13 北京字节跳动网络技术有限公司 应用的初始化方法、装置、终端和存储介质
CN110763232B (zh) * 2018-07-25 2021-06-29 深圳市优必选科技有限公司 一种机器人及其导航定位方法和装置
CN110763232A (zh) * 2018-07-25 2020-02-07 深圳市优必选科技有限公司 一种机器人及其导航定位方法和装置
CN110780665A (zh) * 2018-07-26 2020-02-11 比亚迪股份有限公司 车辆无人驾驶控制方法及装置
CN110780665B (zh) * 2018-07-26 2022-02-08 比亚迪股份有限公司 车辆无人驾驶控制方法及装置
CN110874100A (zh) * 2018-08-13 2020-03-10 北京京东尚科信息技术有限公司 用于使用视觉稀疏地图进行自主导航的系统和方法
CN109146972A (zh) * 2018-08-21 2019-01-04 南京师范大学镇江创新发展研究院 基于快速特征点提取及网格化三角形约束的视觉导航方法
CN109146972B (zh) * 2018-08-21 2022-04-12 南京师范大学镇江创新发展研究院 基于快速特征点提取及网格化三角形约束的视觉导航方法
CN109282822B (zh) * 2018-08-31 2020-05-05 北京航空航天大学 构建导航地图的存储介质、方法和设备
CN109282822A (zh) * 2018-08-31 2019-01-29 北京航空航天大学 构建导航地图的存储介质、方法和设备
CN109460267A (zh) * 2018-11-05 2019-03-12 贵州大学 移动机器人离线地图保存与实时重定位方法
CN109460267B (zh) * 2018-11-05 2021-06-25 贵州大学 移动机器人离线地图保存与实时重定位方法
CN109374003A (zh) * 2018-11-06 2019-02-22 山东科技大学 一种基于ArUco码的移动机器人视觉定位与导航方法
CN109636897B (zh) * 2018-11-23 2022-08-23 桂林电子科技大学 一种基于改进RGB-D SLAM的Octomap优化方法
CN109636897A (zh) * 2018-11-23 2019-04-16 桂林电子科技大学 一种基于改进RGB-D SLAM的Octomap优化方法
CN109540142B (zh) * 2018-11-27 2021-04-06 达闼科技（北京）有限公司 一种机器人定位导航的方法、装置、计算设备
US11638997B2 (en) 2018-11-27 2023-05-02 Cloudminds (Beijing) Technologies Co., Ltd. Positioning and navigation method for a robot, and computing device thereof
CN109540142A (zh) * 2018-11-27 2019-03-29 达闼科技（北京）有限公司 一种机器人定位导航的方法、装置、计算设备
CN109520509A (zh) * 2018-12-10 2019-03-26 福州臻美网络科技有限公司 一种充电机器人定位方法
CN109697753A (zh) * 2018-12-10 2019-04-30 智灵飞（北京）科技有限公司 一种基于rgb-d slam的无人机三维重建方法、无人机
CN109697753B (zh) * 2018-12-10 2023-10-03 智灵飞（北京）科技有限公司 一种基于rgb-d slam的无人机三维重建方法、无人机
CN109658445A (zh) * 2018-12-14 2019-04-19 北京旷视科技有限公司 网络训练方法、增量建图方法、定位方法、装置及设备
CN111351493A (zh) * 2018-12-24 2020-06-30 上海欧菲智能车联科技有限公司 一种定位方法和系统
CN109648558A (zh) * 2018-12-26 2019-04-19 清华大学 机器人曲面运动定位方法及其运动定位系统
CN109459048A (zh) * 2019-01-07 2019-03-12 上海岚豹智能科技有限公司 用于机器人的地图加载方法及设备
CN113412614A (zh) * 2019-03-27 2021-09-17 Oppo广东移动通信有限公司 使用深度图像的三维定位
CN113412614B (zh) * 2019-03-27 2023-02-14 Oppo广东移动通信有限公司 使用深度图像的三维定位
CN109993793A (zh) * 2019-03-29 2019-07-09 北京易达图灵科技有限公司 视觉定位方法及装置
CN109920424A (zh) * 2019-04-03 2019-06-21 北京石头世纪科技股份有限公司 机器人语音控制方法、装置、机器人和介质
CN110006432A (zh) * 2019-04-15 2019-07-12 广州高新兴机器人有限公司 一种基于几何先验信息下的室内机器人快速重定位的方法
CN110006432B (zh) * 2019-04-15 2021-02-02 广州高新兴机器人有限公司 一种基于几何先验信息下的室内机器人快速重定位的方法
CN110068824A (zh) * 2019-04-17 2019-07-30 北京地平线机器人技术研发有限公司 一种传感器位姿确定方法和装置
CN110068824B (zh) * 2019-04-17 2021-07-23 北京地平线机器人技术研发有限公司 一种传感器位姿确定方法和装置
CN110095752A (zh) * 2019-05-07 2019-08-06 百度在线网络技术（北京）有限公司 定位方法、装置、设备和介质
CN110146083A (zh) * 2019-05-14 2019-08-20 深圳信息职业技术学院 一种拥挤室内图像识别云导航系统
WO2020233724A1 (zh) * 2019-05-23 2020-11-26 全球能源互联网研究院有限公司 一种基于视觉slam的电网作业环境地图的构建方法及系统
CN110176034A (zh) * 2019-05-27 2019-08-27 盎锐（上海）信息科技有限公司 用于vslam的定位方法及扫描终端
CN110264517A (zh) * 2019-06-13 2019-09-20 上海理工大学 一种基于三维场景图像确定车辆当前位置信息的方法与系统
CN110322512A (zh) * 2019-06-28 2019-10-11 中国科学院自动化研究所 结合小样本实例分割和三维匹配的物体位姿估计方法
CN110362083A (zh) * 2019-07-17 2019-10-22 北京理工大学 一种基于多目标跟踪预测的时空地图下自主导航方法
CN110362083B (zh) * 2019-07-17 2021-01-26 北京理工大学 一种基于多目标跟踪预测的时空地图下自主导航方法
CN112154303A (zh) * 2019-07-29 2020-12-29 深圳市大疆创新科技有限公司 高精度地图定位方法、系统、平台及计算机可读存储介质
CN112154303B (zh) * 2019-07-29 2024-04-05 深圳市大疆创新科技有限公司 高精度地图定位方法、系统、平台及计算机可读存储介质
CN110992258A (zh) * 2019-10-14 2020-04-10 中国科学院自动化研究所 基于弱色差信息的高精度rgb-d点云拼接方法和系统
CN110968023A (zh) * 2019-10-14 2020-04-07 北京航空航天大学 一种基于plc与工业相机的无人机视觉引导系统及方法
CN110703771A (zh) * 2019-11-12 2020-01-17 华育昌(肇庆)智能科技研究有限公司 基于视觉的多设备之间的控制系统
CN110823171B (zh) * 2019-11-15 2022-03-25 北京云迹科技股份有限公司 一种机器人定位方法、装置及存储介质
CN110823171A (zh) * 2019-11-15 2020-02-21 北京云迹科技有限公司 一种机器人定位方法、装置及存储介质
CN110954134A (zh) * 2019-12-04 2020-04-03 上海有个机器人有限公司 陀螺仪偏差校正方法、校正系统、电子设备及存储介质
CN111862337B (zh) * 2019-12-18 2024-05-10 北京嘀嘀无限科技发展有限公司 视觉定位方法、装置、电子设备和计算机可读存储介质
CN111862337A (zh) * 2019-12-18 2020-10-30 北京嘀嘀无限科技发展有限公司 视觉定位方法、装置、电子设备和计算机可读存储介质
WO2021121306A1 (zh) * 2019-12-18 2021-06-24 北京嘀嘀无限科技发展有限公司 视觉定位方法和系统
WO2021143778A1 (zh) * 2020-01-14 2021-07-22 长沙智能驾驶研究院有限公司 一种基于激光雷达的定位方法
CN111638709A (zh) * 2020-03-24 2020-09-08 上海黑眸智能科技有限责任公司 自动避障跟踪方法、系统、终端以及介质
CN111402702A (zh) * 2020-03-31 2020-07-10 北京四维图新科技股份有限公司 地图构建方法、装置及系统
CN111680685B (zh) * 2020-04-14 2023-06-06 上海高仙自动化科技发展有限公司 一种基于图像的定位方法、装置、电子设备及存储介质
CN111680685A (zh) * 2020-04-14 2020-09-18 上海高仙自动化科技发展有限公司 一种基于图像的定位方法、装置、电子设备及存储介质
CN111563138A (zh) * 2020-04-30 2020-08-21 浙江商汤科技开发有限公司 定位方法及装置、电子设备和存储介质
CN111563138B (zh) * 2020-04-30 2024-01-05 浙江商汤科技开发有限公司 定位方法及装置、电子设备和存储介质
CN111551188A (zh) * 2020-06-07 2020-08-18 上海商汤智能科技有限公司 一种导航路线生成的方法及装置
CN111551188B (zh) * 2020-06-07 2022-05-06 上海商汤智能科技有限公司 一种导航路线生成的方法及装置
CN111854755A (zh) * 2020-06-19 2020-10-30 深圳宏芯宇电子股份有限公司 室内定位方法、设备及计算机可读存储介质
CN111862351B (zh) * 2020-08-03 2024-01-19 字节跳动有限公司 定位模型优化方法、定位方法和定位设备
CN111862351A (zh) * 2020-08-03 2020-10-30 字节跳动有限公司 定位模型优化方法、定位方法和定位设备
WO2022036980A1 (zh) * 2020-08-17 2022-02-24 浙江商汤科技开发有限公司 位姿确定方法、装置、电子设备、存储介质及程序
JP2022548441A (ja) * 2020-08-17 2022-11-21 チョーチアン センスタイム テクノロジー デベロップメント カンパニー，リミテッド 位置姿勢決定方法、装置、電子機器、記憶媒体及びコンピュータプログラム
CN114814872A (zh) * 2020-08-17 2022-07-29 浙江商汤科技开发有限公司 位姿确定方法及装置、电子设备和存储介质
JP7236565B2 (ja) 2020-08-17 2023-03-09 チョーチアン センスタイム テクノロジー デベロップメント カンパニー，リミテッド 位置姿勢決定方法、装置、電子機器、記憶媒体及びコンピュータプログラム
CN112256001A (zh) * 2020-09-29 2021-01-22 华南理工大学 一种视角约束下的移动机器人视觉伺服控制方法
WO2022089548A1 (zh) * 2020-10-30 2022-05-05 神顶科技（南京）有限公司 服务机器人及其控制方法、移动机器人及其控制方法
CN112634362A (zh) * 2020-12-09 2021-04-09 电子科技大学 一种基于线激光辅助的室内墙面抹灰机器人视觉精确定位方法
CN112598732A (zh) * 2020-12-10 2021-04-02 Oppo广东移动通信有限公司 目标设备定位方法、地图构建方法及装置、介质、设备
CN112720517A (zh) * 2020-12-22 2021-04-30 湖北灭霸生物环保科技有限公司 一种用于室内疫情消杀机器人的控制系统
CN112904908A (zh) * 2021-01-20 2021-06-04 济南浪潮高新科技投资发展有限公司 基于自动驾驶技术的空气加湿系统及实现方法
WO2022205618A1 (zh) * 2021-03-31 2022-10-06 上海商汤临港智能科技有限公司 定位方法、行驶控制方法、装置、计算机设备及存储介质
CN113237479A (zh) * 2021-05-10 2021-08-10 嘉应学院 一种室内导航方法、系统、装置及存储介质
CN113487490A (zh) * 2021-05-24 2021-10-08 深圳亦芯智能视觉技术有限公司 一种立体视觉成像检测管道内部缺陷的方法及装置
CN113390409A (zh) * 2021-07-09 2021-09-14 广东机电职业技术学院 一种机器人全程自主探索导航实现slam技术的方法
CN113532431A (zh) * 2021-07-15 2021-10-22 贵州电网有限责任公司 一种用于电力巡检与作业的视觉惯性slam方法
CN116030213A (zh) * 2023-03-30 2023-04-28 千巡科技(深圳)有限公司 一种多机云边协同地图创建与动态数字孪生方法及系统

Also Published As

Publication number Publication date
CN106940186B (zh) 2019-09-24

Similar Documents

Publication Publication Date Title
CN106940186B (zh) 一种机器人自主定位与导航方法及系统
CN110956651B (zh) 一种基于视觉和振动触觉融合的地形语义感知方法
CN108303099B (zh) 基于三维视觉slam的无人机室内自主导航方法
CN109631855B (zh) 基于orb-slam的高精度车辆定位方法
Huang et al. Visual odometry and mapping for autonomous flight using an RGB-D camera
CN105843223B (zh) 一种基于空间词袋模型的移动机器人三维建图与避障方法
Zhang et al. Instance segmentation of lidar point clouds
CN111914715B (zh) 一种基于仿生视觉的智能车目标实时检测与定位方法
Churchill et al. Practice makes perfect? managing and leveraging visual experiences for lifelong navigation
KR102053802B1 (ko) 센서를 위치판단하는 방법 및 관련된 장치
Paya et al. A state‐of‐the‐art review on mapping and localization of mobile robots using omnidirectional vision sensors
JP6410530B2 (ja) Ｖｓｌａｍ最適化のための方法
Hoppe et al. Photogrammetric camera network design for micro aerial vehicles
CN103712617B (zh) 一种基于视觉内容的多层语义地图的创建方法
CN110298914B (zh) 一种建立果园中果树冠层特征地图的方法
CN107967457A (zh) 一种适应视觉特征变化的地点识别与相对定位方法及系统
CN105783913A (zh) 一种融合车载多传感器的slam装置及其控制方法
KR20210029586A (ko) 이미지 내의 특징적 객체에 기반하여 슬램을 수행하는 방법 및 이를 구현하는 로봇과 클라우드 서버
CN116295412A (zh) 一种基于深度相机的室内移动机器人稠密建图与自主导航一体化方法
JP2017117386A (ja) 自己運動推定システム、自己運動推定システムの制御方法及びプログラム
Holz et al. Continuous 3D sensing for navigation and SLAM in cluttered and dynamic environments
CN112509051A (zh) 一种基于仿生学的自主移动平台环境感知与建图方法
CN113570716A (zh) 云端三维地图构建方法、系统及设备
Zhi et al. Learning autonomous exploration and mapping with semantic vision
Gadipudi et al. A review on monocular tracking and mapping: from model-based to data-driven methods

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant