发烧友10周年庆典,全网超值优惠来袭!千元现金券,下单抽奖赶紧参与》》

95zz44

新机器视觉 2019-06-12 09:09 次阅读

机器人研究的核心就是:导航定位、路径规划、避障、多传感器融合。定位技术有几种,不关心,只关心视觉的。视觉技术用到“眼睛”可以分为:单目,双目,多目、RGB-D,后三种可以使图像有深度,这些眼睛亦可称为VO(视觉里程计:单目or立体),维基百科给出的介绍:在机器人和计算机视觉问题中,视觉里程计就是一个通过分析处理相关图像序列来确定机器人的位置和姿态。

当今,由于数字图像处理和计算机视觉技术的迅速发展,越来越多的研究者采用摄像机作为全自主用移动机器人的感知传感器。这主要是因为原来的超声或红外传感器感知信息量有限,鲁棒性差,而视觉系统则可以弥补这些缺点。而现实世界是三维的,而投射于摄像镜头(CCD/CMOS)上的图像则是二维的,视觉处理的最终目的就是要从感知到的二维图像中提取有关的三维世界信息。

系统基本组成:CCD、PCI、PC及其外设等。

CCD/CMOS

一行硅成像元素,在一个衬底上配置光敏元件和电荷转移器件,通过电荷的依次转移,将多个象素的视频信号分时、顺序地取出来,如面阵CCD传感器采集的图像的分辨率可以从32×32到1024×1024像素等。

视频数字信号处理器

图像信号一般是二维信号,一幅图像通常由512×512个像素组成(当然有时也有256×256,或者1024×1024个像素),每个像素有256级灰度,或者是3×8bit,红黄兰16M种颜色,一幅图像就有256KB或者768KB(对于彩色)个数据。为了完成视觉处理的传感、预处理、分割、描述、识别和解释,上述前几项主要完成的数学运算可归纳为:

(1)点处理常用于对比度增强、密度非线性较正、阈值处理、伪彩色处理等。每个像素的输入数据经过一定关系映射成像素的输出数据,例如对数变换可实现暗区对比度扩张。

(2)二维卷积的运算常用于图像平滑、尖锐化、轮廓增强、空间滤波、标准模板匹配计算等。若用M×M卷积核矩阵对整幅图像进行卷积时,要得到每个像素的输出结果就需要作M2次乘法和(M2-1)次加法,由于图像像素一般很多,即使用较小的卷积和,也需要进行大量的乘加运算和访问存储器

(3)二维正交变换常用二维正交变换有FFT、Walsh、Haar和K-L变换等,常用于图像增强、复原、二维滤波、数据压缩等。

(4)坐标变换常用于图像的放大缩小、旋转、移动、配准、几何校正和由摄影值重建图像等。

(5)量计算如计算密度直方图分布、平均值和协方差矩阵等。在进行直方图均衡器化、面积计算、分类和K-L变换时,常常要进行这些量计算。

视觉导航定位系统的工作原理

简单说来就是对机器人周边的环境进行光学处理,先用摄像头进行图像信息采集,将采集的信息进行压缩,然后将它反馈到一个由神经网络和学方法构成的学习子系统,再由学习子系统将采集到的图像信息和机器人的实际位置联系起来,完成机器人的自主导航定位功能。

1)摄像头标定算法:2D-3D映射求参。

传统摄像机标定主要有 Faugeras 标定法、Tscai 两步法、直接线性变换方法、张正友平面标定法和 Weng迭代法。自标定包括基于 Kruppa 方程自标定法、分层逐步自标定法、基于绝对二次曲面的自标定法和 Pollefeys 的模约束法。视觉标定有马颂德的三正交平移法、李华的平面正交标定法和 Hartley 旋转求内参数标定法。

2)机器视觉与图像处理:

a.预处理:灰化、降噪、滤波、二值化、边缘检测。。。

b.特征提取:特征空间到参数空间映射。算法有HOUGH、SIFT、SURF

c.图像分割:RGB-HIS。

d.图像描述识别

3)定位算法:基于滤波器的定位算法主要有KF、SEIF、PF、EKF、UKF等。

也可以使用单目视觉和里程计融合的方法。以里程计读数作为辅助信息,利用三角法计算特征点在当前机器人坐标系中的坐标位置,这里的三维坐标计算需要在延迟一个时间步的基础上进行。根据特征点在当前摄像头坐标系中的三维坐标以及它在地图中的世界坐标,来估计摄像头在世界坐标系中的位姿。这种降低了传感器成本,消除了里程计的累积误差,使得定位的结果更加精确。此外,相对于立体视觉中摄像机间的标定,这种方法只需对摄像机内参数进行标定,提高了系统的效率。

定位算法基本过程:

简单的算法过程,可基于OpenCV进行简单实现。

输入

通过摄像头获取的视频流(主要为灰度图像,stereo VO中图像既可以是彩色的,也可以是灰度的 ),记录摄像头在t和t+1时刻获得的图像为It和It+1,相机的内参,通过相机标定获得,可以通过matlab或者opencv计算为固定量。

输出

计算每一帧相机的位置+姿态

基本过程

● 获得图像It,It+1

● 对获得图像进行畸变处理

● 通过FAST算法对图像It进行特征检测,通过KLT算法跟踪这些特征到图像It+1中,如果跟踪特征有所丢失,特征数小于某个阈值,则重新进行特征检测

● 通过带RANSAC的5点算法来估计两幅图像的本质矩阵

● 通过计算的本质矩阵进行估计R,t

● 对尺度信息进行估计,最终确定旋转矩阵和平移向量

原文标题:机器人视觉系统组成及定位算法(难得的好资料)

文章出处:【微信号:vision263com,微信公众号:新机器视觉】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
分享:

评论

相关推荐

让机器“看见”—计算机视觉入门及实战

直播主题及亮点本次直播,讲者将结合自己过去16年中在机器视觉领域的研发经验,讲解智能视频分析技术的基本概念、基本方法、以
发表于 07-19 00:00 13939次 阅读
让机器“看见”—计算机视觉入门及实战

微信精选:图像处理软件在机器视觉系统中怎么工作?

图像处理软件作为机器视觉系统的重要组成部分,主要通过对图像的分析、处理和识别,实现对特定目标特征的检测。由于机器视觉系统...
发表于 09-19 09:40 208次 阅读
微信精选:图像处理软件在机器视觉系统中怎么工作?

嵌入式视觉与通用机器视觉系统相比有什么优势

空间有限且要求功耗较低的应用,通常是嵌入式计算机系统发挥作用的舞台。
发表于 09-18 10:57 40次 阅读
嵌入式视觉与通用机器视觉系统相比有什么优势

使用机器视觉实现播种精度测试的论文免费下载

播种均匀性是影响播种机播种性能和播种质量的重要指标。提出了一种集机器视觉、模式识别和自动控制于一体的....
发表于 09-17 14:46 40次 阅读
使用机器视觉实现播种精度测试的论文免费下载

GPU为机器视觉可以带来些什么

随着图像捕获系统的分辨率增加,机器视觉的可能性也增加,因为可用于评估的细节以相应的速率增加。
发表于 09-16 16:40 64次 阅读
GPU为机器视觉可以带来些什么

机器视觉的不断发展带来了什么

机器视觉技术的不断创新,推动了工业自动化、智慧安防以及人工智能等行业的进步,也为各个行业领域的应用带....
发表于 09-16 15:41 170次 阅读
机器视觉的不断发展带来了什么

工业计算机的视觉与常见的计算机视角区别在哪

过去的工业机器人,在我们眼中一直是一些冷冰冰的自动化设备,但随着计算机视觉的应用,它慢慢变成了一个有....
发表于 09-16 14:28 50次 阅读
工业计算机的视觉与常见的计算机视角区别在哪

技术层发展迅猛,部分技术已经处于世界领先水平

我们国家已经在研发、设计、代工生产、封装测试等环节形成了完整的产业链,形成了比较完善的生态系统。大数....
的头像 倩倩 发表于 09-16 11:11 298次 阅读
技术层发展迅猛,部分技术已经处于世界领先水平

安森美半导体推出适用于机器视觉、AI和AR/VR的数字图像传感器

推动高能效创新的安森美半导体(ON Semiconductor,美国纳斯达克上市代号:ON),宣布推....
的头像 电子发烧友网工程师 发表于 09-16 10:26 588次 阅读
安森美半导体推出适用于机器视觉、AI和AR/VR的数字图像传感器

机器视觉在工业领域的发展历程和应用情况详细概述

本文介绍了机器视觉在工业领域的发展历程,通过其与人类视觉对比,凸显出机器视觉的优势。但不可否认的是,....
的头像 MEMS 发表于 09-14 13:49 1268次 阅读
机器视觉在工业领域的发展历程和应用情况详细概述

佳能宣布与Universal Robot合作将全面进入机器人行业

GGII预计2018年中国机器视觉市场规模54亿元,同比增速超25%,高于其他细分领域增速。机器视觉....
发表于 09-14 11:29 44次 阅读
佳能宣布与Universal Robot合作将全面进入机器人行业

星巡智能最新打造基于嵌入式AI视觉的硬件产品

随着机器视觉技术的成熟,联网摄像头产品开始逐渐向AI摄像头升级,全球数十亿台摄像头将经历从“录像及回....
发表于 09-12 14:38 160次 阅读
星巡智能最新打造基于嵌入式AI视觉的硬件产品

机器视觉光学系统的介绍和选型指南详细概述

本文档的主要内容详细介绍的是机器视觉光学系统的介绍和选型指南详细概述包括了:机器视觉概要,机器视觉硬....
发表于 09-12 08:00 67次 阅读
机器视觉光学系统的介绍和选型指南详细概述

高精度机器视觉系统在工业检测领域有怎么样的应用实例说明

机器视觉技术在中国工业产品质量检测领域的应用已经越来越广泛,尤其是在产品的尺寸测量与外观缺陷检测上,....
发表于 09-11 17:02 89次 阅读
高精度机器视觉系统在工业检测领域有怎么样的应用实例说明

企业怎么才能在机器视觉上制造优势

机器视觉的产业链可以分成上游的部件级市场、中游的集成和整装市场,以及下游的应用市场。
发表于 09-11 11:55 58次 阅读
企业怎么才能在机器视觉上制造优势

工业相机的基本原理是什么?发展如何?

典型的机器视觉系统主要由光源、镜头、工业相机、图像采集卡或图像处理器,以及控制输出单元等硬件构成。其中,工业相机是机器视...
发表于 09-11 11:52 42次 阅读
工业相机的基本原理是什么?发展如何?

机器学习处理器怎样选择合适的

虽然经典机器学习算法需要人工干预来从数据中提取特征,但机器学习算法或网络模型学习如何提取数据中的重要....
发表于 09-11 11:52 87次 阅读
机器学习处理器怎样选择合适的

计算机视觉与机器视觉之间有什么差异

计算机视觉和机器视觉都使用图像捕获和分析来执行人眼无法比拟的速度和准确度的任务。
发表于 09-11 11:14 54次 阅读
计算机视觉与机器视觉之间有什么差异

机器视觉的未来是怎样的

机器视觉已有20多年的发展历史,随着颜色和3D的使用持续增长,3D和彩色视觉系统将在新机器视觉任务方....
发表于 09-11 11:07 291次 阅读
机器视觉的未来是怎样的

机器视觉有助于解决什么问题

检测产品表面缺陷,例如变色,灼伤,裂缝和划痕,对于人类或机器视觉来说是一项艰巨的任务。
发表于 09-10 17:30 39次 阅读
机器视觉有助于解决什么问题

机器视觉在工业控制系统中的应用

机器视觉在自动化测量系统中的应用日益普及。其原因是越来越名的信息需要从相机中提取,而不是从一个专用传....
发表于 09-10 16:32 123次 阅读
机器视觉在工业控制系统中的应用

机器视觉的概念说明和主要应用详细资料概述

在现代工业自动化生产中,涉及到各种各样的检查、测量和零件识别应用,例如汽车零配件尺寸检查和自动装配的....
发表于 09-06 16:14 89次 阅读
机器视觉的概念说明和主要应用详细资料概述

中国服务机器人产业将迎来市场热潮

随着服务机器人应用场景和服务模式的不断扩展,基于机器人底层应用进行上层开发的需求越来越强,催生出机器....
发表于 09-06 15:29 71次 阅读
中国服务机器人产业将迎来市场热潮

使用机械手和视觉技术实现机器视觉的高精度插件系统的资料说明

针对目前国内自动化生产厂家对高精度、高性价比插件机的迫切需求,在分析了常见的插件机基本工作过程的基础....
发表于 09-06 15:16 106次 阅读
使用机械手和视觉技术实现机器视觉的高精度插件系统的资料说明

视觉传感器在包装机械中有怎么样的应用

在不久之前,设计质量控制系统的工程师还不得不在若干种检验选项中做出选择,没有一种完全令人满意。这些选....
发表于 09-05 17:05 74次 阅读
视觉传感器在包装机械中有怎么样的应用

半导体和电子制造会运用那些机器视觉系统详细资料概述

视觉传感技术机器视觉在半导体工业上的应用早在二十年前就已开始,半导体、电子设备市场是机器视觉技术发源....
发表于 09-05 17:03 103次 阅读
半导体和电子制造会运用那些机器视觉系统详细资料概述

机器视觉系统的三种应用案例详细说明

本文档的主要内容详细介绍的是机器视觉系统的三种应用案例详细说明包括了:机器视觉在药用玻璃瓶检测中的应....
发表于 09-04 16:39 67次 阅读
机器视觉系统的三种应用案例详细说明

机器人视觉工程师必须知道那些工业相机的问题50个经典问题详细解答

经常会有一些机器视觉工程师认为USB 接口的工业相机会造成丢帧现象。一般而言,工业相机丢帧与工业相机....
发表于 09-04 16:39 90次 阅读
机器人视觉工程师必须知道那些工业相机的问题50个经典问题详细解答

嵌入式机器视觉系统的结构和应用等资料概述

 随着各项高新技术的发展,市场需求的变化,更高速,更可靠,更低成本成为各种技术开发的首要条件之一。
发表于 09-04 16:14 55次 阅读
嵌入式机器视觉系统的结构和应用等资料概述

机器人通用视觉系统模块的设计原理是什么?

视觉技术是近几十年来发展的一门新兴技术。机器视觉可以代替人类的视觉从事检验、目标跟踪、机器人导向等方面的工作,特别是在那...
发表于 09-04 08:00 275次 阅读
机器人通用视觉系统模块的设计原理是什么?

2019世界人工智能大会 自带「炼金」技能的未来建筑

有个机器人有限公司的联合创始人张阳新先生发布了最新一代群体机器人配送解决方案,它由智能服务仓、配送机....
的头像 倩倩 发表于 09-03 11:15 509次 阅读
2019世界人工智能大会 自带「炼金」技能的未来建筑

iVu图象传感器有什么用?

iVu图象传感器是邦纳最新推出的全新视觉产品。传统的视觉相机体型较大,更改环境操作时需要电脑进行设定。针对中国的视觉相机市...
发表于 09-03 08:15 104次 阅读
iVu图象传感器有什么用?

传感技术在食品检测技术中的应用介绍

据了解,当前集成电路检测器已经在国外食品加工厂中大范围应用,这种技术可检测出食品的变质时间。食品保质....
发表于 09-01 10:24 174次 阅读
传感技术在食品检测技术中的应用介绍

嵌入式视觉技术将为人们的生活带了诸多便利

我国首台L4级自动驾驶公交车已经安装嵌入式视觉,高度自动驾驶不需要司机,不需要方向盘并且连油门和刹车....
发表于 08-30 17:14 87次 阅读
嵌入式视觉技术将为人们的生活带了诸多便利

2019世界人工智能大会时,到底在看什么?

其实,关于AI的判断和预见在苏宁智慧零售的发展蓝图里早已“落地生根”。如今,苏宁已经落地的人工智能项....
的头像 倩倩 发表于 08-30 14:37 605次 阅读
2019世界人工智能大会时,到底在看什么?

机器视觉技术在药品瓶包装在线检测有怎么样的应用

介绍了基于HALCON机器视觉软件的药品玻璃瓶包装在线检测系统的硬件结构组成、软件平台及结构层次,以....
发表于 08-29 17:03 74次 阅读
机器视觉技术在药品瓶包装在线检测有怎么样的应用

基于机器视觉的智能车模糊PID控制算法的详细资料说明

基于freescale公司的16位HCS12单片机设计一种智能车系统。系统摄像头采集路径信息,通过单....
发表于 08-29 16:30 121次 阅读
基于机器视觉的智能车模糊PID控制算法的详细资料说明

传感技术在食品保质检测器中的作用介绍

据了解,当前集成电路检测器已经在国外食品加工厂中大范围应用,这种技术可检测出食品的变质时间。食品保质....
发表于 08-29 15:05 84次 阅读
传感技术在食品保质检测器中的作用介绍

基于FPGA的嵌入式双模定位系统该怎么设计?

随着航天技术的不断发展,卫星导航系统对国家的安全及发展变得越来越重要。全球定位系统最早研制于美国,能够在全球进行作业,连...
发表于 08-29 06:44 77次 阅读
基于FPGA的嵌入式双模定位系统该怎么设计?

机器视觉——未来之“瞳”的智能竞技之道

机器视觉发展的当务之急是什么?找到更多可以落地应用的场景,进一步推动普及化。而这需要产业链之间的协作....
的头像 墨记 发表于 08-28 08:51 3010次 阅读
机器视觉——未来之“瞳”的智能竞技之道

嵌入式主动视觉系统如何实现?

根据通用主动视觉系统的设计要求,提出了基于DSP的嵌入式主动视觉系统的设计方案,并完成系统的软硬件设计。最终实现的系统具...
发表于 08-28 08:00 99次 阅读
嵌入式主动视觉系统如何实现?

机器视觉的详细资料概述

机器视觉就是用机器代替人眼来做测量和判断。机器视觉系统是指通过机器视觉产品(即图像摄取装置,分 CM....
发表于 08-27 17:49 70次 阅读
机器视觉的详细资料概述

新零售中一般使用那些物联网技术

新零售的“新”体现在新业态、新人群和新品牌。但同时,无论怎样形容新零售,其实真正的核心就是人、货、场....
发表于 08-27 17:49 178次 阅读
新零售中一般使用那些物联网技术

Vision China北京2019圆满收官|远见卓识,智能“视”界

由机器视觉产业和慕尼黑展览(上海)有限公司联手组织的北京机器视觉助力智能制造创新发展大会暨展览(....
发表于 08-27 17:38 152次 阅读
Vision China北京2019圆满收官|远见卓识,智能“视”界

使用机器视觉进行工业机器人分拣技术的研究资料分析

将视觉系统应用到工业机器人当中去,使得机器人具有人眼的功能是当今机器人研究的重点。本文针对以往工业生....
发表于 08-27 16:09 104次 阅读
使用机器视觉进行工业机器人分拣技术的研究资料分析

工业控制系统中机器视觉下的工业视角

工厂大规模生产,为使一切有条不紊进行得到产出,总需要中间监控,做出一些测量、判断与检测,以便及时反馈....
发表于 08-27 11:43 67次 阅读
工业控制系统中机器视觉下的工业视角

电子技术在农业领域有怎么样的应用

农业科技成果的和应用,极大地改善了农业生产的条件,提高了农产品的数量和质量,对农村经济结构调整起....
发表于 08-26 17:31 167次 阅读
电子技术在农业领域有怎么样的应用

机器视觉系统设计有哪些要素?关键5要素的详细资料分析

机器视觉在中国的发展已有十余个年头。过去十年是机器视觉产业在中国市场发展最快的十年,经过一定时期的普....
的头像 机器人前沿 发表于 08-25 11:47 544次 阅读
机器视觉系统设计有哪些要素?关键5要素的详细资料分析

嵌入式技术将成为未来机器市场的核心

一份最新的调查数据显示,欧洲机器视觉市场2017年同样实现增长,预计增长了10%,其中,德国机器视觉....
发表于 08-23 17:07 95次 阅读
嵌入式技术将成为未来机器市场的核心

深度学习和嵌入式视觉将成为热门话题

深度学习技术成为机器视觉的热门话题之一。深度学习是机器学习的一个领域,它使计算机能够通过卷积神经网络....
发表于 08-23 17:02 108次 阅读
深度学习和嵌入式视觉将成为热门话题

关于工业控制领域里的一些前端技术

“中国智造”升级,工业4.0如火如荼,工控行业涌现出众多新兴技术,为传统工业制造提速,极大地提升了传....
发表于 08-23 11:49 68次 阅读
关于工业控制领域里的一些前端技术

什么是北斗卫星导航系统?

      北京时间2003年5月25日零时34分,我国在西昌卫星发射中心用"长征三号甲"运载火箭,成功地将我国自行研...
发表于 08-23 06:48 226次 阅读
什么是北斗卫星导航系统?

机器视觉条形光源的概念及应用的详细资料概述

首先我们先来了解一下,什么是条形光源?条形光源是由高密度直插式LED阵列组成,适合大幅面尺寸检测。多....
发表于 08-22 16:40 78次 阅读
机器视觉条形光源的概念及应用的详细资料概述

机器视觉技术在自动焊接领域有怎么样的应用

随着焊接自动化技术的飞速发展,能够实现焊接路径自动规划、实时自动校正路径及焊缝跟踪、焊接熔深、熔透以....
发表于 08-22 16:39 86次 阅读
机器视觉技术在自动焊接领域有怎么样的应用

Vision China 盛大开幕 40+业界大咖对话机器视觉

随着图像处理、光学成像、传感器、处理器等技术的快速崛起与发展,机器视觉在人们生产和生活中的应用越来越....
的头像 人间烟火123 发表于 08-22 09:49 1047次 阅读
Vision China 盛大开幕 40+业界大咖对话机器视觉

机器视觉的关键技术与应用实例详细分析

本文简要介绍了有关机器视觉概念、系统的组成,并介绍了与机器视觉相关的关键技术,如照明光源、镜头、摄像....
发表于 08-21 17:43 105次 阅读
机器视觉的关键技术与应用实例详细分析

机器视觉系统培训的详细资料合集免费下载

机器视觉系统是指利用机器替代人眼做出各种测量和判断。机器视觉是工程领域和科学领域中的一个非常重要的研....
发表于 08-21 17:09 115次 阅读
机器视觉系统培训的详细资料合集免费下载

怎么设计全球定位系统信号接收机射频模块?

典型的GPS接收机主要由4部分组成:天线、射频前端、相关器和导航解算部分。其中,天线主要负责信号的接收;射频前端负责信号的...
发表于 08-21 06:27 51次 阅读
怎么设计全球定位系统信号接收机射频模块?

机器视觉紫外光源的原理及其应用的详细资料说明

紫外辐射是一种非照明用的辐射源,紫外辐射的波长范围为10纳米至400纳米。由于只有波长大于100纳米....
发表于 08-20 16:45 110次 阅读
机器视觉紫外光源的原理及其应用的详细资料说明

这是国内机器视觉行业的现状吗

到底如何学习机器视觉?为了说明这个问题,我觉得应该先要简单地说明另一个问题:国内外机器视觉发展的不同。我本人认为,只有先搞...
发表于 08-16 09:00 247次 阅读
这是国内机器视觉行业的现状吗

感受技术之美!了解机器视觉的典型架构与应用领域

如今,随着工业4.0的到来,机器视觉技术在工业自动化中逐渐起着十分重要的地位,机器视觉技术的不断创新,推动了工业自动化、智慧...
发表于 08-16 04:30 279次 阅读
感受技术之美!了解机器视觉的典型架构与应用领域

九五至尊娱乐官网