CN100557384C - 一种基于双目视觉和激光测距的主动实时三维定位系统 - Google Patents
一种基于双目视觉和激光测距的主动实时三维定位系统 Download PDFInfo
- Publication number
- CN100557384C CN100557384C CNB2003101133002A CN200310113300A CN100557384C CN 100557384 C CN100557384 C CN 100557384C CN B2003101133002 A CNB2003101133002 A CN B2003101133002A CN 200310113300 A CN200310113300 A CN 200310113300A CN 100557384 C CN100557384 C CN 100557384C
- Authority
- CN
- China
- Prior art keywords
- target
- position information
- control
- motor
- computer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000000007 visual effect Effects 0.000 claims abstract description 15
- 238000000034 method Methods 0.000 claims abstract description 9
- 238000006243 chemical reaction Methods 0.000 abstract description 2
- 239000004065 semiconductor Substances 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000009434 installation Methods 0.000 description 2
- 101100166427 Arabidopsis thaliana CCD4 gene Proteins 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
Images
Landscapes
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明涉及一种基于双目视觉和激光测距的主动实时三维定位系统,由视觉处理子系统,控制子系统及机械机构三大部分组成。摄像头在图像采集卡控制下获取目标图像,交由视觉处理计算机进行处理,获得在图像坐标中的二维位置信息,发送到公共存储区,控制计算机首先从公共存储区获得位置信息经过坐标转换和实时规划,再通过D/A板输出到驱动器驱动电机并同时通过轴角编码器反馈回路控制激光器准确照射到目标,最后将测距仪得到深度信息反馈到视觉计算机从而得出目标的三维位置信息。该系统具有远距离精度高、主动性好、实时快速、成本低、工艺简单等优点。
Description
所属技术领域:
本发明为一种基于双目视觉和激光测距的主动实时三维位置信息获取系统,属于图像处理和自动化领域,用于快速准确获得物体的三维位置信息。
背景技术:
目前,使用双目立体视觉是获得目标三维位置信息的主要手段。常用的方法是由两个摄像头同步获得立体图像对,再根据立体视觉的原理,计算出图像公共视野里每一点的深度信息,生成深度图,再提取出目标对应的深度信息,来确定目标的三维位置信息。但这些设备都存在以下问题:
1.远距离精度低:以前研究的双目及多目立体视觉在测量近距离目标时(5米以内)具有比较高的精度(1毫米以上),在较远距离(5米以外)精度很差甚至无法测量。
2.主动性差:当空间三维场景在摄像机被投影为二维图像时,同一景物在不同点下的图像会有很大不同,而且场景中的诸多因素,如光照条件,景物几何形状和物理特性等,都被综合在单一的图像灰度值里。显然,要从包含了如此之多不利因素的图像里很难准确地求得高精度的深度信息。而在应用中,大部分情况下也是不需要对每一个点求深度信息的。因此,许多计算是没有必要的,也缺乏主动选择目标的能力。
3.运算量大,实时性差:立体视觉要求能够求解一对立体图像中的每一个对应点,图像所包含的丰富信息,使得逐点对应匹配的速度很慢,而且易产生“病态”计算问题。虽然为解决此问题,在正则化框架下加入了一定约束,使问题转化为求多条件函数的最优解,但大大增加了计算难度和计算量,使视觉处理速度难以提高,无法满足实时性要求,限制了应用领域。
为了提高视觉子系统对目标三维定位的主动性,降低立体视觉图像处理的计算量和提高系统的实时性,主动快速的获得目标的位置信息,本发明提出了一种新的确定目标三维位置信息的方法以及应用该方法实现的一套定位系统。
发明内容:
整个系统由视觉处理子系统,控制子系统及机械机构三大部分组成。
视觉处理子系统由视觉处理计算机(内置图像采集卡、memo-link主卡)、摄像机、激光测距仪组成。本发明所采用的内置图像采集卡安装在PCI插槽里,并与所采用的摄像机能兼容。Memo-link是一种用于两个计算机间高速通信的设备,该设备由主卡和子卡两块组成,用RS485接口互连,在本发明中memo-link被视为该系统的公共存储区。
控制子系统包括控制计算机(内置D/A板、memo-link子卡)、驱动器、电机(集成轴角编码器)。
机械机构由轴承及用于安装电机、摄像头和激光测距仪的固定支架组成,具有二维自由度,主要起安装和支撑作用。具体构架为:两个与图像采集卡兼容的摄像机固定在机械机构内的长方形支架上,在两个摄像机的中点处安防着激光测距仪的发射部分也就是半导体激光器,在激光器的正上方安装着激光测距仪的接收部分即一个带有直径4厘米焦距8厘米聚焦镜头的线阵CCD。在长方体固定支架的后方水平放置着一个15瓦的无刷直流电机,电机直径为4厘米长为10厘米内置轴角编码器,用于驱动系统上下转动(Y轴方向)到指定角度。在其下方为一个筒装支架,外径为6厘米,内径为4厘米,里面安装了一个15瓦的无刷直径电机,该电机与水平放置电机完全相同,用于驱动系统左右转动(X轴方向)到指定角度。
其主要技术方案为:
由摄像机获取前方目标的图像后,传入图像采集卡,由图像采集卡将摄像机获取目标的图像转换为数字信号,并获得目标位置信息,将其存储在安装于视觉计算机PCI插槽内memo-link主卡的公共存储区内。控制计算机由memo-link子卡从公共存储区获得二维位置信息并将视觉坐标系下目标的位置信息转化为以激光发射器为原点的坐标系下的位置信息,计算出目标偏移原点的控制量,再通过12位的D/A转换器分别将控制量输出到电机的驱动器来驱动电机转动并同时通过电机内置的轴角编码器构成的反馈回路来控制电机准确的转动到要求的角度----即将目标就位于激光测距仪接收端的聚焦透镜将目标的反射信号汇聚到线阵CCD上,根据线阵CCD的输出用三角测量法计算出目标的距离信息(也就是深度信息),最后检测到的深度信息和二维位置信息反馈到视觉计算机便显示出了目标的三维位置信息。
本发明的有益效果是:
1.精度高。激光测距仪有很高的精度,除了能够在近距离(5米以内)的距离实现立体视觉的精度,尤其是在测量较远距离(>5米)的目标时,有立体视觉无法比拟的精度和稳定性。
2.具有主动性。在应用中可以根据使用要求对感兴趣的点求距离信息----也就是深度,而不必对整幅图像逐点求解,减少了不必要的计算。
3.造价低。本发明使用了双CPU的结构,该CPU也可以用DSP或者MCU等代替,比类似产品价格低。
4.实时快速。本发明中目标的深度信息是由激光测距测得的,可以达到100Hz以上的测试频率。而且不用对立体图像进行对应点匹配,因此速度快,实时性非常好。
5.工艺简单。机械部分仅有实现两个自由度的电机和固定摄像头,激光测距仪的安装支架组成,加工、安装方便。
而且本发明还具有体积小重量轻的特点,可以很容易集成到其他系统中,作为一种功能单元存在。
附图说明:
下面结合附图和实施例对使用进一步说明。
图1是本发明的系统示意图
图2是机械机构的正视图
图3是机械机构的俯视图
图4是视觉处理子系统工作流程图
图5是控制子系统工作流程图
图6是控制子系统框图
图1,2,3中:1.目标,2.摄像机,3.激光测距仪的发射部分也就是半导体激光器,4.激光测距仪的接收部分即线阵CCD,5.Y轴电机(实现上下运动),6.X轴电机(实现左右运动),7.长方体支架,8.视觉处理计算机(内置图像采集卡),9.公共存储区,10.控制计算机(内置D/A板,驱动器)。
具体实施方式:
该系统实现三维定位的具体步骤如下:
第一步:双目摄像机2将视野中的目标1的图像,送至视觉处理计算机8内的图像采集卡
第二步:图像采集卡将图像信号转换成数字信号,交由视觉处理计算机8(图3)进行处理,计算出目标在视觉平面的二维位置并将该信息发送到公共存储区9里。
第三步:控制计算机10读取公共存储区9中的位置数据,由控制程序(图4)根据摄像机2和半导体激光发射器3的安装位置进行坐标转换和实时运动规划。
第四步:控制程序将驱动信号发送至控制计算机10的内置D/A板。D/A板转为模拟信号后给驱动器驱动对应的X,Y轴电机5、6,使半导体激光器3准确照射到目标1上(图5)。
第五步:根据从目标1上获取的反射光通过激光测距仪的接收部分即线阵CCD4输出用三角测量法可以获得目标1的深度信息并传送给视觉处理计算机8综合处理后得到目标1的三维信息。
Claims (1)
1.一种基于双目视觉和激光测距的主动实时三维定位系统,包括视觉处理子系统,控制子系统及机械机构三大部分,其中视觉处理子系统由视觉处理计算机、摄像头、激光测距仪组成,所述视觉处理计算机内置图像采集卡、公共存储区,控制子系统包括内置了D/A板的控制计算机、集成了轴角编码器的电机以及驱动器,其特征在于:由摄像机获取前方目标的图像后,由图像采集卡将其转换为数字信号,获得目标位置信息并存储在公共存储区内,控制计算机从公共存储区获得二维位置信息,并将二维位置信息从视觉坐标系下转化为以激光发射器为原点的坐标系下,计算出目标偏移原点的控制量,再通过D/A转换器分别将控制量输出到电机的驱动器来驱动电机转动,同时通过电机内置的轴角编码器构成的反馈回路来控制电机准确的转动对准待测目标,由激光测距仪接收端将目标的反射信号汇聚到线阵CCD上,根据三角测量法计算出目标的距离信息,也就是深度信息,最后检测到深度信息和二维位置信息反馈到视觉计算机,便综合出目标的三维位置信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB2003101133002A CN100557384C (zh) | 2003-11-14 | 2003-11-14 | 一种基于双目视觉和激光测距的主动实时三维定位系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNB2003101133002A CN100557384C (zh) | 2003-11-14 | 2003-11-14 | 一种基于双目视觉和激光测距的主动实时三维定位系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1616920A CN1616920A (zh) | 2005-05-18 |
CN100557384C true CN100557384C (zh) | 2009-11-04 |
Family
ID=34759884
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB2003101133002A Expired - Fee Related CN100557384C (zh) | 2003-11-14 | 2003-11-14 | 一种基于双目视觉和激光测距的主动实时三维定位系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN100557384C (zh) |
Families Citing this family (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1321340C (zh) * | 2005-09-01 | 2007-06-13 | 上海交通大学 | 基于面阵投影的同步扫描双目视觉三维成像的方法 |
CN101318263B (zh) * | 2007-06-08 | 2011-12-07 | 深圳富泰宏精密工业有限公司 | 激光雕刻系统及采用其进行激光雕刻的方法 |
CN101587082B (zh) * | 2009-06-24 | 2011-08-03 | 天津工业大学 | 一种应用于织物疵点检测的快速三维重建方法 |
CN101699219B (zh) * | 2009-10-30 | 2011-01-26 | 北京理工大学 | 双目视觉三维测量的方法及传感器 |
CN101858743B (zh) * | 2010-06-04 | 2012-02-29 | 西安天和防务技术股份有限公司 | 基于大视场摄像及图像处理的测距装置及其方法 |
JP2012118698A (ja) * | 2010-11-30 | 2012-06-21 | Fuji Heavy Ind Ltd | 画像処理装置 |
CN102510512B (zh) * | 2011-11-17 | 2014-03-05 | 杭州电子科技大学 | 基于双目视觉节点的动态三维多媒体传感网络自定位方法 |
CN103159136A (zh) * | 2011-12-14 | 2013-06-19 | 中铝国际技术发展有限公司 | 主动视觉控制的天车精确定位系统 |
CN102914262B (zh) * | 2012-09-29 | 2015-02-11 | 北京控制工程研究所 | 一种基于附加视距的非合作目标贴近测量方法 |
CN104079868B (zh) * | 2013-03-29 | 2017-06-30 | 中原工学院 | 一种单视点视频监控的激光辅助测距装置和方法 |
CN103557796B (zh) * | 2013-11-19 | 2016-06-08 | 天津工业大学 | 基于激光测距和计算机视觉的三维定位系统及定位方法 |
CN104061876B (zh) * | 2014-07-17 | 2017-01-18 | 宏峰集团(福建)有限公司 | 基于数字图像测量原理的建筑模板施工监测系统 |
CN104197926B (zh) * | 2014-08-06 | 2017-08-11 | 北京信息科技大学 | 一种采用主动视觉方式的机器人导航装置 |
CN104346614B (zh) * | 2014-09-04 | 2018-06-01 | 四川农业大学 | 一种实景下的西瓜图像处理和定位方法 |
US10028102B2 (en) * | 2014-12-26 | 2018-07-17 | Here Global B.V. | Localization of a device using multilateration |
CN105108344A (zh) * | 2015-08-31 | 2015-12-02 | 鞍山英程利远科技有限公司 | 一种机器人光纤激光打标机智能控制系统 |
CN105783880B (zh) * | 2016-03-22 | 2018-05-22 | 天津大学 | 一种单目激光辅助舱段对接方法 |
EP3416370B1 (en) * | 2016-03-23 | 2023-07-26 | Huawei Technologies Co., Ltd. | Photography focusing method, device, and apparatus for terminal |
CN106323242A (zh) * | 2016-08-03 | 2017-01-11 | 北京奇虎科技有限公司 | 无人机对空间结构检测方法、装置 |
CN106382918A (zh) * | 2016-08-31 | 2017-02-08 | 胡钊政 | 一种三维视觉传感器 |
CN106645066B (zh) * | 2016-12-13 | 2019-02-01 | 天津大学 | 液膜轴向流动参数双视角测量方法 |
CN106595647B (zh) * | 2016-12-14 | 2020-05-05 | 北京理工大学珠海学院 | 行为状态的监测方法、装置及系统 |
CN107152295B (zh) * | 2017-06-28 | 2018-12-28 | 中船重型装备有限公司 | 一种盾构管片拼装机用视觉平台自动抓取方法及系统 |
CN107747910A (zh) * | 2017-09-19 | 2018-03-02 | 浙江大学 | 一种视觉引导的隧道标志点坐标激光测量系统及方法 |
CN108318887B (zh) * | 2018-01-18 | 2024-07-16 | 西安工业大学 | 激光辅助双目测距系统 |
JP6719494B2 (ja) * | 2018-02-07 | 2020-07-08 | 直之 村上 | 追尾レーザー距離計測器の駆動計測で、3次元の数値駆動の制御機器の3次元の駆動数値を演算する方法。 |
CN108489392B (zh) * | 2018-04-11 | 2019-10-08 | 上海交通大学 | 机械臂末端重复定位精度测量装置与方法 |
CN109495692A (zh) * | 2019-01-09 | 2019-03-19 | 湖南农业大学 | 一种基于立体机器视觉的激光自动聚焦打击装置 |
CN111098035A (zh) * | 2019-12-24 | 2020-05-05 | 武汉嘉铭激光股份有限公司 | 一种激光三维蚀刻系统及蚀刻方法 |
CN117716201A (zh) * | 2021-06-28 | 2024-03-15 | 元素光电智能科技(苏州)有限公司 | 一种基于机器视觉和激光三角测距的测量定位系统 |
CN114018158A (zh) * | 2021-11-02 | 2022-02-08 | 中国大唐集团科技工程有限公司 | 一种非接触式三维热位移探测系统及其应用 |
-
2003
- 2003-11-14 CN CNB2003101133002A patent/CN100557384C/zh not_active Expired - Fee Related
Non-Patent Citations (2)
Title |
---|
双目立体视觉技术在三维测量中的应用研究. 张长命.电子科技大学学位论文. 2001 * |
基于立体视觉的三维曲面测量关键技术研究. 张爱武,李明哲,胡少兴.系统工程与电子技术,第23卷第10期. 2001 * |
Also Published As
Publication number | Publication date |
---|---|
CN1616920A (zh) | 2005-05-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN100557384C (zh) | 一种基于双目视觉和激光测距的主动实时三维定位系统 | |
CN206724901U (zh) | 一种单目三维实时在线跟踪与定位系统 | |
CN105806242B (zh) | 采用激光旋转扫描的面型测量装置 | |
CN103557796B (zh) | 基于激光测距和计算机视觉的三维定位系统及定位方法 | |
CN107421632B (zh) | 基于激光双目视觉的双柔性悬臂梁振动测控装置与方法 | |
CN205027316U (zh) | 一种快速三维激光扫描仪 | |
CN112492292B (zh) | 一种自由姿态的智能视觉3d信息采集设备 | |
CN108828554B (zh) | 无需激光落点的基于坐标变换的测量方法、系统及装置 | |
CN110196431A (zh) | 基于arm的低成本室内3d激光扫描测距系统及方法 | |
CN110017852B (zh) | 一种导航定位误差测量方法 | |
CN112254670B (zh) | 一种基于光扫描和智能视觉融合的3d信息采集设备 | |
CN105004324A (zh) | 一种具有三角测距功能的单目视觉传感器 | |
CN112484663B (zh) | 一种多翻滚角度的智能视觉3d信息采集设备 | |
CN112253913B (zh) | 一种与旋转中心偏离的智能视觉3d信息采集设备 | |
CN203443557U (zh) | 一种新型便携式ccd双轴自准直仪图像测量装置 | |
CN206724906U (zh) | 一种自旋转十字线激光扫描的环境三维形貌感知装置 | |
CN104165587A (zh) | 一种基于激光与视觉的实时三维成像系统 | |
WO2022228461A1 (zh) | 一种基于激光雷达的三维超声成像方法和系统 | |
CN107063123A (zh) | 360度环境形貌自旋转激光扫描方法 | |
CN206378107U (zh) | 轮廓测量装置 | |
CN102095406A (zh) | 一种摄像机与激光结合的光学测距装置 | |
CN110166653B (zh) | 摄像机位置和姿态的跟踪系统及方法 | |
CN210323365U (zh) | 基于arm的低成本室内3d激光扫描测距系统 | |
CN112254676A (zh) | 一种便携式智能3d信息采集设备 | |
CN112082486A (zh) | 一种手持式智能3d信息采集设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C17 | Cessation of patent right | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20091104 Termination date: 20111114 |