CN114913240B - 一种mcu摄像头定位方法、装置、设备及存储介质 - Google Patents
一种mcu摄像头定位方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN114913240B CN114913240B CN202210501188.2A CN202210501188A CN114913240B CN 114913240 B CN114913240 B CN 114913240B CN 202210501188 A CN202210501188 A CN 202210501188A CN 114913240 B CN114913240 B CN 114913240B
- Authority
- CN
- China
- Prior art keywords
- real
- camera
- image data
- time image
- mcu
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0014—Image feed-back for automatic industrial control, e.g. robot with camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/136—Segmentation; Edge detection involving thresholding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Robotics (AREA)
- Image Analysis (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明公开了一种MCU摄像头定位方法、装置、设备及存储介质。本发明通过控制MCU通过USB接口读取USB摄像头的实时图像数据;控制MCU解压缩USB摄像头的实时图像数据;将解压缩的实时图像数据实时显示到显示屏幕中;对解压缩后的实时图像数据进行二值化处理;识别实时图像数据中定位标记点的左右轮廓;依据安装偏差控制摄像头在实时图像数据的XY方向分别移动第一距离DeltaX及第二距离DeltaY;获取偏移补偿,依据偏移补偿及安装偏差对摄像头进行校正;控制校正后的摄像头依据定位标记点的左右轮廓识别切割文件上的定位标记点;依据摄像头的识别结果修正定位标记点的坐标值。本发明实现刻字机上摄像头的准确定位,提高刻字精度;能够实时显示图像,成本低廉。
Description
技术领域
本发明涉及刻字机技术领域,尤其涉及一种MCU摄像头定位方法、装置、设备及存储介质。
背景技术
在嵌入式领域,MCU摄像头定位一般是通过专门的图像处理芯片(例如TI DSP6000系列芯片)或者专门的大内存高主频ARM芯片(比如海思Hi3518),这些芯片通过专门的摄像头接口外接摄像头,然后在芯片内部通过专门的图像处理库(比如OpenCV、Halcon等)对采集到的摄像头图片进行处理,从而进行定位。这种定位方法需要专用图像处理芯片和ARM芯片,并附带Linux操作系统等,硬件成本和软件实时成本较高。
刻字机主控为MCU,由于速度和资源限制,刻字机实现MCU摄像头定位的传统方法是外接专门处理芯片负责图像处理与定位,然后将处理结果通过通信线缆传送给刻字机主控MCU。一般摄像头需要装在刻字机移动小车上,主控MCU一般固定在刻字机最左或最右端,小车到MCU的通信距离一般比较长,因此通信线缆易受干扰,一般只能选择串口通信方式。由于串口通信方式的速度受限,因此传统MCU摄像头定位方案传输图片速度慢,只能传送定位结果,主控端做不了图像实时显示;同时由于需要外接图像处理芯片,成本高昂。因此,如何在刻字机系统上低成本地实现MCU摄像头定位,同时兼顾图像实时显示,成为该领域技术人员亟需解决的难题。
发明内容
本申请的目的是提供一种MCU摄像头定位方法、装置、设备及存储介质,本方案中,MCU通过USB接口读取USB摄像头的实时图像数据;当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据实时显示到显示屏幕中;对解压缩后的实时图像数据进行二值化处理,识别实时图像数据中定位标记点的左右轮廓,生成切割文件;获取摄像头与刻刀刀尖的安装偏差,依据安装偏差控制摄像头在实时图像数据的XY方向分别移动第一距离DeltaX及第二距离 DeltaY;获取偏移补偿,依据偏移补偿及安装偏差对摄像头进行校正;摄像头依据定位标记点的左右轮廓识别切割文件上的定位标记点;依据摄像头的识别结果修正定位标记点的坐标值,实现刻字机上摄像头的准确定位,提高刻字精度,实时显示图像,成本低廉。
为解决上述技术问题,本申请提供了一种MCU摄像头定位方法,所述方法包括:
控制MCU通过USB接口读取USB摄像头的实时图像数据;
控制所述MCU解压缩所述USB摄像头的实时图像数据;
当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据实时显示到显示屏幕中;
对解压缩后的所述实时图像数据进行二值化处理;
在二值化处理后的所述实时图像数据中,识别所述实时图像数据中定位标记点的左右轮廓,生成切割文件;
获取摄像头与刻刀刀尖的安装偏差,依据所述安装偏差控制所述摄像头在所述实时图像数据的XY方向分别移动第一距离DeltaX及第二距离DeltaY;
获取偏移补偿,依据所述偏移补偿及所述安装偏差对所述摄像头进行校正;
控制校正后的所述摄像头依据定位标记点的左右轮廓识别所述切割文件上的定位标记点;
依据所述摄像头的识别结果修正所述定位标记点的坐标值。
优选地,所述依据所述摄像头的识别结果修正所述定位标记点的坐标值包括:
获取预设的所述定位标记点的初始坐标位置;
依据所述摄像头的识别结果,获取所述定位标记点的实际坐标位置;
获取所述初始坐标位置与所述实际坐标位置的偏差关系;
依据所述偏差关系修正切割文件中点定位坐标点的坐标值。
优选地,所述获取偏移补偿的公式为:
offsetX=(cx-IMG_WIDTH/2)*ratio;
offseY=(cy-IMG_HEIGHT/2)*ratio;
其中,offsetX、offseY为XY方向的偏移补偿值;cx、cy为所述刻刀刀尖所在位置的圆心坐标值;IMG_WIDTH为所述实时图像数据分辨率的宽值, IMG_HEIGHT为所述实时图像数据分辨率的高值;ratio为摄像头像素到实际距离的对应系数。
优选地,在所述获取偏移补偿,依据所述偏移补偿及所述安装偏差对所述摄像头进行校正中,所述摄像头偏移值校正为:
DeltaX’=DeltaX+offsetX;
DeltaY’=DeltaY+offsetY。
优选地,所述在二值化处理后的所述实时图像数据中,识别所述实时图像数据中定位标记点的左右轮廓,生成切割文件包括:
定义左轮廓数组;
从上往下遍历所述实时图像数据的每一行y,0<=y<IMG_WIDTH,其中 IMG_WIDTH为所述实时图像数据分辨率的宽值;
从左往右遍历所述实时图像数据的每一列x,0<=x<IMG_HEIGHT,对当前点执行判断,其中IMG_HEIGHT为所述实时图像数据分辨率的高值;
若当前行还没找到左轮廓点且前一点为白色,当前点为黑色,则当前点为左轮廓;
保存所述左轮廓的x坐标值,并更新前一点为当前点颜色值。
优选地,所述在二值化处理后的所述实时图像数据中,识别所述实时图像数据中定位标记点的左右轮廓,生成切割文件还包括:
定义右轮廓数组;
从上往下遍历所述实时图像数据的每一行y,0<=y<IMG_WIDTH,其中 IMG_WIDTH为所述实时图像数据分辨率的宽值;
从右往左遍历所述实时图像数据的每一列x,0<=x<IMG_HEIGHT,对当前点执行判断,其中IMG_HEIGHT为所述实时图像数据分辨率的高值;
若当前行还没找到右轮廓点且前一点为白色,当前点为黑色,则当前点为右轮廓;
保存所述右轮廓x坐标值,并更新前一点为当前点颜色值。
优选地,所述当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据放大,再实时显示到显示屏幕中,将解压缩的实时图像数据放大包括:
遍历所述实时图像数据的每一行,0<=y<IMG_HEIGHT,其中 IMG_HEIGHT为所述实时图像数据分辨率的高值;
对每一行数据,定义临时数组用于存放放大后的数据;
遍历所述实时图像数据的每一个像素点,0<=x<IMG_WIDTH,其中 IMG_WIDTH为所述实时图像数据分辨率的宽值;
将行放大a倍;
在所述显示屏幕上绘制出a行放大后的数据。
为解决上述技术问题,本申请提供了一种MCU摄像头定位装置,所述装置包括:
读取模块,用于控制MCU通过USB接口读取USB摄像头的实时图像数据;
解压缩模块,用于控制所述MCU解压缩所述USB摄像头的实时图像数据;
显示控制模块,用于当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据实时显示到显示屏幕中;
图像处理模块,用于对解压缩后的所述实时图像数据进行二值化处理;
第一识别模块,用于在二值化处理后的所述实时图像数据中,识别所述实时图像数据中定位标记点的左右轮廓,生成切割文件;
移动控制模块,用于获取摄像头与刻刀刀尖的安装偏差,依据所述安装偏差控制所述摄像头在所述实时图像数据的XY方向分别移动第一距离DeltaX及第二距离DeltaY;
校正模块,用于获取偏移补偿,依据所述偏移补偿及所述安装偏差对所述摄像头进行校正;
第二识别模块,用于控制校正后的所述摄像头依据定位标记点的左右轮廓识别所述切割文件上的定位标记点;
修正模块,用于依据所述摄像头的识别结果修正所述定位标记点的坐标值。
为解决上述技术问题,本申请提供了一种MCU摄像头定位设备,包括:至少一个处理器、至少一个存储器以及存储在存储器中的计算机程序指令,当计算机程序指令被处理器执行时实现如上述实施方式中第一方面的方法。
为解决上述技术问题,本申请提供了一种存储介质,其上存储有计算机程序指令,当计算机程序指令被处理器执行时实现如上述实施方式中第一方面的方法。
综上所述,本发明实施例提供的一种MCU摄像头定位方法、装置、设备及存储介质。本发明通过控制MCU通过USB接口读取USB摄像头的实时图像数据;控制MCU解压缩USB摄像头的实时图像数据;当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据实时显示到显示屏幕中;对解压缩后的实时图像数据进行二值化处理;在二值化处理后的实时图像数据中,识别实时图像数据中定位标记点的左右轮廓,生成切割文件;获取摄像头与刻刀刀尖的安装偏差,依据安装偏差控制摄像头在实时图像数据的XY方向分别移动第一距离DeltaX及第二距离DeltaY;获取偏移补偿,依据偏移补偿及安装偏差对摄像头进行校正;控制校正后的摄像头依据定位标记点的左右轮廓识别切割文件上的定位标记点;依据摄像头的识别结果修正定位标记点的坐标值。因此,本发明实现刻字机上摄像头的准确定位,提高刻字精度,实时显示图像,成本低廉。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单地介绍,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一种MCU摄像头定位方法的流程图。
图2是本发明实施例一种MCU摄像头定位方法的流程图图。
图3是本发明实施例一种MCU摄像头定位方法的流程图图。
图4是本发明实施例一种MCU摄像头定位方法的流程图图。
图5是本发明实施例一种MCU摄像头定位方法的流程图图。
图6是本发明实施例的一种MCU摄像头定位方法的定位标记点的轮廓示意图。
图7是本发明实施例的一种MCU摄像头定位方法的四点定位法的原理图。
图8是本发明实施例的一种MCU摄像头定位方法的摄像头与刻刀刀尖的位置关系图。
图9是本发明实施例的MCU摄像头定位装置的结构示意图。
图10是本发明实施例的MCU摄像头定位设备的结构示意图。
具体实施方式
下面将详细描述本发明的各个方面的特征和示例性实施例,为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明行进一步详细描述。应理解,此处所描述的具体实施例仅被配置为解释本发明,并不被配置为限定本发明。对于本领域技术人员来说,本发明可以在不需要这些具体细节中的一些细节的情况下实施。下面对实施例的描述仅仅是为了通过示出本发明的示例来提供对本发明更好的理解。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
请参阅图1,图1为本申请提供的一种MCU摄像头定位方法的流程图,包括:
S1、控制MCU通过USB接口读取USB摄像头的实时图像数据;
S2、控制MCU解压缩USB摄像头的实时图像数据;
S3、当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据实时显示到显示屏幕中;
S4、对解压缩后的实时图像数据进行二值化处理;
S5、在二值化处理后的实时图像数据中,识别实时图像数据中定位标记点的左右轮廓,生成切割文件;
S6、获取摄像头与刻刀刀尖的安装偏差,依据安装偏差控制摄像头在实时图像数据的XY方向分别移动第一距离DeltaX及第二距离DeltaY;
S7、获取偏移补偿,依据偏移补偿及安装偏差对摄像头进行校正;
S8、控制校正后的摄像头依据定位标记点的左右轮廓识别切割文件上的定位标记点;
S9、依据摄像头的识别结果修正定位标记点的坐标值。
现有技术中,刻字机实现摄像头定位方案通过外接专门处理芯片负责图像处理与定位,将处理结果通过通信线缆传送给刻字机主控MCU。一般摄像头需要装在刻字机移动小车上,主控MCU固定在刻字机最左或最右端,刻字机移动小车到刻字机主控MCU的通信距离较长,通信线缆易受干扰,一般只能选择串口通信方式。而由于串口通信方式的速度受限,因此传统刻字机实现摄像头定位方案传输图片速度慢,无法实现图像实时显示;同时由于需要外接图像处理芯片,因此方案成本高。
针对上述缺点,本申请中USB接口读取USB摄像头的实时图像数据;当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据实时显示到显示屏幕中;对解压缩后的实时图像数据进行二值化处理,识别实时图像数据中定位标记点的左右轮廓,生成切割文件;获取摄像头与刻刀刀尖的安装偏差,依据安装偏差控制摄像头在实时图像数据的XY方向分别移动第一距离DeltaX 及第二距离DeltaY;获取偏移补偿,依据偏移补偿及安装偏差对摄像头进行校正;摄像头依据定位标记点的左右轮廓识别切割文件上的定位标记点;依据摄像头的识别结果修正定位标记点的坐标值,实现刻字机上摄像头的准确定位,提高刻字精度,实时显示图像,成本低廉。
具体地,本申请的目的在于在以MCU为主控的刻字机系统中,提供一种无需外接专用图像处理芯片、低成本、能兼顾图像实时显示的摄像头定位方案。本实施例采用的MCU为STM32F407,主频168M,内存196K,通过USB外接 USB摄像头。
具体地,MCU充当USB主机,采用uvc通信协议,通过USB接口读取USB摄像头的图像数据。可以理解的是,USB线缆抗干扰能力较强,且传输速度快,适用于图片流实时传输场景。
具体地,在uvc通信协议中,图片格式为MPEG压缩格式,设图片分辨率为 IMG_WIDTH*IMG_HEIGHT。可以理解的是,相较于YUV非压缩格式而言,MPEG压缩格式图片处理帧率高。
具体地,本申请采用双缓存的方式,内存中开辟了2个大数组来接收图片。一开始接收指针uvc_ready_framebuffer_ptr指向第1个数组,一帧图片接收完成,接收指针uvc_ready_framebuffer_ptr马上切换到第2个数组,此时MCU 取第1个数组的图片数据进行处理;待第2个数组接收完图片数据,接收指针又重新指向第1个数组,MCU开始处理第2个数组中的图片数据。因此本申请的数据处理速度快,能实现图像数据的实时显示。
具体地,MCU在解压缩接收到的MPEJ格式图片数据时,由于是嵌入式场景应用解压缩,需要减少内存,因此本申请选择TJpgDec库进行解压缩。TJpgDec 是一个小型嵌入式系统高度优化的创建JPEG图像的解码模块,工作时占用的内存低,以便集成到MCU芯片中。
TJpgDec通过Api函数jd_prepare来输入源压缩MJPEG数据uvc_ready_framebuffer_ptr,再通过jd_decomp Api函数压缩数据。jd_decomp 函数的原型为:
JRESULT jd_decomp(
JDEC*jd,
UINT(*outfunc)(JDEC*,void*,JRECT*),/*RGB output function*/
BYTE scale
)
其中输出回调函数outfunc的原型为:
UINT output_func(JDEC*jd,void*bitmap,JRECT*rect)
bitmap为解压缩得到的图像数据,rect为图像数据的长宽信息。JRECT结构体包括left,right,top,bottom结构体,分别代表处理图像的做左边沿坐标、右边沿坐标、上边沿坐标、下边沿坐标。因此rect参数定义了一个矩形块,对应原图像的一个矩形区域,该矩形区域的像素都存储与数组bitmap中。由于一张源图是IMG_WIDTH*IMG_HEIGHT大小的图像,通过TJpgDec解压缩后是分成很多块输出的,因此,本申请新建一个IMG_WIDTH*IMG_HEIGHT大小的数组 imgData[IMG_WIDTH*IMG_HEIGHT]来收集解压缩后的数据。bitmap数组与imgData数组的映射关系为:
imgData[index2]=bitmap[index1]
index2=y*IMG_WIDTH+x,
index1=(right-left+1)*(y-top)+x
top<=y<=bottom
left<=x<=right
其中index2为图片映射到输出图片imgData中的索引位置,index1为图片在小区块bitmap中的索引位置。当检测到index2等于IMG_WIDTH*IMG_HEIGHT -1时,代表一帧图片解压缩完毕,可以开始进行图像处理。
综上,本发明本申请提供了一种MCU摄像头定位方法,在本方案中,通过控制MCU通过USB接口读取USB摄像头的实时图像数据;控制MCU解压缩 USB摄像头的实时图像数据;当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据实时显示到显示屏幕中;对解压缩后的实时图像数据进行二值化处理;在二值化处理后的实时图像数据中,识别实时图像数据中定位标记点的左右轮廓,生成切割文件;获取摄像头与刻刀刀尖的安装偏差,依据安装偏差控制摄像头在实时图像数据的XY方向分别移动第一距离DeltaX及第二距离DeltaY;获取偏移补偿,依据偏移补偿及安装偏差对摄像头进行校正;控制校正后的摄像头依据定位标记点的左右轮廓识别切割文件上的定位标记点;依据摄像头的识别结果修正定位标记点的坐标值。因此,本发明实现刻字机上摄像头的准确定位,提高刻字精度,实时显示图像,成本低廉。
在上述实施例的基础上:
请参照图2,图2为本申请提供的MCU摄像头定位方法的流程图。
请参照图7,图7为本申请提供的MCU摄像头定位方法的流程图。
作为一种优选地实施例,依据摄像头的识别结果修正定位标记点的坐标值包括:
S91、获取预设的定位标记点的初始坐标位置;
S92、依据摄像头的识别结果,获取定位标记点的实际坐标位置;
S93、获取初始坐标位置与实际坐标位置的偏差关系;
S94、依据偏差关系修正切割文件中点定位坐标点的坐标值。
具体地,为了实现刻字机的精准定位切割,刻字机在正式开始刻字前会通过机器视觉定位技术,在切割介质上打印定位标记点,摄像头通过识别定位标记点的坐标位置,将定位标记点的坐标位置传输给刻字机主控MCU,刻字机主控MCU根据定位标记点在指定位置上执行刻字动作。
具体地,本申请通过四点定位法在切割介质上打印定位标记点。控制校正后的摄像头依据定位标记点的左右轮廓识别切割文件上的定位标记点后,切割文件会给出待切割页面中四个标记点。以标记点为圆形为例,请参阅图7,在初始坐标系XY上,四个圆形标记点的圆心分别为A(0,0),B(W,0),C(W,H),D(0,H)。通过摄像头识别这四个标记圆,设第一个圆心为A’(0,0),其它三个圆心分别为B’(xb’,yb’),C’(xc’,yc’),D’(xd’,yd’),A’B’C’D’所在的新坐标系为X‘Y‘,设其相对于初始坐标系旋转角度为θ,XY方向的缩放比分别为a、b,则对于XY坐标系中一点(x,y),其变换到X‘Y‘坐标系中的坐标(x’,y’)为:
对根据B’(xb’,yb’)、D’(xd’,yd’),有等式成立:
则对于文件中定义的点M(xm,ym),其在经过摄像头定位后的新坐标系中的坐标值M’(xm’,ym’)为:
因此,本申请依据摄像头的识别结果修正定位标记点的坐标值,使得定位标记点的坐标值更加准确,从而实现刻字机上摄像头的准确定位,提高刻字精度。
请参照图8,图8为本申请提供的MCU摄像头定位方法的摄像头与刻刀刀尖的位置关系图。
作为一种优选地实施例,获取偏移补偿的公式为:
offsetX=(cx-IMG_WIDTH/2)*ratio;
offseY=(cy-IMG_HEIGHT/2)*ratio;
其中,offsetX、offseY为XY方向的偏移补偿值;cx、cy为刻刀刀尖所在位置的圆心坐标值;IMG_WIDTH为实时图像数据分辨率的宽值,IMG_HEIGHT 为实时图像数据分辨率的高值;ratio为摄像头像素到实际距离的对应系数。
作为一种优选地实施例,在获取偏移补偿,依据偏移补偿及安装偏差对摄像头进行校正中,摄像头偏移值校正为:
DeltaX’=DeltaX+offsetX;
DeltaY’=DeltaY+offsetY。
具体地,由于摄像头和刻刀都是装在刻字机的移动小车上,摄像头和刻刀之间的距离是固定的,如图8所示。在切割开始前,是刀尖正对着标记点,当需要拍照时,摄像头由于结构差异,每台移动小车上摄像头和刻刀的距离值存在差异,这个误差会影响摄像头拍照效果,因此需要通过摄像头校正来补偿这个安装误差。摄像头校正的步骤为:
将刻刀刀尖换成细笔尖,在刻字介质上画一个小正方形,小正方形作为标记点;
根据预设好的距离,摄像头在XY方向分别移动DeltaX和DeltaY距离,跑到原来刀尖的位置附近拍照,并识别正方形;
根据识别到的正方形圆心位置cx、cy,计算偏移补偿,用来校正摄像头。
偏移补偿值为:
offsetX=(cx-IMG_WIDTH/2)*ratio;
offseY=(cy-IMG_HEIGHT/2)*ratio;
其中ratio为摄像头像素到实际距离的对应系数。
摄像头偏移值校正为:
DeltaX’=DeltaX+offsetX;
DeltaY’=De l taY+offsetY。
请参照图3,图3为本申请提供的MCU摄像头定位方法的流程图。
作为一种优选地实施例,在二值化处理后的实时图像数据中,识别实时图像数据中定位标记点的左右轮廓,生成切割文件包括:
S51、定义左轮廓数组;
S52、从上往下遍历实时图像数据的每一行y,0<=y<IMG_WIDTH,其中 IMG_WIDTH为实时图像数据分辨率的宽值;
S53、从左往右遍历实时图像数据的每一列x,0<=x<IMG_HEIGHT,对当前点执行判断,其中IMG_HEIGHT为实时图像数据分辨率的高值;
S54、若当前行还没找到左轮廓点且前一点为白色,当前点为黑色,则当前点为左轮廓;
S55、保存左轮廓的x坐标值,并更新前一点为当前点颜色值。
请参照图4,图4为本申请提供的MCU摄像头定位方法的流程图。
作为一种优选地实施例,在二值化处理后的实时图像数据中,识别实时图像数据中定位标记点的左右轮廓,生成切割文件还包括:
S51’、定义右轮廓数组;
S52’、从上往下遍历实时图像数据的每一行y,0<=y<IMG_WIDTH,其中IMG_WIDTH为实时图像数据分辨率的宽值;
S53’、从右往左遍历实时图像数据的每一列x,0<=x<IMG_HEIGHT,对当前点执行判断,其中IMG_HEIGHT为实时图像数据分辨率的高值;
S54’、若当前行还没找到右轮廓点且前一点为白色,当前点为黑色,则当前点为右轮廓;
S55’、保存右轮廓x坐标值,并更新前一点为当前点颜色值。
请参照图6,图6为本申请提供的MCU摄像头定位方法的定位标记点的轮廓示意图。
具体地,刻字机定位使用的标记点主要有空心正方形和实心圆。本申请识别的图像为实心圆和空心正方形,如图6所示。首先定义左右轮廓数组 ColorArrLeft[IMG_HEIGHT]和ColorArrRight[IMG_HEIGHT],数组元素初始值全部设置为0,代表还未找到轮廓点。
识别左轮廓的方法为:
从上往下遍历图像的每一行y,0<=y<IMG_WIDTH;
从左往右遍历图像的每一列x,0<=x<IMG_HEIGHT,对当前点执行判断:
若当前行还没找到左轮廓点(ColorArrLeft[y]==0)且前一点为白色,当前点为黑色,则当前点为左轮廓,保存当前左轮廓横坐标值ColorArrLeft[y]= x,并更新前一点为当前点颜色值。
识别右轮廓的方法为:
从上往下遍历图像的每一行y,0<=y<IMG_WIDTH;
从右往左遍历图像的每一列x,0<=x<IMG_HEIGHT,对当前点执行判断:
若当前行还没找到右轮廓点(ColorArrRight[y]==0)且前一点为白色,当前点为黑色,则当前点为右轮廓,保存当前右轮廓横坐标值ColorArrRight[y]= x,并更新前一点为当前点颜色值。
具体地,识别正方形时,由于正方形的位置能够保证正方形的俩条竖边与y 轴基本平行,因此需要遍历所有左轮廓点,找出横坐标出现几率最高的坐标值,为正方形左边沿坐标;同理遍历所有右轮廓点,找出横坐标出现几率最高的坐标值,为正方形右坐标值。
具体地,识别正方形算法步骤为:
建立timesLeft[IMG_WIDTH]与timesRight[IMG_WIDTH]数组,所有元素初始化为0;
遍历所有0到IMG_HEIGHT,0<=i<IMG_HEIGHT,执行操作:
若ColorArrLeft[i]!=0,则timesLeft[ColorArrLeft[i]]++;
若ColorArrRight[i]!=0,则timesRight[ColorArrRight[i]]++;
找出ColorArrLeft数组中的最大值,其对应的索引即为正方形左边沿横坐标值meanLeft;找出ColorArrRight数组中的最大值,其对应的索引即为正方形右边沿横坐标值meanRight,计算正方形宽度width=meanRight-meanLeft;统计左轮廓中所有横坐标值在meanLeft附近的点数目inlineLeft,统计右轮廓点中横坐标值在meanRight附近的点数目inlineRight,统计左轮廓点数目 countsLeft,统计右轮廓点数目countsRight;统计左轮廓中纵坐标最大值 max_y,纵坐标最小值min_y,计算正方型高度height=max-min_y;当inlineLeft/countsLeft>80%且inlineRight/countsRight>80%且 abs(width-height)<误差值5,则认为找到正方形,并计算正方形中心坐标 cx=(meanLeft+meanRight)/2,cy=(max_y+min_y)/2。
具体地,识别圆的算法步骤为:
对于左轮廓,采用基于距离的滤波方法去掉离群点。圆四周有一些离群点,滤除离群点的方法为:遍历左轮廓中的所有点,对与每一点,计算该点与轮廓中其它点的距离,若距离小于距离门槛值,则邻近点计数器nearCount++,若最后nearCount<点数门槛值,则认为该点是离群点,将其从左轮廓点集中移除。
对于左轮廓点集,做最小二乘法拟合,拟合出圆心坐标(cx,cy)和半径r
对于N个点集(x1,y1),(x2,y2),……,(xn,yn),由最小二乘法求圆心和半径的公式为:
遍历轮廓上的所有点,计算它们与拟合圆心(cx,cy)的距离d,若距离d与 r的绝对值小于门槛值,则认为该点在轮廓上,则在轮廓上点数目cirCnt加1。并统计所有轮廓点数目count。遍历完后计算百分比cirCnt/count,若cirCnt/count>80%,则认为识别圆成功。
请参照图5,图5为本申请提供的MCU摄像头定位方法的流程图。
作为一种优选地实施例,当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据放大,再实时显示到显示屏幕中,将解压缩的实时图像数据放大包括:
S31、遍历实时图像数据的每一行,0<=y<IMG_HEIGHT,其中 IMG_HEIGHT为实时图像数据分辨率的高值;
S32、对每一行数据,定义临时数组用于存放放大后的数据;
S33、遍历实时图像数据的每一个像素点,0<=x<IMG_WIDTH,其中 IMG_WIDTH为实时图像数据分辨率的宽值;
S34、将行放大a倍;
S35、在显示屏幕上绘制出a行放大后的数据。
具体地,当检测到一张完整的图片数据解压缩完毕后,就将这张图片显示到 LCD屏幕上。由于IMG_WIDTH*IMG_HEIGHT的区域在屏幕上显示比较小,因此本申请将图片长宽都放大2倍后再显示到屏幕上。图片放大的方法为:遍历图像每一行,0<=y<IMG_HEIGHT;对每一行数据,定义一个临时数组 color[IMG_WIDTH*2],用来存放放大后的数据,然后遍历每一个像素点0<=x< IMG_WIDTH;将行放大2倍;
index=IMG_WIDTH*y+x
color[2*x]=imgData[index]
color[2*x+1]=imgData[index]
color[2*x+2*IMG_WIDTH]=imgData[index]
color[2*x+2*IMG_WIDTH]=imgData[index];在屏幕上绘制出2行放大后的数据;根据color数组绘制出2*y,2*y+1这2行的像素点到屏幕上。
具体地,对图像进行图像处理,先将图像转为灰度图。由于MPEG解压缩后的图像其颜色格式为RGB565格式,对于每一个16位像素点color,先提取出R、G、B分量,然后再进行灰度化,灰度化值Gray为:
R=color>>11
B=color&0x1F
G=(color>>5)&0x3F
Gray=R*0.299+0.578*G+0.114*B。
请参阅图9,图9为本申请一种MCU摄像头定位装置的结构图。
本申请还提供了一种MCU摄像头定位装置,装置包括:
读取模块1,用于控制MCU通过USB接口读取USB摄像头的实时图像数据;
解压缩模块2,用于控制MCU解压缩USB摄像头的实时图像数据;
显示控制模块3,用于当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据实时显示到显示屏幕中;
图像处理模块4,用于对解压缩后的实时图像数据进行二值化处理;
第一识别模块5,用于在二值化处理后的实时图像数据中,识别实时图像数据中定位标记点的左右轮廓,生成切割文件;
移动控制模块6,用于获取摄像头与刻刀刀尖的安装偏差,依据安装偏差控制摄像头在实时图像数据的XY方向分别移动第一距离DeltaX及第二距离 DeltaY;
校正模块7,用于获取偏移补偿,依据偏移补偿及安装偏差对摄像头进行校正;
第二识别模块8,用于控制校正后的摄像头依据定位标记点的左右轮廓识别切割文件上的定位标记点;
修正模块9,用于依据摄像头的识别结果修正定位标记点的坐标值。
另外,结合图1描述的本发明实施例的一种MCU摄像头定位方法可以由MCU 摄像头定位设备来实现。图10示出了本发明实施例提供的一种MCU摄像头定位设备的硬件结构示意图。
MCU摄像头定位设备可以包括处理器401以及存储有计算机程序指令的存储器402。
具体地,上述处理器401可以包括中央处理器(CPU),或者特定集成电路(Application Specific Integrated Circuit,ASIC),或者可以被配置成实施本发明实施例的一个或多个集成电路。
存储器402可以包括用于数据或指令的大容量存储器。举例来说而非限制,存储器402可包括硬盘驱动器(Hard Disk Drive,HDD)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(Universal Serial Bus,USB)驱动器或者两个或更多个以上这些的组合。在合适的情况下,存储器402可包括可移除或不可移除(或固定)的介质。在合适的情况下,存储器402可在数据处理装置的内部或外部。在特定实施例中,存储器402是非易失性固态存储器。在特定实施例中,存储器402包括只读存储器(ROM)。在合适的情况下,该ROM可以是掩模编程的ROM、可编程ROM(PROM)、可擦除PROM(EPROM)、电可擦除PROM (EEPROM)、电可改写ROM(EAROM)或闪存或者两个或更多个以上这些的组合。
处理器401通过读取并执行存储器402中存储的计算机程序指令,以实现上述实施例中的任意一种MCU摄像头定位方法。
在一个示例中,MCU摄像头定位设备还可包括通信接口403和总线410。其中,如图10所示,处理器401、存储器402、通信接口403通过总线410连接并完成相互间的通信。
通信接口403,主要用于实现本发明实施例中各模块、装置、单元和/或设备之间的通信。
总线410包括硬件、软件或两者,将MCU摄像头定位设备的部件彼此耦接在一起。举例来说而非限制,总线可包括加速图形端口(AGP)或其他图形总线、增强工业标准架构(EISA)总线、前端总线(FSB)、超传输(HT)互连、工业标准架构(ISA)总线、无限带宽互连、低引脚数(LPC)总线、存储器总线、微信道架构(MCA)总线、外围组件互连(PCI)总线、PCI-Express(PCI-X) 总线、串行高级技术附件(SATA)总线、视频电子标准协会局部(VLB)总线或其他合适的总线或者两个或更多个以上这些的组合。在合适的情况下,总线410 可包括一个或多个总线。尽管本发明实施例描述和示出了特定的总线,但本发明考虑任何合适的总线或互连。
另外,结合上述实施例中的一种MCU摄像头定位方法,本发明实施例可提供一种计算机可读存储介质来实现。该计算机可读存储介质上存储有计算机程序指令;该计算机程序指令被处理器执行时实现上述实施例中的任意一种MCU 摄像头定位方法。
还需要说明的是,本发明中提及的示例性实施例,基于一系列的步骤或者装置描述一些方法或系统。但是,本发明不局限于上述步骤的顺序,也就是说,可以按照实施例中提及的顺序执行步骤,也可以不同于实施例中的顺序,或者若干步骤同时执行。
以上,仅为本发明的具体实施方式,所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的系统、模块和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。应理解,本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。
Claims (10)
1.一种MCU摄像头定位方法,其特征在于,所述方法包括:
控制MCU通过USB接口读取USB摄像头的实时图像数据;
控制所述MCU解压缩所述USB摄像头的实时图像数据;
当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据实时显示到显示屏幕中;
对解压缩后的所述实时图像数据进行二值化处理;
在二值化处理后的所述实时图像数据中,识别所述实时图像数据中定位标记点的左右轮廓,生成切割文件;
获取摄像头与刻刀刀尖的安装偏差,依据所述安装偏差控制所述摄像头在所述实时图像数据的XY方向分别移动第一距离DeltaX及第二距离DeltaY;
获取偏移补偿,依据所述偏移补偿及所述安装偏差对所述摄像头进行校正;
控制校正后的所述摄像头依据定位标记点的左右轮廓识别所述切割文件上的定位标记点;
依据所述摄像头的识别结果修正所述定位标记点的坐标值。
2.根据权利要求1所述的一种MCU摄像头定位方法,其特征在于,所述依据所述摄像头的识别结果修正所述定位标记点的坐标值包括:
获取预设的所述定位标记点的初始坐标位置;
依据所述摄像头的识别结果,获取所述定位标记点的实际坐标位置;
获取所述初始坐标位置与所述实际坐标位置的偏差关系;
依据所述偏差关系修正切割文件中点定位坐标点的坐标值。
3.根据权利要求1所述的一种MCU摄像头定位方法,其特征在于,所述获取偏移补偿的公式为:
offsetX=(cx-IMG_WIDTH/2)*ratio;
offseY=(cy-IMG_HEIGHT/2)*ratio;
其中,offsetX、offseY为XY方向的偏移补偿值;cx、cy为所述刻刀刀尖所在位置的圆心坐标值;IMG_WIDTH为所述实时图像数据分辨率的宽值,IMG_HEIGHT为所述实时图像数据分辨率的高值;ratio为摄像头像素到实际距离的对应系数。
4.根据权利要求2所述的一种MCU摄像头定位方法,其特征在于,在所述获取偏移补偿,依据所述偏移补偿及所述安装偏差对所述摄像头进行校正中,所述摄像头偏移值校正为:
DeltaX’=DeltaX+offsetX;
DeltaY’=DeltaY+offsetY。
5.根据权利要求1所述的一种MCU摄像头定位方法,其特征在于,所述在二值化处理后的所述实时图像数据中,识别所述实时图像数据中定位标记点的左右轮廓,生成切割文件包括:
定义左轮廓数组;
从上往下遍历所述实时图像数据的每一行y,0<=y<IMG_WIDTH,其中IMG_WIDTH为所述实时图像数据分辨率的宽值;
从左往右遍历所述实时图像数据的每一列x,0<=x<IMG_HEIGHT,对当前点执行判断,其中IMG_HEIGHT为所述实时图像数据分辨率的高值;
若当前行还没找到左轮廓点且前一点为白色,当前点为黑色,则当前点为左轮廓;
保存所述左轮廓的x坐标值,并更新前一点为当前点颜色值。
6.根据权利要求5所述的一种MCU摄像头定位方法,其特征在于,所述在二值化处理后的所述实时图像数据中,识别所述实时图像数据中定位标记点的左右轮廓,生成切割文件还包括:
定义右轮廓数组;
从上往下遍历所述实时图像数据的每一行y,0<=y<IMG_WIDTH,其中IMG_WIDTH为所述实时图像数据分辨率的宽值;
从右往左遍历所述实时图像数据的每一列x,0<=x<IMG_HEIGHT,对当前点执行判断,其中IMG_HEIGHT为所述实时图像数据分辨率的高值;
若当前行还没找到右轮廓点且前一点为白色,当前点为黑色,则当前点为右轮廓;
保存所述右轮廓x坐标值,并更新前一点为当前点颜色值。
7.根据权利要求1所述的一种MCU摄像头定位方法,其特征在于,所述当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据放大,再实时显示到显示屏幕中,将解压缩的实时图像数据放大包括:
遍历所述实时图像数据的每一行,0<=y<IMG_HEIGHT,其中IMG_HEIGHT为所述实时图像数据分辨率的高值;
对每一行数据,定义临时数组用于存放放大后的数据;
遍历所述实时图像数据的每一个像素点,0<=x<IMG_WIDTH,其中IMG_WIDTH为所述实时图像数据分辨率的宽值;
将行放大a倍;
在所述显示屏幕上绘制出a行放大后的数据。
8.一种MCU摄像头定位装置,其特征在于,所述装置包括:
读取模块,用于控制MCU通过USB接口读取USB摄像头的实时图像数据;
解压缩模块,用于控制所述MCU解压缩所述USB摄像头的实时图像数据;
显示控制模块,用于当检测到一张完整的图片数据解压缩完毕后,将解压缩的实时图像数据实时显示到显示屏幕中;
图像处理模块,用于对解压缩后的所述实时图像数据进行二值化处理;
第一识别模块,用于在二值化处理后的所述实时图像数据中,识别所述实时图像数据中定位标记点的左右轮廓,生成切割文件;
移动控制模块,用于获取摄像头与刻刀刀尖的安装偏差,依据所述安装偏差控制所述摄像头在所述实时图像数据的XY方向分别移动第一距离DeltaX及第二距离DeltaY;
校正模块,用于获取偏移补偿,依据所述偏移补偿及所述安装偏差对所述摄像头进行校正;
第二识别模块,用于控制校正后的所述摄像头依据定位标记点的左右轮廓识别所述切割文件上的定位标记点;
修正模块,用于依据所述摄像头的识别结果修正所述定位标记点的坐标值。
9.一种MCU摄像头定位设备,其特征在于,包括:至少一个处理器、至少一个存储器以及存储在所述存储器中的计算机程序指令,当所述计算机程序指令被所述处理器执行时实现如权利要求1-7中任一项所述的方法。
10.一种存储介质,其上存储有计算机程序指令,其特征在于,当所述计算机程序指令被处理器执行时实现如权利要求1-7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210501188.2A CN114913240B (zh) | 2022-05-09 | 2022-05-09 | 一种mcu摄像头定位方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210501188.2A CN114913240B (zh) | 2022-05-09 | 2022-05-09 | 一种mcu摄像头定位方法、装置、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114913240A CN114913240A (zh) | 2022-08-16 |
CN114913240B true CN114913240B (zh) | 2024-11-22 |
Family
ID=82765981
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210501188.2A Active CN114913240B (zh) | 2022-05-09 | 2022-05-09 | 一种mcu摄像头定位方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114913240B (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111279231A (zh) * | 2017-10-27 | 2020-06-12 | 住友化学株式会社 | 偏光膜及其制造方法 |
CN113920038A (zh) * | 2021-09-13 | 2022-01-11 | 环盛智能(深圳)有限公司 | 一种割轮廓提取方法、装置系统及介质 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE50206199D1 (de) * | 2002-08-02 | 2006-05-18 | Hell Gravure Systems Gmbh | Verfahren zur Verbesserung der Qualität eines in einen Druckformzylinder gravierten Bildes |
CN114103506B (zh) * | 2021-09-28 | 2023-04-21 | 环盛智能(深圳)有限公司 | 一种手机后膜打印切割方法 |
-
2022
- 2022-05-09 CN CN202210501188.2A patent/CN114913240B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111279231A (zh) * | 2017-10-27 | 2020-06-12 | 住友化学株式会社 | 偏光膜及其制造方法 |
CN113920038A (zh) * | 2021-09-13 | 2022-01-11 | 环盛智能(深圳)有限公司 | 一种割轮廓提取方法、装置系统及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114913240A (zh) | 2022-08-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108416355B (zh) | 一种基于机器视觉的工业现场生产数据的采集方法 | |
CN110751682B (zh) | 一种提取和标识图像的方法、装置、终端设备及存储介质 | |
CN108133216B (zh) | 基于机器视觉的可实现小数点读取的数码管读数识别方法 | |
CN108965839B (zh) | 一种自动调整投影画面的方法及装置 | |
CN108875855B (zh) | 打印矢量图的方法、装置、设备及存储介质 | |
CN113592839B (zh) | 基于改进Faster RCNN的配网线路典型缺陷诊断方法及系统 | |
CN110866949A (zh) | 中心点定位方法、装置、电子设备和存储介质 | |
CN114494017A (zh) | 根据比例尺进行图像dpi调整的方法和装置、设备及介质 | |
CN112288049B (zh) | 基于模板匹配和限制连通域指针定位的指针表读数方法 | |
CN114926786A (zh) | 船舶水尺跟踪方法、装置、存储介质和电子设备 | |
JP7262927B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
CN110969135B (zh) | 自然场景中的车标识别方法 | |
CN114913240B (zh) | 一种mcu摄像头定位方法、装置、设备及存储介质 | |
CN115830018A (zh) | 基于深度学习与双目视觉的碳素块检测方法及系统 | |
CN116985873A (zh) | 一种轨道交通站场轨道区段占用状态检测方法 | |
CN106413280A (zh) | 基于图像处理的贴片机喂料器元件位置自动矫正装置及自动矫正方法 | |
CN115082552B (zh) | 标记孔的定位方法、装置、装配设备及存储介质 | |
CN113139394A (zh) | 读码方法、电子装置及存储介质 | |
CN103136543B (zh) | 图像处理装置及图像处理方法 | |
CN114677373A (zh) | 一种印刷品内容检错方法、装置、电子设备及介质 | |
CN118660145B (zh) | 安检图像转换方法、系统、设备及存储介质 | |
CN112950623A (zh) | 一种唛头识别方法及系统 | |
CN116205812A (zh) | 基于原深度图像的点云空洞修复方法及系统 | |
CN119252071A (zh) | 停车场车位确定方法、电子设备、存储介质 | |
CN118887672A (zh) | 一种有模板图像的卡证印刷文字缺失检测方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |