CN107481227A - 教学板书图像处理方法、装置、智能教学设备及存储介质 - Google Patents
教学板书图像处理方法、装置、智能教学设备及存储介质 Download PDFInfo
- Publication number
- CN107481227A CN107481227A CN201710626077.3A CN201710626077A CN107481227A CN 107481227 A CN107481227 A CN 107481227A CN 201710626077 A CN201710626077 A CN 201710626077A CN 107481227 A CN107481227 A CN 107481227A
- Authority
- CN
- China
- Prior art keywords
- teaching board
- board image
- image
- teaching
- obstacle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003860 storage Methods 0.000 title claims abstract description 22
- 238000003672 processing method Methods 0.000 title claims abstract description 20
- 238000012545 processing Methods 0.000 claims abstract description 42
- 238000000034 method Methods 0.000 claims abstract description 24
- 238000012217 deletion Methods 0.000 claims abstract description 11
- 230000037430 deletion Effects 0.000 claims abstract description 11
- 238000004321 preservation Methods 0.000 claims description 11
- 230000000903 blocking effect Effects 0.000 claims description 9
- 238000012216 screening Methods 0.000 claims description 7
- 238000004590 computer program Methods 0.000 claims description 2
- 230000004888 barrier function Effects 0.000 abstract description 4
- 230000015654 memory Effects 0.000 description 8
- 238000005457 optimization Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 5
- 230000006399 behavior Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Drawing Aids And Blackboards (AREA)
- Facsimiles In General (AREA)
Abstract
本发明公开了教学板书图像处理方法、装置、智能教学设备及存储介质。该方法包括:根据当前所捕获教学板书图像的色彩特征值,确定所述教学板书图像中是否存在障碍遮挡;如果存在所述障碍遮挡,则确定所述障碍遮挡与板书笔迹之间的遮挡关系;根据所述遮挡关系,确定所述教学板书图像对应的处理操作,所述处理操作包括删除操作和保存操作。利用该方法,能够实时对捕获教学板书图像中的信息进行遮挡判定,由此通过判定结果确定对教学板书图像进行保存操作还是删除操作,从而达到优化保存教学板书图像信息的目的,进而保证学习者能够从教学信息中快速筛选到对自己有用的信息。
Description
技术领域
本发明涉及电子教学技术领域,尤其涉及教学板书图像处理方法、装置、智能教学设备及存储介质。
背景技术
在电子教育设备改善课室教学环境的大潮中,教学书写板,如触摸屏终端提供的电子白板和传统黑板的功能一直没有发生较大的变化。
在老师的教学过程中,如果需要保存供学生课后复习用的教学信息数据,一般通过教学课件或教学过程录像的方式保存。但教学课件不能反映老师在教学书写板上书写的内容,往往会缺失实用性强的信息;现有的教学录像往往将教学者的整个教学过程都拍摄下来,由此获得大数据量的教学板书图像。然而,所获得教学板书图像中往往包括重复或存在信息遮挡的图像,使得学生难以快速的筛选到对自己有用的信息。
发明内容
本发明实施例提供了教学板书图像处理方法、装置、智能教学设备及存储介质,以实现教学板书图像的优化保存。
第一方面,本发明实施例提供了一种教学板书图像处理方法,包括:
根据当前所捕获教学板书图像的色彩特征值,确定所述教学板书图像中是否存在障碍遮挡;
如果存在所述障碍遮挡,则确定所述障碍遮挡与板书笔迹之间的遮挡关系;
根据所述遮挡关系,确定所述教学板书图像对应的处理操作,所述处理操作包括删除操作和保存操作。
第二方面,本发明实施例提供了一种教学板书图像处理装置,包括:
遮挡判定模块,用于根据当前所捕获教学板书图像的色彩特征值,确定所述教学板书图像中是否存在障碍遮挡;
关系确定模块,用于当存在所述障碍遮挡时,则确定所述障碍遮挡与板书笔迹之间的遮挡关系;
根据所述遮挡关系,确定所述教学板书图像对应的处理操作,所述处理操作包括删除操作和保存操作。
第三方面,本发明实施例提供了一种智能教学设备,包括:显示终端、书写板以及摄像头,还包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明实施例提供的教学板书图像处理方法。
第四方面,本发明实施例提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现本发明实施例提供的教学板书图像处理方法。
在上述教学板书图像处理方法、装置、智能教学设备及存储介质中,首先根据当前所捕获教学板书图像的色彩特征值,确定该教书板书图像中是否存在障碍遮挡;然后在存在障碍遮挡时确定障碍遮挡与板书笔迹之间的遮挡关系;最后根据遮挡关系确定教学板书图像对应的处理操作。上述技术方案,能够实时对捕获教学板书图像中的信息进行遮挡判定,由此通过判定结果确定对教学板书图像进行保存操作还是删除操作,从而达到优化保存教学板书图像信息的目的,进而保证学习者能够从教学信息中快速筛选到对自己有用的信息。
附图说明
图1为本发明实施例一提供的一种教学板书图像处理方法的流程示意图;
图2为本发明实施例二提供的一种教学板书图像处理方法的流程示意图;
图3为本发明实施例三提供的一种教学板书图像处理装置的结构框图;
图4为本发明实施例四提供的一种智能教学设备的硬件结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种教学板书图像处理方法的流程示意图,该方法适用于对教学过程中捕获的教学板书图像进行筛选优化的情况,该方法可以由教学板书图像处理装置执行,其中该装置可由软件和/或硬件实现,并一般集成在智能教学设备上。
如图1所示,本发明实施例一提供的一种教学板书图像处理方法,包括如下操作:
S101、根据当前所捕获教学板书图像的色彩特征值,确定所述教学板书图像中是否存在障碍遮挡。
在本实施例中,教学板书图像具体可理解为教学过程中教学者在书写板上板书的教学内容,可以通过智能教学设备中的摄像头进行图像捕获,本实施例可直接对所捕获的教学板书图像直接进行保存,无需后续的判断。
需要说明的是,教学板书图像的采集可以是按照预设的频率在教学过程中自动执行,也可以是通过监听用户的操作,根据用户操作发出的触发指令触发采集教学板书图像。优选地,按照预设的频率在教学过程中自动执行,免去人工操作的麻烦。
在本实施例中,所述色彩特征值可以是RGB色彩模型中的R值、G值和B值,也可以是HIS色彩模型中的亮度值(即灰度值)或其他色彩模型中的特征值。本实施例可以通过上述一种形式或多种形式来体现教学板书图像的的色彩特征值。具体地,本实施例可以通过对教学板书色彩特征值的计算,确定教学板书图像中是否包含与障碍遮挡匹配的特征值,由此来确定是否存在障碍遮挡。本实施例中的障碍遮挡具体可理解成教学者的肢体遮挡。
S102、如果存在所述障碍遮挡,则确定所述障碍遮挡与板书笔迹之间的遮挡关系。
可以理解的是,所述板书笔迹具体可指教学者通过板书笔(如粉笔或白板笔等)在书写板上书写的教学内容笔迹。本实施例将板书笔迹以区域形式划分,即,可认为一张教学板书图像上存在多处板书笔迹。所述遮挡关系具体可理解为障碍遮挡与教学板书图像上板书笔迹之间的信息遮掩关系。如果存在板书笔迹与障碍遮挡所处的位置重合或存在部分相交,则可认为板书笔迹存在信息遮掩,否则可认为板书笔迹之间不存在信息遮掩。
S103、根据所述遮挡关系,确定所述教学板书图像对应的处理操作,所述处理操作包括删除操作和保存操作。
根据S102可以确定障碍遮挡对板书笔迹所包含信息的遮挡与否,基于其不同的确定结果,可以对当前所捕获的教学板书图像进行删除操作或保存操作。
本发明实施例一提供的一种教学板书图像处理方法,首先根据当前所捕获教学板书图像的色彩特征值,确定该教书板书图像中是否存在障碍遮挡;然后在存在障碍遮挡时确定障碍遮挡与板书笔迹之间的遮挡关系;最后根据遮挡关系确定教学板书图像对应的处理操作。利用该方法,能够实时对捕获教学板书图像中的信息进行遮挡判定,由此通过判定结果确定对教学板书图像进行保存操作还是删除操作,从而达到优化保存教学板书图像信息的目的,进而保证学习者能够从教学信息中快速筛选到对自己有用的信息。
实施例二
图2为本发明实施例二提供的一种教学板书图像处理方法的流程示意图。本发明实施例二以上述实施例为基础进行优化,在本实施例中,将根据当前所捕获教学板书图像的图像色彩特征值,确定所述教学板书图像中是否存在障碍遮挡,进一步优化为:获取预先存储的板书笔迹的笔迹色彩特征值以及书写板自身的底板色彩特征值;如果所述教学板书图像的色彩特征值中包括除所述笔迹色彩特征值及底板色彩特征值之外的其他色彩特征值,则确定所述其他色彩特征值所形成图像区域的区域大小;如果所述区域大小属于设定的覆盖面积范围,则确定所述教学板书图像中存在障碍遮挡。
进一步地,本实施例将确定所述障碍遮挡与板书笔迹之间的遮挡关系,具体优化为:确定所述障碍遮挡所形成图像区域在所述教学板书图像中的遮挡坐标位置范围;确定所述教学板书图像中板书笔迹所形成的至少一个笔迹坐标位置范围;如果存在包含所述遮挡坐标位置范围或与所述遮挡坐标位置范围相交的笔迹坐标位置范围,则确定所述障碍遮挡对所述教学板书图像中的板书笔迹有遮挡。
同时,本实施例优选设定所述障碍遮挡与板书笔迹之间的遮挡关系包括:有遮挡和无遮挡;相应的,本实施例将所述根据所述遮挡关系,确定所述教学板书图像对应的处理操作进一步优化为:如果所述遮挡关系为有遮挡,则删除所述教学板书图像;如果所述遮挡关系为无遮挡,则确定所述教学板书图像与上一次保存的历史教学板书图像的第一特征相似度,并在所述第一特征相似度小于第一设定相似值时,保存所述教学板书图像。
在上述优化的基础上,本实施例还优化增加了:如果不存在所述障碍遮挡,则确定所述教学板书图像与上一次保存的历史教学板书图像的第二特征相似度;如果所述第二特征相似度小于第二设定相似值,则保存所述教学板书图像;否则,删除所述教学板书图像。
如图2所示,本发明实施例二提供的一种教学板书图像处理方法,具体包括如下操作:
S201、确定当前所捕获教学板书图像的色彩特征值,获取预先存储的板书笔迹的笔迹色彩特征值以及书写板自身的底板色彩特征值。
在本实施中,可以对教学板书图像中的每个像素点确定其色彩特征值,本实施例优选用RGB色彩模型中的R值、G值和B值来表示每个像素点的色彩特征值。
在本实施例中,执行本步骤操作之前,可以先确定板书笔具有的色彩特征,如白色粉笔的色彩特征为白色,其对应板书笔迹的色彩特征值即为白色对应的色彩特征值;黄色粉笔的色彩特征为黄色,其对应板书笔迹的色彩特征值即为黄色对应的色彩特征值;又如,白板笔的色彩特征为黑色(一般在书写板为白板时使用),那么其对应板书笔迹的色彩特征值即为黑色对应的色彩特征值。本实施例可以预先保存板书笔迹的笔迹色彩特征值。
此外,本实施例在执行本步骤之前,还需要确定书写板自身对应的色彩特征,如,书写板为黑板时(一般采用粉笔作为板书笔),其对应的底板色彩特征值相当于黑色在RGB模型中的RGB值。又如,书写板为白板时,其对应的底板色彩特征值相当于白色在RGB模型中的RGB值。本实施例优选但不限定书写板为传统黑板。此外,本实施例也预先保存书写板的底板色彩特征值。
本步骤可以在确定教学板书图像中各像素点色彩特征值的图像,获取预先存储的对应于板书笔迹的笔迹色彩特征值以及对应于书写板的底板色彩特征值。
S202、确定所述色彩特征值中是否仅存在笔迹色彩特征值和底板色彩特征值,若否,则执行S203;若是,则执行S211。
本步骤具体可以对教学板书图像中像素点的色彩特征值进行分析,确定教学板书图像的色彩特征值是否仅包含了笔迹色彩特征值和底板色彩特征值。若仅包含了上述两种类型的色彩特征值,则可认为教学板书图像仅由书写板的底色及教学板书内容组成,表明教学板书图像中不存在障碍遮挡,可执行S211的操作;否则,可理解为教学板书图像中还存在有其他色彩的区域,即,教学板书图像中存在障碍遮挡的可能,则需要执行S203进一步判定。
S203、确定其他色彩特征值在教学板书图像中所形成图像区域的区域大小。
本实施例可以将教学板书图像中除笔迹色彩特征值和底板色彩特征值之外色彩特征值看作其他色彩特征值。本实施例可以确定出具有其他色彩特征值的像素点在教学板书图像中的坐标位置,并可根据像素点的分布特征,确定出至少一个基于其他色彩特征值形成的图像区域。
具体地,本实施还可通过构成各图像区域的像素点的坐标位置,确定各图像区域的区域大小。
S204、判定所述区域大小是否属于覆盖面积范围,若是,则执行S205;若否,执行S211。
本实施例优选设定障碍遮挡为手部遮挡,即教学者板书时手部对书写板的遮挡,本实施例可以根据手部的实际大小来设定手部在书写板上的覆盖面积范围。本步骤可以对上述S203所形成至少一个图像区域的区域大小进行判定,确定上述区域大小是否属于设定的覆盖面积范围。
一般地,如果所形成图像区域的区域大小小于所述覆盖面积范围,则可认为该图像区域不会对教学板书内容产生影响;如果图像区域的区域大小大于所述覆盖范围,则可能该图像区域的产生主要受外界光环境的影响而产生的反光区或阴影区,这种形式的图像区域本实施例同样不作为障碍遮挡。
本实施例中如果不存在其他色彩特征值所形成图像区域的区域大小属于覆盖面积范围,则同样可认为教学板书图像不存在障碍遮挡,可执行S211的操作;否则,在存在符合条件的图像区域时,相当于存在障碍遮挡,此时可执行S205的操作。
S205、确定所述教学板书图像中存在障碍遮挡,后续执行S206。
可以理解的是,本步骤可以对属于覆盖面积范围的图像区域进行标记,将该图像区域看作教学者手部在教学板书图像中的遮挡区域。
S206、确定所述障碍遮挡所形成图像区域在所述教学板书图像中的遮挡坐标位置范围。
本步骤可在确定存在障碍遮挡后,确定障碍遮挡在教学板书图像中的图像区域,并可确定该图像区域对应的遮挡坐标位置范围。
S207、确定所述教学板书图像中板书笔迹所形成的至少一个笔迹坐标位置范围。
在本实施例中,所述教学板书图像中的板书笔迹可认为是教学者的板书内容,其板书内容并不是杂乱无章的,一般以行形式排布,本实施例可确定板书笔迹在教学板书图像中的具体坐标位置,并可以根据设定的划分方式,将板书笔迹划分成至少一个板书区域,由此,并可确定出每个板书区域的笔迹坐标位置范围。
S208、是否存在包含所述遮挡坐标位置范围或与所述遮挡坐标位置范围相交的笔迹坐标位置范围,若是,则执行S209;若否,则执行S210。
本步骤可将遮挡坐标位置范围与各笔迹坐标位置范围进行位置关系比对,确定是否存在包含遮挡坐标位置的笔迹坐标位置范围,又或者确定是否存在与遮挡坐标位置相交的一个或多个笔迹坐标位置范围。如果符合上述两种判定中的一种,则可认为障碍遮挡对板书内容进行了信息遮挡,此时可执行S209的操作;否则,可认为障碍遮挡对板书内容没有影响,此时可执行S210的操作。
S209、确定所述障碍遮挡对所述教学板书图像中的板书笔迹有遮挡,删除所述教学板书图像。
具体地,本步骤在确定障碍遮挡对板书笔迹有遮挡时,所进行的处理操作是直接删除该教学板书图像。
需要说明的是,若在进行教学内容捕获的同时还在智能教学设备的显示终端上实时显示教学板书图像,则当确定了教学板书内容中的障碍遮挡对板书笔迹有遮挡,对教学板书图像进行删除后,本实施例优选设定当前在显示终端上显示上一次所保存的历史教学板书图像。
S210、确定所述障碍遮挡对所述教学板书图像中的板书笔迹无遮挡,确定所述教学板书图像与上一次保存的历史教学板书图像的第一特征相似度,并在第一特征相似度小于第一设定相似值时,保存所述教学板书图像。
具体地,本步骤在确定障碍遮挡对板书笔迹无遮挡时,并不直接对教学板书图像进行保存操作,而是进一步确定该教学板书图像与上一次所保存历史教学板书图像的第一特征相似度。
如果二者的第一特征相似度小于本实施例的第一设定相似值,则可认为当前捕获的教学板书图像与上一次保存的历史教学板书图像存在较大差异,此时可对当前捕获的教学板书图像进行保存操作。本实施例中,所述第一设定相似值优选为历史经验值,可基于用户的实际情况实际设定。
可以理解的是,如果二者的第一特征相似度大于或等于所述第一设定相似值,则可以认为二者相似度较高,为降低教学板书图像信息的数据量,本实施例优选考虑删除当前捕获的教学板书图像,此时,同样可以在智能教学设备的显示终端上显示上一次保存的历史教学板书图像。
S211、确定所述教学板书图像中不存在障碍遮挡,并确定所述教学板书图像与上一次保存的历史教学板书图像的第二特征相似度。
本步骤具体在根据S202及S204的判定,确定教学板书图像中不存在障碍遮挡时,直接确定教学板书图像与上一次所保存历史教学板书图像的第二特征相似度。
S212、如果第二特征相似度小于第二设定相似值,则保存所述教学板书图像;否则,删除所述教学板书图像。
本步骤可以在第二特征相似度小于第二设定相似值时,相当于当前捕获的教学板书图像与上一次保存的历史教学板书图像存在较大差异,因此可直接保存。同样,本步骤可以在当前捕获的教学板书图像与上一次保存的历史教学板书图像的相似度较高时,删除该教学板书图像。
需要说明的是,本实施例也可以删除当前的教学板书图像后在智能教学设备的显示终端上显示上一次保存的历史教学板书图像。此外,本实施例也可以在二者的第二特征相似度等于或大于第二设定值时,首先比较教学板书图像与历史板书图像的清晰度,由此选择清晰度高的进行保存,同时删除另一张。
本发明实施例三提供的一种教学板书图像处理方法,具体优化了障碍遮挡的判定过程,并具体化了存在障碍遮挡时对教学板书图像的处理操作,以及优化增加了不存在障碍遮挡时对教学板书图像的处理操作。利用该方法,能够实时对所捕获的教学板书图像进行优化筛选,以保证所保存教学板书图像的简洁性和有效性,从而达到优化保存教学板书图像信息的目的,进而保证学习者能够从教学信息中快速筛选到对自己有用的信息。
实施例三
图3为本发明实施例三提供的一种教学板书图像处理装置的结构框图。该装置适用于对教学过程中捕获的教学板书图像进行筛选优化的情况,该装置可由软件和/或硬件实现,并一般集成在智能教学设备上。如图3所示,该装置包括:遮挡判定模块31、关系确定模块32以及第一处理模块33。
其中,遮挡判定模块31,用于根据当前所捕获教学板书图像的色彩特征值,确定所述教学板书图像中是否存在障碍遮挡;
关系确定模块32,用于当存在所述障碍遮挡时,则确定所述障碍遮挡与板书笔迹之间的遮挡关系;
第一处理模块33,用于根据所述遮挡关系,确定所述教学板书图像对应的处理操作,所述处理操作包括删除操作和保存操作。
在本实施例中,该装置首先通过遮挡判定模块31根据当前所捕获教学板书图像的色彩特征值,确定所述教学板书图像中是否存在障碍遮挡;然后通过关系确定模块32当存在所述障碍遮挡时,则确定所述障碍遮挡与板书笔迹之间的遮挡关系;最终通过第一处理模块33根据所述遮挡关系,确定所述教学板书图像对应的处理操作,所述处理操作包括删除操作和保存操作。
进一步地,遮挡判定模块31,具体用于:
确定当前所捕获教学板书图像的色彩特征值,并获取预先存储的板书笔迹的笔迹色彩特征值以及书写板自身的底板色彩特征值;如果所述教学板书图像的色彩特征值中包括除所述笔迹色彩特征值及底板色彩特征值之外的其他色彩特征值,则确定所述其他色彩特征值所形成图像区域的区域大小;如果所述区域大小属于设定的覆盖面积范围,则确定所述教学板书图像中存在障碍遮挡。
进一步地,关系确定模块32,具体用于:
当存在所述障碍遮挡时,确定所述障碍遮挡所形成图像区域在所述教学板书图像中的遮挡坐标位置范围;确定所述教学板书图像中板书笔迹所形成的至少一个笔迹坐标位置范围;如果存在包含所述遮挡坐标位置范围或与所述遮挡坐标位置范围相交的笔迹坐标位置范围,则确定所述障碍遮挡对所述教学板书图像中的板书笔迹有遮挡。
同时,本实施例设置所述障碍遮挡与板书笔迹之间的遮挡关系优化包括:有遮挡和无遮挡;相应的,第一处理模块33,具体用于:如果所述遮挡关系为有遮挡,则删除所述教学板书图像;如果所述遮挡关系为无遮挡,则确定所述教学板书图像与上一次保存的历史教学板书图像的第一特征相似度,并在所述第一特征相似度小于第一设定相似值时,保存所述教学板书图像。
在上述优化的基础上,该装置还优化包括了:
相似确定模块34,用于当不存在所述障碍遮挡时,确定所述教学板书图像与上一次保存的历史教学板书图像的第二特征相似度;
第二处理模块35,用于当所述第二特征相似度小于第二设定相似值时,保存所述教学板书图像;否则,删除所述教学板书图像。
实施例四
此外,本发明实施例四还提供了一种智能教学设备,图4为本发明实施例四提供的一种智能教学设备的硬件结构示意图,如图4所示,本发明实施例四提供的智能教学设备,包括:显示终端401,书写板402和摄像头403,还包括:处理器404和存储装置405、该该智能教学设备中的处理器可以是一个或多个,图4中以一个处理器404为例,所述智能教学设备中的显示终端、书写板以及摄像头可以通过总线或其他方式分别与处理器和存储装置连接,且处理器和存储装置也通过总线或其他方式连接,图4中以通过总线连接为例。
可以理解的是,显示终端401和书写板402可以是独立整体上的两个部分,也可以是两个独立结构基于拼接,本实施例中显示终端401与书写板402可以是上下分割或上下拼接,也可以是左右平行分割或平行拼接。此外,本实施例中摄像头403为设置于书写板上边缘,其摄像头朝向主要主要对焦于书写板402表面,用于对书写板上板书内容的捕获。
需要说明的是,基于摄像头403捕获的教学内容图像可以通过处理器404的控制实时显示在显示终端401上。
该智能教学设备中的存储装置405作为一种计算机可读存储介质,可用于存储一个或多个程序,所述程序可以是软件程序、计算机可执行程序以及模块,如本发明实施例提供的教学板书图像处理装置中对应的程序指令/模块(例如,附图3所示的模块,包括:遮挡判定模块31、关系确定模块32以及第一处理模块33,还包括了相似确定模块34和第二处理模块35)。处理器404通过运行存储在存储装置405中的软件程序、指令以及模块,从而执行智能教学设备的各种功能应用以及数据处理,即实现上述方法实施例中教学板书图像处理方法。
存储装置405可包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据设备的使用所创建的数据等。此外,存储装置405可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储装置405可进一步包括相对于处理器404远程设置的存储器,这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
并且,当上述智能教学设备所包括一个或者多个程序被所述一个或者多个处理器404执行时,其中一个程序可以进行如下操作:
根据当前所捕获教学板书图像的色彩特征值,确定所述教学板书图像中是否存在障碍遮挡;如果存在所述障碍遮挡,则确定所述障碍遮挡与板书笔迹之间的遮挡关系;根据所述遮挡关系,确定所述教学板书图像对应的处理操作,所述处理操作包括删除操作和保存操作。
此外,本发明实施例还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现本发明实施例一提供的智能教学设备的加钞方法,其中,上述实施例一和实施例二提供的方法包括:根据当前所捕获教学板书图像的色彩特征值,确定所述教学板书图像中是否存在障碍遮挡;如果存在所述障碍遮挡,则确定所述障碍遮挡与板书笔迹之间的遮挡关系;根据所述遮挡关系,确定所述教学板书图像对应的处理操作,所述处理操作包括删除操作和保存操作。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是,上述教学板书图像处理装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
需要说明的是,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种教学板书图像处理方法,其特征在于,包括:
根据当前所捕获教学板书图像的色彩特征值,确定所述教学板书图像中是否存在障碍遮挡;
如果存在所述障碍遮挡,则确定所述障碍遮挡与板书笔迹之间的遮挡关系;
根据所述遮挡关系,确定所述教学板书图像对应的处理操作,所述处理操作包括删除操作和保存操作。
2.根据权利要求1所述的方法,其特征在于,所述根据当前所捕获教学板书图像的图像色彩特征值,确定所述教学板书图像中是否存在障碍遮挡,包括:
确定当前所捕获教学板书图像的色彩特征值,并获取预先存储的板书笔迹的笔迹色彩特征值以及书写板自身的底板色彩特征值;
如果所述教学板书图像的色彩特征值中包括除所述笔迹色彩特征值及底板色彩特征值之外的其他色彩特征值,则确定所述其他色彩特征值所形成图像区域的区域大小;
如果所述区域大小属于设定的覆盖面积范围,则确定所述教学板书图像中存在障碍遮挡。
3.根据权利要求1所述的方法,其特征在于,所述确定所述障碍遮挡与板书笔迹之间的遮挡关系,包括:
确定所述障碍遮挡所形成图像区域在所述教学板书图像中的遮挡坐标位置范围;
确定所述教学板书图像中板书笔迹所形成的至少一个笔迹坐标位置范围;
如果存在包含所述遮挡坐标位置范围或与所述遮挡坐标位置范围相交的笔迹坐标位置范围,则确定所述障碍遮挡对所述教学板书图像中的板书笔迹有遮挡。
4.根据权利要求1所述的方法,其特征在于,所述障碍遮挡与板书笔迹之间的遮挡关系包括:有遮挡和无遮挡;
相应的,所述根据所述遮挡关系,确定所述教学板书图像对应的处理操作,包括:
如果所述遮挡关系为有遮挡,则删除所述教学板书图像;
如果所述遮挡关系为无遮挡,则确定所述教学板书图像与上一次保存的历史教学板书图像的第一特征相似度,并在所述第一特征相似度小于第一设定相似值时,保存所述教学板书图像。
5.根据权利要求1-4任一所述的方法,其特征在于,还包括:
如果不存在所述障碍遮挡,则确定所述教学板书图像与上一次保存的历史教学板书图像的第二特征相似度;
如果所述第二特征相似度小于第二设定相似值,则保存所述教学板书图像;否则,删除所述教学板书图像。
6.一种教学板书图像处理装置,其特征在于,包括:
遮挡判定模块,用于根据当前所捕获教学板书图像的色彩特征值,确定所述教学板书图像中是否存在障碍遮挡;
关系确定模块,用于当存在所述障碍遮挡时,则确定所述障碍遮挡与板书笔迹之间的遮挡关系;
第一处理模块,用于根据所述遮挡关系,确定所述教学板书图像对应的处理操作,所述处理操作包括删除操作和保存操作。
7.根据权利要求6所述的装置,其特征在于,所述遮挡判定模块,具体用于:
确定当前所捕获教学板书图像的色彩特征值,并获取预先存储的板书笔迹的笔迹色彩特征值以及书写板自身的底板色彩特征值;
如果所述教学板书图像的色彩特征值中包括除所述笔迹色彩特征值及底板色彩特征值之外的其他色彩特征值,则确定所述其他色彩特征值所形成图像区域的区域大小;
如果所述区域大小属于设定的覆盖面积范围,则确定所述教学板书图像中存在障碍遮挡。
8.根据权利要求6或7所述的装置,其特征在于,还包括:
相似确定模块,用于当不存在所述障碍遮挡时,确定所述教学板书图像与上一次保存的历史教学板书图像的第二特征相似度;
第二处理模块,用于当所述第二特征相似度小于第二设定相似值时,保存所述教学板书图像;否则,删除所述教学板书图像。
9.一种智能教学设备,包括:显示终端、书写板和摄像头,其特征在于,还包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-5中任一项所述的教学板书图像处理方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-5中任一项所述的教学板书图像处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710626077.3A CN107481227B (zh) | 2017-07-27 | 2017-07-27 | 教学板书图像处理方法、装置、智能教学设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710626077.3A CN107481227B (zh) | 2017-07-27 | 2017-07-27 | 教学板书图像处理方法、装置、智能教学设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107481227A true CN107481227A (zh) | 2017-12-15 |
CN107481227B CN107481227B (zh) | 2020-07-10 |
Family
ID=60597253
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710626077.3A Active CN107481227B (zh) | 2017-07-27 | 2017-07-27 | 教学板书图像处理方法、装置、智能教学设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107481227B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108492634A (zh) * | 2018-04-02 | 2018-09-04 | 广州视源电子科技股份有限公司 | 一种基于智慧课堂的教学系统及其工作方法 |
CN109636862A (zh) * | 2018-11-16 | 2019-04-16 | 广州视源电子科技股份有限公司 | 图像处理方法、系统、终端、存储介质及书写板装置 |
CN113657509A (zh) * | 2021-08-19 | 2021-11-16 | 重庆晋才富熙科技有限公司 | 教学训练提升方法、装置、终端和存储介质 |
CN114898409A (zh) * | 2022-07-14 | 2022-08-12 | 深圳市海清视讯科技有限公司 | 数据处理方法和设备 |
CN116798047A (zh) * | 2023-05-08 | 2023-09-22 | 华南师范大学 | 一种基于图像识别的教学板书分析方法及系统 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0991425A (ja) * | 1995-09-20 | 1997-04-04 | Mitsubishi Electric Corp | 画像処理装置 |
US20030131056A1 (en) * | 2001-08-14 | 2003-07-10 | Noriyuki Suzuki | Method and system of distributing teaching data for image processing apparatus |
CN1477590A (zh) * | 2002-06-19 | 2004-02-25 | 微软公司 | 用于白色书写板和音频捕获的一个系统和方法 |
CN101271357A (zh) * | 2008-05-12 | 2008-09-24 | 北京中星微电子有限公司 | 写字板上内容记录方法及装置 |
CN101464893A (zh) * | 2008-12-31 | 2009-06-24 | 清华大学 | 一种提取视频摘要的方法及装置 |
CN102349294A (zh) * | 2009-03-13 | 2012-02-08 | 株式会社理光 | 视频编辑设备和视频编辑系统 |
CN103177032A (zh) * | 2011-12-23 | 2013-06-26 | 李云峰 | 一种将现有多媒体教程转成电纸书多媒体文件的方法 |
JP5452392B2 (ja) * | 2009-12-16 | 2014-03-26 | 株式会社日立ハイテクノロジーズ | 欠陥観察方法及び欠陥観察装置 |
CN103677268A (zh) * | 2013-12-12 | 2014-03-26 | 无锡格林波特科技有限公司 | 可手书式多媒体演示系统 |
-
2017
- 2017-07-27 CN CN201710626077.3A patent/CN107481227B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0991425A (ja) * | 1995-09-20 | 1997-04-04 | Mitsubishi Electric Corp | 画像処理装置 |
US20030131056A1 (en) * | 2001-08-14 | 2003-07-10 | Noriyuki Suzuki | Method and system of distributing teaching data for image processing apparatus |
CN1477590A (zh) * | 2002-06-19 | 2004-02-25 | 微软公司 | 用于白色书写板和音频捕获的一个系统和方法 |
CN101271357A (zh) * | 2008-05-12 | 2008-09-24 | 北京中星微电子有限公司 | 写字板上内容记录方法及装置 |
CN101464893A (zh) * | 2008-12-31 | 2009-06-24 | 清华大学 | 一种提取视频摘要的方法及装置 |
CN102349294A (zh) * | 2009-03-13 | 2012-02-08 | 株式会社理光 | 视频编辑设备和视频编辑系统 |
JP5452392B2 (ja) * | 2009-12-16 | 2014-03-26 | 株式会社日立ハイテクノロジーズ | 欠陥観察方法及び欠陥観察装置 |
CN103177032A (zh) * | 2011-12-23 | 2013-06-26 | 李云峰 | 一种将现有多媒体教程转成电纸书多媒体文件的方法 |
CN103677268A (zh) * | 2013-12-12 | 2014-03-26 | 无锡格林波特科技有限公司 | 可手书式多媒体演示系统 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108492634A (zh) * | 2018-04-02 | 2018-09-04 | 广州视源电子科技股份有限公司 | 一种基于智慧课堂的教学系统及其工作方法 |
CN109636862A (zh) * | 2018-11-16 | 2019-04-16 | 广州视源电子科技股份有限公司 | 图像处理方法、系统、终端、存储介质及书写板装置 |
CN109636862B (zh) * | 2018-11-16 | 2021-06-25 | 广州视源电子科技股份有限公司 | 图像处理方法、系统、终端、存储介质及书写板装置 |
CN113657509A (zh) * | 2021-08-19 | 2021-11-16 | 重庆晋才富熙科技有限公司 | 教学训练提升方法、装置、终端和存储介质 |
CN113657509B (zh) * | 2021-08-19 | 2024-04-30 | 重庆晋才富熙科技有限公司 | 教学训练提升方法、装置、终端和存储介质 |
CN114898409A (zh) * | 2022-07-14 | 2022-08-12 | 深圳市海清视讯科技有限公司 | 数据处理方法和设备 |
CN114898409B (zh) * | 2022-07-14 | 2022-09-30 | 深圳市海清视讯科技有限公司 | 数据处理方法和设备 |
CN116798047A (zh) * | 2023-05-08 | 2023-09-22 | 华南师范大学 | 一种基于图像识别的教学板书分析方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN107481227B (zh) | 2020-07-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107481227A (zh) | 教学板书图像处理方法、装置、智能教学设备及存储介质 | |
US11934485B2 (en) | Method and apparatus for generating training sample of semantic segmentation model, storage medium, and electronic device | |
US8132096B1 (en) | Image composition evaluation | |
US20230023386A1 (en) | Systems and methods for recognizability of objects in a multi-layer display | |
CN107506720A (zh) | 板书处理方法、装置、设备和计算机可读存储介质 | |
US10984671B2 (en) | Information display apparatus, information display method, and computer-readable recording medium | |
US20140080104A1 (en) | Kanji stroke order learning device, kanji stroke order learning support method, kanji stroke order learning system and recording medium in which kanji stroke order learning program is recorded | |
CN107479791A (zh) | 关联注释信息确定方法、装置、智能教学设备及存储介质 | |
JP5099595B2 (ja) | 電子ペン・システム及びそのプログラム | |
CN106775241B (zh) | 信息呈现方法、设备和计算机可读存储介质 | |
CN113950822A (zh) | 实体活动表面的虚拟化 | |
CN111580903B (zh) | 实时投票方法、装置、终端设备和存储介质 | |
KR20170064026A (ko) | 가상현실, 증강현실 기반의 3차원 실감형 천체교육용 스마트 교육서비스 제공방법 | |
CN107423407B (zh) | 教学信息记录方法、装置、终端和计算机可读存储介质 | |
CN110347993A (zh) | 一种板书管理方法及装置 | |
CN114419632A (zh) | 一种ocr训练样本生成方法、装置及系统 | |
CN107358228A (zh) | 一种图像处理的方法、装置、设备及存储介质 | |
CN107506033A (zh) | 信息显示的控制方法、装置、智能教学设备及存储介质 | |
KR102405324B1 (ko) | 단말기에서 그림을 학습하는 방법 | |
US11455179B1 (en) | Processing system and processing method for performing emphasis process on button object of user interface | |
KR20200069114A (ko) | 작가체학습단말기 및 시스템 | |
CN113625985A (zh) | 智能黑板的显示方法、装置以及智能黑板 | |
CN107679219A (zh) | 匹配方法及装置、交互智能平板及存储介质 | |
JP5141997B2 (ja) | コンピュータ、それを用いた表示システム、およびそのプログラム | |
JP5288340B2 (ja) | 表示システムおよびそのプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |