CN113168675A

CN113168675A - 图像处理装置、图像处理方法和图像处理程序

Info

Publication number: CN113168675A
Application number: CN201980081715.5A
Authority: CN
Inventors: 高梨省吾
Original assignee: Sony Group Corp
Current assignee: Sony Group Corp
Priority date: 2018-12-17
Filing date: 2019-10-17
Publication date: 2021-07-23
Anticipated expiration: 2039-10-17
Also published as: US20220050583A1; CN113168675B; WO2020129383A1; JP2020098420A

Abstract

可以增强在书写表面上书写的书写内容的书写内容图像的可见性。提供一种包括处理电路的图像处理装置。处理电路被配置成修改书写在书写表面上的书写内容的书写内容图像的一个或多个特性。对所述书写内容图像的一个或多个特性的修改基于与所述书写表面相关的信息。

Description

图像处理装置、图像处理方法和图像处理程序

相关申请的交叉引用

本申请要求2018年12月17日提交的日本优先权专利申请JP 2018-235747的权益，其全部内容通过引用并入本文。

技术领域

本公开涉及图像处理装置、图像处理方法和程序。

背景技术

近年来，已经开发了用于在黑板、白板等上提取书写(writing即，笔迹)并输出指示提取的书写的信息的技术。例如，PTL 1公开了一种用于拍摄黑板、白板等的图像，从拍摄图像中提取与书写相对应的图像，并输出所提取的图像的技术。

引文列表

专利文献

PTL 1：JP 2016-30369A

发明内容

技术问题

然而，根据PTL 1中描述的技术，提取的图像被输出为单色图像数据，因此认为图像的可见性差。此外，即使在提取的图像作为彩色图像输出的情况下，在物理空间中直接观看书写的情况和在显示器上观看书写的情况之间看起来也可能不同，因此认为图像的可见性差。

此外，通常使书写适应于待书写对象。因此，在提取书写图像并且将其与不同于要书写的对象的背景的图像组合以作为输出图像输出的情况下，认为输出图像中的书写图像的可见性差。

针对问题的技术方案

根据本公开，提供了一种包括处理电路的图像处理装置。处理电路被配置成修改在书写表面上书写的书写内容的书写内容图像的一个或多个特性。书写内容图像的一个或多个特性的修改基于与书写表面相关的信息。

此外，根据本公开，提供了一种图像处理方法。该图像处理方法包括通过图像处理装置的处理电路，修改在书写表面上书写的书写内容的书写内容图像的一个或多个特性。书写内容图像的一个或多个特性的修改基于与书写表面相关的信息。

此外，根据本公开，提供了一种存储指令的非暂时性计算机可读存储介质，所述指令在由计算机执行时使计算机执行一种方法。该方法包括修改在书写表面上书写的书写内容的书写内容图像的一个或多个特性。书写内容图像的一个或多个特性的修改基于与书写表面相关的信息。

附图说明

图1是用于说明根据本公开的实施例的图像处理装置100和输入装置200的概要的图。

图2是用于说明根据本实施例的系统1的示例性功能配置的图。

图3是用于说明由根据本实施例的获取单元11获取的示例性图像的图。

图4是用于说明由根据本实施例的提取单元14进行的示例性提取处理的图。

图5是用于说明由根据本实施例的提取单元14进行的示例性待书写对象区域提取处理的图。

图6是用于说明由根据本实施例的提取单元14进行的待书写对象区域提取处理的示例性结果的图。

图7是用于说明根据本实施例的校正单元15的示例性校正方法的图。

图8是用于说明根据本实施例的校正单元15的示例性校正方法的图。

图9是用于说明根据本实施例的校正单元15的示例性校正方法的图。

图10是用于说明根据本实施例的校正单元15以50度到70度的色调角按色调中的二次曲线的示例性校正的图。

图11是用于说明由根据本实施例的校正单元15使用过滤器执行校正处理的具体示例的图。

图12是用于说明由根据本实施例的校正单元15校正书写内容图像22的轮廓的示例性处理的图。

图13是用于说明根据本实施例的输出装置300的示例性输出的图。

图14是用于说明根据本实施例的系统1的示例性操作流程的图。

图15A是用于说明根据本实施例的由校正单元15进行的基于行为检测信息的示例性校正处理的图，该行为检测信息指示书写者是否正在待书写对象2上书写。

图15B是用于说明根据本实施例的由校正单元15进行的基于行为检测信息的示例性校正处理的图，该行为检测信息指示书写者是否正在待书写对象2上书写。

图16是用于说明根据本实施例的由校正单元15进行的基于书写者3和待书写对象2之间的位置关系的书写内容图像校正处理的图。

图17是示出包括根据本公开的实施例的系统1的信息处理装置的示例性硬件配置的框图。

具体实施方式

下面将参考附图详细描述本公开的实施例。另外，在本说明书和附图中，用相同的附图标记表示具有基本相同功能配置的组件，并且将省略对其的重复描述。

此外，将按以下顺序进行描述。

1.实施例

1-1.背景

1-2.示例性整体配置

1-3.示例性功能配置

2.示例性操作

3.应用

3-1.应用1

3-2.应用2

4.示例性硬件配置

5.结论

<1.实施例>

<<1-1.背景>>

将首先描述本公开的实施例的背景。

近年来，已经开发了一种技术，用于从黑板、白板等(以下表示为待书写对象2或书写表面)的图像拍摄提取待书写对象2上的书写(以下表示为书写内容4)，并将提取的书写内容4输出为图像。例如，在讲座、会议等场景中的显示器等上输出书写内容4的图像(在下面表示为书写内容图像22)，以便远程参与者可以容易地确认书写内容。

顺便提一下，在拍摄书写内容4被输出为书写内容图像22的情况下，认为书写内容图像22的可见性差。这可能是因为，例如，在物理空间中直接观看书写内容的情况下、在显示器上观看书写内容图像22的情况下等之间，书写内容看起来可能不同。

此外，对于每种待书写对象2，用于书写的常用颜色通常可能不同。因此，取决于用于书写的颜色和输出图像的背景颜色的组合，认为包括在输出图像中的书写内容图像22的可见性差。

根据上述要点，设想了根据本公开的实施例的技术精神，其使得能够校正书写内容图像的形式，以获得书写内容图像的更好的可见性。下面将顺序地详细描述根据本公开的实施例的示例性配置和示例性操作。

<<1-2.示例性整体配置>>

随后将参考图1描述根据本公开的实施例的图像处理装置100和输入装置200的概要。

图1是用于说明根据本公开的实施例的图像处理装置100和输入装置200的概要的图。图1示出了图像处理装置100和连接到图像处理装置100的输入装置200。

待书写对象2是在其上书写诸如点、线、字符、句子、数学表达式、符号、图片、图形或图像之类的视觉信息(书写内容4)的对象。待书写对象2(或书写表面)是黑板、白板、电子纸、触摸面板等。

书写者3操作待书写对象2。例如，书写者3在待书写对象2上书写书写内容4。

书写内容4是书写在待书写对象2上的视觉信息。如上所述，使用粉笔、马克笔(marker)、触笔(stylus pen)、手指等在待书写对象2上书写所述书写内容4。此外，书写内容4可以是各种颜色的。例如，在待书写对象2是黑板的情况下，书写内容4是白色、红色、黄色等的。

输入装置200是用于输入关于安装输入装置200的物理空间的信息的装置。输入装置200包括例如拍摄装置和语音输入装置。拍摄装置包括由拍摄透镜、光圈、变焦透镜、聚焦透镜等构成的透镜系统，用于使透镜系统执行聚焦操作或变焦操作的驱动系统，用于光电转换由透镜系统获得的拍摄光从而产生拍摄信号的固态成像器件阵列等。语音输入装置包括诸如用于收集周围声音的麦克风、用于放大由麦克风获得的语音信号的麦克风放大器电路、A/D转换器以及噪声消除器之类的信号处理电路。输入装置200输出拍摄期间的语音数据以及作为数字信号的图像数据。

输入装置200可以拍摄在物理空间中的作为待拍摄对象的对象的图像。此外，输入装置200可以拍摄书写内容4在物理空间中被书写在其上的待书写对象2的图像，并且可以将拍摄时间与拍摄图像(以下表示为拍摄图像20)相关联，并将它们输出到图像处理装置100。拍摄图像20可包括除待书写对象2和书写内容4以外的区域。在这种情况下，输入装置200将其中拍摄除待书写对象2和书写内容4以外的拍摄图像输出到图像处理装置100。

此外，待书写对象2可以具有输入装置200的功能。例如，输入装置200和待书写对象2被实现为电子黑板。作为电子黑板的输入装置200可以通过扫描待书写对象2的状态来获取与拍摄图像20相对应的图像。在这种情况下，输入装置200获取要在其上书写书写内容4的待书写对象2的图像，并将其提供给图像处理装置100。在提供给图像处理装置100后，该图像可以类似于拍摄图像20地被处理。此外，通过被实现为电子黑板的输入装置200和待书写对象2获取的图像可以仅包括待书写对象2和书写内容4。

图像处理装置100是用于从由输入装置200输入的拍摄图像20提取书写内容图像22以及校正(或修改)提取的书写内容图像22的形式(或特性)的装置。图像处理装置100将包括校正的书写内容图像22的图像(以下表示为输出图像25)输出到下面描述的输出装置300(图1中未示出)。

这里，例如，书写内容图像22的形式(或特性)是指书写内容图像22的颜色、宽度、轮廓等。下面将描述由图像处理装置100对书写内容图像22的颜色、宽度和轮廓的详细校正。此外，图像处理装置100可以以有线或无线方式连接到输入装置200。

<<1-3.示例性功能配置>>

下面将描述根据本实施例的系统1的示例性功能配置。图2是用于说明根据本实施例的系统1的示例性功能配置的图。如图2所示，系统1包括图像处理装置100、输入装置200和输出装置300。

〔1-3-1.输入装置200〕

输入装置200具有拍摄图像20输入，并且将拍摄图像20输出到图像处理装置100。

〔1-3-2.图像处理装置100〕

图像处理装置100是用于控制系统1的全部操作的装置。图像处理装置100由诸如个人计算机(PC)、智能电话或平板终端之类的任何装置来实现。

图像处理装置100从由输入装置200输入的拍摄图像提取书写内容图像22，并且图像处理装置100校正提取的书写内容图像22的形式，并且生成包括校正的书写内容图像22并且具有预定颜色的背景的输出图像25。

如图2所示，图像处理装置100包括例如可以通过处理电路实现的获取单元11、检测单元12、设定单元13、提取单元14、校正单元15、存储单元16和输出单元17。

(1-3-2-1.获取单元11)

获取单元11具有从输入装置200获取拍摄图像20的功能。拍摄图像20可以包括除在其上书写书写内容4的待书写对象2以外的区域。

这里将参考图3以示例的方式描述由根据本实施例的获取单元11获取的拍摄图像20。图3是用于以示例的方式说明由根据本实施例的获取单元11获取的拍摄图像20的图。图3示出了拍摄图像20a。拍摄图像20a包括待书写对象图像21a、书写内容图像22a和书写者图像23a。

在图3的示例中，拍摄图像20a除了待书写对象图像21a和书写内容图像22a之外，还包括书写者图像23a和其他区域。

这里，如上所述，待书写对象图像21是在拍摄图像20中拍摄待书写对象2的区域(图像)。此外，书写内容图像22是在拍摄图像20中拍摄书写内容4的区域(图像)。

另外，拍摄图像20可以具有预定比率或更高比率的书写内容图像22。拍摄图像20可以使用经过白平衡校正的图像。在输入装置200是电子黑板的情况下，通过获取单元11可以容易地获取仅包括待书写对象图像21和书写内容图像22的图像。另一方面，即使在输入装置200是电子黑板的情况下，获取单元11也可以从输入装置200获取其中由拍摄装置拍摄电子黑板的图像的拍摄图像20。

(1-3-2-2.检测单元12)

检测单元12例如基于包括在拍摄图像20中的待书写对象图像21来检测与待书写对象2相关的信息。与待书写对象2相关的信息可以与光反射的影响和/或表面残留物/污垢(例如，粉笔或墨水残留物)的影响相关。与待书写对象相关的信息可以包括基于包括在拍摄图像20中的待书写对象图像21指示待书写对象2的信息。此外，例如，指示待书写对象2的信息可以是待书写对象2的种类。具体地，例如，检测单元12可以基于拍摄图像20和标记数据执行图像识别处理，从而检测待书写对象2的种类。这里，待书写对象2的种类例如是黑板、白板、电子黑板等。标记数据是其中例如标记了拍摄其中的黑板、白板、电子黑板等的图像的数据。

另外，检测单元12可以参考下面描述的存储单元16检测指示待书写对象2的信息。

此外，检测单元12可以检测书写者3的状态。例如，书写者3的状态可以是书写者3的运动状态。书写者3的状态用于下面描述的校正单元15的校正处理。

(1-3-2-3.设定单元13)

设定单元13设定输出图像25的背景的颜色。这里，输出图像25的背景是由输出装置300输出的图像的背景。例如，背景的颜色可以是白色、黑色等。背景的颜色可以按输出图像25被设定为不同颜色，或者可以被设定为固定颜色。由设定单元13设定的背景颜色用于由下面描述的校正单元15进行的校正处理。

(1-3-2-4.提取单元14)

提取单元14从拍摄图像20提取书写内容图像22。具体地，提取单元14独立于待书写对象图像21等提取书写内容图像22。也就是说，提取单元14生成仅包括书写内容图像22的图像数据。例如，用于提取书写内容图像22的方法可以是二值化处理等。

图4是用于说明根据本实施例的提取单元14的示例性提取处理的图。图4示出了经过提取处理的拍摄图像20b。经过提取处理的拍摄图像20b包括书写内容图像22b。待书写对象图像21被移除为空白空间21b。如图4所示，可以提取书写内容图像22b。这里，在图4的示例中，书写内容图像22b是白色的。

然而，在由提取单元14进行的二值化处理等中，仅提取书写内容图像22可能是困难的。例如，如图3所示，除了待书写对象图像21和书写内容图像22之外，拍摄图像20还可能包括书写者图像23或其他区域，例如，当执行二值化处理时，可能提取除书写内容图像22之外的另一区域。为了仅提取书写内容图像22，需要从拍摄图像20移除书写者图像23或其他区域。

提取单元14执行提取待书写对象区域的处理，以便移除其他区域。此外，提取单元14执行分离书写者图像23的处理，以移除书写者图像23。下面将详细描述提取待书写对象区域的处理和分离书写者图像23的处理。

(1-3-2-4-1.提取待书写对象区域的处理)

首先描述提取待书写对象区域的处理。具体地，提取待书写对象区域的处理是提取例如通过指定拍摄图像20中的多个点或四个点而规定的区域作为待书写对象区域的处理。这里待书写对象区域是从拍摄图像20中移除了其他区域的图像。

下面将参照图5进行描述。图5是用于举例说明根据本实施例的提取单元14提取待书写对象区域的处理的图。图5示出了拍摄图像20c和提取了待书写对象区域的拍摄图像20d。

这里的拍摄图像20c除了待书写对象图像21c和书写内容图像22c之外，还包括书写者图像23c或其他区域。提取单元14基于待书写对象图像21c，根据指定为包围待书写对象2的区域的多个点，生成提取了待书写对象区域的拍摄图像20d。提取了待书写对象区域的拍摄图像20d包括待书写对象图像21c、书写内容图像22c和书写者图像23d的部分。

(1-3-2-4-2.分离书写者图像23和书写内容图像22的处理)

随后将描述分离书写者图像23和书写内容图像22的处理。

在提取提取了待书写对象区域的拍摄图像20d的处理中提取的提取了待书写对象区域的拍摄图像20d包括书写者图像23d的部分。提取单元14需要从提取了待书写对象区域的拍摄图像20d移除书写者图像23d的部分，以便从提取了待书写对象区域的拍摄图像20d提取书写内容图像22。

具体地，分离书写者图像23和书写内容图像22的处理是例如从提取了待书写对象区域的拍摄图像20识别书写者图像23的部分的形状或图案，并排除识别出的书写者图像23。

提取单元14执行分离书写者图像23和书写内容图像22的处理，并对分离的图像执行二值化处理，使得如图6所示生成经过了提取处理的拍摄图像20e，其包括待书写对象图像21e和书写内容图像22c。

以这种方式执行提取待书写对象区域的处理和分离书写者图像23的处理，从而可以正确地执行提取书写内容图像22的处理。另外，上面已经描述了较早执行提取待书写对象区域的处理的示例，但是可以较早执行分离书写者图像23的处理。

(1-3-2-5.校正单元15)

校正单元15校正由提取单元14提取的书写内容图像22的形式。具体地，校正单元15校正由提取单元14提取的书写内容图像22的形式，使得输出图像25中的书写内容图像22的可见性增强。

另外，通过校正单元15校正书写内容图像22的颜色意味着校正书写内容图像22的颜色的三个属性。颜色的三个属性是色调、饱和度和亮度。校正单元15校正书写内容图像22的颜色的色调、饱和度和亮度中的至少一个。另外，校正单元15可以校正饱和度和亮度中的一个或两者以增强可见性。

当然，在使用不同于颜色的所述三个属性的标度的情况下，校正单元15也可以执行颜色校正处理。例如，在校正单元15校正YUV数据的颜色的情况下，它可以将YUV数据转换为HSV数据，并且可以校正饱和度和亮度中的一个或两者。

假设校正单元15校正饱和度和亮度中的一个或两个，在本说明书中将在下面进行描述。

校正单元15基于待书写对象图像21的种类和输出图像25的背景颜色的组合来确定颜色校正处理方法，并且以所确定的校正处理方法执行校正书写内容图像22的颜色的处理。另外，在输出图像25的背景颜色被假定为固定颜色的情况下，校正单元15可以仅基于待书写对象图像21的种类来确定颜色校正处理方法。

随后将描述如何确定颜色校正处理方法。确定本文中的颜色校正处理方法是确定例如用于校正书写内容图像22的饱和度或亮度的过滤器。这里的过滤器是指当输入饱和度或亮度时输出与输入的饱和度或亮度相对应的饱和度或亮度的关系。

另外，可以独立地确定用于校正饱和度的过滤器和用于校正亮度的过滤器。校正单元15使用过滤器校正与由提取单元14提取的书写内容图像22的每种颜色相对应的饱和度或亮度。

校正单元15可以针对饱和度和亮度分别确定与待书写对象图像21的种类和输出图像25的背景颜色的组合相对应的过滤器。具体地，校正单元15可以基于待书写对象2的颜色的亮度和由设定单元13设定的背景颜色的亮度之间的差来校正书写内容图像22的颜色的亮度。更具体地说，在待书写对象2的颜色的亮度和由设定单元13设定的背景颜色的亮度之间的差处于预定水平或更高的情况下，校正单元15可以校正书写内容图像22的颜色的亮度以被反转。即，校正单元15可以校正书写内容图像22的颜色的亮度，使得书写内容图像22的多个颜色中的亮度关系相对于多个未校正颜色中的亮度关系被反转。

例如，在待书写对象图像21是黑板并且输出图像25的背景颜色是白色的情况下，校正单元15可以确定用于将白色书写内容图像22校正为黑色的过滤器。这是因为在白色书写内容图像22与白色背景组合的情况下，书写内容图像22的可见性降低。此外，这是因为在书写内容图像22与白色背景组合的情况下，由于黑色书写内容图像22，可见性增大。

此外，在书写内容图像22具有多个颜色的情况下，校正单元15可以确定用于使书写内容图像22的多个颜色的饱和度或亮度的差高于未校正的书写内容图像22的多个颜色的亮度差的过滤器。具体来说，校正单元15可以确定过滤器，使得对于书写内容图像22的颜色的饱和度或亮度，使比其他颜色的饱和度或亮度高的饱和度或亮度更高，并且使比其他颜色的饱和度或亮度低的饱和度或亮度更低。

下面将参照图7到图9通过具体示例来描述上述过滤器。图7到图9是用于说明根据本实施例的校正单元15的示例性校正方法的图。下面描述的过滤器的具体示例可用于校正饱和度和亮度两者。

图7示出了表示输入和输出之间的关系的曲线图G1。这里表示的“输入”是指由提取单元14提取的书写内容图像22的每种颜色的饱和度或亮度。此外，这里表示的“输出”是指对应于每个“输入”的校正的饱和度或亮度。在图7所示的曲线图G1中，对于预定水平或更高的饱和度或亮度，“输出”的饱和度或亮度高于“输入”的饱和度或亮度。另外，另一方面，如图7所示，对于预定水平或更低的饱和度或亮度，“输出”的饱和度或亮度低于“输入”的饱和度或亮度。

此外，例如，曲线图G1中的曲线用等式(1)表示。

[数学式1]

在等式(1)中，s表示水平轴上的偏移量，γ表示系数，INPUT和OUTPUT分别表示输入和输出。

此外，图8示出了表示图7的输入和输出之间的不同关系的曲线图G2。曲线图G2与曲线图G1的不同之处在于，与“输入”相比，“输出”的较高饱和度或亮度具有较宽的范围。例如，在通过曲线图G2所示的过滤器校正饱和度的情况下，对于除消色差颜色或其接近颜色以外的颜色的饱和度，由提取单元14提取的书写内容图像22的饱和度较高。

此外，可以存在用于反转饱和度或亮度的过滤器。在本文中反转饱和度或亮度意味着对于各个颜色，校正比其他颜色更高的饱和度或亮度以使其更低，并且校正比其他颜色更低的饱和度或亮度以使其更高。

图9示出了表示输入和输出之间的关系的曲线图G3。曲线图G3表示相对于曲线图G1的相反输出结果。具体地说，对于预定水平或更高的饱和度或亮度，“输出”的饱和度或亮度低于“输入”的饱和度或亮度，对于预定水平或更低的饱和度或亮度，“输出”的饱和度或亮度高于“输入”的饱和度或亮度。

另外，曲线图G3的曲线例如用等式(2)表示。

[数学式2]

在等式(2)中，与等式(1)类似，s表示水平轴上的偏移量，γ表示系数，INPUT和OUTPUT分别表示输入和输出。

另外，等式(1)和等式(2)仅仅是示例性的，并且可以使用使用其他等式的过滤器。

在曲线图G3中表示的过滤器用于将书写内容图像22校正为例如写在黑板上的书写内容4的图像，并生成具有白色背景的输出图像25。在许多情况下，书写者3通常用白色粉笔在黑板上书写白色书写内容4。在从与白色书写内容4和白色背景对应的书写内容图像22生成输出图像25的情况下，书写内容图像22和白色背景可能难以区分。因此，例如，在待书写对象2的种类是黑板并且背景是白色的情况下，校正单元15可以通过使用曲线图G3中表示的过滤器来校正书写内容图像22的颜色，使得白色书写内容图像22的亮度被反转。

校正单元15可以通过使用上述图7至图9所示的过滤器来校正书写内容图像22的颜色的饱和度或亮度。

此外，校正单元15可以使用除图7到图9所示的用于增加饱和度差或亮度差的过滤器之外的过滤器。换句话说，校正单元15可以使用用于不增加饱和度差或亮度差的过滤器。例如，校正单元15可以使用用于输出输入饱和度或亮度而不改变它的过滤器、用于反转和输出输入饱和度或亮度的过滤器等。

这里，假设生成了带有作为黑板的待书写对象图像21、黄色书写内容图像22和白色背景的输出图像25。书写在黑板上的黄色书写内容图像22的亮度高于书写在黑板上的书写内容图像22的其他颜色的亮度，并且黄色书写内容图像22可以用于比其他颜色的书写内容图像22进一步被强调。然而，在生成带有作为黑板的待书写对象图像21和白色背景的输出图像25的情况下，使用用于反转亮度的过滤器，并且在校正后降低高亮度的黄色书写内容图像22的亮度。因此，可能难以区分校正的黄色书写内容图像22和校正的白色书写内容图像22。

在假设这种情形的情况下，例如，校正单元15可以在通过使用过滤器校正之后，进一步将黄色书写内容图像22的亮度校正为更高。

与上述情形类似的情形可以在具有除黄色的色调以外的色调的颜色的书写内容图像22中发生。因此，校正单元15可以根据待书写对象图像21的种类和背景信息的组合来校正具有预定色调的颜色。具体地说，校正单元15可以将具有与输出图像25的背景颜色的亮度差为预定值或更小的色调的颜色的亮度校正为高于书写内容图像22的颜色之中的其他色调的颜色的亮度。具体地说，在书写内容图像22的校正颜色的亮度和背景颜色的亮度之间的关系中导致与最低亮度和最高亮度之间的差的10％或更小相对应的亮度差的情况下，校正单元15可以校正书写内容图像22的亮度，使得亮度差为20％或更大。例如，在最低亮度为0且最高亮度为255的情况下，校正单元15可以校正书写内容图像22的亮度，使得在亮度差为25或更小的情况下，亮度差为51或更大。

在取决于亮度差的校正中，校正单元15可以使用取决于待书写对象图像21的种类和背景信息的组合的过滤器在校正期间改变与预定色调相对应的亮度的输出。下面将参照图10描述示例。图10是用于说明根据本实施例的校正单元15以50度到70度的色调角按色调中的二次曲线的示例性校正的图。图10示出了曲线图G4。在曲线图G4中表示了对应于各个色调的系数值。这里，系数是在式(1)和式(2)中的系数γ。在图10中说明了以50度到70度的色调角进行的色调的示例性校正，但是当然可以在其他色调范围中进行类似的校正。

另外，以上描述了取决于与输出图像25的背景颜色的亮度差的亮度校正，但是考虑到照明对书写内容4的影响，可以进行类似的亮度校正。例如，在由照明设备照亮书写内容4的情况下，由于照明的影响，与书写内容4相对应的书写内容图像22可以在具有预定色调的颜色中看起来与书写内容4的原始颜色不同。在校正单元15校正具有与原始颜色不同的颜色的书写内容图像22的颜色的情况下，可以不引起由于书写者3想要的颜色的差异而引起的区别。因此，例如，在预期会发生该情形的情况下，校正单元15可以校正具有预定色调的颜色的亮度，并强调具有校正色调的颜色的书写内容图像22和具有其他颜色的书写内容图像22之间的差异。

以这种方式，校正单元15可以根据待书写对象图像21的种类适当地输出书写内容图像22。该功能使得能够增强输出图像25中的书写内容图像22的可见性或者能够消除照明对待书写对象图像21的影响。

随后将参考图11描述校正单元15使用过滤器执行校正处理的具体示例。图11是用于说明校正单元15使用过滤器执行校正处理的具体示例的图。

在图11的上部示出了经过提取单元14的提取处理的拍摄图像20f。拍摄图像20f包括待书写对象图像21f和诸如白色字符22W、颜色R的线22R、颜色B的线22B以及颜色Y的线22Y之类的书写内容图像22f。这里，待书写对象图像21的种类是黑板。校正单元15校正拍摄图像20f并生成具有白色背景的输出图像25g。例如，颜色R是红色，颜色B是蓝色，颜色Y是黄色。

由校正单元15校正的输出图像25g示于图11的下部。输出图像25g包括白色背景图像24g、校正的黑色字符22Wg、颜色R的校正线22Rg、颜色B的校正线22Bg和颜色Y的校正线22Yg。这里，分别将颜色R的线22R、颜色B的线22B和颜色Y的线22Y在亮度上校正为颜色R的线22Rg、颜色B的线22Bg和颜色Y的线22Yg。

通过这种方式，可以根据输出图像25的背景颜色来校正书写内容图像22以增强可见性。

另外，要确定的过滤器和要校正的对象不限于上述示例。例如，在上面，基于待书写对象2的种类和输出图像25的背景颜色来确定用于转换书写内容图像22的颜色的过滤器，但是可以例如为拍摄图像20的每个部分确定过滤器。

此外，除书写内容图像22的颜色以外，校正单元15可以校正书写内容图像22的轮廓。校正书写内容图像22的轮廓意味着例如强调书写内容图像22的轮廓并擦除除书写内容图像22的轮廓以外的部分的处理。下面将参照图12描述由校正单元15校正书写内容图像22的轮廓的示例性处理。图12是用于说明根据本实施例的由校正单元15校正书写内容图像22的轮廓的示例性处理的图。

在图12的上部示出了经过提取单元14的提取处理的拍摄图像20h。拍摄图像20h包括待书写对象图像21h和书写内容图像22h。这里，校正单元15可以校正书写内容图像22h的轮廓。在图12的下部示出了包括由校正单元15校正的书写内容图像22i的输出图像25i。输出图像25i包括背景图像24i。在颜色和轮廓方面将书写内容图像22h校正为书写内容图像22i。

另外，校正单元15可以校正书写内容图像22的一部分的轮廓，并且可以不校正书写内容图像22的其他部分的轮廓。例如，校正单元15可以通过使用过滤器来执行校正饱和度或亮度的处理，然后，校正经过了该校正处理的书写内容图像22中的具有预定色调的颜色的书写内容图像22的轮廓，并且可以不校正除预定色调以外的颜色的书写内容图像22的轮廓。另外，校正单元15可以校正例如在书写内容图像22中由检测单元12检测为字符的书写内容图像22的轮廓。要由校正单元15校正其轮廓的对象不限于上述示例。

校正单元15可以这样校正和强调书写内容图像22的轮廓。利用该功能，例如，具有校正的轮廓的书写内容图像22可以表示为与其他书写内容图像22不同的含义。

(1-3-2-6.存储单元16)

存储单元16存储指示校正拍摄图像20的处理的各种信息项目。例如，存储单元16存储检测单元12使用的待书写对象2的种类的标记数据、提取单元14使用的书写者3的模式识别图像等。此外，存储单元16可以存储由校正单元15生成的输出图像25。

(1-3-2-7.输出单元17)

输出单元17控制输出包括由校正单元15校正的书写内容图像22的输出图像25。具体来说，输出单元17使下面描述的输出装置300输出由校正单元15生成的输出图像25。输出单元17可以使下面描述的输出装置300实时输出输出图像25。此外，输出单元17可以使输出装置300输出存储在存储单元16中的输出画面。

〔1-3-3.输出装置300〕

在图像处理装置100的控制下引导输出装置300来输出信息。输出装置300由诸如CRT显示装置、液晶显示装置、等离子显示装置、EL显示装置、激光投影仪、LED投影仪和灯之类的显示装置来实现。

输出装置300从输出单元17接收输出图像25，并输出输出图像25。输出装置300可以按流形式输出作为运动图片的输出图像25。换句话说，输出装置300可以实时输出输出图像25。

当从输出单元17接收到输出图像25时，输出装置300可以输出输出图像25。另一方面，输出装置300可以存储从输出单元17接收到的输出图像25，然后在稍后的定时输出它。另外，输出装置300可以接收存储在存储单元16中的输出图像25，并将输出图像25作为静止图像或运动图片输出。

如上所述，输出装置300由各种显示装置实现。输出装置300可以由多个显示装置构成。这里将参照图13描述输出装置300的具体示例。图13是用于说明根据本实施例的输出装置300的示例性输出的图。图13示出了输入装置200和输出装置300a、300b和300c。

如图13所示，输出装置300可以是诸如输出装置300a和300b之类的显示装置。输出装置300可以是诸如输出装置300c之类的平板终端。输出装置300a、300b和300c分别输出输出图像25p。另外，另一终端可以连接到图像处理装置100，并且像输出装置300c一样访问输出图像25p。当然，输出装置300的输出图像25的输出不限于上述示例。

以这种方式由各种显示装置输出输出图像25，从而确认取决于个别情况的输出图像25。

<2.示例性操作>

随后将描述根据本实施例的系统1的示例性操作流程。图14是用于说明根据本实施例的系统1的示例性操作流程的图。

参照图14，输入装置200首先拍摄待书写对象图像21(S1101)。然后，获取单元11获取在步骤S1101中拍摄的图像(S1102)。然后，检测单元12从在步骤S1102中获取的图像检测指示待书写对象图像21的信息(S1103)。然后，设定单元13设定输出图像25的背景的颜色(S1104)。然后，提取单元14从步骤S1102中获取的图像提取书写内容图像22(S1105)。

然后，提取单元14从步骤S1102中获取的图像提取书写内容图像22(S1105)。然后，校正单元15基于在步骤S1103中检测到的指示待书写对象图像21的信息和在步骤S1104中设定的背景颜色，校正在步骤S1105中提取的书写内容图像22的形式，并生成包括书写内容图像22的输出图像25(S1106)。此外，在步骤S1106中，除书写内容图像22的形式之外，校正单元15可以校正书写内容图像22的宽度或轮廓。最后，输出装置300输出在步骤S1106中生成的输出图像25(S1107)，并且系统1终止操作。

另外，在步骤S1106中，校正单元15可以通过校正在步骤S1105中提取的书写内容图像22的形式，然后将书写内容图像22与背景图像组合来生成输出图像25。另一方面，在步骤S1106中，校正单元15可以通过将书写内容图像22与背景图像组合，然后校正书写内容图像22的形式来生成输出图像25。

<3.应用>

如上所述，校正单元15基于表示待书写对象图像21的信息和输出图像25的背景颜色，对书写内容图像22进行校正。此外，校正单元15可以基于检测单元12检测到的书写者的状态来校正书写内容图像22。下面将描述校正单元15基于书写者的状态的校正处理。

<<3-1.应用1>>

首先，书写者的状态可以是书写者的运动信息。校正单元15可以基于书写者的运动信息进一步校正书写内容图像22的形式。这里的运动信息是例如指示书写者是否正在待书写对象图像21上书写的行为检测信息等。例如，检测单元12可以检测书写者正在待书写对象图像21上书写。

另外，检测单元12通过识别书写者的行为来检测书写者的运动。具体地，检测单元12在静止图像或运动图片中的每一帧中执行行为识别，从而捕获当书写者进行运动时的定时。

下面将参照图15A和图15B，描述由校正单元15基于指示书写者是否正在待书写对象图像21上书写的行为检测信息的校正处理。图15A和图15B是用于举例说明根据本实施例的校正单元15基于指示书写者是否正在待书写对象图像21上书写的行为检测信息的校正处理的图。

在检测单元12检测到书写者不在待书写对象图像21上书写的情况下，如上所述，校正单元15基于待书写对象2的种类和输出图像25的背景颜色的组合来校正书写内容图像22的颜色。另一方面，在检测单元12检测到书写者正在待书写对象2上书写的情况下，对待书写对象图像21进行与检测单元12检测到书写者不在待书写对象2上书写的情况不同的校正。

图15A示出了由获取单元11获取的拍摄图像20j。拍摄图像20j包括不在待书写对象图像21j上书写的书写者图像23j。此外，图15A示出了输出图像25k。输出图像25k示出了其中的背景图像24k和校正的书写内容图像22k。另外，书写内容图像22k类似于图15A的示例中的书写内容图像22j。

图15B示出了由获取单元11获取的拍摄图像20l。拍摄图像20l包括待书写对象图像21l、书写内容图像22j和书写者图像23l。这里，书写者图像23l是正在书写的书写者的图像。

这里，检测单元12检测到书写者3正在书写，并且校正单元15校正书写内容图像22j的颜色和宽度。图15B示出了输出图像25m。输出图像25m包括背景图像24m和校正的书写内容图像22m。这里，相对于书写内容图像22j，书写内容图像22m的颜色改变，并且比它宽。

如图15A和图15B所示，例如，当书写者3正在书写时，校正单元15可以校正书写内容图像22，使得观看输出图像25的人能够理解书写者3正在书写。

另外，上面参照图15A和图15B已经描述了在检测单元12检测到书写者3正在书写的情况下，校正单元15将书写内容图像22的宽度校正(扩展)为更大的示例。然而，另一方面，在检测单元12检测到书写者3正在书写的情况下，校正单元15可以减小(缩小)书写内容图像22的宽度，或者可以校正书写内容图像22的轮廓，或者可以进行校正，例如，使得书写内容图像22被勾勒并且仅保留其轮廓。

这样，仅需通过仅确认完全书写的静止图像或运动图片来领会书写内容图像22。例如，在观看者想要稍后确认书写内容图像22的情况下，该功能可以消除观看者的操作。

<<3-2.应用2>>

此外，表示书写者3的状态的信息可以是表示书写者3与待书写对象图像21之间的位置关系的位置关系信息。校正单元15可以基于该位置关系信息进一步校正书写内容图像22。这里，例如，书写者3和待书写对象图像21之间的位置关系是书写者3相对于待书写对象图像21的位置。位置关系信息可以包括与书写者3和待书写对象图像21之间的位置关系相对应的时间，以及与书写内容图像22中的位置关系相对应的书写内容图像22。

另外，系统1包括距离测量装置，以便获取位置关系信息。这里，距离测量装置例如包括距离测量传感器，并且可以获取距离测量传感器和对象之间的距离。

下面将参照图16描述校正单元15基于书写者3和待书写对象图像21之间的位置关系校正书写内容图像22的处理。图16是用于说明根据本实施例的校正单元15基于书写者3和待书写对象图像21之间的位置关系校正书写内容图像22的处理的图。

图16示出了讲座是怎样的。图16示出了待书写对象2a、书写者3a、部分书写内容4a、学生5、输出装置300d以及多个距离测量装置400。输出装置300d输出的输出图像25可以被安装为仅由书写者3观看。在一些实施例中，输出装置300d输出的内容可以不同于其他输出装置(例如，输出装置300a、300b)输出的内容。例如，输出装置300d可以例如通过输出装置300d输出的内容来通知书写者书写受阻。这里，书写者3站立以遮盖书写内容4。因此，学生5只能看到部分书写内容4a。这里，校正单元15可以基于书写者3和待书写对象图像21之间的位置关系来校正书写内容图像22的颜色。

将描述图16的示例。多个距离测量装置400获取距离测量装置400中的每一个与书写者3之间的距离。检测单元12检测书写者相对于待书写对象图像21的位置。

这里，在检测单元12检测到的书写者的位置遮盖书写内容图像22预定时间的情况下，校正单元15可以校正书写内容图像22以将他/她遮盖书写内容图像22的事实通知书写者3。

具体地，在将书写者3和书写内容图像22之间的位置关系的变化为预定量或更小持续预定时间的事实指示为位置关系信息的情况下，校正单元15可以校正与位置关系相对应的书写内容图像22。例如，在书写者3的位置变化为预定量或更小持续预定时间的情况下，校正单元15可以将书写内容图像22的颜色或者遮盖的书写内容图像22或遮盖的书写内容图像22的附近的颜色校正为预定颜色，以例如通知书写者3存在于靠近书写者3的位置的待书写对象2的位置处的书写内容图像22被遮盖的事实。

在图16的示例的情况下，在书写者3的位置变化为预定量或更小持续预定时间的情况下，校正单元15将由书写者3遮盖的书写内容4a或书写内容图像22的颜色校正为预定颜色。在图16的示例的情况下，将校正的书写内容图像22输出到输出装置300(例如，输出装置300d)并通知给书写者3。

这样，可以将学生由于遮盖的书写内容图像22而看不到书写内容图像22的事实通知给书写者。该功能使书写者的行为能够向学生提供更舒适的讲座。

另外，除距离测量装置400以外，也可以通过使用拍摄装置来获取表示书写者3与待书写对象2之间的位置关系的信息。例如，拍摄装置可以使用输入装置200。此外，在待书写对象2是电子黑板的情况下，待书写对象2可以直接输出输出图像25。

<4.示例性硬件配置>

下面将描述根据本公开的实施例的图像处理装置100、输入装置200和输出装置300的示例性硬件配置。图17是示出根据本公开的实施例的图像处理装置100、输入装置200和输出装置300的示例性硬件配置的框图。参照图17，例如，图像处理装置100、输入装置200和输出装置300包括处理器871、ROM 872、RAM 873、主机总线874、桥接器875、外部总线876、接口877、输入装置878、输出装置879、存储装置880、驱动器881、连接端口882以及通信装置883。另外，本文所示的硬件配置是示例性的，并且可以省略一些组件。此外，可以进一步提供除本文所示的组件以外的组件。

(处理器871)

处理器871是例如用作计算处理装置或控制装置的处理电路的示例，并且基于ROM872、RAM 873、存储装置880或可移除记录介质901中记录的各种程序来控制每个组件的全部或部分操作。

(ROM 872，RAM 873)

ROM 872是用于存储由处理器871读取的程序或用于计算的数据等的设备。RAM873例如临时或永久地存储由处理器871读取的程序、在执行程序时视情况而改变的各种参数等。

另外，在处理器871、ROM 872和RAM 873与软件的协作下，实现获取单元11、检测单元12、设定单元13、提取单元14、校正单元15、输出单元17、输入装置200、输出装置300等的功能。

(主机总线874、桥接器875、外部总线876、接口877)

例如，处理器871、ROM 872和RAM 873经由能够高速传输数据的主机总线874相互连接。另一方面，例如，主机总线874经由桥接器875以相对低的数据传输速度连接到外部总线876。此外，外部总线876经由接口877连接到各种组件。

(输入装置878)

输入装置878例如使用鼠标、键盘、触摸面板、按钮、开关、操纵杆等。此外，输入装置878可以使用能够通过使用红外线或其他无线电波来发送控制信号的遥控器。此外，输入装置878包括诸如麦克风之类的语音输入装置。

(输出装置879)

输出装置879是能够以视觉或听觉方式向用户通知所获取的信息的装置，例如，诸如阴极射线管(CRT)、LCD或有机EL之类的显示装置、诸如扬声器或头戴式耳机之类的音频输出装置、打印机、移动电话或传真机。此外，根据本公开的输出装置879包括能够输出触觉刺激的各种振荡设备。输出装置300的功能由输出装置879实现。

(存储装置880)

存储装置880是用于在其中存储各种数据项的装置。存储装置880例如可以使用诸如硬盘驱动器(HDD)、半导体存储设备、光存储设备、磁光存储设备等之类的磁存储设备。存储单元16等的功能由存储装置880实现。

(驱动器881)

驱动器881是用于读取记录在诸如磁盘、光盘、磁光盘、半导体存储器等之类的可移除记录介质901中的信息并在可移除记录介质901中写入信息的装置。

(可移除记录介质901)

例如，可移除记录介质901可以是DVD介质、蓝光(注册商标)介质、HD DVD介质、各种半导体存储介质等。当然，例如，可移除记录介质901可以是在其上安装非接触IC芯片的IC卡、电子设备等。

(连接端口882)

连接端口882是用于连接诸如通用串行总线(USB)、IEEE 1394端口、小型计算机系统接口(SCSI)、RS-232C端口、音频终端等之类的外部连接设备902的端口。

(外部连接设备902)

外部连接设备902例如是打印机、便携式音乐播放器、数字相机、数字摄像机、IC记录器等。

(通信装置883)

通信装置883是用于连接到网络的通信设备，并且是例如用于有线或无线LAN、蓝牙(注册商标)或无线USB(WUSB)的通信卡、光通信路由器、非对称数字用户线(ADSL)路由器、用于各种通信的调制解调器等。使用通信装置883使得可以实现图像处理装置100和作为终端装置的输出装置300之间的无线通信。

<5.结论>

上面已经参考图1到图17描述了本公开的一个实施例。如上所述，根据本实施例的图像处理装置100提取书写在待书写对象图像21上的书写内容图像22，并且基于指示待书写对象图像21的信息和输出图像25的背景颜色来校正书写内容图像22的形式。从而，可以增强输出图像25中的书写内容图像22的可见性。此外，可以对书写内容图像22赋予附加含义。

上文已参考附图详细描述了本公开的实施例，但是本公开的技术范围不限于该示例。显然，本公开的技术领域的技术人员能够容易地理解在下面的权利要求所描述的技术精神的范围内的各种示例性改变或示例性修改，并且这些属于本公开的技术范围。

此外，本说明书中描述的效果是解释性的或示例性的，并且不是限制性的。也就是说，根据本公开的技术可以获得上述效果，或者除了上述效果以外，本领域技术人员从本说明书的描述中显见其他效果。

此外，本说明书中的流程图和序列图中描述的处理不一定需要按图示顺序执行。一些处理步骤可以并行执行。此外，可以采用附加处理步骤，或者可以省略一些处理步骤。

另外，以下配置属于本公开的技术范围。

(1)一种图像处理装置，包括：处理电路，被配置为修改书写在书写表面上的书写内容的书写内容图像的一个或多个特性，对所述书写内容图像的一个或多个特性的修改基于与所述书写表面相关的信息。

(2)根据(1)的图像处理装置，其中所述处理电路还被配置成基于输出图像的背景颜色修改所述书写内容图像的所述一个或多个特性。

(3)根据(1)或(2)的图像处理装置，其中，所述书写内容图像的所述一个或多个特性包括颜色。

(4)根据(3)的图像处理装置，其中所述处理电路被配置成修改所述颜色以提高所述书写内容的可见性。

(5)根据(1)至(4)中任一项所述的图像处理装置，其中

所述书写内容图像的所述一个或多个特性包括书写内容图像的色调、亮度或饱和度中的至少一个，以及

处理电路被配置成修改书写内容图像的色调、亮度或饱和度中的所述至少一个。

(6)根据(1)至(5)中任一项所述的图像处理装置，其中

书写内容图像的所述一个或多个特性包括书写内容图像的第一颜色的亮度，以及

处理电路被配置成修改书写内容图像的第一颜色的亮度，以便增大书写内容图像的第一颜色和第二颜色之间的亮度差。

(7)根据(6)的图像处理装置，其中

书写内容图像的第一颜色具有在50度到70度的范围内的色调角，并且

处理电路被配置成增大第一颜色的亮度。

(8)根据(1)至(7)中任一项所述的图像处理装置，其中

所述书写内容图像的所述一个或多个特性包括所述书写内容图像的多个颜色的亮度，以及

在修改所述一个或多个特性之后，反转在修改所述一个或多个特性之前的书写内容图像的所述多个颜色的亮度顺序。

(9)根据(1)至(8)中任一项所述的图像处理装置，其中

所述书写内容图像的所述一个或多个特性包括所述书写内容图像的颜色的亮度，

书写表面的特性是书写表面的颜色的亮度，以及

处理电路被配置成基于书写表面的颜色的亮度和输出图像的背景颜色的亮度之间的差来修改书写内容图像的颜色的亮度。

(10)根据(1)至(9)中任一项所述的图像处理装置，其中

书写内容图像的所述一个或多个特性包括书写内容图像的颜色的亮度，以及

处理电路被配置成基于书写内容图像的颜色的色调来修改书写内容图像的颜色的亮度。

(11)根据(1)至(10)中任一项所述的图像处理装置，其中

处理电路被配置成当书写内容图像的颜色的亮度和输出图像的背景颜色的亮度之间的差为第一预定值或更小时，修改书写内容图像的颜色的亮度，使得背景颜色的亮度和书写内容图像的颜色的亮度之间的差为第二预定值或更高。

(12)根据(1)至(11)中任一项所述的图像处理装置，其中

所述书写内容图像的所述一个或多个特性包括所述书写内容图像的多个颜色中的一个的饱和度，以及

所述处理电路被配置成修改所述书写内容图像的所述多个颜色中的一个的饱和度，以增大所述书写内容图像的所述多个颜色之间的饱和度差。

(13)根据(1)至(12)中任一项的图像处理装置，其中所述处理电路被配置成基于关于检测到的书写者的状态的信息来修改所述书写内容图像的特性。

(14)根据(13)的图像处理装置，其中

关于检测到的书写者的状态的信息指示书写者是否正在书写表面上书写，以及

处理电路被配置成在关于检测到的书写者的状态的信息指示书写者正在书写表面上书写的情况下修改书写内容图像的特性。

(15)根据(13)或(14)的图像处理装置，其中

关于检测到的书写者的状态的信息指示书写者和书写表面之间的位置关系，以及

处理电路被配置成基于所指示的位置关系来修改书写内容图像的特性。

(16)根据(15)的图像处理装置，其中，所述处理电路被配置成在书写内容图像中的书写被书写者遮挡的情况下修改所述书写内容图像的特性。

(17)根据(1)至(16)中任一项的图像处理装置，其中所述处理电路被配置成修改所述书写内容图像的宽度。

(18)根据(1)至(17)中任一项的图像处理装置，其中所述处理电路被配置成修改所述书写内容图像中的轮廓。

(19)根据(1)至(18)中任一项所述的图像处理装置，其中所述处理电路被配置为

检测书写表面，以及

基于指示检测到的书写表面的类型的信息修改书写内容图像的所述一个或多个特性。

(20)根据(1)至(19)中任一项的图像处理装置，其中所述处理电路被配置为

从所述书写表面的图像提取所述书写内容图像，以及

修改提取的书写内容图像的所述一个或多个特性。

(21)根据(1)至(20)中任一项的图像处理装置，其中所述处理电路被配置为

在修改书写内容图像的所述一个或多个特性之后，控制包括书写内容图像的输出图像的输出。

(22)根据(1)至(21)中任一项的图像处理装置，其中所述处理电路被配置为

将所述书写内容图像的第一修改版本输出到第一显示器，所述书写内容图像的第一修改版本包括对所述书写内容图像的所述一个或多个特性的修改，以及

将所述书写内容图像的第二修改版本输出到第二显示器。

(23)根据(1)至(22)中任一项所述的图像处理装置，其中，与书写表面相关的所述信息指示书写表面的反射率和书写表面上的残留物中的一个或其组合。

(24)一种图像处理方法，包括：通过图像处理装置的处理电路修改书写在书写表面上的书写内容的书写内容图像的一个或多个特性，对书写内容图像的所述一个或多个特性的修改基于与书写表面相关的信息。

(25)一种图像处理方法，用于执行根据(1)至(23)中任一项的图像处理装置的功能。

(26)一种存储指令的非暂时性计算机可读存储介质，当由计算机执行时，所述指令使计算机执行一种方法，该方法包括：修改书写在书写表面上的书写内容的书写内容图像的一个或多个特性，对书写内容图像的所述一个或多个特性的修改基于与书写表面相关的信息。

(27)一种存储指令的非暂时性计算机可读存储介质，当由计算机执行时，该指令使计算机执行根据(24)或(25)的方法。

本领域技术人员应当理解，根据设计要求和其他因素，可以进行各种修改、组合、子组合和改变，只要它们在所附权利要求或其等同物的范围内。

标符清单

100 图像处理装置

11 获取单元

12 检测单元

13 设定单元

14 提取单元

15 校正单元

16 存储单元

17 输出单元

200 输入装置

300 输出装置

400 距离测量装置

Claims

1.一种图像处理装置，包括：

处理电路，被配置为

修改书写在书写表面上的书写内容的书写内容图像的一个或多个特性，对所述书写内容图像的所述一个或多个特性的修改基于与所述书写表面相关的信息。

2.根据权利要求1所述的图像处理装置，

其中，所述处理电路还被配置成基于输出图像的背景颜色修改所述书写内容图像的所述一个或多个特性。

3.根据权利要求1所述的图像处理装置，其中所述书写内容图像的所述一个或多个特性包括颜色。

4.根据权利要求3所述的图像处理装置，其中所述处理电路被配置成修改所述颜色以提高所述书写内容的可见性。

5.根据权利要求1所述的图像处理装置，其中

6.根据权利要求1所述的图像处理装置，

其中

7.根据权利要求6所述的图像处理装置，其中

处理电路被配置成增大第一颜色的亮度。

8.根据权利要求1所述的图像处理装置，

其中

9.根据权利要求1所述的图像处理装置，其中

书写表面的特性是书写表面的颜色的亮度，以及

10.根据权利要求1所述的图像处理装置，其中

11.根据权利要求1所述的图像处理装置，其中

12.根据权利要求1所述的图像处理装置，其中

13.根据权利要求1所述的图像处理装置，其中，所述处理电路被配置成基于关于检测到的书写者的状态的信息来修改所述书写内容图像的特性。

14.根据权利要求13所述的图像处理装置，其中

15.根据权利要求13所述的图像处理装置，其中

16.根据权利要求15所述的图像处理装置，其中，所述处理电路被配置成在书写内容图像中的书写被书写者遮挡的情况下修改所述书写内容图像的特性。

17.根据权利要求1所述的图像处理装置，其中所述处理电路被配置成修改所述书写内容图像的宽度。

18.根据权利要求1所述的图像处理装置，其中所述处理电路被配置成修改所述书写内容图像中的轮廓。

19.根据权利要求1所述的图像处理装置，其中所述处理电路被配置为

检测书写表面，以及

20.根据权利要求1所述的图像处理装置，其中所述处理电路被配置为

从所述书写表面的图像提取所述书写内容图像，以及

修改提取的书写内容图像的所述一个或多个特性。

21.根据权利要求1所述的图像处理装置，其中所述处理电路被配置为

22.根据权利要求1所述的图像处理装置，其中所述处理电路被配置为

将所述书写内容图像的第二修改版本输出到第二显示器。

23.根据权利要求1所述的图像处理装置，其中，与书写表面相关的所述信息指示书写表面的反射率和书写表面上的残留物中的一个或其组合。

24.一种图像处理方法，包括：

通过图像处理装置的处理电路修改书写在书写表面上的书写内容的书写内容图像的一个或多个特性，对书写内容图像的所述一个或多个特性的修改基于与书写表面相关的信息。

25.一种存储指令的非暂时性计算机可读存储介质，当由计算机执行时，所述指令使计算机执行一种方法，该方法包括：

修改书写在书写表面上的书写内容的书写内容图像的一个或多个特性，对书写内容图像的所述一个或多个特性的修改基于与书写表面相关的信息。