CN108885009B - 加热烹调器 - Google Patents
加热烹调器 Download PDFInfo
- Publication number
- CN108885009B CN108885009B CN201780020593.XA CN201780020593A CN108885009B CN 108885009 B CN108885009 B CN 108885009B CN 201780020593 A CN201780020593 A CN 201780020593A CN 108885009 B CN108885009 B CN 108885009B
- Authority
- CN
- China
- Prior art keywords
- contour
- unit
- image
- heated
- presentation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000010438 heat treatment Methods 0.000 title claims description 145
- 238000005286 illumination Methods 0.000 claims description 49
- 238000010411 cooking Methods 0.000 claims description 45
- 230000008859 change Effects 0.000 claims description 24
- 238000003384 imaging method Methods 0.000 claims description 20
- 230000001678 irradiating effect Effects 0.000 claims description 2
- 238000012545 processing Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 235000008429 bread Nutrition 0.000 description 8
- 238000000034 method Methods 0.000 description 8
- 235000013305 food Nutrition 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 229910000831 Steel Inorganic materials 0.000 description 4
- 230000009471 action Effects 0.000 description 4
- 239000010959 steel Substances 0.000 description 4
- 230000005484 gravity Effects 0.000 description 3
- 239000003086 colorant Substances 0.000 description 2
- 238000000855 fermentation Methods 0.000 description 2
- 230000004151 fermentation Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000001035 drying Methods 0.000 description 1
- 235000011389 fruit/vegetable juice Nutrition 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 235000014594 pastries Nutrition 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 229910001220 stainless steel Inorganic materials 0.000 description 1
- 239000010935 stainless steel Substances 0.000 description 1
Images
Classifications
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
- F24C7/00—Stoves or ranges heated by electric energy
- F24C7/08—Arrangement or mounting of control or safety devices
- F24C7/082—Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination
- F24C7/085—Arrangement or mounting of control or safety devices on ranges, e.g. control panels, illumination on baking ovens
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/136—Segmentation; Edge detection involving thresholding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30128—Food products
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Combustion & Propulsion (AREA)
- Chemical & Material Sciences (AREA)
- Mechanical Engineering (AREA)
- General Engineering & Computer Science (AREA)
- Image Analysis (AREA)
- Electric Stoves And Ranges (AREA)
- Electric Ovens (AREA)
- Image Processing (AREA)
Abstract
一种加热烹调器,提示轮廓决定部(108)从由轮廓候选生成部(107)生成的多个被加热物(110)的轮廓中,判断要提示给使用者的轮廓候选,通过显示部(105)将考虑了优先顺序的轮廓提示给使用者并请求认可,由此减轻使用者的操作负担,不破坏便利性,取得使用者期望的被加热物(110)的轮廓。
Description
技术领域
本发明涉及用于加热烹调食品等的加热烹调器。
背景技术
在以往具有加热室的加热烹调器中,为了能够确认作为被加热物的食品的大小等,存在设置拍摄加热室内部的摄像部的情况(例如,参照专利文献1)。
另外,在以往具有加热室的加热烹调器中,为了能够确认作为被加热物的食品的状态等,根据由摄像部拍摄的图像,提取被加热物的颜色的变化,识别并判断作为烹调中的食品状态的食品的烧焦程度等(例如,参照专利文献2)。
在先技术文献
专利文献
专利文献1:日本实开昭59-40714号公报
专利文献2:日本特开2001-272045号公报
发明内容
本发明正是鉴于上述的问题而完成的,提供一种加热烹调器,能够减轻使用者的操作负担,不破坏便利性,获得使用者期望的被加热物的轮廓,即获得使用者期望作为用于判断被加热物的颜色或者形状等的变化的区域的轮廓。
即,本发明的实施方式的一例的加热烹调器具有:加热部,其对被加热物进行加热;加热室,其收纳被加热物;照明部,其向加热室内照射光;摄像部,其拍摄加热室内的图像;显示部,其对使用者显示被加热物的轮廓;以及图像取得部,其从摄像部取得被加热物的图像。本发明的实施方式的一例的加热烹调器还具有:轮廓候选生成部,其使用图像取得部得到的图像生成被加热物的多个轮廓候选;提示轮廓决定部,其从轮廓候选生成部生成的多个轮廓候选中决定在显示部显示的轮廓;控制部,其使显示部显示由提示轮廓决定部决定的轮廓。所述提示轮廓决定部构成为,在显示于所述显示部的所述轮廓不被认可的情况下,在所述显示部显示如下的输入画面:所述输入画面是针对显示于所述显示部的所述被加热物的所述轮廓中的一部分,提醒进行认可或者不认可的部分选择。
根据这样的结构,提示轮廓决定部从在工学上根据拍摄的图像生成多个变形(variation)的轮廓得到的被加热物的轮廓中,决定与提示给使用者的轮廓相符的轮廓。并且,对由提示轮廓决定部决定的轮廓附加显示的优先顺序,通过显示部提示给使用者。另外,本发明的实施方式的一例的加热烹调器构成为,对于被附加了优先顺序提示给使用者的轮廓,征求使用者的认可。因此,根据这样的结构,能够取得符合使用者的期望的正确的轮廓,即取得使用者期望作为用于判断被加热物的颜色或者形状等的变化的区域的正确的轮廓,根据正确的轮廓进行适合于被加热物的加热处理。
另外,在根据由摄像机等的摄像部拍摄的图像(摄像数据),通过计算机等进行摄像数据分析并生成摄影对象的轮廓时,将生成大量的变形的轮廓。但是,根据本发明提供的加热烹调器,通过从大量的变形的轮廓中按照优先顺序对使用者提示轮廓候选,并请求用户判断,能够得到使用者期望的被加热物的轮廓。
附图说明
图1是示出本发明的实施方式1的加热烹调器的主要部分的概略结构的图。
图2是说明本发明的实施方式1的加热烹调器的轮廓生成的步骤的图。
图3是说明本发明的实施方式1的加热烹调器的轮廓提示的流程的图。
图4是说明本发明的实施方式1的加热烹调器的轮廓应用方法的流程图。
图5是示出本发明的实施方式2的加热烹调器的主要部分的概略结构的图。
图6是说明本发明的实施方式2的加热烹调器的轮廓提示的流程的图。
图7是示出本发明的实施方式3的加热烹调器的主要部分的概略结构的图。
图8是示出本发明的实施方式4的加热烹调器的主要部分的概略结构的图。
具体实施方式
本发明人们进行研究的结果发现,在上述以往的加热烹调器中存在如下问题。即,在上述以往的加热烹调器中,在图像识别时没有考虑被加热物的放置状态非常多样化的情况。即,在由摄像部拍摄的图像中,构成背景颜色的被加热物的放置部成为与被加热物相同的颜色、或呈与被加热物相似的颜色或形状、或根据被加热物的立体形状而产生复杂的影子等,被加热物的放置状态是多样化的,这在图像识别时没有被考虑到。
例如,以往的加热烹调器在识别表示被加热物的轮廓时,有可能将如下的轮廓错误地识别为被加热物的轮廓:使用者不期望的轮廓,亦即使用者不期望作为用于判断被加热物的颜色或者形状等的变化的区域的轮廓,如“因背景颜色和被加热物的颜色一致而使得背景和被加热物成为一体的轮廓”、“被加热物以外的轮廓”、以及“由于光照射被加热物的影响而形成的影子的轮廓”等。
并且,以往的加热烹调器在根据被加热物的颜色的变化来判断食品的状态的情况下,将从被加热物渗出的汁等错误地识别为烧焦颜色,或将因加热引起的形状变化而重新产生的影子错误地识别为烧焦颜色。
与此相对,本发明的实施方式的一例的加热烹调器具有:加热部,其对被加热物进行加热;加热室,其收纳被加热物;照明部,其向加热室内照射光;摄像部,其拍摄加热室内的图像;显示部,其对使用者显示被加热物的轮廓;以及图像取得部,其从摄像部取得被加热物的图像。本发明的实施方式的一例的加热烹调器还具有:轮廓候选生成部,其使用由图像取得部得到的图像生成被加热物的多个轮廓候选;提示轮廓决定部,其从由轮廓候选生成部生成的多个轮廓候选中决定在显示部显示的轮廓;控制部,其使由提示轮廓决定部决定的轮廓显示在显示部。
根据这样的结构,提示轮廓决定部从在工学上根据拍摄的图像生成多个变形(variation)的轮廓得到的被加热物的轮廓中,决定与提示给使用者的轮廓相符的轮廓。并且,对由提示轮廓决定部决定的轮廓附加被显示的优先顺序,通过显示部提示给使用者。另外,本发明的实施方式的一例的加热烹调器构成为,由于对于被附加了优先顺序而提示给使用者的轮廓,征求使用者的认可,因而能够取得符合使用者的期望的正确的轮廓,即取得使用者期望作为用于判断被加热物的颜色或者形状等的变化的区域的正确的轮廓,根据正确的轮廓进行适合于被加热物的加热处理。
并且,本发明的实施方式的一例的加热处理装置也可以构成为,当显示于显示部的轮廓不被使用者认可的情况下,通过显示轮廓决定部,使显示部显示其它的轮廓候选。
根据这样的结构,能够减轻使用者的操作负担来取得正确的轮廓,根据正确的轮廓进行适合于被加热物的加热处理。
并且,本发明的实施方式的一例的加热处理装置也可以构成为,当显示于显示部的轮廓不被使用者认可的情况下,通过提示轮廓决定部,使显示部显示如下的输入画面:所述输入画面是针对所显示的被加热物的轮廓中的一部分,提醒进行认可或者不认可的部分选择。
根据这样的结构,能够减轻使用者的操作负担来取得更正确的轮廓,根据正确的轮廓进行适合于被加热物的加热处理。
并且,本发明的实施方式的一例的加热处理装置也可以构成为,轮廓候选生成部变更由图像取得部得到的被加热物的图像的图像信息的参数,根据变更后的图像信息的参数生成被加热物的多个轮廓候选。
根据这样的结构,生成降低了由于因照明部的照射光产生的被加热物的影子造成的影响的轮廓,因而能够对使用者提示降低了影子的影响的轮廓。
并且,本发明的实施方式的一例的加热处理装置也可以构成为,还具有照明模式存储部,用于存储通过照明部向加热室内照射光的多个照明模式。在这种情况下,也可以构成为,提示轮廓决定部从轮廓候选生成部使用在基于多个照明模式照射的光下拍摄的被加热物的摄影图像而生成的轮廓候选中,决定对使用者提示的轮廓。
根据这样的结构,能够生成在物理上降低了由于因照明部的照射光产生的被加热物的影子的影响的轮廓,对使用者提示降低了影子的影响的轮廓。
并且,本发明的实施方式的一例的加热处理装置也可以构成为,还具有烹调菜单存储部,用于存储多个烹调菜单以及按照多个烹调菜单而假设的被加热物的信息。在这种情况下,轮廓候选生成部根据按照烹调菜单而假设的被加热物的信息,决定在显示部显示的轮廓候选。
根据这样的结构,在显示部显示根据烹调菜单而预测的轮廓并提示给使用者,因而能生成正确的轮廓。由此,能够对使用者提示更正确的轮廓。
根据本发明,能够通过提示轮廓决定部从由轮廓候选生成部生成的多个轮廓中决定提示给使用者的轮廓候选,被提示的附加了优先顺序的轮廓通过显示部提示给使用者以征求使用者的认可。由此,能够减轻使用者的操作负担,不破坏便利性,取得使用者期望的被加热物的轮廓,即取得使用者期望作为用于判断被加热物的颜色或者形状等的变化的区域的轮廓。
下面,参照附图说明本发明的实施方式的示例。另外,本发明不受该实施方式限定。
(实施方式1)
图1是示出本发明的实施方式1的加热烹调器的主要部分的概略结构的图。
如图1所示,加热烹调器111具有在内部收纳被加热物110的加热室102。并且,加热烹调器111构成为具有由加热器、磁控管或者蒸汽发生器等构成的加热部101,通过加热部101能够加热烹调被加热物110。
在本实施方式的加热烹调器111中,加热室102具有由壁面(上壁面、左壁面、里壁面、右壁面及底壁面)和门(未图示)构成的大致长方体形状。加热室102具有例如宽400mm及深300mm的尺寸。加热室102的壁面使用例如搪瓷钢板(ホウロウ鋼板)、不锈钢板或者涂层钢板(塗装鋼板)等材料形成。在从加热室102的正面观察时的左壁面设有具有摄像机的摄像部104。摄像部104设置在被设于加热室102的左壁面上的、部分地通过拉深加工而形成的斜面上。并且,摄像部104以诸如俯视被加热物110的位置及姿势设置在被设于加热室102的左壁面的斜面上,使得能够用摄像机拍摄加热室102内部的被加热物110。
并且,在加热室102的壁面设有例如由LED构成的照明部103a~103d。本实施方式的加热烹调器111通过照明部103a~103d,确保摄像部104拍摄位于加热室102内部的被加热物110用的光量。
控制部109例如使用具有CPU、存储器及输入输出接口等的微型计算机(未图示)构成。控制部109在其内部具有图像取得部106、轮廓候选生成部107及提示轮廓决定部108。
图像取得部106与摄像部104电连接,取得通过摄像部104拍摄得到的加热室102内的图像数据。
轮廓候选生成部107根据通过图像取得部106取得的图像,生成多个轮廓候选。
显示部105由与控制部109电连接的液晶显示器等构成,将通过图像取得部106得到的加热室102内的图像以及由提示轮廓决定部108决定的轮廓等提示给使用者。
下面,对如上所述构成的加热烹调器111说明其动作及作用。另外,在下面的说明中,按照下述的顺序说明由基本的动作到应用的内容。
[1]被加热物110的轮廓生成处理及轮廓提示的问题
[2]轮廓决定处理
[3]加热烹调器111的整体动作
[4]轮廓的应用方法
并且,在下面的说明中,基本上将图像取得部106取得的图像视为分别用8比特(0~255)表述光的三原色即Red(红色)、Green(绿色)、Blue(蓝色)的、24比特的彩色图像进行说明。
对于图像数据的颜色,表述为(R、G、B)=(R数值、G数值、B数值)(下面,称为RGB的数值或者RGB值)。在RGB的数值为0时成为黑色,在RGB的数值越接近255时,各颜色成为越纯的颜色,通过对RGB进行混合,能够表述约1677万种的颜色。例如,RGB=(255,0,0)为红色,RGB=(255,255,0)为由红色和绿色混合而成的黄色,RGB=(0,0,0)为黑色,以及RGB=(255,255,255)为白色。
[1]被加热物110的轮廓生成处理及轮廓提示的问题
图2是说明本发明的实施方式1的加热烹调器的轮廓生成的步骤的图。
使用图2说明从被加热物110的摄影图像201得到轮廓图像204a、204b的处理。首先,将摄影图像201变换成灰度化图像202(例如,8位灰度,8bit grayscale),然后根据灰度(grayscale)的灰阶(階調)决定用于对灰度化图像202进行2值化的阈值(2值化阈值)(例如,在8位灰度时,是指256灰阶中的中央值即128等)。而且,通过将阈值以上设定为白色、将阈值以下设定为黑色,取得2值化图像203a、203b。在所得到的2值化图像203a、203b中,描画连接白色和黑色的边界的边界线。这样,能够取得被加热物110的轮廓图像204a、204b。
在此成为问题的是,根据取得2值化图像203a、203b时的阈值(2值化阈值)的选择,轮廓变化呈多样化。关于从基于阈值a的2值化图像203a得到的轮廓图像204a和从基于阈值b的2值化图像203b得到的轮廓图像204b哪方是正确的轮廓,很难根据作为图像处理结果而输出的轮廓图像204a、204b的妥当性进行判断。另一方面,普通拍摄被加热物110的摄影图像201当然包含较多的灰阶,因而在工学上存在灰度的灰阶数的轮廓变形(outlinevariation)。
在为了以统一的条件得到轮廓而将阈值固定为一个时,当诸如在构成用于放置被加热物110的放置部的白色烹调纸(cooking sheet)上放置了如面包坯料那样的白色的被加热物110的情况下,被加热物110将与作为背景的白色烹调纸成为一体,不能得到正确的轮廓。
因此,为了得到正确的轮廓候选,利用显示部105对使用者提示轮廓候选,所提示的轮廓是否是被加热物110的正确的轮廓,需要经过由使用者确认的步骤。
通常,在加热烹调器中,在没有使用者的确认就取得轮廓、并且自动进行图像识别等处理的情况下,将会以不低的频度错误地识别为偏离使用者的期望的轮廓,即,与使用者期望作为用于判断被加热物的颜色或者形状等的变化的区域的轮廓不同的轮廓,加热烹调器有可能引发错误动作。因此,在通过使用者确认是否提示了正确的轮廓候选的步骤中,加热烹调器具有减轻使用者的操作负担的结构很重要。
在本实施方式的加热烹调器111中,通过轮廓候选生成部107生成轮廓变形(多个轮廓候选)。并且,本实施方式的加热烹调器111构成为,由提示轮廓决定部108考虑向使用者提示的优先顺序,将与取得摄影图像201时的状况(摄影状况)一致的轮廓,通过显示部105提示给使用者,征求使用者的认可。即,本实施方式的加热烹调器111构成为,在通过使用者确认是否提示了正确的候选轮廓时,减轻使用者的操作负担。
[2]轮廓决定处理
在控制部109对提示轮廓决定部108发出阈值决定的指示时,提示轮廓决定部108确认摄影图像201的RGB值的分布,判定摄影图像201是RGB值的数值偏高的较亮的图像(RGB=(255,255,255)表示最亮的白色)、还是RGB值的数值偏低的较暗的图像(RGB=(0,0,0)表示最暗的颜色即黑色)。
例如,在RGB值256的中央值即128被设定为用于判别图像的亮度的RGB值的基准值(基本阈值)的情况下,提示轮廓决定部108判定超过基本阈值(RGB值128)的像素数相对于摄影图像201的像素总数的比率。并且,提示轮廓决定部108将该比率、和为判别所拍摄的图像的亮度而预先设定的、超过基本阈值的像素数相对于图像的像素总数的比率的规定值进行比较,判定摄影图像201是较亮的图像还是较暗的图像。通过使用这样由提示轮廓决定部108判定出的信息适当地设定2值化阈值,能够防止背景和被加热物110成为一体。
提示轮廓决定部108选择摄影图像201的黑白的平衡相同时的中央值的阈值(例如,RGB值128)作为基本阈值,在摄影图像201的白色的比率较大时,将阈值设定为高于中央值(例如RGB值160),在黑色的比率较大时,将阈值设定为低于中央值(例如RGB值96)。
提示轮廓决定部108使用所得到的基本阈值、以及相对于基本阈值具有规定值的间隔的阈值(例如,RGB值的基本阈值±20或者±40)的2值化阈值,在请求轮廓候选生成部107进行轮廓候选生成。
轮廓候选生成部107使用在提示轮廓决定部108中设定的阈值,如上所述地生成所要求的阈值中的多个轮廓候选(在本实施方式中是指轮廓图像204a、204b)。
另外,在此得到的轮廓图像中混合了加热室102的内部的拉深加工形状的轮廓。因此,通过从所得到的轮廓图像中减去被加热物110未放入加热室102的内部时得到的加热室102内的轮廓(预先被存储为初始信息),来去除加热室102的内部的拉深加工形状的轮廓的影响。
提示轮廓决定部108判定在此得到的轮廓图像各自的轮廓个数和轮廓面积,决定要提示给使用者的轮廓图像的优先顺序。例如,如果在所得到的多个轮廓图像中,在一个轮廓图像中包含的轮廓的个数没有差异,提示轮廓决定部108将基本阈值中的轮廓图像作为第1候选,对以下的候选顺序地提示接近基本阈值的阈值中的轮廓图像(例如,RGB值+20、-20、+40及-40的顺序)。在所得到的多个轮廓图像候选中,在基本阈值的轮廓图像中的轮廓的个数较少的情况下,提示轮廓决定部108判断为被加热物110和背景有可能被识别为一体,将轮廓的个数较多的轮廓图像的优先顺序设定为较高的值。
在确定了所提示的轮廓图像的优先顺序后,提示轮廓决定部108将轮廓图像转交给控制部109。由此,提示轮廓决定部108的轮廓决定处理结束。
另外,在轮廓候选生成部107生成轮廓候选时,不变更阈值而通过变更所拍摄的图像信息的参数,也能够得到与上述的作用相同的作用(例如,轮廓候选生成部107生成轮廓候选的作用)。例如,可以通过在使阈值固定的状态下进行如下运算来实现,对所拍摄的图像信息的参数中的一个即RGB的各要素的数值,按照R数值+相加值、G数值+相加值及B数值+相加值的方式一律相加,或按照R数值-相减值、G数值-相减值及B数值-相减值的方式一律相减。
并且,特别是在摄影图像中黑色的比率较大的情况下,在加热烹调器111的图像识别时容易受到较黑的影子的影响。在这种情况下,通过对RGB值较小的部分应用固定系数,可以缓解影子的影响。例如,对RGB值100以下的值,将RGB值设为1.2倍。另外,设RGB值的最大值为100。具体地,例如在应用于RGB=(60,90,100)时,将RGB值设为1.2倍的运算结果成为(72,108,120),因而在将100以上的RGB值设为100时成为(72,100,100)。
如上所述,通过操作图像信息的参数,即使不变更阈值,也能够弱化较暗的部分,缓解影子的影响。
[3]加热烹调器111的整体动作
在被加热物110被放置在加热室102内时,控制部109使图像取得部106取得由摄像部104拍摄的被加热物110的图像。控制部109将所取得的被加热物110的摄影图像转交给提示轮廓决定部108,请求提示轮廓决定部108决定要提示给使用者的轮廓(提示轮廓)及其提示顺序。
提示轮廓决定部108通过上述的动作,使用由轮廓候选生成部107生成的轮廓图像决定要提示给使用者的提示轮廓及优先顺序,并转交给控制部109。
控制部109按照图3所示,将具有提示轮廓的提示图像301~303按照优先顺序通过显示部105提示给使用者,并接受使用者的认可,由此得到使用者期望的轮廓,即,使用者期望作为用于判断被加热物的颜色或者形状等的变化的区域的轮廓。
另外,在此为了让使用者容易明白,将提示轮廓叠加在摄影图像上进行显示(参照图3)。并且,在图3中示出了候选1的提示图像301、候选2的提示图像302、候选3的提示图像303。
如以使用者视线观察可知,在图3所示的例子中,候选2的提示图像302示出了正确的轮廓(提示图像301及提示图像303错误地将被加热物110的影子识别为被加热物110的轮廓的一部分)。因此,提示图像302被使用者认可。
控制部109将这样得到的轮廓(提示图像302的轮廓)作为初始轮廓,根据初始轮廓,通过加热部101进行被加热物110的加热。并且,控制部109通过监视相对于初始轮廓的轮廓变化及轮廓内部的颜色的变化等,进行应用了轮廓的加热控制(加热停止的判断等)。
另外,在多次从使用者接到不认可的答复的情况下,数次请求使用者认可将会妨碍使用者的便利性。考虑到这一点,加热烹调器111也可以构成为,利用由使用者描绘显示部105的图像等方法直接决定轮廓。
[4]轮廓的应用方法
例如,在被加热物110是通过加热而膨胀的面包坯料的情况下,通过监视轮廓的面积变化,可以应用于发酵完成的自动检测。使用图4说明本实施方式的加热烹调器111的轮廓的应用方法。
控制部109根据通过上述的动作而取得的被加热物110的初始轮廓中的轮廓个数,掌握作为被加热物110的面包的个体数。并且,控制部109取得作为用于识别面包个体的位置信息的每个个体的轮廓的重心、和表示面包的大小的轮廓的面积(按照每个个体决定的轮廓的面积)(步骤S401)。
在加热部101的加热开始时,通过加热,面包坯料开始膨胀。控制部109每当经过规定的时间(例如5秒钟)时,反复执行S403、S404及S405的各步骤的动作,一直到满足步骤S405的判定条件为止(步骤S402)。并且,控制部109取得经过规定的时间后的轮廓,运算所得到的轮廓的每个个体的重心和面积(步骤S403)。在此,控制部109根据轮廓的重心进行个体的关联,由此计算每个个体的面积比((面积比)=(当前面积)/(初始轮廓))(步骤S404),进行面积比和规定值(例如,面积比是2倍)的比较(步骤S405)。由此,在超过规定值的情况下,控制部109进行面包的发酵完成的自动检测。
这样,在追踪被加热物110的轮廓的变化的情况下,正确地获得初始轮廓对掌握个体位置及大小很重要。为了正确地获得初始轮廓,按照上面所述,在减轻使用者的操作负担的基础上对使用者提示轮廓候选并得到认可,无论是在进行没有差错的自动处理方面、还是在得到使用者的放心感方面都是必要。
如以上说明的那样,在本实施方式的加热烹调器111中,通过提示轮廓决定部108从在工学上能够生成多种变形的轮廓中决定与提示给使用者的轮廓相符的轮廓。并且,本实施方式的加热烹调器111构成为将通过提示轮廓决定部108决定出的提示轮廓,通过显示部105并考虑优先顺序而提示给使用者,征求使用者的认可。根据这样的结构,能够根据符合使用者的期望的正确的轮廓、即使用者期望作为用于判断被加热物的颜色或者形状等的变化的区域的轮廓,进行适合于被加热物110的加热烹调。
并且,在本实施方式的加热烹调器111中,在通过显示部105提示的轮廓不被使用者认可的情况下,控制部109按照由提示轮廓决定部108决定出的要提示给使用者的优先顺序,使显示部105显示其它的轮廓候选。根据这样的结构,能够在减轻了使用者的操作负担的基础上取得正确的轮廓,进行适合于被加热物110的加热烹调。
并且,本实施方式的加热烹调器111构成为,轮廓候选生成部107通过变更所拍摄的图像信息的参数(RGB值等),生成被加热物110的多个轮廓候选。根据这样的结构,能够进行降低了由于因照明部103a~103d的照射光产生的被加热物110的影子的影响的轮廓生成。
另外,在本实施方式中,使用作为照明部具有4个照明部103a~103d的例子对加热烹调器111进行了说明,但也可以在加热烹调器111仅设置1个照明部(例如照明部103a),还可以设置2个或3个照明部,还可以设置5个以上的照明部。
(实施方式2)
下面,关于本发明的实施方式2的加热烹调器112,使用图5及图6进行说明。
图5是示出本发明的实施方式2的加热烹调器的主要部分的概略结构的图。图6是说明本发明的实施方式2的加热烹调器的轮廓提示的流程的图。
在本发明的实施方式2的加热烹调器112中构成为,与实施方式1的加热烹调器111区别较大的是,在通过显示部105提示给使用者的轮廓不被使用者认可的情况下,提示轮廓决定部508提醒使用者对在显示部105显示的被加热物110的轮廓的至少一部分进行认可或者不认可的部分选择。更具体地构成为,提示轮廓决定部508针对显示于显示部105的被加热物110的轮廓的至少一部分,在不被使用者认可时,使显示部显示提醒在多个轮廓中选择未认可的部分(部分选择)的输入画面。
在下面的本发明的实施方式2的加热烹调器112的说明中,对具有与实施方式1的加热烹调器111中的构成要素相同的功能或者结构的部分标注相同的标号,在此省略其详细的说明,并应用在实施方式1中的说明。并且,提示轮廓决定部508除下面特别说明的部分以外,具有与实施方式1的加热烹调器111中的提示轮廓决定部108相同的结构及功能。
在本发明的实施方式2的加热烹调器112中,提示轮廓决定部508在显示部105提示提示轮廓,取得符合使用者的期望的正确的轮廓、即使用者期望作为用于判断被加热物的颜色或者形状等的变化的区域的轮廓。
具体地,如图6所示,在通过显示部105提示给使用者的轮廓不被使用者认可的情况下(参照提示图像601),控制部109请求提示轮廓决定部508提示下一优先顺序的提示轮廓。提示轮廓决定部508将下一优先顺序的提示轮廓中的轮廓数及轮廓内面积与未认可轮廓的轮廓数及轮廓内面积进行比较。
在未认可轮廓的轮廓数及轮廓面积与下一优先顺序的提示轮廓几乎没有差异的情况下(例如,下一优先顺序的提示轮廓及未认可轮廓的轮廓数是相同数量、轮廓面积的差异在10%以下),控制部109判断所应用的阈值部分不合适。在这种情况下,提示轮廓决定部508通过控制部109,使显示部105显示让使用者从提示给使用者的轮廓中选择未认可轮廓的输入画面,取得未认可轮廓(参照提示图像602)。
提示轮廓决定部508变更未认可轮廓附近(例如,将轮廓内的面积放大30%的区域)的阈值,取得轮廓内面积通过变更阈值发生了变化后的轮廓、和成为未认可的轮廓。并且,提示轮廓决定部508通过控制部109,仅对提示给使用者的图像的轮廓中被使用者视为不认可的轮廓,将变更了轮廓内面积而得的轮廓作为下一个候选提示给使用者(参照提示图像603)。
这样,本实施方式的加热烹调器112构成为,在通过显示部105提示给使用者的被加热物110的轮廓不被使用者认可的情况下,提示轮廓决定部508通过控制部109,对提示给使用者的被加热物110的轮廓中的至少一部分,提醒使用者进行认可或者不认可的部分选择。更具体地,本实施方式的加热烹调器112构成为,提示轮廓决定部508针对显示于显示部105的被加热物110的轮廓中的至少一部分,在不被使用者认可时,使显示部显示提醒在多个轮廓中选择未认可的部分(部分选择)的输入画面。
根据这样的结构,能够减轻使用者的操作负担,不破坏便利性,取得更正确的轮廓即使用者期望的被加热物110的轮廓,亦即使用者期望作为用于判断被加热物的颜色或者形状等的变化的区域的轮廓。由此,能够根据正确的轮廓进行适合于被加热物110的加热烹调。
另外,在多次接到不认可的答复的情况下,数次请求认可将会妨碍使用者的便利性。考虑到这一点,加热烹调器112也可以构成为,利用由使用者描绘显示部105的图像等方法直接决定轮廓,由此取得正确的轮廓。
(实施方式3)
下面,关于本发明的实施方式3的加热烹调器113,使用图7进行说明。在本发明的实施方式3的加热烹调器113中构成为,与实施方式1的加热烹调器111区别较大的是,加热烹调器113具有照明模式存储部701,以及提示轮廓决定部708根据被变更了照明模式的轮廓候选(根据在用不同的照明模式照射的光下拍摄出的图像生成的轮廓候选)决定提示轮廓。
在下面的本发明的实施方式3的加热烹调器的说明中,对具有与实施方式1的加热烹调器111中的构成要素相同的功能或者结构的部分标注相同的标号,并分别省略其详细的说明,并应用实施方式1中的说明。并且,提示轮廓决定部708除下面特别说明的部分以外,具有与提示轮廓决定部108相同的结构及功能。
本发明的实施方式3的加热烹调器113还具有照明模式存储部701。在照明模式存储部701中存储了彼此不同的多种照明模式。
在本实施方式的加热烹调器113中,提示轮廓决定部708在使用轮廓候选生成部107生成轮廓候选时,根据在照明模式存储部701中存储的多种照明模式,向控制部109请求基于不同的照明模式的多个摄影图像。
例如,在照明模式存储部701存储了[P1]全部点亮(照明部103a~103d)、[P2]仅左侧点亮(照明部103a、103b)及[P3]仅右侧点亮(照明部103c、103d)这3种照明模式作为照明模式的情况下,在加热烹调器113中,通过摄像部104拍摄用这3种照明模式分别照射的被加热物110的图像,并通过图像取得部106而取得。用这3种照明模式分别照射的被加热物110的图像,根据从物理上不同的方向照射的光而产生的被加热物110的影子的方向(例如从摄像部104观察时的被加热物110的影子的方向)彼此不同。提示轮廓决定部708能够根据照明模式的差异,将根据包括在不同的方向产生的影子的摄影图像生成的轮廓作为判断材料。因此,容易估计所拍摄的图像的较暗部分的何处是影子。由此,能够从提示轮廓决定部708提示的轮廓中减小影子的影响。
如以上说明的那样,本实施方式的加热烹调器113还具有照明模式存储部701,在照明模式存储部701存储了彼此不同的多种照明模式。并且,在本实施方式的加热烹调器113中,提示轮廓决定部708根据通过摄像部104拍摄的加热室102内的图像生成轮廓候选并决定提示轮廓,摄像部104是在利用照明部103a~103d根据被存储于照明模式存储部701中的多个照明模式而照射的光下进行拍摄的。提示轮廓决定部708根据被不同的照明模式照射的被加热物110的摄影图像,生成与不同的照明模式分别对应的轮廓候选并决定提示轮廓。根据这样的结构,能够生成在物理上降低了由于因照明部103a~103d的照射光产生的被加热物110的影子的影响的轮廓,对使用者提示降低了影子的影响的轮廓。
(实施方式4)
下面,关于本发明的实施方式4的加热烹调器114,使用图8进行说明。在实施方式4的加热烹调器114中构成为,与实施方式1的加热烹调器111区别较大的是:还具有烹调菜单存储部801,其存储有多个烹调菜单及按照烹调菜单而假设的被加热物110的信息,以及提示轮廓决定部808根据按照烹调菜单而假设的被加热物110的信息决定要提示的轮廓候选。
在下面的本发明的实施方式4的加热烹调器114的说明中,对具有与实施方式1的加热烹调器中的构成要素相同的功能或者结构的部分标注相同的标号,在此省略其详细的说明,并应用实施方式1中的说明。并且,提示轮廓决定部808除下面特别说明的部分以外,具有与实施方式1的加热烹调器111中的提示轮廓决定部108相同的结构及功能。
在本发明的实施方式4的加热烹调器114中,提示轮廓决定部808在使用轮廓候选生成部107生成轮廓候选时,根据使用者从烹调菜单存储部801选择的烹调菜单的信息取得轮廓判断信息。作为轮廓判断信息,例如在烹调菜单是糕点的情况下,可以举出在摄影图像中具有相似形状的多个小型轮廓的信息,以及在烹调菜单是面包卷的情况下,可以举出具有形成为椭圆形的相似形状的多个中型轮廓的信息等。
在本实施方式4的加热烹调器114中构成为,提示轮廓决定部808在决定提示轮廓的优先顺序时,选择与使用者选择出的烹调菜单的烹调条件一致的轮廓。根据这样的结构,能够提高在加热烹调器114中提示符合使用者的期望的轮廓(即,使用者期望作为用于判断被加热物的颜色或者形状等的变化的区域的轮廓候选)的概率。
如以上说明的那样,本实施方式4的加热烹调器114还具有烹调菜单存储部801,用于存储多个烹调菜单及按照烹调菜单而假设的被加热物的信息。并且,本实施方式的加热烹调器114构成为,轮廓候选生成部107根据按照烹调菜单而假设的被加热物的信息决定要提示给使用者的轮廓候选。根据这样的结构,能够提示根据烹调菜单而预测的轮廓,能够生成并取得更正确的轮廓提示给使用者。
产业上的可利用性
如上所述,本发明提供一种加热烹调器,能够减轻使用者的操作负担,不破坏便利性,取得使用者期望的被加热物的轮廓,即取得使用者期望作为用于判断被加热物的颜色或者形状等的变化的区域的轮廓。由此,除了进行加热烹调的烤炉、烤架及加热蒸汽器等加热烹调器以外,还可以应用于识别被加热物的颜色变化及形状变化能够发挥有益作用的烘干装置及化学反应装置等各种工业用途中的加热装置等。
标号说明
101加热部;102加热室;103a~103d照明部;104摄像部;105显示部;106图像取得部;107轮廓候选生成部;108、508、708、808提示轮廓决定部;109控制部;110被加热物;111~114加热烹调器;201摄影图像;202灰度化图像;203a 2值化图像(阈值a);203b 2值化图像(阈值b);204a轮廓图像(阈值a);204b轮廓图像(阈值b);301提示图像(第1候选);302提示图像(第2候选);303提示图像(第3候选);601提示图像;602提示图像;603提示图像;701照明模式存储部;801烹调菜单存储部。
Claims (5)
1.一种加热烹调器,具有:
加热部,其对被加热物进行加热;
加热室,其收纳被加热物;
照明部,其向所述加热室内照射光;
摄像部,其拍摄所述加热室内的图像;
显示部,其显示所述被加热物的轮廓;
图像取得部,其从所述摄像部取得所述被加热物的图像;
轮廓候选生成部,其使用所述图像取得部得到的所述被加热物的所述图像生成所述被加热物的多个轮廓候选;
提示轮廓决定部,其从所述轮廓候选生成部得到的所述多个轮廓候选中决定在所述显示部显示的轮廓;以及
控制部,其使所述显示部显示由所述提示轮廓决定部决定的所述轮廓,
所述提示轮廓决定部构成为,在显示于所述显示部的所述轮廓不被认可的情况下,在所述显示部显示如下的输入画面:所述输入画面是针对显示于所述显示部的所述被加热物的所述轮廓中的一部分,提醒进行认可或者不认可的部分选择。
2.根据权利要求1所述的加热烹调器,其中,
所述提示轮廓决定部构成为,在显示于所述显示部的所述轮廓不被认可的情况下,在所述显示部显示其它的轮廓候选。
3.根据权利要求1或2所述的加热烹调器,其中,
所述轮廓候选生成部构成为,变更所述图像取得部得到的所述被加热物的所述图像的图像信息的参数,根据变更后的所述图像信息的参数生成所述被加热物的多个轮廓候选。
4.根据权利要求1或2所述的加热烹调器,其中,
所述加热烹调器还具有照明模式存储部,该照明模式存储部存储有通过所述照明部向所述加热室内照射光的多个照明模式,
所述提示轮廓决定部构成为,从所述轮廓候选生成部使用在基于所述多个照明模式照射的光下拍摄的所述被加热物的摄影图像生成的轮廓候选中,决定提示轮廓。
5.根据权利要求1或2所述的加热烹调器,其中,
所述加热烹调器还具有烹调菜单存储部,该烹调菜单存储部存储有多个烹调菜单及按照所述多个烹调菜单分别假设的所述被加热物的信息,
所述轮廓候选生成部构成为,根据按照所述多个烹调菜单分别假设的所述被加热物的所述信息,决定在所述显示部显示的所述轮廓候选。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016065332 | 2016-03-29 | ||
JP2016-065332 | 2016-03-29 | ||
PCT/JP2017/012591 WO2017170519A1 (ja) | 2016-03-29 | 2017-03-28 | 加熱調理器 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108885009A CN108885009A (zh) | 2018-11-23 |
CN108885009B true CN108885009B (zh) | 2020-06-30 |
Family
ID=59965776
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780020593.XA Active CN108885009B (zh) | 2016-03-29 | 2017-03-28 | 加热烹调器 |
Country Status (4)
Country | Link |
---|---|
EP (1) | EP3438546B1 (zh) |
JP (1) | JP6909954B2 (zh) |
CN (1) | CN108885009B (zh) |
WO (1) | WO2017170519A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019198621A1 (ja) * | 2018-04-09 | 2019-10-17 | パナソニックIpマネジメント株式会社 | 加熱調理器 |
JPWO2019208284A1 (ja) * | 2018-04-25 | 2021-04-30 | パナソニックIpマネジメント株式会社 | 加熱調理器 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5940714U (ja) * | 1982-09-08 | 1984-03-15 | 株式会社東芝 | 高周波加熱装置 |
JP2001272045A (ja) * | 2000-03-27 | 2001-10-05 | Sanyo Electric Co Ltd | オーブン調理器 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1163509A (ja) * | 1997-08-26 | 1999-03-05 | Sharp Corp | 加熱調理器 |
JP4002269B2 (ja) * | 2004-10-29 | 2007-10-31 | 沖電気工業株式会社 | 印鑑照合装置およびその方法 |
CN101504158A (zh) * | 2008-07-30 | 2009-08-12 | 郭恒勋 | 一种没有微波辐射的微波炉及其操作和控制方法 |
JP5141452B2 (ja) * | 2008-09-05 | 2013-02-13 | 富士通株式会社 | 姿勢計測装置及び姿勢計測方法 |
JP5229050B2 (ja) * | 2009-03-30 | 2013-07-03 | 富士通株式会社 | 画像からの文書領域抽出装置、方法、及びプログラム |
JP5319637B2 (ja) * | 2010-09-30 | 2013-10-16 | 株式会社シフト | 二次元コード、エンコード装置、エンコードプログラムおよび二次元コードリーダ |
EP2638325B1 (en) * | 2010-11-12 | 2015-03-11 | Convotherm Elektrogeräte GmbH | A cooking device, and a procedure for cooking food |
CN202281268U (zh) * | 2011-06-24 | 2012-06-20 | 吴梓锋 | 可视微波炉 |
EP2770295B1 (en) * | 2011-10-11 | 2019-11-27 | Nikon Corporation | Shape-measuring device, system for manufacturing structures, shape-measuring method, method for manufacturing structures, shape-measuring program |
JP2013175084A (ja) * | 2012-02-27 | 2013-09-05 | Fujitsu Ltd | 文字認識装置および文字認識方法並びに文字認識プログラム |
CN110235906B (zh) * | 2012-12-04 | 2022-06-21 | 英戈·施托克格南特韦斯伯格 | 热处理监控系统 |
JP6088328B2 (ja) * | 2013-04-04 | 2017-03-01 | 東芝ホームテクノ株式会社 | 加熱調理器 |
DE102014210672A1 (de) * | 2014-06-05 | 2015-12-17 | BSH Hausgeräte GmbH | Gargerät mit Lichtmusterprojektor und Kamera |
CN107535024B (zh) * | 2015-05-05 | 2020-11-27 | 俊生活公司 | 连接的食品制备系统及其使用方法 |
-
2017
- 2017-03-28 CN CN201780020593.XA patent/CN108885009B/zh active Active
- 2017-03-28 WO PCT/JP2017/012591 patent/WO2017170519A1/ja active Application Filing
- 2017-03-28 JP JP2018508054A patent/JP6909954B2/ja active Active
- 2017-03-28 EP EP17775056.9A patent/EP3438546B1/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5940714U (ja) * | 1982-09-08 | 1984-03-15 | 株式会社東芝 | 高周波加熱装置 |
JP2001272045A (ja) * | 2000-03-27 | 2001-10-05 | Sanyo Electric Co Ltd | オーブン調理器 |
Also Published As
Publication number | Publication date |
---|---|
CN108885009A (zh) | 2018-11-23 |
JP6909954B2 (ja) | 2021-07-28 |
WO2017170519A1 (ja) | 2017-10-05 |
EP3438546B1 (en) | 2019-11-20 |
JPWO2017170519A1 (ja) | 2019-02-07 |
EP3438546A1 (en) | 2019-02-06 |
EP3438546A4 (en) | 2019-04-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109564000B (zh) | 烹饪物的褐变程度的确定 | |
US11448403B2 (en) | Cooking appliance with a user interface | |
CN106413163B (zh) | 半导体微波加热设备及其控制方法和控制装置 | |
US20190019049A1 (en) | Character/graphics recognition device, character/graphics recognition method, and character/graphics recognition program | |
US10201306B2 (en) | Method and system for capturing images for wound assessment with self color compensation | |
CN108885009B (zh) | 加热烹调器 | |
CN112005054B (zh) | 加热烹调器 | |
US20240044498A1 (en) | Method for determining the cooking end time of food, and household cooking appliance | |
US20220151037A1 (en) | Heating cooker | |
CN114222517B (zh) | 具有至少一个相机的家用烹饪器具的操作 | |
JP2020153945A (ja) | 調理管理の方法、システム、プログラム、および機器 | |
JP7178622B2 (ja) | 加熱調理器 | |
CN115190956B (zh) | 在家用烹饪器具上设定目标褐变程度的方法和设备 | |
JP2020165573A (ja) | 加熱調理器 | |
JP2019054361A (ja) | スキャナー、スキャンデータの生産方法およびスキャン制御プログラム | |
US20240107638A1 (en) | Determining a target processing state of a cooking product to be treated | |
CN113723498A (zh) | 食物熟度识别方法、装置、系统、电器、服务器及介质 | |
EP4455557A1 (en) | Food redistribution | |
EP4467921A1 (en) | Food preparation apparatus with food thickness determination | |
CN117837951A (zh) | 运行具有数字烹饪室彩色相机的烹饪器具 | |
JP6569307B2 (ja) | 画像処理装置及びプログラム | |
KR20240159656A (ko) | 식품 재배치 | |
CN119472342A (zh) | 烹饪控制方法 | |
JP2023105237A (ja) | 加熱調理器 | |
JP2022186151A (ja) | 加熱調理器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |