CN107642935A - 智能冰箱及基于智能冰箱的拍摄的方法 - Google Patents

Abstract

本发明实施例提供一种智能冰箱及基于智能冰箱的拍摄的方法，该智能冰箱包括：箱体；箱门；多个第一发光单元，隐藏于所述箱体的外框拐角的内部；第一拍摄单元，设置于所述箱门的内表面上。本发明实施例中，通过将多个第一发光单元隐藏于箱体的外框拐角的内部，从而避免现有技术中标记的特征不明显，无法精确抓取边界的问题，而且，由于不改变箱体的表面结构，不会影响箱体的美观，提升用户体验，另外，使用发光单元作为标记的特征，使得拍摄的照片中的发光单元更加明显清晰，进而精准的抓取边界，提升了用户在使用智能冰箱时以及在后续得到图像时的用户体验效果。

Description

智能冰箱及基于智能冰箱的拍摄的方法

技术领域

本发明涉及智能家居技术领域，具体而言，涉及一种智能冰箱及基于智能冰箱的拍摄的方法。

背景技术

随着科技的发展，智能家居概念越来越热，智能冰箱应运而生。

智能冰箱可以通过摄像头随时拍摄冰箱内部图片，并将图像上传到云端进行云图像识别，由此即可列出冰箱内的食品列表，用户可以通过手机APP随时查看冰箱内食品。

现有技术中，智能冰箱基于门箱对拍或静态拍摄图像，智能冰箱需要安装有摄像头装置，而摄像头直接获得的图片由于摄像头安装的精度、所拍图片本身的畸变，角度传感器精度等因素造成原图畸变较为严重并且一致性较差，为了在智能冰箱的屏幕或手机端app上给用户呈现美观的图像，这就要求对原图进行图像矫正。这其中涉及到一个重要的问题就是对原图中无用信息进行裁剪，这需要在原图上有明确的标记点，以便后期处理时能够根据标记点把无用信息裁掉，再对剪裁后的图片进行矫正，这样就会得到美观的图片。图1是现有技术中摄像头拍摄的箱门的照片示意图，图2是现有技术中对图1中摄像头拍摄的照片进行裁剪后的示意图，图3是现有技术中对图2中的照片进行矫正后的示意图。

在实现本发明的过程中，发明人发现，现有技术中，系统在对摄像头拍摄的照片进行裁切时，为了能够裁切出智能冰箱箱体以及箱门的完整照片，需要在箱门照片和箱体照片上找特征作为标记物，在箱门图片和箱体图片找特征作为标记物，系统裁切掉标记物以外的部分，而后对所裁切的图片进行识别和矫正。而在实际的光线环境下，箱门和箱体上标记的特征可能显示不明显，无法精确抓取边界，而通过在箱门或者箱体上做醒目的标记点的方式，又会影响智能冰箱整体的美观。

因此，需要一种新的智能冰箱及基于智能冰箱的拍摄的方法。

在所述背景技术部分公开的上述信息仅用于加强对本发明的背景的理解，因此它可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

有鉴于此，本发明提供一种智能冰箱及基于智能冰箱的拍摄的方法，能够使用发光单元作为标记的特征，进而精准的抓取边界，提升了用户在使用智能冰箱时以及在后续得到图像时的用户体验效果。

本发明的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本发明的实践而习得。

根据本发明的第一方面，提供一种智能冰箱，其中，所述智能冰箱包括：

箱体；

箱门；

多个第一发光单元，隐藏于所述箱体的外框拐角的内部；

第一拍摄单元，设置于所述箱门的内表面上。

根据一些实施例，所述智能冰箱，还包括：

与所述多个第一发光单元对应的灯架，隐藏于所述箱体的外框拐角的内部，用于支撑所述多个第一发光单元。

根据一些实施例，所述智能冰箱还包括保温材料，填充于所述箱体的外框拐角的内部与第一发光单元以及所述灯架的空隙处。

根据一些实施例，每个第一发光单元包括可见光LED灯或红外LED灯。

根据一些实施例，其特征在于，所述多个第一发光单元中的四个分别隐藏于所述箱体的外框4个拐角的内部。

根据一些实施例，所述智能冰箱还包括：

控制单元，分别电连接于所述多个第一发光单元以及所述第一拍摄单元，用于在所述第一拍摄单元开始拍照时，控制所述多个第一发光单元开启。

根据一些实施例，所述智能冰箱包括：

显示单元，电连接于所述控制单元，用于接收所述显示所述控制单元输出的照片。

根据一些实施例，所述智能冰箱还包括：

多个第二发光单元，隐藏于所述箱门的内盖板拐角的内部，电连接于所述多个第一发光单元；

第二拍摄单元，设置于所述箱体内，电连接于所述第一拍摄单元。

根据本发明的第二方面，提供一种基于智能冰箱的拍摄的方法，其中，应用于如第一方面所述的智能冰箱，所述方法包括：

响应用户对所述智能冰箱的操作，启动所述多个第一发光单元以及所述第一拍摄单元，以获取所述第一拍摄单元拍摄的照片；

对所述照片进行处理，以获取所述智能冰箱箱体内部的信息；

输出所述信息。

根据一些实施例，当所述智能冰箱包括所述多个第二发光单元和所述第二拍摄单元时，所述方法还包括：

响应用户对所述智能冰箱的操作，启动所述多个第一发光单元、所述多个第二发光单元、以及所述第一拍摄单元和所述第二拍摄单元，以获取所述第一拍摄单元拍摄的照片和所述第二拍摄单元拍摄的照片；

对所述第一拍摄单元拍摄的照片和所述第二拍摄单元拍摄的照片进行处理，以获取到所述智能冰箱箱体以及箱门的信息；

输出所述智能冰箱箱体以及箱门的信息。

根据一些实施例，对所述照片进行处理，包括：

依据所述多个第一发光单元在所述照片上的位置，对所述照片进行裁剪，并对裁剪后的所述照片进行矫正，以获取显示所述智能冰箱箱体内部物品的照片；

输出所述信息，包括：显示所述照片。

根据一些实施例，所述对所述照片进行处理，包括：

依据所述多个第一发光单元在所述照片上的位置，对所述照片进行裁剪，并对裁剪后的所述照片进行矫正，对矫正后的所述照片进行图像识别，以获取所述智能冰箱箱体内部物品的信息；

输出所述信息，包括：以语音形式或者文字形式输出所述信息。

本发明实施例中，通过将多个第一发光单元隐藏于箱体的外框拐角的内部，从而避免现有技术中标记的特征不明显，无法精确抓取边界的问题，而且，由于不改变箱体的表面结构，不会影响箱体的美观，提升用户体验，另外，使用发光单元作为标记的特征，使得拍摄的照片中的发光单元更加明显清晰，进而精准的抓取边界，提升了用户在使用智能冰箱时以及在后续得到图像时的用户体验效果。

附图说明

通过参照附图详细描述其示例实施例，本发明的上述和其它目标、特征及优点将变得更加显而易见。

图1是现有技术中摄像头拍摄的箱门的照片示意图；

图2是现有技术中对图1中摄像头拍摄的照片进行裁剪后的示意图；

图3是现有技术中对图2中的照片进行矫正后的示意图；

图4是本发明实施例示出的一种第一发光单元未发光时的智能冰箱的结构示意图；

图5是本发明实施例示出的一种第一发光单元发光时的智能冰箱的结构示意图；

图6是本发明实施例示出的一种箱体11的外框拐角的内部的示意图；

图7是本发明实施例示出的一种多个第二发光单元开启时的示意图；

图8是本发明实施例示出的一种基于智能冰箱的拍摄的方法的流程示意图。

具体实施方式

现在将参考附图更全面地描述示例实施例。然而，示例实施例能够以多种形式实施，且不应被理解为限于在此阐述的实施例；相反，提供这些实施例使得本发明将全面和完整，并将示例实施例的构思全面地传达给本领域的技术人员。在图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。

此外，所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中，提供许多具体细节从而给出对本发明的实施例的充分理解。然而，本领域技术人员将意识到，可以实践本发明的技术方案而没有特定细节中的一个或更多，或者可以采用其它的方法、组元、装置、步骤等。在其它情况下，不详细示出或描述公知方法、装置、实现或者操作以避免模糊本发明的各方面。

附图中所示的方框图仅仅是功能实体，不一定必须与物理上独立的实体相对应。即，可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。

附图中所示的流程图仅是示例性说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解，而有的操作/步骤可以合并或部分合并，因此实际执行的顺序有可能根据实际情况改变。

为了解决现有技术中，在实际的光线环境下，箱门和箱体上标记的特征可能显示不明显，无法精确抓取边界，而通过在箱门或者箱体上做醒目的标记点的方式，又会影响智能冰箱整体的美观的问题，本发明实施例提供了一种智能冰箱。

图4是本发明实施例示出的一种第一发光单元未发光时的智能冰箱的结构示意图，图5是本发明实施例示出的一种第一发光单元发光时的智能冰箱的结构示意图，图6是本发明实施例示出的一种箱体11的外框拐角的内部的示意图。

如图4-6所示，该智能冰箱100可以包括但不限于：

箱体11、箱门21、多个第一发光单元12以及第一拍摄单元22。根据示例实施例，多个第一发光单元12隐藏于箱体1的外框拐角的内部，而第一拍摄单元22设置于箱门21的内表面上。

本发明实施例中，通过将多个第一发光单元12隐藏于箱体11的外框拐角的内部，从而避免现有技术中标记的特征不明显，无法精确抓取边界的问题，而且，由于不改变箱体的表面结构，不会影响箱体的美观，提升用户体验，另外，使用发光单元作为标记的特征，使得拍摄的照片中的发光单元更加明显清晰，进而精准的抓取边界，提升了用户在使用智能冰箱时以及在后续得到图像时的用户体验效果。

根据示例实施例，该智能冰箱100还可以包括与多个第一发光单元12对应的灯架13，隐藏于箱体11的外框拐角的内部，用于支撑所述多个第一发光单元12。该灯架13可以为包括圆柱形镂空设计的灯架，从而第一发光单元安装在该圆柱形镂空处。

需要说明的是，本发明实施例中建议第一拍摄单元22设置于箱门21的内表面中垂直位置大概在第二搁置层，水平位置大概在箱门中间偏右，这样可以使得第一拍摄单元可以正对箱体11中心位置拍摄，以获取到较大的视角，从而使得拍摄的照片清晰，变形较小。

根据示例实施例，该智能冰箱100还包括保温材料14，填充于箱体11的外框拐角的内部与第一发光单元12以及所述灯架13的空隙处。

如图6所示，第一发光单元12安装在灯架13上，再将灯架13安装到箱体外框拐角内部，可以用双面胶16预定位，然后可以去做发泡，将保温材料14(图6未示出)填充于箱体12的外框拐角的内部。

需要说明的是，箱体12的外框材质为非遮光材质，一般为白色ABS或PS，都具有透光性，所以当第一拍摄单元22启动时，第一发光单元的光线会透过箱体11的外框被第一拍摄单元22捕捉。

根据示例实施例，本发明实施例中该多个第一发光单元12的数目为至少4个，多个第一发光单元12彼此之间可以串联，其中该多个第一发光单元12中的四个分别隐藏于该箱体11的外框4个拐角的内部。需要说明的是，由于智能冰箱的箱体外框通常为方体，因此，通常外框的4个拐角可以限定出箱体内的完整照片，从而能够获取到箱体内的完整照片。

根据示例实施例，该智能冰箱100还可以包括：控制单元3，分别电连接于所述多个第一发光单元12以及所述第一拍摄单元22，控制单元3用于在所述第一拍摄单元22开始拍照时，控制所述多个第一发光单元12同时开启。

需要说明的是，控制单元3也可以控制多个第一发光单元12在该第一拍摄单元22开始拍照时开启，只要能够保证在第一拍摄单元22开始拍照时，多个第一发光单元12开启即可。

需要注意的是，控制单元3可以根据预设置的第一拍摄单元22的触发拍摄条件，对应控制第一拍摄单元22的拍摄和多个第一发光单元12的开启。

根据示例实施例，该智能冰箱100还可以包括设置于箱门外表面的显示器，第一拍摄单元22在拍摄照片后，控制单元3可以对该照片进行处理，例如，裁切和矫正操作，并在处理后，将该照片输出至显示器，显示器显示处理后的照片。

需要说明的是，控制单元3也可以将该第一拍摄单元22拍摄的照片发送到用户的移动设备中，以方便用户在移动设备中随时查看该智能冰箱内部物品。

根据示例实施例，每个第一发光单元12包括可见光LED灯如红色，绿色等，或者红外LED灯，红外LED灯不会发出可见光，用户在任何时刻都不会察觉，从而不会影响美观。

智能冰箱可以分为闭门拍摄(也称静态拍摄)和开门拍摄(也称动态拍摄)。闭门拍摄是指在智能冰箱的箱门关闭后拍摄，而开门拍摄是指在智能冰箱箱门关闭的过程中，如果箱体与箱门的角度达到阈值，则在此刻拍摄。

由于闭门拍摄这种方式，智能冰箱在开门状态下不会拍照，用户不会察觉有LED灯的存在，从而建议第一发光单元采用可见光LED，不影响美观。

而开门拍摄这种方式，智能冰箱在开门状态下拍照，如果第一发光单采用可见光LED，用户会察觉，因此建议这种情况下，第一发光单元采用红外LED灯，这样当LED灯启动时，不会发出可见光，用户不会察觉。

需要注意的是，本发明实施例中不仅可以对箱体内部的进行拍摄，同时也可以对箱门进行拍摄。在对箱体和箱门进行拍摄时，该智能冰箱可以包括：

多个第二发光单元23，隐藏于所述箱门21的内盖板拐角的内部，电连接于所述多个第一发光单元12，第二拍摄单元15，设置于所述箱体11内，电连接于所述第一拍摄单元22。需要说明的是，该第二拍摄单元15通常设置于箱体11内部中间位置处，以获取到较大的视角，从而使得拍摄的照片清晰，变性较小。例如，可以设置于箱体内的第二搁置层上。

图7是本发明实施例示出的一种多个第二发光单元开启时的示意图，如图7所示，在非拍照情况下，用户打开冰箱门，没有任何标记物可以被发现，当第二拍摄单元要拍照时，位于箱门内部四角位置的LED(可见光或红外光)会同时启动，这样摄像头捕捉到的照片上就会有光斑(如图7中四个角的圆点所示的光斑)，后台就可以依据光斑位置来裁剪照片，再经过矫正就可以输出给用户美观的图片了。

本发明实施例中，通过将多个第二发光单元23隐藏于箱门21的外框拐角的内部，从而避免现有技术中标记的特征不明显，无法精确抓取边界的问题，而且，由于不改变箱体的表面结构，不会影响箱体的美观，提升用户体验，另外，使用发光单元作为标记的特征，使得拍摄的照片中的发光单元更加明显清晰，进而精准的抓取边界，提升了用户在使用智能冰箱时以及在后续得到图像时的用户体验效果。

需要说明的是，本发明实施例中第二发光单元为第一发光单元的对应结构，相同的地方本申请不再赘述。

需要说明的是，多个第二发光单元23彼此之间可以串联，并串联到多个第一发光单元12上，因此，第二发光单元23与第一发光单元12是串联形式，当第一发光单元12开启时，第二发光单元23对应开启。而第二拍摄单元15，设置于所述箱体11内，电连接于所述第一拍摄单元22，因此，当所述第一拍摄单元22开始拍摄时，第二拍摄单元15也同时拍摄。进而，可以利用控制单元3联动控制第一拍摄单元22和第二拍摄单元15开始拍摄时，多个第一发光单元12和多个第二发光单元23同时开启。

需要说明的是，本发明并不限于此，例如，也可以将彼此之间串联的多个第二发光单元23和第二拍摄单元15分别电连接于控制单元3，控制单元3分别根据预设置的第一拍摄单元22和第二拍摄单元15的触发拍摄条件，对应控制多个第一发光单元12和多个第二发光单元23的开启。例如，设置第一拍摄单元22在关门之后拍摄，第一发光单元在关门后开启，而设置第二拍摄单元15在关门时箱体与箱门的角度达到60度时拍摄，第二发光单元在此时开启。

需要说明的是，第二发光单元23与第一发光单元12可以为不同类型的LED灯，例如，上面的例子中，第一发光单元12可以是可见光LED灯，而第二发光单元23可以是红外LED灯。

另外需要注意的是，第一拍摄单元22与第二拍摄单元15在关门后的位置可以不对称，从而避免摄像头的损坏。

应清楚地理解，本发明描述了如何形成和使用特定示例，但本发明的原理不限于这些示例的任何细节。相反，基于本发明公开的内容的教导，这些原理能够应用于许多其它实施例。

图8是本发明实施例示出的一种基于智能冰箱的拍摄的方法的流程示意图，其中，该方法可以应用于上述实施例中的智能冰箱100，如图8所示，该方法可以包括以下步骤：

S801，响应用户对所述智能冰箱的操作，启动所述多个第一发光单元以及所述第一拍摄单元，以获取所述第一拍摄单元拍摄的照片。

根据示例实施例，根据闭门拍摄(也称静态拍摄)和开门拍摄(也称动态拍摄)的方式，可以为每种类型的智能冰箱预设不同的操作，例如，在闭门拍摄这种方式下，设置用户在关门后的第2秒，启动多个第一发光单元和第一拍摄单元。

需要说明的是，本发明实施例中，启动多个第一发光单元以及第一拍摄单元并不仅限于同时启动，只要在第一拍摄单元开始拍摄时，多个第一发光单元开启即可。

S802，对所述照片进行处理，以获取所述智能冰箱箱体内部的信息。

根据示例实施例，对所述照片进行处理，可以包括以下两种情况：

情况一、依据所述多个第一发光单元在所述照片上的位置，对所述照片进行裁剪，并对裁剪后的所述照片进行矫正，以获取显示所述智能冰箱箱体内部物品的照片。

情况二、依据所述多个第一发光单元在所述照片上的位置，对所述照片进行裁剪，并对裁剪后的所述照片进行矫正后，对矫正后的所述照片进行图像识别，以获取所述智能冰箱箱体内部物品的信息。

需要说明的是，该物品的信息可以包括但不限于物品的数目、在该智能冰箱内的摆放位置以及该物品放入该智能冰箱的日期。

S803，输出所述信息。

根据上述实施例中的两种情况，输出所述信息，可以包括对应于情况一的显示所述照片，以及对应于情况二的以语音形式或者文字形式输出所述信息。

本发明实施例中，通过将多个第一发光单元隐藏于箱体的外框拐角的内部，从而可以响应用户对所述智能冰箱的操作，启动所述多个第一发光单元以及所述第一拍摄单元，以获取所述第一拍摄单元拍摄的照片；对所述照片进行处理，以获取所述智能冰箱箱体内部的信息；输出所述信息，避免现有技术中标记的特征不明显，无法精确抓取边界的问题，而且，由于不改变箱体的表面结构，不会影响箱体的美观，提升用户体验，另外，使用发光单元作为标记的特征，使得拍摄的照片中的发光单元更加明显清晰，进而精准的抓取边界，提升了用户在使用智能冰箱时以及在后续得到图像时的用户体验效果。

描述于本申请实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中，其中，这些单元的名称在某种情况下并不构成对该单元本身的限定。

以上具体示出和描述了本发明的示例性实施例。应可理解的是，本发明不限于这里描述的详细结构、设置方式或实现方法；相反，本发明意图涵盖包含在所附权利要求的精神和范围内的各种修改和等效设置。

Claims (12)

1.一种智能冰箱，其特征在于，所述智能冰箱包括：

箱体；

箱门；

多个第一发光单元，隐藏于所述箱体的外框拐角的内部；

第一拍摄单元，设置于所述箱门的内表面上。

2.如权利要求1所述的智能冰箱，其特征在于，所述智能冰箱，还包括：

与所述多个第一发光单元对应的灯架，隐藏于所述箱体的外框拐角的内部，用于支撑所述多个第一发光单元。

3.如权利要求2所述的智能冰箱，其特征在于，所述智能冰箱还包括保温材料，填充于所述箱体的外框拐角的内部与第一发光单元以及所述灯架的空隙处。

4.如权利要求1所述的智能冰箱，其特征在于，每个第一发光单元包括可见光LED灯或红外LED灯。

5.如权利要求1所述的智能冰箱，其特征在于，所述多个第一发光单元中的四个分别隐藏于所述箱体的外框4个拐角的内部。

6.如权利要求1所述的智能冰箱，其特征在于，所述智能冰箱还包括：

控制单元，分别电连接于所述多个第一发光单元以及所述第一拍摄单元，用于在所述第一拍摄单元开始拍照时，控制所述多个第一发光单元开启。

7.如权利要求6所述的智能冰箱，其特征在于，所述智能冰箱包括：

显示单元，电连接于所述控制单元，用于接收所述显示所述控制单元输出的照片。

8.如权利要求1所述的智能冰箱，其特征在于，所述智能冰箱还包括：

多个第二发光单元，隐藏于所述箱门的内盖板拐角的内部，电连接于所述多个第一发光单元；

第二拍摄单元，设置于所述箱体内，电连接于所述第一拍摄单元。

9.一种基于智能冰箱的拍摄的方法，其特征在于，应用于如权利要求1-8中任意一项所述的智能冰箱，所述方法包括：

响应用户对所述智能冰箱的操作，启动所述多个第一发光单元以及所述第一拍摄单元，以获取所述第一拍摄单元拍摄的照片；

对所述照片进行处理，以获取所述智能冰箱箱体内部的信息；

输出所述信息。

10.如权利要求9所述的方法，其特征在于，当所述智能冰箱包括所述多个第二发光单元和所述第二拍摄单元时，所述方法还包括：

响应用户对所述智能冰箱的操作，启动所述多个第一发光单元、所述多个第二发光单元、以及所述第一拍摄单元和所述第二拍摄单元，以获取所述第一拍摄单元拍摄的照片和所述第二拍摄单元拍摄的照片；

对所述第一拍摄单元拍摄的照片和所述第二拍摄单元拍摄的照片进行处理，以获取到所述智能冰箱箱体以及箱门的信息；

输出所述智能冰箱箱体以及箱门的信息。

11.如权利要求9所述的方法，其特征在于，对所述照片进行处理，包括：

依据所述多个第一发光单元在所述照片上的位置，对所述照片进行裁剪，并对裁剪后的所述照片进行矫正，以获取显示所述智能冰箱箱体内部物品的照片；

输出所述信息，包括：显示所述照片。

12.如权利要求9所述的方法，其特征在于，所述对所述照片进行处理，包括：

依据所述多个第一发光单元在所述照片上的位置，对所述照片进行裁剪，并对裁剪后的所述照片进行矫正，对矫正后的所述照片进行图像识别，以获取所述智能冰箱箱体内部物品的信息；

输出所述信息，包括：以语音形式或者文字形式输出所述信息。