CN103237203B - 一种基于移动终端的音视频同步方法及系统 - Google Patents

Abstract

本发明适用于通信领域，提供了基于移动终端的音视频同步方法，包括：开启移动终端的摄像头以及麦克风，并提示用户将摄像头对准与移动终端通信的显示终端设备的显示屏；同时发送预设帧画面视频信号以及一段预设音频信号至显示终端设备；通过摄像头捕捉预设帧画面视频信号在显示终端设备的显示屏出现的时间，并记录为第一时间点；通过麦克风捕捉预设音频信号在显示终端设备开始播放的时间，并记录为第二时间点；通过第一时间点与第二时间点的差值调整移动终端发送给显示终端设备的音频数据以及视频数据的时间差。本发明还提供基于移动终端的音视频同步系统。本发明所提供的基于移动终端的音视频同步方法及系统可以实现音视频的同步播放。

Description

一种基于移动终端的音视频同步方法及系统

技术领域

本发明涉及通信领域，尤其涉及一种基于移动终端的音视频同步方法及系统。

背景技术

目前，越来越多的移动终端，例如手机、平板电脑等都支持HDMI、MHL或WIFIDisplay等技术，可以将移动终端上的音频数据和视频数据传输到电视上进行播放显示。在应用这些技术时，由于数据传输的原因，以及电视对接收到的音频数据和视频数据进行处理造成的延时不同，最终电视上显示的图像和播放出来的声音会不同步（比如人的声音和嘴型对不上）。

现有的常用方法是个人根据实际看到的和听到的效果，在移动终端上手动调整声音的延时时间，使得电视端的图像和声音达到同步。

然而，现有的这种处理方法操作起来比较繁琐，而且精确度也不高。

因此，亟需设计一种操作简单而且精确度高的方式，使得移动终端发送给电视的音视频数据在电视进行播放时达到同步的效果。

发明内容

有鉴于此，本发明实施例的目的在于提供一种基于移动终端的音视频同步方法及系统，旨在解决现有技术中处理音视频数据同步的方法操作繁琐而且精确度不高的问题。

本发明实施例是这样实现的，一种基于移动终端的音视频同步方法，所述方法包括：

开启所述移动终端的摄像头以及麦克风，并提示用户将所述摄像头对准与所述移动终端通信的显示终端设备的显示屏；

同时发送预设帧画面视频信号以及一段预设音频信号至所述显示终端设备；

通过所述摄像头捕捉所述预设帧画面视频信号在所述显示终端设备的显示屏出现的时间，并记录为第一时间点；

通过所述麦克风捕捉所述预设音频信号在所述显示终端设备开始播放的时间，并记录为第二时间点；

通过所述第一时间点与所述第二时间点的差值调整所述移动终端发送给所述显示终端设备的音频数据以及视频数据的时间差。

优选的，所述开启所述移动终端的摄像头以及麦克风，并提示用户将所述摄像头对准与所述移动终端通信的显示终端设备的显示屏的步骤之前还包括：

开启所述移动终端的音视频同步配置功能。

优选的，所述同时发送预设帧画面视频信号以及一段预设音频信号至所述显示终端设备的步骤之前还包括：

发送识别帧画面视频信号至所述显示终端设备进行显示；

判断通过所述摄像头是否捕捉到在所述显示终端设备显示的识别帧画面；

如果没有捕捉到在所述显示终端设备显示的识别帧画面，则提示用户调整所述摄像头的位置重新捕捉在所述显示终端设备显示的识别帧画面。

优选的，所述判断通过所述摄像头是否捕捉到在所述显示终端设备显示的识别帧画面的步骤之后还包括：

如果捕捉到在所述显示终端设备显示的识别帧画面，则提示用户识别帧画面已成功捕捉到可以进行下一步操作。

另一方面，本发明还提供一种基于移动终端的音视频同步系统，与显示终端设备交互，其中，所述系统包括：

对准模块，用于开启所述移动终端的摄像头以及麦克风，并提示用户将所述摄像头对准与所述移动终端通信的所述显示终端设备的显示屏；

第一发送模块，用于同时发送预设帧画面视频信号以及一段预设音频信号至所述显示终端设备；

第一记录模块，用于通过所述摄像头捕捉所述预设帧画面视频信号在所述显示终端设备的显示屏出现的时间，并记录为第一时间点；

第二记录模块，用于通过所述麦克风捕捉所述预设音频信号在所述显示终端设备开始播放的时间，并记录为第二时间点；

时间差调整模块，用于通过所述第一时间点与所述第二时间点的差值调整所述移动终端发送给所述显示终端设备的音频数据以及视频数据的时间差。

优选的，所述系统还包括：

同步开启模块，用于开启所述移动终端的音视频同步配置功能。

优选的，所述系统还包括：

第二发送模块，用于发送识别帧画面视频信号至所述显示终端设备进行显示；

判断模块，用于判断通过所述摄像头是否捕捉到在所述显示终端设备显示的识别帧画面；

位置调整模块，用于如果没有捕捉到在所述显示终端设备显示的识别帧画面，则提示用户调整所述摄像头的位置重新捕捉在所述显示终端设备显示的识别帧画面。

优选的，所述系统还包括：

确认模块，用于如果捕捉到在所述显示终端设备显示的识别帧画面，则提示用户识别帧画面已成功捕捉到可以进行下一步操作。

在本发明实施例中，本发明提供的技术方案，通过计算音视频数据在传输和经过显示终端设备处理后的延时来自动调整移动终端发送给显示终端设备的音频数据与视频数据的时间差值，可以使得移动终端发送给显示终端设备的音视频数据在显示终端设备进行播放时达到同步的效果，而且不需要用户进行手动操作，同时还具有精确度高的优点，进而提高用户的体验。

附图说明

图1为本发明一实施方式中基于移动终端的音视频同步方法流程图；以及

图2为本发明一实施方式中基于移动终端的音视频同步系统的结构示意图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明具体实施方式提供了一种基于移动终端的音视频同步方法，如图1所示，主要包括如下步骤：

S101、开启所述移动终端的摄像头以及麦克风，并提示用户将所述摄像头对准与所述移动终端通信的显示终端设备的显示屏；

S102、同时发送预设帧画面视频信号以及一段预设音频信号至所述显示终端设备；

S103、通过所述摄像头捕捉所述预设帧画面视频信号在所述显示终端设备的显示屏出现的时间，并记录为第一时间点；

S104、通过所述麦克风捕捉所述预设音频信号在所述显示终端设备开始播放的时间，并记录为第二时间点；

S105、通过所述第一时间点与所述第二时间点的差值调整所述移动终端发送给所述显示终端设备的音频数据以及视频数据的时间差。

本发明所提供的一种基于移动终端的音视频同步方法，通过计算音视频数据在传输和经过显示终端设备处理后的延时来自动调整移动终端发送给显示终端设备的音频数据与视频数据的时间差值，可以使得移动终端发送给显示终端设备的音视频数据在显示终端设备进行播放时达到同步的效果，而且不需要用户进行手动操作，同时还具有精确度高的优点，进而提高用户的体验。

以下将对本发明所提供的一种基于移动终端的音视频同步方法进行详细说明。

请参阅图1，为本发明一实施方式中基于移动终端的音视频同步方法流程图。在本实施方式中，该方法由移动终端来实现。

在步骤S101中，开启移动终端的摄像头以及麦克风，并提示用户将摄像头对准与移动终端通信的显示终端设备的显示屏。

在本实施方式中，在步骤S101之前还包括开启移动终端的音视频同步配置功能的步骤，在其他实施方式中，开启移动终端的音视频同步配置功能也可以用开启移动终端的摄像头以及麦克风来实现，也就是说，当用户开启移动终端的摄像头以及麦克风时，移动终端的音视频同步配置功能也自动开启并被激活，这样就可以简化用户的操作步骤。

在本实施方式中，显示终端设备与移动终端一直保持通信连接，在移动终端的摄像头以及麦克风被用户开启后，可以通过弹出对话框的方式提示用户将摄像头对准与移动终端通信的显示终端设备的显示屏，这样以方便于摄像头能捕捉到显示终端设备所显示的画面。

在步骤S102中，同时发送预设帧画面视频信号以及一段预设音频信号至显示终端设备。

在本实施方式中，在步骤S102之前还包括调整摄像头位置的步骤，即：发送识别帧画面视频信号至显示终端设备进行显示；判断通过摄像头是否捕捉到在显示终端设备显示的识别帧画面；如果没有捕捉到在显示终端设备显示的识别帧画面，则提示用户调整摄像头的位置重新捕捉在显示终端设备显示的识别帧画面。在本实施方式中，识别帧画面可以为单一颜色的帧画面，例如一帧蓝色画面，将这一帧蓝色画面发送至显示终端设备进行显示，然后利用摄像头捕捉在显示终端设备上显示的蓝色画面，并判断摄像头是否捕捉到，如果没有捕捉到则表明移动终端的摄像头位置没有正对着显示终端设备的显示屏，这时就要提示用户调整摄像头的位置以重新捕捉在显示终端设备显示的蓝色画面，具体的提示方式亦可以用弹出对话框的方式提示用户进行调整。在本实施方式中，所述判断通过摄像头是否捕捉到在显示终端设备显示的识别帧画面的步骤之后还包括：如果捕捉到在显示终端设备显示的识别帧画面，则提示用户识别帧画面已成功捕捉到可以进行下一步操作。在本实施方式中，调整摄像头位置的步骤可以帮助用户及时并准确的摆正移动终端的定位。

在本实施方式中，步骤S102同时发送预设帧画面视频信号以及一段预设音频信号至显示终端设备，其中，预设帧画面亦可以为单一颜色的帧画面，不过预设帧画面与识别帧画面应为不同的颜色，例如预设帧画面为一帧红色画面。

在步骤S103中，通过摄像头捕捉预设帧画面视频信号在显示终端设备的显示屏出现的时间，并记录为第一时间点。

在本实施方式中，如果通过摄像头捕捉预设帧画面视频信号在显示终端设备的显示屏出现的时间为12时20分12秒，则记录下的第一时间点就为12时20分12秒，当然，为了进一步提高测试的精确度，还可以将移动终端的时间的最小单位调整到为毫秒级别，例如，记录下的第一时间点可以为12时20分12秒20毫秒。

在步骤S104中，通过麦克风捕捉预设音频信号在显示终端设备开始播放的时间，并记录为第二时间点。

在本实施方式中，如果通过麦克风捕捉预设音频信号在显示终端设备开始播放的时间为12时20分15秒，则记录下的第二时间点就为12时20分15秒，同样的，为了进一步提高测试的精确度，也可以将移动终端的时间的最小单位调整到为毫秒级别，例如，记录下的第二时间点可以为12时20分15秒50毫秒。

在步骤S105中，通过第一时间点与第二时间点的差值调整移动终端发送给显示终端设备的音频数据以及视频数据的时间差。

在本实施方式中，如果记录下的第一时间点可以为12时20分12秒20毫秒，记录下的第二时间点可以为12时20分15秒50毫秒，则移动终端自动计算第一时间点与第二时间点的差值，即为3秒30毫秒，这样就得到了在显示终端设备上播放的声音相对于画面的延时为3秒30毫秒，然后移动终端根据计算到的差值自动调整发送给显示终端设备的音频数据以及视频数据的时间差，也就是说将视频数据延后3秒30毫秒发送，使之与对应的音频数据在显示终端设备播放时保持同步。

在其他实施方式中，为了进一步提高音视频同步播放的精确度，还可以通过多次测试获取平均值的方式来提高计算第一时间点与第二时间点差值的精确度，从而提高用户的体验，多次测试的方式也就是重复测试步骤S102至步骤S105，在此就不作重复叙述。

本发明所提供的一种基于移动终端的音视频同步方法，通过计算音视频数据在传输和经过显示终端设备处理后的延时来自动调整移动终端发送给显示终端设备的音频数据与视频数据的时间差值，可以使得移动终端发送给显示终端设备的音视频数据在显示终端设备进行播放时达到同步的效果，而且不需要用户进行手动操作，同时还具有精确度高的优点，进而提高用户的体验。

本发明具体实施方式还提供一种基于移动终端的音视频同步系统20，与显示终端设备30交互，如图2所示，其中，所述基于移动终端的音视频同步系统主要包括：

对准模块201，用于开启所述移动终端的摄像头以及麦克风，并提示用户将所述摄像头对准与所述移动终端通信的所述显示终端设备的显示屏；

第一发送模块202，用于同时发送预设帧画面视频信号以及一段预设音频信号至所述显示终端设备；

第一记录模块203，用于通过所述摄像头捕捉所述预设帧画面视频信号在所述显示终端设备的显示屏出现的时间，并记录为第一时间点；

第二记录模块204，用于通过所述麦克风捕捉所述预设音频信号在所述显示终端设备开始播放的时间，并记录为第二时间点；

时间差调整模块205，用于通过所述第一时间点与所述第二时间点的差值调整所述移动终端发送给所述显示终端设备的音频数据以及视频数据的时间差。

本发明所提供的基于移动终端的音视频同步系统20，通过计算音视频数据在传输和经过显示终端设备处理后的延时来自动调整移动终端发送给显示终端设备的音频数据与视频数据的时间差值，可以使得移动终端发送给显示终端设备的音视频数据在显示终端设备进行播放时达到同步的效果，而且不需要用户进行手动操作，同时还具有精确度高的优点，进而提高用户的体验。

以下将对本发明所提供的一种基于移动终端的音视频同步系统20进行详细说明。

请参阅图2，所示为本发明一实施方式中基于移动终端的音视频同步系统20的结构示意图。在本实施方式中，基于移动终端的音视频同步系统20与显示终端设备30交互，其中，基于移动终端的音视频同步系统20包括对准模块201、第一发送模块202、第一记录模块203、第二记录模块204、时间差调整模块205、同步开启模块206、第二发送模块207、判断模块208、位置调整模块209以及确认模块210。在本实施方式中，移动终端可以为手机、平板电脑等，在此不做限定。

对准模块201，用于开启移动终端的摄像头以及麦克风，并提示用户将摄像头对准与基于移动终端的音视频同步系统20通信的显示终端设备30的显示屏。

在本实施方式中，同步开启模块206用于开启移动终端的音视频同步配置功能，在其他实施方式中，开启移动终端的音视频同步配置功能也可以用开启移动终端的摄像头以及麦克风来实现，也就是说，当用户开启移动终端的摄像头以及麦克风时，移动终端的音视频同步配置功能也自动开启并被激活，这样就可以简化用户的操作步骤。

在本实施方式中，显示终端设备30与基于移动终端的音视频同步系统20一直保持通信连接，在移动终端的摄像头以及麦克风被用户开启后，可以通过弹出对话框的方式提示用户将摄像头对准与基于移动终端的音视频同步系统20通信的显示终端设备30的显示屏，这样以方便于摄像头能捕捉到显示终端设备30所显示的画面。

第二发送模块207，用于发送识别帧画面视频信号至显示终端设备30进行显示。

判断模块208，用于判断通过摄像头是否捕捉到在显示终端设备30显示的识别帧画面。

位置调整模块209，用于如果没有捕捉到在显示终端设备30显示的识别帧画面，则提示用户调整摄像头的位置重新捕捉在显示终端设备30显示的识别帧画面。

在本实施方式中，识别帧画面可以为单一颜色的帧画面，例如一帧蓝色画面，第二发送模块207将这一帧蓝色画面发送至显示终端设备30进行显示，然后利用摄像头捕捉在显示终端设备30上显示的蓝色画面，判断模块208判断摄像头是否捕捉到，如果没有捕捉到则表明移动终端的摄像头位置没有正对着显示终端设备30的显示屏，这时就要提示用户调整摄像头的位置以重新捕捉在显示终端设备30显示的蓝色画面，具体的提示方式亦可以用弹出对话框的方式提示用户进行调整。在本实施方式中，位置调整模块209调整摄像头位置可以帮助用户及时并准确的摆正移动终端的定位。

确认模块210，用于如果捕捉到在显示终端设备30显示的识别帧画面，则提示用户识别帧画面已成功捕捉到可以进行下一步操作。

第一发送模块202，用于同时发送预设帧画面视频信号以及一段预设音频信号至显示终端设备30。在本实施方式中，预设帧画面亦可以为单一颜色的帧画面，不过预设帧画面与识别帧画面应为不同的颜色，例如预设帧画面为一帧红色画面。

第一记录模块203，用于通过摄像头捕捉预设帧画面视频信号在显示终端设备30的显示屏出现的时间，并记录为第一时间点。

在本实施方式中，如果通过摄像头捕捉预设帧画面视频信号在显示终端设备30的显示屏出现的时间为12时20分12秒，则记录下的第一时间点就为12时20分12秒，当然，为了进一步提高测试的精确度，还可以将移动终端的时间的最小单位调整到为毫秒级别，例如，记录下的第一时间点可以为12时20分12秒20毫秒。

第二记录模块204，用于通过麦克风捕捉预设音频信号在显示终端设备30开始播放的时间，并记录为第二时间点。

在本实施方式中，如果通过麦克风捕捉预设音频信号在显示终端设备30开始播放的时间为12时20分15秒，则记录下的第二时间点就为12时20分15秒，同样的，为了进一步提高测试的精确度，也可以将移动终端的时间的最小单位调整到为毫秒级别，例如，记录下的第二时间点可以为12时20分15秒50毫秒。

时间差调整模块205，用于通过第一时间点与第二时间点的差值调整移动终端发送给显示终端设备30的音频数据以及视频数据的时间差。

在本实施方式中，如果记录下的第一时间点可以为12时20分12秒20毫秒，记录下的第二时间点可以为12时20分15秒50毫秒，则移动终端自动计算第一时间点与第二时间点的差值，即为3秒30毫秒，这样就得到了在显示终端设备30上播放的声音相对于画面的延时为3秒30毫秒，然后移动终端根据计算到的差值自动调整发送给显示终端设备30的音频数据以及视频数据的时间差，也就是说将视频数据延后3秒30毫秒发送，使之与对应的音频数据在显示终端设备30播放时保持同步。

在其他实施方式中，为了进一步提高音视频同步播放的精确度，还可以通过多次测试获取平均值的方式来提高计算第一时间点与第二时间点差值的精确度，从而提高用户的体验，多次测试的方式也就是多次重复模块202至205的运作，在此就不作重复叙述。

本发明所提供的一种基于移动终端的音视频同步系统20，通过计算音视频数据在传输和经过显示终端设备30处理后的延时来自动调整移动终端发送给显示终端设备30的音频数据与视频数据的时间差值，可以使得移动终端发送给显示终端设备30的音视频数据在显示终端设备30进行播放时达到同步的效果，而且不需要用户进行手动操作，同时还具有精确度高的优点，进而提高用户的体验。

在本发明实施例中，本发明提供的技术方案，通过计算音视频数据在传输和经过显示终端设备处理后的延时来自动调整移动终端发送给显示终端设备的音频数据与视频数据的时间差值，可以使得移动终端发送给显示终端设备的音视频数据在显示终端设备进行播放时达到同步的效果，而且不需要用户进行手动操作，同时还具有精确度高的优点，进而提高用户的体验。

值得注意的是，上述实施例中，所包括的各个单元只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。

另外，本领域普通技术人员可以理解实现上述各实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，相应的程序可以存储于一计算机可读取存储介质中，所述的存储介质，如ROM/RAM、磁盘或光盘等。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (8)

1.一种基于移动终端的音视频同步方法，其特征在于，所述方法包括：

开启所述移动终端的摄像头以及麦克风，并提示用户将所述摄像头对准与所述移动终端通信的显示终端设备的显示屏；

同时发送预设帧画面视频信号以及一段预设音频信号至所述显示终端设备；

通过所述摄像头捕捉所述预设帧画面视频信号在所述显示终端设备的显示屏出现的时间，并记录为第一时间点；

通过所述麦克风捕捉所述预设音频信号在所述显示终端设备开始播放的时间，并记录为第二时间点；

在向所述显示终端设备发送音频数据和视频数据时，通过所述第一时间点与所述第二时间点的差值调整所述移动终端发送给所述显示终端设备的音频数据以及视频数据的时间差。

2.如权利要求1所述的基于移动终端的音视频同步方法，其特征在于，所述开启所述移动终端的摄像头以及麦克风，并提示用户将所述摄像头对准与所述移动终端通信的显示终端设备的显示屏的步骤之前还包括：

开启所述移动终端的音视频同步配置功能。

3.如权利要求1所述的基于移动终端的音视频同步方法，其特征在于，所述同时发送预设帧画面视频信号以及一段预设音频信号至所述显示终端设备的步骤之前还包括：

发送识别帧画面视频信号至所述显示终端设备进行显示；

判断通过所述摄像头是否捕捉到在所述显示终端设备显示的识别帧画面；

如果没有捕捉到在所述显示终端设备显示的识别帧画面，则提示用户调整所述摄像头的位置重新捕捉在所述显示终端设备显示的识别帧画面。

4.如权利要求3所述的基于移动终端的音视频同步方法，其特征在于，所述判断通过所述摄像头是否捕捉到在所述显示终端设备显示的识别帧画面的步骤之后还包括：

如果捕捉到在所述显示终端设备显示的识别帧画面，则提示用户识别帧画面已成功捕捉到可以进行下一步操作。

5.一种基于移动终端的音视频同步系统，与显示终端设备交互，其特征在于，所述系统包括：

对准模块，用于开启移动终端的摄像头以及麦克风，并提示用户将所述摄像头对准与所述移动终端通信的所述显示终端设备的显示屏；

第一发送模块，用于同时发送预设帧画面视频信号以及一段预设音频信号至所述显示终端设备；

第一记录模块，用于通过所述摄像头捕捉所述预设帧画面视频信号在所述显示终端设备的显示屏出现的时间，并记录为第一时间点；

第二记录模块，用于通过所述麦克风捕捉所述预设音频信号在所述显示终端设备开始播放的时间，并记录为第二时间点；

时间差调整模块，用于在向所述显示终端设备发送音频数据和视频数据时，通过所述第一时间点与所述第二时间点的差值调整所述移动终端发送给所述显示终端设备的音频数据以及视频数据的时间差。

6.如权利要求5所述的基于移动终端的音视频同步系统，其特征在于，所述系统还包括：

同步开启模块，用于开启所述移动终端的音视频同步配置功能。

7.如权利要求5所述的基于移动终端的音视频同步系统，其特征在于，所述系统还包括：

第二发送模块，用于发送识别帧画面视频信号至所述显示终端设备进行显示；

判断模块，用于判断通过所述摄像头是否捕捉到在所述显示终端设备显示的识别帧画面；

位置调整模块，用于如果没有捕捉到在所述显示终端设备显示的识别帧画面，则提示用户调整所述摄像头的位置重新捕捉在所述显示终端设备显示的识别帧画面。

8.如权利要求7所述的基于移动终端的音视频同步系统，其特征在于，所述系统还包括：

确认模块，用于如果捕捉到在所述显示终端设备显示的识别帧画面，则提示用户识别帧画面已成功捕捉到可以进行下一步操作。