CN101080000A - 视频会议中显示发言人的方法、系统、服务器和终端 - Google Patents

Abstract

本发明提供了一种视频会议中显示发言人的方法、系统、服务器和终端，属于通信领域。所述方法包括：在视频会议中，按照按照发言人的音频能量的大小找出当前发言人，并将当前发言人的视频画面突出显示。所述系统包括：会议媒体服务器和会议终端。本发明提供了一种会议媒体服务器，具体包括：比较模块、组合模块和发送模块。本发明还提供了一种会议终端，具体包括：比较模块、组合模块和显示模块。本发明通过突出显示当前发言人的视频画面，使与会人员更清楚地看到发言人的神态和身体语言，增强了视频会议的沟通效果。

Description

视频会议中显示发言人的方法、系统、服务器和终端

技术领域

本发明涉及通信领域，特别涉及一种视频会议中显示发言人的方法、系统、服务器和终端。

背景技术

视频会议是现代通信中常用的一项沟通手段。通过视频会议，与会人员不论处于何方，都可以通过语音和视频进行交流，非常方便。

目前视频会议系统对于音频的常见处理方法为：在视频会议系统中存在一个或多个混音设备，会议开始后，从多个会议终端的音频数据中挑选出几个音量最大的媒体流，通过混音设备对这几个媒体流进行叠加，叠加后的音频数据由会议终端播放出来。

视频会议系统对于视频的常见处理方法为：在每个会议终端无差别地显示所有与会人员画面，或者由管理员手动控制各个会议终端的视频显示方式(显示哪几方的画面、画面的尺寸等)，或者由与会人员手动控制自身所使用的会议终端的视频显示方式。

在视频会议中，如果与会人员较多，会议终端上显示的视频画面数量也会比较多；实际上，同时发言的发言人数量一般较少，只有1到2人，这1到2人的视频才是所有与会人员最为关心，最希望看清的。目前的视频会议系统由于不能自动将当前发言人突出显示，与会人员经常需要通过浏览多个画面才能定位到当前发言人的画面，然后才能看清其神态、身体语言；当发言人改变时，与会人员又需要重新寻找、定位发言人。这种情况在多方讨论、交流会议中频繁发生，给与会人员的使用带来很大的不便。

发明内容

为了使视频会议中的与会人员快速定位当前发言人的视频画面，本发明实施例提供了一种视频会议中显示发言人的方法、系统、服务器和终端。所述技术方案如下：

一种视频会议中显示发言人的方法，所述方法包括：

视频会议中，依据发言人的音频能量按照预定规则确定当前发言人；

突出显示所述当前发言人的视频画面。

本发明实施例还提供了一种视频会议中显示发言人的系统，所述系统包括：

会议媒体服务器，用于根据发言人的音频实时数据计算所述发言人的音频能量，依据发言人的音频能量按照预定规则确定当前发言人，重新组合发言人的视频实时数据，将所述当前发言人作为突出显示对象，并发送重新组合后的所述视频实时数据；

会议终端，用于接收所述会议媒体服务器发送的视频实时数据，并以视频画面的形式显示所述视频实时数据。

进一步地，本发明实施例还提供了另一种视频会议中显示发言人的系统，所述系统包括：

会议媒体服务器，用于转发发言人的音频实时数据和视频实时数据；

会议终端，用于接收所述会议媒体服务器转发的音频实时数据和视频实时数据，根据所述音频实时数据计算每个发言人的音频能量，依据发言人的音频能量按照预定规则确定当前发言人，重新组合发言人的视频实时数据，将所述当前发言人作为突出显示对象，显示重新组合后的所述视频实时数据。

本发明实施例同时提供了一种会议媒体服务器，所述会议媒体服务器包括：

比较模块，用于根据发言人的音频实时数据计算所述发言人的音频能量，依据各个发言人的音频能量按照预定规则确定当前发言人；

组合模块，用于将所述比较模块确定的所述当前发言人作为突出显示对象，重新组合所述发言人的视频实时数据；

发送模块，用于将所述组合模块重新组合的视频实时数据发送给会议终端。

本发明实施例同时提供了一种会议终端，所述会议终端包括：

比较模块，用于根据发言人的音频实时数据计算所述发言人的音频能量，依据各个发言人的音频能量按照预定规则确定当前发言人；

组合模块，用于将所述比较模块确定的所述当前发言人作为突出显示对象，重新组合所述发言人的视频实时数据；

显示模块，用于以视频画面的形式显示所述组合模块中重新组合后的视频实时数据。

本发明实施例通过发言人的音频能量找出视频会议的当前发言人，并将当前发言人的视频画面在会议终端上突出显示，使与会人员可以较快地定位出当前发言人，并且更清楚地看到当前发言人的神态和身体语言，增强了视频会议的沟通效果。

附图说明

图1是本发明视频会议中显示发言人的方法的实施例的流程图；

图2是本发明视频会议中显示发言人的方法的应用场景一；

图3是本发明视频会议中显示发言人的方法的应用场景二；

图4是本发明视频会议中显示发言人的方法的应用场景三；

图5是本发明视频会议中显示发言人的方法的实施例的显示方式一的示意图；

图6是本发明视频会议中显示发言人的方法的实施例的显示方式二的示意图；

图7是本发明视频会议中显示发言人的方法的实施例的显示方式三的示意图；

图8是本发明视频会议中显示发言人的系统的实施例的结构图；

图9是本发明视频会议中显示发言人的系统的另一实施例的结构图；

图10是本发明会议媒体服务器的实施例的结构图；

图11是本发明是会议终端的实施例的结构图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。

本发明实施例在判断出视频会议的当前发言人后，将当前发言人的视频画面在会议终端上突出显示，方便了与会人员观察发言人的神态和身体语言，增强了沟通的效果。

参见图1，本发明一种视频会议中显示发言人的方法的实施例，具体步骤如下：

步骤101：开通视频会议。

步骤102：从发言人中找出当前发言人。

其中，从发言人中找出当前发言人的方法具体如下：

获取发言人的音频实时数据，计算各发言人的音频能量，按照预定规则依据发言人的音频能量确定当前发言人。其中，预定规则可以是将各发言人中音频能量最大的发言人作为当前发言人；也可以是将各发言人中音频能量超过预先设定的阀值的发言人作为当前发言人。所述预定规则并不限于以上两种，在具体实施中，可根据需要设置其它的规则在确定当前发言人。

上述方法中当前发言人可以是一个，也可以是多个。最典型应用场景为从与会人员中找出一个人作为当前发言人，次典型应用场景为音频能量超过预先设定的阀值的任意一个发言人作为当前发言人。

获取发言人的音频实时数据的可以是视频会议系统中的会议媒体服务器，该方式适用于媒体服务器集中进行媒体处理的会议系统，图2为本发明视频会议中显示发言人的方法的应用场景一，其中，A、B、C均为普通会议终端，会议媒体服务器提供所有会议媒体处理功能，发言人的音频实时数据以媒体流的方式在会议媒体服务器和会议终端之间传输；

获取发言人的音频实时数据也可以是会议终端，该方式适用于会议终端进行分布式媒体处理的会议系统，图3为本发明视频会议中显示发言人的方法的应用场景二，其中，没有独立的媒体处理设备，每个会议终端都收到其它会议终端的媒体数据，自行完成媒体处理；该方式同样适用于其中一个会议终端提供会议媒体处理功能的系统，图4为本发明视频会议中显示发言人的方法的应用场景三，其中，会议终端A具有媒体处理功能，能够为其自身和会议终端B、C提供会议媒体服务。

每个发言人的音频实时数据与其视频实时数据是相关连的，都具有相同的会议终端标识，根据音频实时数据确定当前发言人后，根据音频实时数据的会议终端标识，找到当前发言人的视频实时数据，用于在会议终端上显示。当然，也可以通过本领域中的技术人员所知道的其它方式将每个发言人的音频实时数据与其视频实时数据相关连。

步骤103：在会议终端上更新视频画面布局，突出显示当前发言人的视频画面。

其中，在会议终端上突出显示当前发言人的视频画面的方式包括以下三种：

1)参见图5，在会议终端上，只显示当前发言人的视频画面。

2)参见图6，在会议终端上，将找到的当前发言人的视频画面进行放大处理，以大于其他发言人的视频画面的方式显示当前发言人的视频画面。

3)参见图7，在会议终端上，用特殊标记显示当前发言人的视频画面。

特殊标记可以是用边框标记当前发言人的视频画面，或是用其它颜色作为当前发言人视频画面的背景颜色，也可以是为当前发言人的视频画面加上标号，如①等。

进一步地，突出显示当前发言人的视频画面的处理过程可以在会议媒体服务器上完成，也可以在会议终端上完成。

在会议媒体服务器上完成突出显示处理的方法为：会议媒体服务器获取各个发言人的视频实时数据，将找出的当前发言人作为突出显示对象，组合出新的视频数据，例如：为了达到图5所示效果，在新的视频数据中只包括当前发言人的视频实时数据；为了达到图6所示效果，对当前发言人的视频实时数据进行扩展放大，在新的视频数据中包括其他发言人的视频实时数据和扩展放大后的当前发言人的视频实时数据；为了达到图7所示效果，变换当前发言人的视频实时数据对应的边框数据，以达到区别其他发言人的边框数据为准，或者在当前发言人的视频实时数据中增加①对应的数据等。并将新组合出来的视频数据发送给各个会议终端，会议终端收到视频数据后，以视频画面的形式在显示设备上显示发言人的视频画面。该方法适用于图2所示系统。

在会议终端上完成突出显示处理的方法为：会议终端获取各个发言人的视频实时数据，将找出的当前发言人作为突出显示对象，组合出新的视频数据，具体组合方法同上，这里不再赘述。并将新组合出来的视频数据以视频画面的形式显示在会议终端的显示设备上，该方法适用于图3所示系统；或者是会议终端除了在自身的显示设备上显示新的视频画面外，还将新的视频数据发送给其它会议终端，该方法适用于图4所示系统。

步骤104：判断会议是否结束，如果会议没有结束，则执行步骤105；否则，会议结束。

步骤105：在到达设定的延时时间后，返回步骤102。

参见图8，本发明一种视频会议中显示发言人的系统的实施例具体包括：

会议媒体服务器201，用于根据发言人的音频实时数据计算该发言人的音频能量，依据发言人的音频能量按照预定规则确定当前发言人，重新组合发言人的视频实时数据，将当前发言人作为突出显示对象，并发送重新组合后的视频实时数据；

会议终端202，用于接收会议媒体服务器201发送的视频实时数据，并以视频画面的形式显示视频实时数据。

其中，会议媒体服务器201依据发言人的音频能量按照预定规则确定当前发言人后，将当前发言人作为突出显示对象的实现过程如下：

根据当前发言人音频实时数据确定当前发言人后，根据音频实时数据对应的会议终端标识找到当前发言人的视频实时数据，将找到的视频实时数据作为突显对象。

参见图9，本发明一种视频会议中显示发言人的系统的实施例具体包括：

会议媒体服务器301，用于转发发言人的音频实时数据和视频实时数据；

会议终端302，用于接收会议媒体服务器301转发的音频实时数据和视频实时数据，根据音频实时数据计算每个发言人的音频能量，依据发言人的音频能量按照预定规则确定当前发言人，重新组合发言人的视频实时数据，将当前发言人作为突出显示对象，显示重新组合后的视频实时数据。

参见图10，本发明一种会议媒体服务器的实施例具体包括：

比较模块401，用于根据发言人的音频实时数据计算音频能量，依据各个发言人的音频能量按照预定规则确定当前发言人；

组合模块402，用于将比较模块401确定的所述当前发言人作为突出显示对象，重新组合发言人的视频实时数据；

发送模块403，用于将组合模块402重新组合的视频实时数据发送给会议终端。

其中，组合模块402重新组合发言人的视频实时数据的具体过程可以为以下几种：

1)为了达到图5所示效果，从视频实时数据中选取比较模块301找出的当前方言人对应的视频实时数据，将当前发言人的视频实时数据作为新的视频实时数据；

2)为了达到图6所示效果，对当前发言人的视频实时数据进行扩展放大，将其他发言人的视频实时数据和扩展放大后的当前发言人的视频实时数据组合成新的视频实时数据；

3)为了达到图7所示效果，变换当前发言人的视频实时数据对应的边框数据，以达到区别其他发言人的边框数据为准，或者在当前发言人的视频实时数据中增加①对应的数据等，也可以将当前发言人的视频实时数据中的背景数据换为其他颜色对应的数据，将变换后的当前发言的视频实时数据与其他发言人的视频实时数据组合成新的视频实时数据。

上述比较模块401具体包括：

计算单元，用于计算发言人的音频能量；

比较单元，用于依据各个发言人的音频能量按照预定规则确定当前发言人，所述预定规则为将各发言人中音频能量最大的发言人作为当前发言人，或将各发言人中音频能量超过预先设定的阀值的发言人作为当前发言人。

参见图11，本发明一种会议终端的实施例具体包括：

比较模块501，用于根据发言人的音频实时数据计算该发言人的音频能量，依据各个发言人的音频能量按照预定规则确定当前发言人；

组合模块502，用于将比较模块501确定的当前发言人作为突出显示对象，重新组合发言人的视频实时数据；

显示模块503，用于以视频画面的形式显示组合模块502中重新组合后的视频实时数据。

其中，比较模块502具体包括：

计算单元，用于计算发言人的音频能量；

比较单元，用于依据各个发言人的音频能量按照预定规则确定当前发言人，所述预定规则为将各发言人中音频能量最大的发言人作为当前发言人，或将各发言人中音频能量超过预先设定的阀值的发言人作为当前发言人。

本发明实施例可以利用软件实现，相应的软件可以存储在可读取的存储介质中，如计算机或服务器的硬盘中。

本发明实施例通过找出视频会议的当前发言人并突出显示其视频画面，有助于与会人员全面准确地理解发言人的发言内容，且避免了与会人员多次查找才能定位当前发言人，使用起来更加方便；当前发言人的视频画面可以以与会人员感兴趣的方式突出显示，提高了应用的灵活性。

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种视频会议中显示发言人的方法，其特征在于，所述方法包括：

视频会议中，依据发言人的音频能量按照预定规则确定当前发言人；

突出显示所述当前发言人的视频画面。

2.根据权利要求1所述的视频会议中显示发言人的方法，其特征在于，所述预定规则具体为：

将各个所述发言人中音频能量最大的发言人作为所述当前发言人；或将各个所述发言人中音频能量超过预先设定的阀值的发言人作为所述当前发言人。

3.根据权利要求1所述的视频会议中显示发言人的方法，其特征在于，突出显示所述当前发言人的视频画面的步骤具体为：

重新组合所述发言人的视频实时数据，将所述当前发言人作为突出显示对象；

以视频画面的形式显示重新组合后的所述视频实时数据。

4.根据权利要求1至3中任一权利要求所述的视频会议中显示发言人的方法，其特征在于，所述突出显示的方式具体为：

只显示所述当前发言人的视频画面；

或以大于其他发言人视频画面的比例显示所述当前发言人的视频画面；

或用特殊标记显示所述当前发言人的视频画面。

5.一种视频会议中显示发言人的系统，其特征在于，所述系统包括：

会议媒体服务器，用于根据发言人的音频实时数据计算所述发言人的音频能量，依据发言人的音频能量按照预定规则确定当前发言人，重新组合发言人的视频实时数据，将所述当前发言人作为突出显示对象，并发送重新组合后的所述视频实时数据；

会议终端，用于接收所述会议媒体服务器发送的视频实时数据，并以视频画面的形式显示所述视频实时数据。

6.一种视频会议中显示发言人的系统，其特征在于，所述系统包括：

会议媒体服务器，用于转发发言人的音频实时数据和视频实时数据；

会议终端，用于接收所述会议媒体服务器转发的音频实时数据和视频实时数据，根据所述音频实时数据计算每个发言人的音频能量，依据发言人的音频能量按照预定规则确定当前发言人，重新组合发言人的视频实时数据，将所述当前发言人作为突出显示对象，显示重新组合后的所述视频实时数据。

7.一种会议媒体服务器，其特征在于，所述会议媒体服务器包括：

比较模块，用于根据发言人的音频实时数据计算所述发言人的音频能量，依据各个发言人的音频能量按照预定规则确定当前发言人；

组合模块，用于将所述比较模块确定的所述当前发言人作为突出显示对象，重新组合所述发言人的视频实时数据；

发送模块，用于将所述组合模块重新组合的视频实时数据发送给会议终端。

8.根据权利要求7所述的会议媒体服务器，其特征在于，所述比较模块具体包括：

计算单元，用于计算发言人的音频能量；

比较单元，用于依据各个发言人的音频能量按照预定规则确定当前发言人，所述预定规则为将各发言人中音频能量最大的发言人作为当前发言人，或将各发言人中音频能量超过预先设定的阀值的发言人作为当前发言人。

9.一种会议终端，其特征在于，所述会议终端包括：

比较模块，用于根据发言人的音频实时数据计算所述发言人的音频能量，依据各个发言人的音频能量按照预定规则确定当前发言人；

组合模块，用于将所述比较模块确定的所述当前发言人作为突出显示对象，重新组合所述发言人的视频实时数据；

显示模块，用于以视频画面的形式显示所述组合模块中重新组合后的视频实时数据。

10.根据权利要求9所述的会议终端，其特征在于，所述比较模块具体包括：

计算单元，用于计算发言人的音频能量；

比较单元，用于依据各个发言人的音频能量按照预定规则确定当前发言人，所述预定规则为将各发言人中音频能量最大的发言人作为当前发言人，或将各发言人中音频能量超过预先设定的阀值的发言人作为当前发言人。

Images