实施例
首先对本发明实施例的工作环境进行简单的介绍,如图1所示为本发明实施例一提供的一种视频会议系统结构图。该系统包括:多点控制单元101(Multipoint Control Unit,MCU)、会场摄像机102、103和104,其中会场摄像机102、103和104分布在三个不同的会场,它们通过传输线路和多点控制单元101相连,比如通过IP网络相连。多点控制单元101可以将来自各会场的视频和音频数据转发至其他会场,比如将会场摄像机102采集的数据转发给会场摄像机103和104,当然多点控制单元101在转发过程中可以对该数据进行一定的处理,比如将各个画面予以拼接以增强会议体验等。
如图2所示为本发明实施例一提供的一种突出视频会议现场氛围的方法流程图,该方法包括如下步骤:
S201:接收各会场的视频和音频数据,具体来说是多点控制单元接收来自各会场的视频和音频数据,该接收数据过程属于现有技术,在此就不再进行赘述了。
S202:对所述视频和音频数据进行图像声音处理以突出当前视频会议的氛围。为了能让视频和音频突出当前视频会议的氛围,多点控制单元需要对接收到的视频和音频数据进行特殊的图像声音处理,使与会者可以直观地从该视频和音频中感受到会议氛围。
作为本发明的一个实施例,上述图像声音处理可以包括多种处理技术:比如节奏控制处理、色彩渲染处理、线条优化处理、背景融合处理、特殊效果生成叠加处理或质感模拟处理。
其中,节奏控制处理是对接收到的视频和音频数据,通过改变其帧率的方法,改变整个视频和音频数据处理的进度,使其播放速度加快或者变缓。加快播放可以突出欢快或者急促的现场氛围,而减缓播放则可以突出沉重或者严肃的现场氛围。比如将25帧/秒的视频和音频序列转换为30帧/秒来处理,从而带给人欢快、急促及紧张的感觉;或者将30帧/秒的视频和音频序列转换为25帧/秒来处理,以让人感觉到沉重或者严肃的氛围,当然本发明实施例并不限于该种帧率的变换。
色彩渲染处理是对接收到的视频和音频数据进行色彩增强或者色彩淡化处理:比如对于正面积极的现场氛围,采用色彩增强,并且多采用暖色调,给人一种阳光向上的感觉;而对于负面消极的现场氛围,则采用色彩淡化,并且多采用冷色调,给人一种阴暗阴霾的感觉。
线条优化处理是对接收到的视频数据进行检测,找出图像中大轮廓,明显的边缘,比如对于正面积极的现场氛围,对轮廓线条作曲线优化处理,使图像中物体的形状轮廓显得更优美;而对于消极的氛围,则对轮廓线条作直线优化处理,使图像中物体的形状轮廓显得更单调,来突出端庄和严肃。
背景融合处理是事先选取一些主题氛围的背景,选取范围包括不同氛围下,不同行业,不同季节,不同会议地点,以及不同的会议规模大小的一些题材,然后根据实际会议,选取与之适应的素材,进行背景与接收到的实际视频和音频的融合。
特殊效果生成叠加处理是根据一些特殊应用场合的需求,生成一些特殊的效果,用于突出会议氛围。比如:在开一些悲伤主题的会议时,可以制作眼泪的图像,叠加在一些物体上,例如叠加在会议场景中的桌子和杯子上等。
质感模拟处理是首先检测出图像中的纹理区域,然后根据当前环境参数,温度,湿度,明暗程度等等,对该纹理区域做处理,使其它会场的人,看到桌子的质感感受和会议现场的人看到的一样。
当然,需要指出的是,本发明实施例的多点控制单元所进行的图像声音处理并不限于上述列举的几种方式,同时也不限于同时使用几种上述处理方式。
S203:将经过图像声音处理后的所述视频和音频数据反馈给各会场。以图1所示的视频会议场景为例来说,多点控制单元101在收到会场摄像机102的视频和音频数据,并对其经过步骤S202的图像声音处理后,将经过处理的图像再发送给会场摄像机102、103和104,对接收的会场103和104的数据也是做同样的处理
本发明实施例通过图像处理技术对各会场的视频和音频数据进行图像声音处理来突出了当前视频会议的氛围,从而使与会者可以直观地从该视频和音频内感受到该会议的现场气氛。
实施例二
如图3所示为本发明实施例二提供的一种突出视频会议现场氛围的方法流程图,需要指出的是,本发明实施例也是从多点控制单元的角度对本发明所作的描述,该方法包括如下步骤:
S301:设定当前视频会议的环境氛围模式,所述环境氛围模式包括氛围预设值。在视频会议开始之前,首先在多点控制单元内设置符合这次会议氛围的环境氛围模式,这些环境氛围模式可以预先存储在多点控制单元内的存储单元之中,当需要调用时,可以选择其中一种予以运行。这些环境氛围模式中包括了一系列的氛围预设值,一种悲伤的氛围模式可以包括如下一系列预设值:30-25;0;0;4;5。该组预设值分为5个部分,其对应了以下5种处理方式:节奏控制处理、色彩渲染处理、线条优化处理、背景融合处理、特殊效果生成叠加处理,其含义分别是:
节奏控制处理采用将30帧/秒序列转换为25帧/秒来处理的减缓播放处理方式;
色彩渲染处理采用色彩淡化处理方式;
线条优化处理采用对轮廓线条作直线优化处理;
背景融合处理采用预设的编号为4的背景;
特殊效果生成叠加处理采用预设的编号为5的特殊效果。
当然,上述只是列举了一种可能的预设值设置,本发明实施例并不限于此种形式,其它各种预设值的形式也是可以的。
S302:接收各会场的视频和音频数据及氛围参数。
由于视频会议的氛围随着会议的进行可能会发生某种变化,比如本来缓和的会议由于某些争论逐步变得紧张,因此如果一直采用原先的氛围预设值的话会与实际情况不符。
针对上述情况,本步骤中多点控制单元除了接收各会场的视频和音频数据外,同时还接收各会场发来的氛围参数,在本实施例中,各会场可以将该氛围参数和视频及音频数据一起发送至多点控制单元,同时也可以通过辅流来发送该氛围参数,该氛围参数可以体现各会场内氛围的变化。在实际应用中,该氛围参数的发送可以由各会场内负责摄录的人员进行操作。
S303:根据氛围参数判断是否需要修正氛围预设值:如果需要,则对氛围预设值进行修正,如果不需要,则进入步骤S304。
该氛围参数内可以包括是否需要对氛围预设值进行修改的信息,以及如何修改的信息,多点控制单元只需依照该些信息进行相应的操作即可,当然,该氛围参数内也可以不直接包括上述信息,而是需要多点控制单元进行相应的处理后,才能得到上述信息,比如将氛围参数和氛围预设值进行一定的比对等。
S304:根据所述氛围预设值对所述视频和音频数据进行图像声音处理以突出当前视频会议的氛围。
本步骤中根据氛围预设值对视频和音频数据进行图像声音处理和步骤S301中描述的相类似,且图像声音处理的具体内容也和实施例一相类似,因此在此就不再对其进行赘述了。
S305:对所述经过图像声音处理后的视频和音频进行效果评价判断是否需要更新氛围预设值。
为了保证经过步骤S304的图像声音处理后的视频和音频符合当前会场的氛围,或者说处理效果让人满意,本实施例在本步骤中对该处理后的视频和音频进行了效果评价,该效果评价可以通过将处理后的视频和音频与一预设的模版进行比对来实现。效果评价后,多点控制单元会根据评价结果判断是否需要更新氛围预设值,如果需要,则修改上述氛围预设值,并返同步骤S304;如果不需要,则进入步骤S306。
S306:将经过图像声音处理后的所述视频和音频数据反馈给各会场。
本发明实施例通过图像处理技术对各会场的视频和音频数据进行图像声音处理来突出了当前视频会议的氛围,从而使与会者可以直观地从该视频和音频内感受到该会议的现场气氛,另外本发明实施例不但实时检测各会场的情况,根据具体情况来改变氛围预设值,而且还对经过处理的视频和音频进行效果评价,从而使得本发明实施例更符合会议的实际氛围情况以及突出会议氛围的效果更加明显。
实施例三
如图4所示为本发明实施例三提供的一种突出视频会议现场氛围的方法流程图,该方法包括如下步骤:
S401:各会场根据各自的会场氛围选择各自的环境氛围模式,所述环境氛围模式包括氛围预设值。
S402:各会场根据各自的氛围预设值对其采集的视频和音频数据进行在先图像声音处理。
上述步骤S401和S402分别和实施例二中步骤S301及S304相类似,所不同的是,实施例二中步骤S301及S304都是由多点控制单元完成的,而本实施例中则是由各个会场端完成该步骤的操作的,具体来说,可以是由各个会场内的摄录设备完成该操作,或者也可以是由一和摄录设备相连的独立的设备来完成该操作的。
当完成该在先图像声音处理步骤后,各会场会将经过处理后的视频和音频数据发送至多点控制单元。
S404:多点控制单元对所述经过在先图像声音处理的视频和音频数据进行统一适配优化以突出当前视频会议的整体氛围。
在视频会议中,各个会场由于视频、音频协议,格式,网络带宽等等都不一定相同,因此,为了让所有会场都能够正常观看其他会场的视频数据,需要将各个会场的数据进行一定的转换,这种转换过程就叫做“适配优化”。
S405:多点控制单元将经过统一适配优化处理后的所述视频和音频数据反馈给各会场。
作为本发明的一个实施例,各会场在完成步骤S402后,也可以对该经过在先图像声音处理后的视频和音频数据进行效果评价,来判断是否需要对氛围预设值进行修改,如果需要修改,则修改氛围预设值后对该视频和音频数据再次进行在先图像声音处理,如果不需要修改,则将该视频和音频数据发送给多点控制单元。
本发明实施例通过各会场对各自的视频和音频数据进行在先图像声音处理来突出了当前视频会议的氛围,从而使与会者可以直观地从该视频和音频内感受到该会议的现场气氛,另外由于图像声音处理大部分是在会场端分担完成的,因此也大大减轻了多点控制器的负担。
实施例四
如图5为本发明实施例四提供的一种突出视频会议现场氛围的装置结构图,该装置包括:接收单元510、氛围处理单元520和发送单元530,它们之间依次相连。
接收单元510用于接收各会场的视频和音频数据,在本实施例中,接收单元510可以通过互联网、专线网络或者直连线缆等从各会场接收视频和音频数据,具体来说,是接收各会场的摄像单元发出的视频和音频数据。
氛围处理单元520用于对所述视频和音频数据进行图像声音处理以突出当前视频会议的氛围。为了能让视频和音频突出当前视频会议的氛围,本发明实施例的装置需要对接收到的视频和音频数据进行特殊的图像声音处理,使与会者可以直观地从该视频和音频中感受到会议氛围。而具体的图像声音处理方式可以多种多样,比如实施例一中所介绍的:节奏控制处理、色彩渲染处理、线条优化处理、背景融合处理、特殊效果生成叠加处理或质感模拟处理等,其具体的处理原理及过程和实施例一中相类似,就不再赘述了。
发送单元530用于将经过图像声音处理后的所述视频和音频数据反馈给各会场。
作为本发明的一个实施例,接收单元510还用于接收经过了在先图像声音处理的视频和音频数据,该在先图像声音处理同上述图像声音处理相类似,比如节奏控制处理、色彩渲染处理、线条优化处理、背景融合处理、特殊效果生成叠加处理或质感模拟处理等。所不同的是,该在先图像声音处理由各个会场端予以完成,具体来说,可以是由各个会场内的摄录设备完成该操作,或者也可以是由一和摄录设备相连的独立的设备来完成该操作的。
氛围处理单元520还用于对经过了在先图像声音处理的视频和音频数据进行统一适配优化以突出当前视频会议的整体氛围。
这样,由各个会场端分担大部分的图像声音处理,可以大大减轻本发明实施例的负担。
本发明实施例通过图像处理技术对各会场的视频和音频数据进行图像声音处理来突出了当前视频会议的氛围,从而使与会者可以直观地从该视频和音频内感受到该会议的现场气氛。
实施例五
如图6为本发明实施例五提供的一种突出视频会议现场氛围的装置结构图,该装置包括:接收单元610、氛围处理单元620、发送单元630、模式设定单元640、修改单元650、判断单元660和更新单元670。
接收单元610用于接收各会场的视频和音频数据以及各会场的氛围参数,由于视频会议的氛围随着会议的进行可能会发生某种变化,因此如果一直采用原先的氛围预设值的话会与实际情况不符。本实施例中接收单元610所接收的氛围参数就可以体现各会场内氛围的变化,在实际应用中,该氛围参数的发送可以由各会场内负责摄录的人员进行操作。
在本实施例中,各会场可以将该氛围参数和视频及音频数据一起发送至多点控制单元,同时也可以通过辅流来发送该氛围参数。
模式设定单元640用于设定当前视频会议的环境氛围模式,该环境氛围模式包括氛围预设值,这些环境氛围模式可以预先存储在本装置的存储单元之中,当需要调用时,可以选择其中一种予以运行。氛围处理单元620可以包括氛围处理子单元,用于根据该氛围预设值对接收单元610所接收的视频和音频数据进行图像声音处理以突出当前视频会议的氛围。
修改单元650用于根据接收单元610所接收的氛围参数修改上述氛围预设值,上述氛围参数内可以包括是否需要对氛围预设值进行修改的信息,以及如何修改的信息,修改单元650只需依照这些信息进行相应的操作即可,当然,该氛围参数内也可以不直接包括上述信息,而是需要修改单元650进行相应的处理后,才能得到上述信息,比如将氛围参数和氛围预设值进行一定的比对等。
判断单元660用于对经过图像声音处理后的视频和音频数据进行效果评价判断是否需要更新氛围预设值。为了保证经过氛围处理单元620的图像声音处理后的视频和音频符合当前会场的氛围,或者说处理效果让人满意,本实施例的判断单元660对该处理后的视频和音频进行了效果评价,该效果评价可以通过将处理后的视频和音频与一预设的模版进行比对来实现。
更新单元670用于根据判断单元660的效果评价更新所述氛围预设值,使得氛围处理单元620处理后的视频和音频氛围效果更好。
本发明实施例通过图像处理技术对各会场的视频和音频数据进行图像声音处理来突出了当前视频会议的氛围,从而使与会者可以直观地从该视频和音频内感受到该会议的现场气氛,另外本发明实施例不但实时检测各会场的情况,根据具体情况来改变氛围预设值,而且还对经过处理的视频和音频进行效果评价,从而使得本发明实施例更符合会议的实际氛围情况以及突出会议氛围的效果更加明显。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。
以上所述的具体实施方式,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施方式而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。