CN105323532B - 一种移动终端图像的自适应显示方法和装置 - Google Patents
一种移动终端图像的自适应显示方法和装置 Download PDFInfo
- Publication number
- CN105323532B CN105323532B CN201410309612.9A CN201410309612A CN105323532B CN 105323532 B CN105323532 B CN 105323532B CN 201410309612 A CN201410309612 A CN 201410309612A CN 105323532 B CN105323532 B CN 105323532B
- Authority
- CN
- China
- Prior art keywords
- sub
- mobile terminal
- pictures
- placement state
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 35
- 230000003044 adaptive effect Effects 0.000 title claims abstract description 18
- 230000002452 interceptive effect Effects 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 230000003993 interaction Effects 0.000 description 6
- 238000004590 computer program Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
- H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/152—Multipoint control units therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/482—End-user interface for program selection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
- H04N2007/145—Handheld terminals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Controls And Circuits For Display Device (AREA)
- Telephone Function (AREA)
Abstract
本发明公开了一种移动终端图像的自适应显示方法,多点控制终端确定移动终端在当前放置状态下允许显示的子画面数量K,选择K个子画面发送给移动终端进行显示。本发明同时还公开了一种移动终端图像的自适应显示装置。
Description
技术领域
本发明涉及视频会议技术,尤其涉及一种实现移动终端图像的自适应显示方法和装置。
背景技术
随着通信技术和移动终端技术的发展,移动终端也可以加入到视频会议中,实时的进行视频和语音的通信。然而当移动终端进行多点视频会议时,由于移动终端的灵活性,如可以随意旋转,当移动终端旋转时,移动终端显示的多画面也应随着产生相应的旋转,以满足移动终端用户的体验和需求。然而,现在的技术,如公开号为CN103220485A、发明名称为《视频播放旋转画面的方法及系统》的中国专利文献提出的视频播放画面旋转的方法中,终端发送的画面旋转请求需要用户参与,没有做到自适应,而公开号为CN101673537、发明名称为《一种屏幕画面选择的实现装置及方法》的中国专利文献,虽然利用重力感应装置解决了画面自动旋转的问题,但是上述两者的共同问题在于画面旋转时是以整个画面图像为处理单位,对其进行旋转和缩放,而无法调整多画面中各子画面的布局。由于受到移动终端体积的限制,其显示屏幕的尺寸和面积有限,尤其当进行多点视频通信、且与会者较多时,小的显示屏无法看清多画面时各画面的内容。
发明内容
为解决现有存在的技术问题,本发明主要提供一种移动终端图像的自适应显示方法和装置。
本发明的技术方案是这样实现的:
本发明提供一种移动终端图像的自适应显示方法,该方法包括:
多点控制终端确定移动终端在当前放置状态下允许显示的子画面数量K,选择K个子画面发送给移动终端进行显示。
上述方案中,所述多点控制终端确定移动终端在当前放置状态下允许显示的子画面数量K包括:多点控制终端根据多点视频会议中移动终端的当前放置状态、移动终端的屏幕信息、以及N个会议终端的视频图像的分辨率,所述N表示所有会议终端的数量,确定所述移动终端在所述放置状态下允许显示的子画面数量K。
上述方案中,所述多点控制终端确定移动终端在当前放置状态下允许显示的子画面数量K包括:多点控制终端接收多点视频会议中移动终端发送的在当前放置状态下允许显示的子画面数量K;所述移动终端发送的在当前放置状态下允许显示的子画面数量K为:所述移动终端根据自身当前放置状态、自身屏幕信息、以及自身视频图像的分辨率,确定出在所述放置状态下允许显示的子画面数量K。
上述方案中,所述选择K个子画面发送给移动终端进行显示包括:根据选择准则选择K个子画面发送给移动终端进行显示。
上述方案中,所述选择准则包括:音量大小、视频图像的分辨率、带宽、主席端、广播源、重要程度中的任意一个准则;或者,根据音量大小、视频图像的分辨率、带宽、主席端、广播源、重要程度中的至少两个准则以加权方式进行组合得到的准则;或者,所述多点控制终端通过与其他会议终端交互的方式选择子画面。
上述方案中,所述选择K个子画面发送给移动终端包括:调整K个子画面的显示布局,将K个子画面的视频图像和调整后的显示布局发送给移动终端。
上述方案中,所述调整K个子画面的显示布局包括:调整K个子画面中的部分子画面的显示布局。
上述方案中,在移动终端的放置状态改变时,该方法还包括:多点控制终端重新确定移动终端在当前放置状态下允许显示的子画面数量R,选择R个子画面发送给移动终端进行显示。
本发明还提供一种移动终端图像的自适应显示装置,该装置包括:子画面确定模块、子画面选择模块;其中,
所述子画面确定模块,用于确定移动终端在当前放置状态下允许显示的子画面数量K;
所述子画面选择模块,用于选择K个子画面发送给移动终端进行显示。
上述方案中,所述子画面确定模块,具体用于根据多点视频会议中移动终端的当前放置状态、移动终端的屏幕信息、以及N个会议终端的视频图像的分辨率,所述N表示所有会议终端的数量,确定所述移动终端在所述放置状态下允许显示的子画面数量K。
上述方案中,所述子画面确定模块,具体用于接收多点视频会议中移动终端发送的在当前放置状态下允许显示的子画面数量K;所述移动终端发送的在当前放置状态下允许显示的子画面数量K为:所述移动终端根据自身当前放置状态、自身屏幕信息、以及自身视频图像的分辨率,确定出在所述放置状态下允许显示的子画面数量K。
上述方案中,所述子画面选择模块,具体用于根据选择准则选择K个子画面发送给移动终端进行显示。
上述方案中,所述子画面确定模块,还用于在移动终端的放置状态改变时,重新确定移动终端在当前放置状态下允许显示的子画面数量R;
所述子画面选择模块,还用于选择R个子画面发送给移动终端进行显示。
本发明提供了一种移动终端图像的自适应显示方法和装置,多点控制终端确定移动终端在当前放置状态下允许显示的子画面数量K,选择K个子画面发送给移动终端进行显示;如此,可根据移动终端放置状态的变化(如横放或竖放),实时动态调整移动终端显示的多画面的布局和内容,从而提升使用移动终端进行视频通讯的客户对画面的舒适感。
附图说明
图1为本发明实施例提供的移动终端图像的自适应显示方法的流程示意图;
图2为为本发明实施例一提供的移动终端图像的自适应显示方法的流程示意图;
图3为本发明实施例二提供的多画面布局调整的示意图;
图4为本发明实施例三提供的多画面布局调整的示意图;
图5为本发明实施例三提供的A在接收到D的屏幕旋转信息时的处理方法流程图;
图6为本发明实施例提供的移动终端图像的自适应显示装置结构示意图。
具体实施方式
本发明实施例中,多点控制终端确定移动终端在当前放置状态下允许显示的子画面数量K,选择K个子画面发送给移动终端进行显示。
下面通过附图及具体实施例对本发明做进一步的详细说明。
本发明实施例实现一种移动终端图像的自适应显示方法,如图1所示,该方法包括以下几个步骤:
步骤101:多点控制终端确定移动终端在当前放置状态下允许显示的子画面数量K;
具体的,在多点视频会议中,多点控制终端根据多点视频会议中移动终端的当前放置状态、移动终端的屏幕信息、以及N个会议终端的视频图像的分辨率,所述N表示所有会议终端的数量,确定所述移动终端在所述放置状态下允许显示的子画面数量K;或者,多点控制终端接收多点视频会议中移动终端发送的在当前放置状态下允许显示的子画面数量K;所述移动终端发送的在当前放置状态下允许显示的子画面数量K为:所述移动终端根据自身当前放置状态、自身屏幕信息、以及自身视频图像的分辨率,确定出在所述放置状态下允许显示的子画面数量K。这里,所述所有会议终端包括:多点控制终端、移动终端、和普通视频终端,所述多点控制终端是指设置有多点控制单元(MCU,Multi Control Unit)的终端。
此外,在多点视频会议中,多点控制终端还可以对会议终端中的移动终端进行标识,根据交互信息中的所述标识确定会议终端中的移动终端。
本步骤中,所述放置状态包括:水平放置和竖直放置,所述屏幕信息包括:屏幕的物理尺寸和宽高比;
对于所述放置状态、所述屏幕信息的获得,多点控制终端可以通过与移动终端交互时的交互信息获得,所述移动终端可以通过自带的重力感应器件获得自身的放置状态,并可以从自身存储的设备参数中获得屏幕信息,在与多点控制终端交互时将所述放置状态、所述屏幕信息携带在交互信息中;对于N个会议终端的视频图像的分辨率,多点控制终端可以在对N个会议终端的视频图像进行解码时获得;
这里,所述多点控制终端根据多点视频会议中移动终端的当前放置状态、移动终端的屏幕信息、以及N个会议终端发送的视频图像的分辨率,确定所述移动终端在所述放置状态下允许显示的子画面数量K,包括:
假设接收到移动终端的屏幕物理尺寸为S(单位in),屏幕的宽高比为Wr:Hr,放置状态为C,设定参考的图像分辨率Rw*Rh和参数t;
首先,求出移动终端屏幕的宽(W)和高(H),
W/H=Wr/Hr
W2+H2=(S*2.54)2。
上述方程组的解为求得的屏幕宽和高(单位cm)。
然后,求出移动终端可显示的子画面数K。
屏幕放置状态C为水平放置时,N1=floor(W/(Rw*t)),N2=floor(H/(Rh*t))。
屏幕放置状态C为竖直放置时,N1=floor(H/(Rw*t)),N2=floor(W/(Rh*t))。
其中,floor为返回小于或者等于指定表达式的最大整数的函数;N1,N2的最小值为1。
K=N1*N2。
上面所述参考图像分辨率Rw*Rh的设定,可以根据N-1个会议终端发送的视频图像分辨率和多点控制终端的视频图像分辨率进行动态设定,也可设定为一个固定值。
步骤102:多点控制终端选择K个子画面发送给移动终端进行显示;
具体的,多点控制终端根据选择准则选择K个子画面发送给移动终端进行显示,所述选择准则包括:音量大小、视频图像的分辨率、带宽、主席端、广播源、重要程度等中的任意一个准则;或者,根据音量大小、视频图像的分辨率、带宽、主席端、广播源、重要程度等中的至少两个准则以加权方式进行组合得到的准则;或者,所述多点控制终端通过与其他会议终端交互的方式选择子画面。
例如,多点控制终端可以根据N个会议终端的视频图像的音量大小选择K个子画面发送给移动终端进行显示,如对N个会议终端的视频图像按照音量大小排序,选择音量大或音量小的K个视频图像作为子画面发送给移动终端进行显示;
或者,多点控制终端可以根据N个会议终端的视频图像的分辨率选择K个子画面进行显示,如对N个会议终端发送的视频图像按照分辨率大小排序,选择分辨率大或分辨率小的K个视频图像作为子画面发送给移动终端进行显示;
或者,多点控制终端可以根据N个会议终端的视频图像的带宽选择K个子画面进行显示,如对N个会议终端的视频图像按照带宽大小排序,选择带宽大或带宽小的K个视频图像作为子画面发送给移动终端进行显示;
或者,多点控制终端可以根据N个会议终端中的主席端选择K个子画面进行显示,如对N个会议终端的视频图像中主席端发送的视频图像进行标记,选择包括所述主席端发送的视频图像在内的K个视频图像作为子画面发送给移动终端进行显示;
或者,多点控制终端可以根据N个会议终端中的广播源选择K个子画面进行显示,如对N个会议终端中的广播源进行标记,选择包括所述广播源发送的视频图像在内的K个视频图像作为子画面发送给移动终端进行显示;
或者,多点控制终端可以根据N个会议终端的视频图像的重要程度选择K个子画面进行显示,如对N个会议终端的视频图像的重要程度进行标记,选择包括重要程度高的K个视频图像作为子画面发送给移动终端进行显示;
或者,多点控制终端可以根据N个会议终端的视频图像的音量大小和分辨率选择K个子画面进行显示,如对N个会议终端的视频图像按照音量大小排序,记录各会议终端的排位,再对N个会议终端的视频图像按照分辨率排序,记录各会议终端的排位,最后将N个会议终端的按照音量大小排序的排位与按照分辨率排序的排位进行加权,选择加权值高或加权值低的K个视频图像作为子画面发送给移动终端进行显示;
或者,多点控制终端可以根据N个会议终端发送的视频图像的带宽、N个会议终端中的主席端选择K个子画面进行显示,如对N个会议终端的视频图像按照带宽大小排序,选择所述主席端发送的视频图像作为一个子画面进行显示,并选择带宽大或带宽小的K-1个视频图像作为子画面发送给移动终端进行显示;
类似的,多点控制终端可以根据音量大小、视频图像的分辨率、带宽、主席端、广播源、重要程度等中的至少两个准则以加权方式进行组合,选择N个会议终端的视频图像中K个视频图像作为子画面发送给移动终端进行显示;
另外,多点控制终端可以向其他会议终端发送是否需要显示的请求消息,在需要显示的会议终端发送的视频图像中,选择K个视频图像作为子画面发送给移动终端进行显示。
本步骤中,所述选择K个子画面发送给移动终端包括:调整K个子画面的显示布局,将K个子画面的视频图像和调整后的显示布局发送给移动终端;具体可以是:预先存储针对不同数量子画面的布局模板,根据选择的K个子画面确定所使用的布局模板,根据所使用的布局模板中各子画面大小,调整K个视频图像的显示大小,将所述K个视频图像和所使用的布局模板发送给移动终端;所述布局模板包括:竖排布局模板、水平布局模板、网格布局模板、不规则形状子画面布局模板等。
所述调整K个子画面的显示布局还包括:调整K个子画面中的部分子画面的显示布局,具体可以是:在K个子画面中,保持相对于当前放置状态的前一放置状态下的L个子画面的显示位置不变,将M个子画面调整到适应移动终端当前放置状态的空显示区域,如当前为水平放置,则将M个子画面调整到水平的空显示区域,所述M个子画面与L个子画面的和为K个子画面。
在移动终端的放置状态改变时,上述方法还包括:多点控制终端重新确定移动终端在当前放置状态下允许显示的子画面数量R,选择R个子画面发送给移动终端进行显示。
为了更好地理解本发明,下面结合具体实施例对本发明作进一步地描述。
实施例1
下面以5个会议终端(A、B、C、D和E)进行视频会议为例,其中,A为多点控制终端,E为移动终端,B、C、D为普通视频终端,本实施例实现移动终端图像的自适应显示方法,如图2所示,包括:
步骤S10,A根据E的当前放置状态为水平放置、E的屏幕的物理尺寸和宽高比、以及A、B、C、D和E的视频图像分辨率,确定此时E允许显示的子画面数量K=2。
步骤S11,A选择K=2个子画面发送给E进行显示;
这里,由于K<N(N=5),则需要根据选择准则对子画面进行选择。假设设定的子画面选择准则为根据视频图像的分辨率选择子画面,五个移动终端的视频分辨率关系为:RA_B>RA_D>RA_A>RA_C>RA_E,则根据选择准则,选择分辨率大的两个子画面,即B和D的画面作为E的显示子画面。
实施例2
下面以3个会议终端(A、B和C)进行视频会议为例,其中,A为多点控制终端,C为移动终端,B为普通视频终端,本实施例实现移动终端图像的自适应显示方法包括:
A根据C的当前放置状态为水平放置、C的屏幕的物理尺寸和宽高比、以及A、B和C的视频图像分辨率,确定此时C可显示的子画面数量K=3,即可显示此时上会终端的全部会议终端。
根据选择准则选择要显示的K个子画面,此时,K=N=3,则选择A、B、C三个画面作为C的显示子画面,将选择的K个子画面发送给C进行显示。
假设此时C的多画面布局为图3中的左图所示,A、B、C三个端的布局为从左到右排列,图3仅用于说明多画面的布局调整策略,并不限定使用其他布局调整策略的情况。若在视频会议过程中C发生了旋转,由最初的水平放置旋转成竖直放置,则A会接收到C的放置状态的变化信息,从而重新计算在竖直状态下C可显示的子画面数量R,假设此时计算得到的R=3,则选择A、B、C三个画面作为C的显示子画面,此时需要调整子画面布局,可以保持B的子画面的位置不变,将A和C的子画面调整到竖直方向的空显示区域,调整后的多画面布局如图3中的右图所示。在此实施例中,假设每个子画面占整个屏幕的1/3。图3中的中间示意图为现有技术下得到的多画面显示效果,该技术最终的图像画面所占屏幕面积的比例小,并没有充分利用整个显示屏幕。
实施例3
下面以4个会议终端(A、B、C和D)进行视频会议为例,其中,A为多点控制终端,D为移动终端,B和C为普通视频终端,假设D的屏幕尺寸为3.5in,屏幕宽高比为3:2,在旋转前的放置位置为水平放置,假设此时计算得到D可显示的子画面数量为1,且根据选择准则选择A的画面进行显示,显示示意图如图4中的左图所示,在上会过程中D发生旋转,放置状态由水平位置变成竖直放置,A在接收到D的屏幕旋转信息时的处理如图5所示,包括:
步骤S20,A接收D的屏幕旋转信息。
步骤S21,A确定D在竖直状态下可显示的子画面数量R=2,该R的计算需要根据D的屏幕的尺寸、宽高比、以及A、B、C和D四个会议终端的视频图像的分辨率等信息进行计算。
步骤S22,A根据设定的选择准则选择要显示的R=2个子画面;
这里,假设选择准则为:按上会者语音量从大到小进行选择,则如果此时各端的语音量大小关系为:VA>VB>VC>VD,根据所述选择准则,最终选择A端和B端的画面作为D的显示子画面。
步骤S23,A进行多画面布局调整。
这里,如图4中的右图所示,A可以调整显示布局为A的画面和B的画面竖直排放,重新生成D的子画面布局,A将A的画面、B的画面以及重新生成的子画面布局发送给D进行显示。
实施例4
下面以5个会议终端(A、B、C、D和E)进行视频会议为例,其中,A为多点控制终端,E为移动终端,B、C、D为普通视频终端,本实施例实现移动终端图像的自适应显示方法包括:
E根据自身的当前放置状态为水平放置、自身屏幕的物理尺寸和宽高比、以及自身视频图像分辨率,确定此时E允许显示的子画面数量K=2,将允许显示的子画面数量K=2在与A的交互信息中携带,所述交互信息可以是会议视频连接确认、或会议视频连接请求等。
A接收E允许显示的子画面数量K=2,选择K=2个子画面发送给E进行显示;
这里,由于K<N(N=5),则需要根据选择准则对子画面进行选择。假设设定的子画面选择准则为根据视频图像的分辨率选择子画面,五个移动终端的视频分辨率关系为:RA_B>RA_D>RA_A>RA_C>RA_E,则根据选择准则,选择分辨率大的两个子画面,即B和D的画面作为E的显示子画面。
基于上述的移动终端图像的自适应显示方法,本发明实施例还提供一种移动终端图像的自适应显示装置,该装置设置在多点控制终端,如图6所示,该装置包括:子画面确定模块61、子画面选择模块62;其中,
所述子画面确定模块61,可以由通信接口和处理器结合实现,用于确定移动终端在当前放置状态下允许显示的子画面数量K;
在多点视频会议中,所述子画面确定模块61根据多点视频会议中移动终端的当前放置状态、移动终端的屏幕信息、以及N个会议终端的视频图像的分辨率,所述N表示所有会议终端的数量,确定所述移动终端在所述放置状态下允许显示的子画面数量K;这里,所述所有会议终端包括:多点控制终端、移动终端、和普通视频终端。
对于所述放置状态、所述屏幕信息的获得,所述子画面确定模块61可以通过自身所在多点控制终端与移动终端交互时的交互信息获得,所述移动终端可以通过自带的重力感应器件获得自身的放置状态,并可以从自身存储的设备参数中获得屏幕信息,在与多点控制终端交互时将所述放置状态、所述屏幕信息携带在交互信息中;对于N个会议终端的视频图像的分辨率,所述子画面确定模块61可以在对N个会议终端的视频图像进行解码时获得。
所述子画面确定模块61也可以接收多点视频会议中移动终端发送的在当前放置状态下允许显示的子画面数量K;所述移动终端发送的在当前放置状态下允许显示的子画面数量K为:所述移动终端根据自身当前放置状态、自身屏幕信息、以及自身视频图像的分辨率,确定出在所述放置状态下允许显示的子画面数量K。
所述子画面选择模块62,可以由通信接口和处理器结合实现,用于选择K个子画面发送给移动终端进行显示;
具体的,所述子画面选择模块62根据选择准则选择K个子画面发送给移动终端进行显示,所述选择准则包括:音量大小、视频图像的分辨率、带宽、主席端、广播源、重要程度等中的任意一个准则;或者,根据音量大小、视频图像的分辨率、带宽、主席端、广播源、重要程度等中的至少两个准则以加权方式进行组合得到的准则;或者,所述多点控制终端通过与所述N-1个会议终端交互的方式选择子画面。
所述子画面确定模块61,还用于在移动终端的放置状态改变时,重新确定移动终端在当前放置状态下允许显示的子画面数量R;
所述子画面选择模块62,还用于选择R个子画面发送给移动终端进行显示。
本发明实施例所述移动终端图像的自适应显示方法如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。基于这样的理解,本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质上实施的计算机程序产品的形式,所述存储介质包括但不限于U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、磁盘存储器、CD-ROM、光学存储器等。
相应的,本发明实施例还提供一种计算机存储介质,其中存储有计算机程序,该计算机程序用于执行本发明实施例的移动终端图像的自适应显示方法。
综合各实施例描述的技术方案,本发明能够根据移动终端放置状态的变化(如水平放置或竖直放置),实时动态调整移动终端显示的多画面的布局和内容,从而提升使用移动终端进行视频通讯的客户对画面的舒适感。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (9)
1.一种移动终端图像的自适应显示方法,其特征在于,该方法包括:
多点控制终端确定移动终端在当前放置状态下允许显示的子画面数量K,选择K个子画面发送给移动终端进行显示;
所述多点控制终端确定移动终端在当前放置状态下允许显示的子画面数量K包括:多点控制终端根据多点视频会议中移动终端的当前放置状态、移动终端的屏幕信息、以及N个会议终端的视频图像的分辨率,所述N表示所有会议终端的数量,确定所述移动终端在所述放置状态下允许显示的子画面数量K;
或者,多点控制终端接收多点视频会议中移动终端发送的在当前放置状态下允许显示的子画面数量K;所述移动终端发送的在当前放置状态下允许显示的子画面数量K为:所述移动终端根据自身当前放置状态、自身屏幕信息、以及自身视频图像的分辨率,确定出在所述放置状态下允许显示的子画面数量K。
2.根据权利要求1所述的自适应显示方法,其特征在于,所述选择K个子画面发送给移动终端进行显示包括:根据选择准则选择K个子画面发送给移动终端进行显示。
3.根据权利要求2所述的自适应显示方法,其特征在于,所述选择准则包括:音量大小、视频图像的分辨率、带宽、主席端、广播源、重要程度中的任意一个准则;或者,根据音量大小、视频图像的分辨率、带宽、主席端、广播源、重要程度中的至少两个准则以加权方式进行组合得到的准则;或者,所述多点控制终端通过与其他会议终端交互的方式选择子画面。
4.根据权利要求3所述的自适应显示方法,其特征在于,所述选择K个子画面发送给移动终端包括:调整K个子画面的显示布局,将K个子画面的视频图像和调整后的显示布局发送给移动终端。
5.根据权利要求4所述的自适应显示方法,其特征在于,所述调整K个子画面的显示布局包括:调整K个子画面中的部分子画面的显示布局。
6.根据权利要求1所述的自适应显示方法,其特征在于,在移动终端的放置状态改变时,该方法还包括:多点控制终端重新确定移动终端在当前放置状态下允许显示的子画面数量R,选择R个子画面发送给移动终端进行显示。
7.一种移动终端图像的自适应显示装置,其特征在于,该装置包括:子画面确定模块、子画面选择模块;其中,
所述子画面确定模块,用于确定移动终端在当前放置状态下允许显示的子画面数量K;
所述子画面确定模块,具体用于根据多点视频会议中移动终端的当前放置状态、移动终端的屏幕信息、以及N个会议终端的视频图像的分辨率,所述N表示所有会议终端的数量,确定所述移动终端在所述放置状态下允许显示的子画面数量K;
或者,接收多点视频会议中移动终端发送的在当前放置状态下允许显示的子画面数量K;所述移动终端发送的在当前放置状态下允许显示的子画面数量K为:所述移动终端根据自身当前放置状态、自身屏幕信息、以及自身视频图像的分辨率,确定出在所述放置状态下允许显示的子画面数量K;
所述子画面选择模块,用于选择K个子画面发送给移动终端进行显示。
8.根据权利要求7所述的自适应显示装置,其特征在于,所述子画面选择模块,具体用于根据选择准则选择K个子画面发送给移动终端进行显示。
9.根据权利要求7所述的自适应显示装置,其特征在于,
所述子画面确定模块,还用于在移动终端的放置状态改变时,重新确定移动终端在当前放置状态下允许显示的子画面数量R;
所述子画面选择模块,还用于选择R个子画面发送给移动终端进行显示。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410309612.9A CN105323532B (zh) | 2014-06-30 | 2014-06-30 | 一种移动终端图像的自适应显示方法和装置 |
JP2016575926A JP6456411B2 (ja) | 2014-06-30 | 2014-10-24 | 移動端末画像の自己適応表示方法、装置及びコンピュータ記憶媒体 |
US15/323,229 US20170257599A1 (en) | 2014-06-30 | 2014-10-24 | Self-Adaptive Display Method and Device for Image of Mobile Terminal, and Computer Storage Medium |
KR1020177002684A KR101905182B1 (ko) | 2014-06-30 | 2014-10-24 | 이동 단말 이미지의 자체 적응 디스플레이 방법, 장치와 컴퓨터 저장 매체 |
PCT/CN2014/089438 WO2016000359A1 (zh) | 2014-06-30 | 2014-10-24 | 移动终端图像的自适应显示方法、装置和计算机存储介质 |
EP14896885.2A EP3163866B1 (en) | 2014-06-30 | 2014-10-24 | Self-adaptive display method and device for image of mobile terminal, and computer storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410309612.9A CN105323532B (zh) | 2014-06-30 | 2014-06-30 | 一种移动终端图像的自适应显示方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105323532A CN105323532A (zh) | 2016-02-10 |
CN105323532B true CN105323532B (zh) | 2019-10-15 |
Family
ID=55018374
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410309612.9A Active CN105323532B (zh) | 2014-06-30 | 2014-06-30 | 一种移动终端图像的自适应显示方法和装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20170257599A1 (zh) |
EP (1) | EP3163866B1 (zh) |
JP (1) | JP6456411B2 (zh) |
KR (1) | KR101905182B1 (zh) |
CN (1) | CN105323532B (zh) |
WO (1) | WO2016000359A1 (zh) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102201095B1 (ko) | 2014-05-30 | 2021-01-08 | 애플 인크. | 하나의 디바이스의 사용으로부터 다른 디바이스의 사용으로의 전환 |
CN105472310A (zh) * | 2016-01-26 | 2016-04-06 | 邦彦技术股份有限公司 | 一种基于sip协议的视频会议的实现方法及其系统 |
CN105828130A (zh) * | 2016-03-23 | 2016-08-03 | 深圳Tcl数字技术有限公司 | 多终端节目同步预览方法和装置 |
US12242707B2 (en) | 2017-05-15 | 2025-03-04 | Apple Inc. | Displaying and moving application views on a display of an electronic device |
JP7185997B2 (ja) * | 2017-07-18 | 2022-12-08 | 関西ペイント株式会社 | リチウムイオン電池正極用導電ペースト及びリチウムイオン電池正極用合材ペーストの製造方法 |
US10372298B2 (en) | 2017-09-29 | 2019-08-06 | Apple Inc. | User interface for multi-user communication session |
KR101967819B1 (ko) * | 2017-11-02 | 2019-04-10 | 주식회사 코난테크놀로지 | 타일 영상 기반 다중 재생을 위한 영상 처리장치 및 그 타일 영상 구성방법 |
US11328720B2 (en) * | 2017-12-26 | 2022-05-10 | Mitsubishi Electric Corporation | Inter-occupant conversation device and inter-occupant conversation method |
DK180130B1 (da) | 2018-05-07 | 2020-06-02 | Apple Inc. | Multi-participant live communication user interface |
US11128792B2 (en) | 2018-09-28 | 2021-09-21 | Apple Inc. | Capturing and displaying images with multiple focal planes |
CN110248145A (zh) * | 2019-06-25 | 2019-09-17 | 武汉冠科智能科技有限公司 | 一种无纸化会议显示控制方法、装置和存储介质 |
US11513667B2 (en) | 2020-05-11 | 2022-11-29 | Apple Inc. | User interface for audio message |
US11671697B2 (en) | 2021-01-31 | 2023-06-06 | Apple Inc. | User interfaces for wide angle video conference |
US12170579B2 (en) | 2021-03-05 | 2024-12-17 | Apple Inc. | User interfaces for multi-participant live communication |
CN113891032A (zh) * | 2021-03-17 | 2022-01-04 | 广州市保伦电子有限公司 | 一种自动切换移动终端视频会议终端布局的方法和服务器 |
US11907605B2 (en) | 2021-05-15 | 2024-02-20 | Apple Inc. | Shared-content session user interfaces |
US11360634B1 (en) | 2021-05-15 | 2022-06-14 | Apple Inc. | Shared-content session user interfaces |
US11893214B2 (en) | 2021-05-15 | 2024-02-06 | Apple Inc. | Real-time communication user interface |
EP4324192A1 (en) * | 2021-05-18 | 2024-02-21 | Apple Inc. | Adaptive video conference user interfaces |
CN114286152A (zh) * | 2021-08-02 | 2022-04-05 | 海信视像科技股份有限公司 | 显示设备、通信终端及投屏画面动态显示方法 |
US12267622B2 (en) | 2021-09-24 | 2025-04-01 | Apple Inc. | Wide angle video conference |
US11770600B2 (en) | 2021-09-24 | 2023-09-26 | Apple Inc. | Wide angle video conference |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101031065A (zh) * | 2007-04-27 | 2007-09-05 | 华为技术有限公司 | 一种在视频业务中实现画面切换的方法、装置及系统 |
CN102685415A (zh) * | 2011-03-18 | 2012-09-19 | 华为终端有限公司 | 一种视频画面处理方法、系统、设备及终端 |
CN102833518A (zh) * | 2011-06-13 | 2012-12-19 | 华为终端有限公司 | 一种mcu多画面优化配置的方法及装置 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3097736B2 (ja) * | 1996-11-29 | 2000-10-10 | 日本電気株式会社 | 多画面伝送式多地点テレビ会議システム |
US20020093531A1 (en) * | 2001-01-17 | 2002-07-18 | John Barile | Adaptive display for video conferences |
JP3804766B2 (ja) * | 2001-03-15 | 2006-08-02 | シャープ株式会社 | 画像通信装置および携帯型電話機 |
CN100366080C (zh) * | 2003-11-21 | 2008-01-30 | 华为技术有限公司 | 在会议电视系统中实现单画面和多画面切换的方法 |
US7492386B2 (en) * | 2004-11-05 | 2009-02-17 | Sony Ericsson Mobile Communications Ab | Display management during a multi-party conversation |
JP4504302B2 (ja) * | 2005-11-17 | 2010-07-14 | シャープ株式会社 | 携帯端末装置 |
KR101556135B1 (ko) * | 2008-09-01 | 2015-10-13 | 엘지전자 주식회사 | 이동단말기 및 그 제어 방법 |
JP4815503B2 (ja) * | 2009-03-31 | 2011-11-16 | 株式会社ディップス | 通信システム、提供装置およびプログラム |
US8917632B2 (en) * | 2010-04-07 | 2014-12-23 | Apple Inc. | Different rate controller configurations for different cameras of a mobile device |
KR101702949B1 (ko) * | 2010-04-21 | 2017-02-06 | 엘지전자 주식회사 | 영상표시장치의 동작 방법 |
US9369667B2 (en) * | 2012-04-11 | 2016-06-14 | Jie Diao | Conveying gaze information in virtual conference |
JP5921404B2 (ja) * | 2012-09-28 | 2016-05-24 | 株式会社東芝 | 情報表示装置、情報表示方法及びプログラム |
CN103345390A (zh) * | 2013-06-17 | 2013-10-09 | 北京金山安全软件有限公司 | 用于移动终端的图片输出方法、装置和移动终端 |
CN103763505A (zh) * | 2013-12-31 | 2014-04-30 | 华为技术有限公司 | 一种在视频通话中适应屏幕方向切换的方法和装置 |
-
2014
- 2014-06-30 CN CN201410309612.9A patent/CN105323532B/zh active Active
- 2014-10-24 EP EP14896885.2A patent/EP3163866B1/en active Active
- 2014-10-24 US US15/323,229 patent/US20170257599A1/en not_active Abandoned
- 2014-10-24 JP JP2016575926A patent/JP6456411B2/ja active Active
- 2014-10-24 KR KR1020177002684A patent/KR101905182B1/ko active Active
- 2014-10-24 WO PCT/CN2014/089438 patent/WO2016000359A1/zh active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101031065A (zh) * | 2007-04-27 | 2007-09-05 | 华为技术有限公司 | 一种在视频业务中实现画面切换的方法、装置及系统 |
CN102685415A (zh) * | 2011-03-18 | 2012-09-19 | 华为终端有限公司 | 一种视频画面处理方法、系统、设备及终端 |
CN102833518A (zh) * | 2011-06-13 | 2012-12-19 | 华为终端有限公司 | 一种mcu多画面优化配置的方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
EP3163866A4 (en) | 2017-07-12 |
KR20170026560A (ko) | 2017-03-08 |
JP6456411B2 (ja) | 2019-01-23 |
EP3163866A1 (en) | 2017-05-03 |
CN105323532A (zh) | 2016-02-10 |
WO2016000359A1 (zh) | 2016-01-07 |
KR101905182B1 (ko) | 2018-10-08 |
EP3163866B1 (en) | 2020-05-06 |
JP2017526239A (ja) | 2017-09-07 |
US20170257599A1 (en) | 2017-09-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105323532B (zh) | 一种移动终端图像的自适应显示方法和装置 | |
US11381801B2 (en) | Methods and apparatus for receiving and/or using reduced resolution images | |
US11037365B2 (en) | Method, apparatus, medium, terminal, and device for processing multi-angle free-perspective data | |
CN113347405B (zh) | 缩放相关的方法和装置 | |
US11582506B2 (en) | Video processing method and apparatus, and storage medium | |
JP2020527883A5 (zh) | ||
CN113963094A (zh) | 深度图及视频处理、重建方法、装置、设备及存储介质 | |
US11134236B2 (en) | Image processing device and system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |