[go: up one dir, main page]

CN1255988C - 多通道图象处理装置及其方法 - Google Patents

多通道图象处理装置及其方法 Download PDF

Info

Publication number
CN1255988C
CN1255988C CNB02150542XA CN02150542A CN1255988C CN 1255988 C CN1255988 C CN 1255988C CN B02150542X A CNB02150542X A CN B02150542XA CN 02150542 A CN02150542 A CN 02150542A CN 1255988 C CN1255988 C CN 1255988C
Authority
CN
China
Prior art keywords
processing
decoding
passage
image
vertical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB02150542XA
Other languages
English (en)
Other versions
CN1419375A (zh
Inventor
山名章文
辻敏昭
石井秀树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Socionext Inc
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN1419375A publication Critical patent/CN1419375A/zh
Application granted granted Critical
Publication of CN1255988C publication Critical patent/CN1255988C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347Demultiplexing of several video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Studio Circuits (AREA)

Abstract

本发明提供一种多通道图象处理装置,它包括:从分别具有针对一个通道图象的编码数据的多个位流中依次选择各位流,逐帧进行译码,并输出译码数据的译码部;从译码的图象所对应的多个通道中依次选择一个,对它所对应的译码数据进行垂直方向处理后进行输出的垂直滤波处理部;按照图象被显示的位置,从所述多个通道中依次选择一个,对它所对应的垂直方向处理后的数据进行水平方向处理后输出的水平滤波处理部;通过合成水平方向处理后的数据,来生成、输出用于显示多个通道的图象的图象信号的输出处理部。能降低成本。

Description

多通道图象处理装置及其方法
技术领域
本发明涉及一种对具有图象的编码数据的位流进行译码,并且生成用于显示译码的图象的图象信号的图象处理装置及其方法。特别是涉及一种处理多个通道的图象的多通道图象处理装置及其方法。
背景技术
近年来,在世界各地,基于卫星的数字广播、地面波数字广播十分活跃。在数字广播中,通常是图象和声音等数据以MPEG(Moving pictureexperts group)等方式进行压缩、编码,多个通道的图象被多路复用后发送。
在数字广播接收机中,当接收了多路复用了多通道的图象编码数据的位流时,基本上是分离所指定的一个通道的图象流以及声音流,把它们译码后输出。
而有时也有必要不仅对单一通道,而是对多个通道的图象编码数据译码,并且同时显示译码的图象。例如在特开平9-93131号公报中,公开了使用多个译码器,在各译码器中,对一个通道的位流译码的装置。
发明内容
这样,为了对多通道的图象编码数据进行译码,使用了多个译码器。因此,出现了难以降低译码器所需成本这一问题。
鉴于以上所述问题的存在,本发明的目的在于:提供对多通道的图象编码数据进行译码,生成用于显示多通道的图象的图象信号的、低成本的多通道图象处理装置及其方法。
为了解决以上所述问题,本发明1采取的方法为:作为多通道图象处理装置,包括:从分别具有针对一个通道图象的编码数据的多个位流中,依次选择各位流来在每个位流上逐帧进行分时译码,据此来输出所得到的译码数据的译码部;从由所述译码部译码的图象所对应的多个通道中依次选择一个,通过对它所对应的所述译码数据进行垂直方向处理,来输出分时处理所选择的多个通道所得到的垂直方向处理后的数据的垂直滤波处理部;按照图象被显示的位置,从所述多个通道中依次选择一个,通过对它所对应的所述垂直方向处理后的数据进行水平方向处理,来输出分时处理所选择的多个通道所得到的水平方向处理后的数据的水平滤波处理部;通过合成所述水平方向处理后的数据,生成用于显示多个通道图象的图象信号来进行输出的输出处理部。
根据本发明1,关于多通道,由一个译码器对图象的编码信号译码,关于各通道的图象,进行垂直、水平方向的尺寸调整等,能在显示装置上显示多通道的图象。
另外,本发明2是在本发明1所述的多通道图象处理装置中,还包括:把分时、多路复用了多通道的图象编码数据的位流分离为分别具有对于一个通道的图象的编码数据的多个位流后输出的流分离部;所述译码部接收并处理由所述流分离部分离的位流。
根据本发明2,能处理分时、多路复用了多通道的图象编码数据的位流。
另外,本发明3是在本发明2所述的多通道图象处理装置中,还包括:从具有一个通道的图象编码数据的位流和从所述流分离部输出的多个位流中的一个选择任意一个后输出的选择器;所述译码部接收并处理由所述选择器选择的位流。
根据本发明3,能同时显示分时、多路复用了多通道的图象编码数据的位流的图象和从外部输入的位流的图象。
另外,在本发明4中,是在本发明1所述的多通道图象处理装置中,所述译码部关于所述多个通道,进行了对于一帧的所述编码数据的处理后,进行对于它的下一帧的处理;所述垂直滤波处理部关于所述多个通道,进行了对于半帧的所述译码数据的处理后,进行对于接着的半帧的处理;所述水平滤波处理部关于该行中表示的通道,进行了对于一行的所述垂直方向处理后的数据的处理后,进行对于它的下一行的处理。
另外,在本发明5中,是在本发明1所述的多通道图象处理装置中,所述垂直滤波处理部在所述译码部开始了对于一帧的处理后的接着的垂直同步信号之后,开始对于所述帧的处理;所述水平滤波处理部以及所述输出处理部在所述垂直滤波处理部开始了对于所述帧的处理后的接着的垂直消隐期之后,开始对于所述帧的处理。
另外,在本发明6中,是在本发明1所述的多通道图象处理装置中,所述垂直滤波处理部处理的通道的顺序是与对于与成为其处理对象的帧相同的帧的基于所述译码部的处理时相同的顺序。
另外,在本发明7中,是在本发明1所述的多通道图象处理装置中,所述译码部在所述垂直滤波处理部处理了一帧的第二半帧的1个以上的位片后,开始接着的帧的处理。
另外,在本发明8中,是在本发明1所述的多通道图象处理装置中,所述垂直滤波处理部在开始一个通道的处理后,在经过了垂直同步信号的间隔除以所述多个通道的数量后得到的期间后,开始下一个通道的处理。
另外,在本发明9中,是在本发明1所述的多通道图象处理装置中,所述垂直滤波处理部在开始一个通道的处理后,在经过了垂直同步信号的间隔除以所述多个通道的数量后得到的期间后,结束该通道的处理。
根据本发明9,即使垂直方向处理在给定的时间内不结束时,也能对其它通道的处理不产生影响。
另外,在本发明10中,是在本发明1所述的多通道图象处理装置中,所述输出处理部具有与同一行中表示的图象通道分别对应的输出处理电路;所述输出处理电路分别存储了处理对象的行中表示的图象的通道中对应的通道的所述水平方向处理后的数据。
根据本发明10,输出处理部可以与画面内在水平方向并列显示的图象的各通道对应,具有输出处理电路,因为没必要与位流中多路复用的通道的全部对应,具有输出处理电路,所以能实现硬件的小规模化。
另外,在本发明11中,是在本发明10所述的多通道图象处理装置中,所述输出处理部合成并输出所述输出处理电路中存储了所述处理对象的行中表示的图象的通道的数据的电路的输出。
另外,在本发明12中,是在本发明1所述的多通道图象处理装置中,所述垂直滤波处理部当所述译码部停止一部分的通道的处理时,以与该垂直滤波处理部处理所述译码部停止所述一部分的通道的处理的帧的前面的帧时相同的通道顺序进行所述垂直方向处理。
根据本发明12,即使译码部停止一部分的通道的处理时,也不会影响基于垂直滤波处理部的其它通道的处理。另外,对于停止了基于垂直滤波处理部的冻结状态的通道的图象,也能进行垂直方向处理,进行放大缩小。
另外,在本发明13中,是在本发明1所述的多通道图象处理装置中,当变更处理的通道数时,所述译码部进行关于变更后的通道数的译码;所述垂直滤波处理部在所述译码部开始关于所述变更后的通道数的译码后的下一个垂直同步信号后,进行关于所述变更后的通道数的垂直方向处理;所述水平滤波处理部在所述垂直滤波处理部开始关于所述变更后的通道数的垂直方向处理后的下一个垂直消隐期后,进行关于所述变更后的通道数的水平方向处理。
根据本发明13,当变更处理的通道数时,没必要停止图象输出。
另外,在本发明14中,是在本发明1所述的多通道图象处理装置中,所述垂直滤波处理部从开始关于所述变更后的通道数的垂直方向处理后的接着的半帧开始时,与用于显示变更处理的通道数后的图象的同步信号同步,进行工作。
根据本发明14,当变更处理的通道数时,能使垂直同步信号不紊乱,连续输出不紊乱的图象。
另外,在本发明15中,是在本发明1所述的多通道图象处理装置中,所述输出处理部生成用于把所述多个通道的图象在水平方向排列、显示的图象信号。
另外,在本发明16中,是在本发明1所述的多通道图象处理装置中,所述输出处理部生成用于显示多个画面的图象信号,所述多个画面中至少一个与其它画面的尺寸不同。
另外,本发明17中,作为多通道图象处理装置,通过从分别具有针对一个通道图象的编码数据的多个位流依次选择各位流,逐帧进行译码,求出对于多个通道的图象的译码数据,根据得到的译码数据,生成、输出用于显示多个通道的图象的图象信号。
根据本发明17,关于多通道,由一个译码器对图象的编码信号译码,能在显示装置上显示多通道的图象。
另外,本发明18中,作为多通道图象处理方法,包括:通过从分别具有针对一个通道图象的编码数据的多个位流中依次选择各位流,在各个位流上逐帧进行分时译码,来求出译码数据的译码步骤;在所述译码步骤中,从译码的图象所对应的多个通道中依次选择一个,通过对它所对应的所述译码数据进行垂直方向处理,来求出分时处理所选择的多个通道所得到的垂直方向处理后的数据的垂直滤波处理步骤;按照图象被显示的位置,从所述多个通道中依次选择一个,通过对它所对应的所述垂直方向处理后的数据进行水平方向处理,来求出分时处理所选择的多个通道所得到的水平方向处理后的数据的水平滤波处理步骤;通过合成所述水平方向处理后的数据,来生成用于显示多个通道图象的图象信号的输出处理部。
根据本发明18,关于多通道,使用一个译码器对图象的编码信号译码,关于各通道的图象,进行垂直、水平方向的尺寸调整等,能在显示装置上显示多通道的图象。
另外,本发明19是在本发明18所述的多通道图象处理方法中,还包括:把分时、多路复用了多通道的图象编码数据的位流分离为分别具有对于一个通道的图象的编码数据的多个位流后输出的流分离步骤;所述译码步骤接收并处理由所述流分离步骤分离的位流。
另外,本发明20是在本发明19所述的多通道图象处理方法中,还包括:从具有一个通道的图象编码数据的位流和有所述流分离步骤分离的多个位流中的一个选择任意一个后输出的选择步骤;所述译码步骤接收并处理由所述选择步骤选择的位流。
另外,本发明21是在本发明18所述的多通道图象处理方法中,在所述译码步骤中,关于所述多个通道,进行了对于一帧的所述编码数据的处理后,进行对于它的下一帧的处理;在所述垂直滤波处理步骤中,关于所述多个通道,进行了对于半帧的所述译码数据的处理后,进行对于接着的半帧的处理;在所述水平滤波处理步骤中,关于该行中表示的通道,进行了对于一行的所述垂直方向处理后的数据的处理后,进行对于它的下一行的处理。
另外,本发明22是在本发明18所述的多通道图象处理方法中,在所述垂直滤波处理步骤中,在所述译码步骤开始了对于一帧的处理后的接着的垂直同步信号之后,开始对于所述帧的处理;在所述水平滤波处理步骤以及所述输出处理步骤中,在所述垂直滤波处理步骤开始了对于所述帧的处理后的接着的垂直消隐期之后,开始对于所述帧的处理。
另外,本发明23是在本发明18所述的多通道图象处理方法中,所述垂直滤波处理步骤中处理的通道的顺序是与对于与成为其处理对象的帧相同的帧的所述译码步骤中的处理时相同的顺序。
另外,本发明24是在本发明18所述的多通道图象处理方法中,在所述译码步骤中,在所述垂直滤波处理步骤处理了一帧的第二半帧的1个以上的位片后,开始接着的帧的处理。
另外,本发明25是在本发明18所述的多通道图象处理方法中,在所述垂直滤波处理步骤中,在开始一个通道的处理后,在经过了垂直同步信号的间隔除以所述多个通道的数量后得到的期间后,开始下一个通道的处理。
另外,本发明26是在本发明18所述的多通道图象处理方法中,在所述垂直滤波处理步骤中,在开始一个通道的处理后,在经过了垂直同步信号的间隔除以所述多个通道的数量后得到的期间时,结束该通道的处理。
另外,本发明27是在本发明18所述的多通道图象处理方法中,在所述输出处理步骤中,合成所述处理对象的行中表示的图象的通道所对应的所述水平方向处理后的数据。
另外,本发明28是在本发明18所述的多通道图象处理方法中,当所述译码步骤停止所述一部分的通道的处理时,在所述垂直滤波处理步骤中,以与该垂直滤波处理步骤处理用所述译码步骤停止所述一部分的通道的处理的帧的前面的帧时相同的通道顺序进行所述垂直方向处理。
另外,本发明29是在本发明18所述的多通道图象处理方法中,当变更处理的通道数时,在所述译码步骤中,进行关于变更后的通道数的译码;在所述垂直滤波处理步骤中,在所述译码步骤开始关于所述变更后的通道数的译码后的下一个垂直同步信号后,进行关于所述变更后的通道数的垂直方向处理;在所述水平滤波处理步骤中,在所述垂直滤波处理步骤开始关于所述变更后的通道数的垂直方向处理后的下一个垂直消隐期后,进行关于所述变更后的通道数的水平方向处理。
另外,本发明30是在本发明29所述的多通道图象处理方法中,从开始所述垂直滤波处理步骤的所述变更后的通道数的垂直方向处理后的接着的半帧开始时,与用于显示变更处理的通道数后的图象的同步信号同步,进行工作。
另外,在本发明31中,是在本发明18所述的多通道图象处理方法中,所述输出处理步骤生成用于把所述多个通道的图象在水平方向排列、显示的图象信号。
另外,在本发明32中,是在本发明18所述的多通道图象处理方法中,所述输出处理步骤生成用于显示多个画面的图象信号,所述多个画面中至少一个与其它画面的尺寸不同。
另外,本发明33作为多通道图象处理方法,通过从分别具有针对一个通道图象的编码数据的多个位流依次选择各位流,逐帧进行译码,求出对于多个通道的图象的译码数据,根据得到的译码数据,生成、输出用于显示多个通道的图象的图象信号。
根据本发明33,关于多通道,使用一个译码器对图象的编码信号进行译码,能在显示装置上显示多通道的图象。
附图说明
下面简要说明附图。
图1是表示本发明的实施例1的多通道图象处理装置的结构例的框图。
图2(a)是表示当在显示装置的画面的上半部分显示了通道1(CH1)以及通道2(CH2)的图象,在下半部分显示了通道3(CH3)的图象时的显示例的说明图。
图(b)是表示当在显示装置的画面的上半部分显示了通道1(CH1)以及通道3(CH3)的图象,在下半部分显示了通道2的图象时的显示例的说明图。
图3是表示图1的多通道图象处理装置的译码部以及输出处理部的动作的例子的定时图表。
图4是表示图1的多通道图象处理装置的译码部以及输出处理部的动作的其它例子的定时图表。
图5是表示本发明的实施例2的多通道图象处理装置的结构的例子的框图。
图6是表示图5的输出处理部的结构的例子的框图。
图7是表示图5的译码部进行的译码处理的流程的程序流程图。
图8是表示图5的垂直滤波处理部进行的垂直方向处理的流程的程序流程图。
图9是表示图5的水平滤波处理部进行的水平方向处理的流程的程序流程图。
图10是表示图5的输出处理部进行的输出处理的流程的程序流程图。
图11是说明图5的多通道图象处理装置的动作的例子的定时图表。
图12是说明图5的多通道图象处理装置的动作的其它例子的定时图表。
图13(a)是表示通道3的画面比其它通道的画面在横向长时的显示例的说明图。
(b)是表示通道1的画面比其它通道的画面在纵向长时的显示例的说明图。
图14是说明通道2冻结时的图5的多通道图象处理装置的动作的例子的定时图表。
图15是说明从单一通道的处理向多通道的处理,变更处理的通道数时的、图5的多通道图象处理装置的动作的例子的定时图表。
图16是说明从多通道的处理向单一通道的处理,变更处理的通道数时的、图5的多通道图象处理装置的动作的例子的定时图表。
图17是表示本发明的实施例2的变形例1的多通道图象处理装置的结构的例子的框图。
图18是表示本发明的实施例2的变形例2的多通道图象处理装置的结构的例子的框图。
下面简要说明附图符号。
12、102-流分离部;21、22、23、104、105、106-流缓存器;18、108-译码部;26、27、28、110、111、112-译码视频缓存器;114-垂直滤波处理部;116、117、118-视频垂直缓存器;120-水平滤波处理部;32、122—输出处理部;124、224、324-系统控制部;131、132、139-输出处理电路。
具体实施方式
下面,参照附图就本发明的实施例加以说明。
(实施例1)
图1是表示本发明的实施例1的多通道图象处理装置的结构的框图。图1的多通道图象处理装置包括:数字广播接收处理部11、流分离部12、帧存储器20、译码部18、输出处理部32。帧存储器20包括:流缓存器21、22、23和译码视频缓存器26、27、28。
在数字广播接收处理部11中,输入了包含多路复用的位流信息的接收信号RS。数字广播接收处理部11把从输入的接收信号RS选局、译码后得到的位流BST输出到流分离部12。在该位流BST中,分时、多路复用了多个通道的图象的编码数据。下面,作为例子说明在该位流BST中多路复用了三个通道的图象的编码数据。另外,各通道的图象数据为隔行方式的,半帧的间隔约为1/60秒。
流缓存器21、22、23分别对应于通道1、2、3。流分离部12把多路复用的位流BST分离为个通道的位流积分别具有对于一个通道的图象的编码数据的位流,输出到流缓存器21、22、23中的对应的流缓存器中。流缓存器21、22、23存储对应的通道的位流中包含的编码数据。
译码部18只具有一个译码器。译码部18依次选择三个通道中的一个,从流缓存器21、22、23中与选择的通道对应的流缓存器一次一帧读出选择的通道的编码数据,作为位流。译码视频缓存器26、27、28是帧缓存器,分别对应于通道1、2、3。译码部18中,由一个译码器一次一帧把读出的编码数据译码,把得到的译码数据输出到译码视频缓存器26、27、28中对应的译码视频缓存器中。译码视频缓存器26~28分别存储了对应的通道的译码数据。
输出处理部32从译码视频缓存器26~28读出多个通道的译码数据,按照需要合成,生成并输出用于在水平方向并列显示多个通道的图象的图象信号VO。图象信号VO被提供给CRT(cathode-ray tube)等显示装置,并被显示。
图2(a)是表示当在显示装置的画面的上半部分显示了通道1(CH1)以及通道2(CH2)的图象,在下半部分显示了通道3(CH3)的图象时的显示例的说明图。图2(b)是表示当在显示装置的画面的上半部分显示了通道1(CH1)以及通道3(CH3)的图象,在下半部分显示了通道2(CH2)的图象时的显示例的说明图。
图3是表示图1的多通道图象处理装置的译码部18以及输出处理部32的动作的例子的定时图表。图3如图2(a)那样,表示了在显示装置的画面的上半部分显示通道1、2的图象,在画面的下半部分显示通道3的图象。
例如,使“1_n+1”表示“1_(n+1)”。
在图3中,把处理的对象例如表示为“1_n_1f”。以下在各处理的表示中,最初的“1”、“2”或“3”表示处理对象的通道,接着的“n”、“n+1”等表示处理对象的帧的号码(n为整数)。另外,末尾的“1f”或“2f”分别表示是关于第一半帧、第二半帧的处理。
在图3中,译码部18依次从流缓存器21、22、23读出个通道的位流,并译码,把得到的译码数据存储在译码视频缓存器26~28中。输出处理部32从译码视频缓存器26~28读出译码数据,输出能在显示画面内的希望的位置上显示各通道的图象的图象信号VO。
例如,译码部18按照通道1、通道2、通道3的顺序,进行第n帧的处理。此时,译码部18把通道1的位流译码一帧(译码处理“1_n”),如果该处理结束,则接着把通道2的位流译码一帧(译码处理“2_n”),如果该处理结束,则接着把通道3的位流译码一帧(译码处理“3_n”)。在开始通道1的译码后的接着的垂直消隐期后,输出处理部32为了使各通道显示为象图2(a)那样,进行输出处理,生成图象信号VO,并输出(输出处理“1_n_1f”、“2_n_1f”、“3_n_1f”)。
这样,根据图1的多通道图象处理装置,关于各通道,能依次由一个译码器对多通道的图象的编码数据译码,并且能在一个显示装置上同时显示多通道的图象。
图4是表示图1的多通道图象处理装置的译码部18以及输出处理部32的动作的其它例子的定时图表。图4象图2(b)那样,表示了在显示装置的画面的上半部分显示通道1、3的图象,在画面的下半部分显示通道2的图象。
在图4中,译码部18的通道3的译码处理“3_n”几乎不进展,当半帧的处理不结束时,开始了输出处理部32的输出通道3的图象的处理。因此,这时显示的通道3的图象是现在的帧的译码完毕的部分和此前的帧合成的产物。因此,未正常地显示通道3的图象。
在图1的多通道图象处理装置中,为了在任意的位置都能正常地显示通道1~3的图象,必须在输出处理的开始前积半帧的期间内结束三个通道的一帧的译码。换言之,与在一帧的期间内进行相同数量的通道的一帧的译码时相比,需要2倍的性能。这样,译码部就需要高译码性能。这里,在实施例2中,说明即使译码性能不是很高,也能在任意的位置正常地显示通道1~3的图象的多通道图象处理装置。
(实施例2)
图5是表示本发明的实施例2的多通道图象处理装置的结构的例子的框图。图5的多通道图象处理装置包括:流分离部102;流缓存器104、105、106;译码部108;译码视频缓存器110、111、112;垂直滤波处理部114;视频垂直缓存器116、117、118;水平滤波处理部120;输出处理部122;系统控制部124。
在流分离部102以及系统控制部124中输入了位流BST。位流BST是分时、多路复用了多个通道的图象的编码数据。这里,位流BST与实施例1中说明了的相同。
系统控制部124判别在输入的位流BST中多路复用的通道数。另外,系统控制部124控制各通道的图象的放大缩小率和画面内的显示位置。系统控制部124进行对应流分离部102、译码部108、垂直滤波处理部114、水平滤波处理部120以及输出处理部122的各种控制。
流分离部102把输入的位流BST分离为各通道的位流,输出到流缓存器104、105、106的任意一个中。各流缓存器104、105、106分别对应于通道1、2、3,并且存储了对应的通道的位流中包含的编码数据。
译码部108只具有一个译码器。译码部108根据系统控制部124的指示,依次选择三个通道中的一个,从流缓存器104、105、106中的与选择的通道对应的流缓存器一次读出一帧的编码数据。译码部108用一个译码器把读出的编码数据逐帧进行译码,把得到的译码数据输出的译码视频缓存器110、111、112的任意一个中。译码视频缓存器110、111、112是帧缓存器,分别对应于通道1、2、3。译码视频缓存器110、111、112存储了对应的通道的译码数据。
垂直滤波处理部114根据系统控制部124的指示,依次选择三个通道中的一个,从译码视频缓存器110、111、112中的与选择的通道对应的译码视频缓存器一次读出一帧的译码数据。垂直滤波处理部114根据系统控制部124以及译码部108的指示,对读出的译码数据进行垂直方向处理即画面的垂直方向的放大缩小处理以及垂直滤波处理,把得到的垂直方向处理后的数据输出到视频垂直缓存器116、117、118中的任意一个。视频垂直缓存器116、117、118是帧缓存器,分别对应于通道1、2、3。视频垂直缓存器116、117、118存储了对应的通道的垂直方向处理后的数据。
水平滤波处理部120根据系统控制部124进行的指示,按照画面内的各通道的图象的显示位置,按照需要依次选择三个通道中的一个。水平滤波处理部120从视频垂直缓存器116、117、118中的与选择的通道对应的视频垂直缓存器一次读出一行的垂直方向处理后的数据。水平滤波处理部120对读出的数据进行水平方向处理即画面的放大缩小处理以及水平滤波处理,把得到的水平方向处理后的数据输出到输出处理部122。输出处理部122进行合成水平方向处理后的数据的输出处理,把输出图象信号VOUT输出。输出图象信号VOUT被提供给CRT等显示装置,并被显示。
图6是表示图5的输出处理部122的结构的例子的框图。在图6中,输出处理部122具有输出处理电路131、132、139和图象合成部142。输出处理电路131、132、139在画面内分别对应于同一行中显示的图象的通道。输出处理电路131、132、139分别存储了对应的通道的数据即正在显示的行以及接着要显示的行的数据。图象合成部142根据系统控制部124的指示,按照画面内的各通道的图象的显示位置,从输出处理电路131、132、139依次读出数据,相加,把输出图象信号VOUT输出。
因为图6的输出处理部122具有三个输出处理电路131、132、139,所以能在同一行中显示三个通道的图象即在画面内,在水平方向并列显示三个通道的图象。如果在同一行中显示两个通道的图象就可以时,可以只具有两个输出处理电路。即没有必要与输入的位流BST中多路复用的通道的全部对应,具有输出处理电路。
图7是表示图5的译码部108进行的译码处理的流程的程序流程图。首先,在步骤S11中,译码部108从垂直同步信号的定时判定是否应该开始位流BST中多路复用的三个通道中的最初的通道的译码。当检测到垂直同步信号时,进入步骤S12,开始最初的通道的译码,当未检测到垂直同步信号时,再执行步骤S11。在步骤S12中,译码部108从系统控制部124接收应该处理的通道的指定。
在步骤S13中,译码部108从流缓存器104、105、106中选择指定的通道所对应的流缓存器,把存储的编码数据读出。译码部108对于读出的编码数据的一帧进行译码,把得到的译码数据存储道译码视频缓存器110、111、112中的指定的通道所对应的译码视频缓存器中。译码部108进行了第一半帧的译码后,进行与它同一帧的第二半帧的译码。
步骤S14中,译码部108判定位流BST中多路复用的三个通道的全部译码是否结束。当结束了时,进入步骤S11,进行下一帧的处理,当未结束时,回到步骤S12,进行未处理的通道的译码处理。
图8是表示图5的垂直滤波处理部114进行的垂直方向处理的流程的程序流程图。首先,在步骤S21中,垂直滤波处理部114进行垂直同步信号的检测。当检测到垂直同步信号时,进入步骤S22,开始最初的通道的处理,当未检测到垂直同步信号时,再执行步骤S21。
在步骤S22中,垂直滤波处理部114从系统控制部124接收应该处理的通道的指定。指定通道的顺序基本上与译码部108进行对同一帧的处理时的顺序相同。
在步骤S23中,垂直滤波处理部114从译码视频缓存器110、111、112中的指定的通道所对应的译码视频缓存器读出译码数据。垂直滤波处理部114对于读出的译码数据进行垂直方向处理,把得到的垂直处理后的数据存储到视频垂直缓存器116、117、118中的指定的通道所对应的视频垂直缓存器中。在步骤S23中,垂直滤波处理部114以位片为单位进行处理,如果结束了一个位片的处理,就进入步骤S24。位片是构成一帧的画面的一部分的带状的区域。
在步骤S24中,垂直滤波处理部114判断是否在用于一个通道的半帧的处理能使用的时间内。用于一个通道的半帧的处理能使用的时间是把半帧的时间除以位流中多路复用的图象的通道数后得到的时间。例如,当半帧的间隔约为1/60秒,在位流BST中多路复用了三个通道时,用于一个通道的能使用的处理时间约为1/180秒。垂直滤波处理部114当开始处理中的半帧的处理后的时间为用于一个通道的能使用的处理时间内,并且该半帧的处理未结束时,回到步骤S23,进行接着的位片的处理,其它情形时,结束垂直滤波处理,进入步骤S25。
在步骤S25中,垂直滤波处理部114判定全部的通道的处理是否结束了。当结束了时,进入步骤S21,进行下一半帧的处理,当未结束时,回到步骤S22,进行未处理的通道的处理。
图9是表示图5的水平滤波处理部120进行的水平方向处理的流程的程序流程图。首先,在步骤S31中,水平滤波处理部120进行是否为垂直消隐期的判定。当为垂直消隐期时,再执行步骤S31,当不是垂直消隐期时,进入步骤S32,开始最初的通道的处理。
在步骤S32中,水平滤波处理部120从系统控制部124接收应该处理的通道的指定。这里,指定了在同一行中显示的通道中的一个。在步骤S33中,水平滤波处理部120从视频垂直缓存器116、117、118中的指定的通道所对应的视频垂直缓存器读出垂直处理后的数据。水平滤波处理部120对读出的数据进行水平方向处理,把得到的水平处理后的数据输出到输出处理部122。
在步骤S34中,水平滤波处理部120判定是否进行其它通道的处理。当在同一行中显示两个以上的通道的图象时,有必要处理该行中显示的全部通道。当处理其它的通道时,回到步骤S32,进行未处理的通道的处理,当不处理其它的通道时,进入步骤S31,进行下一行的处理。
图10是表示图5的输出处理部122进行的输出处理的流程的程序流程图。首先,在步骤S41中,输出处理部122判定是否为垂直消隐期。当为垂直消隐期时,再执行步骤S41,当不是垂直消隐期时,进入步骤S42。
在步骤S42中,输出处理部122从系统控制部124接收因该显示的通道的指定。在步骤S43中,输出处理部122按照应该显示图象的位置,合成个通道的数据,进行一行的显示。然后,进入步骤S41,进行下一行的处理。
图11是说明图5的多通道图象处理装置的动作的例子的定时图表。图11如图2(a)那样,表示了在画面的上半部分显示了通道1、2,在画面的下半部分显示通道3的图象。在图11中,表示垂直消隐期的信号的波形为低电位的期间表示垂直消隐期。
在图11中,译码处理“1_n”是译码部108从流缓存器104读出通道1的第n帧的编码数据,译码,并且把得到的译码数据输出到译码视频缓存器110中的处理。译码部108在垂直同步信号之后开始该处理。
译码处理“2_n”是译码部108从流缓存器105读出通道2的第n帧的编码数据,译码,并且把得到的译码数据输出到译码视频缓存器111中的处理。译码部108在译码处理“1_n”结束后,开始译码处理“2_n”。
译码处理“3_n”是译码部108从流缓存器106读出通道3的第n帧的编码数据,译码,并且把得到的译码数据输出到译码视频缓存器112中的处理。译码部108在译码处理“2_n”结束后,开始译码处理“3_n”。
译码部108在译码处理“1_n”、“2_n”、“3_n”中,在其前半中,进行第一半帧的处理,在其后半中,进行第二半帧的处理。
垂直方向处理“1_n_1f”是对于通道1的第n帧的第一半帧的垂直方向处理。该处理是垂直滤波处理部114从译码视频缓存器110读出通道1的译码数据,进行垂直方向处理,并且把得到的垂直方向处理后的数据输出到视频垂直缓存器116中的处理。垂直滤波处理部114在译码处理“1_n”开始后,经过相当于半帧的期间后,例如译码处理“1_n”开始后的垂直的垂直同步信号之后,开始该处理。
垂直方向处理“2_n_1f”是对于通道2的第n帧的第一半帧的垂直方向处理。该处理是垂直滤波处理部114从译码视频缓存器111读出通道2的译码数据,进行垂直方向处理,并且把得到的垂直方向处理后的数据输出到视频垂直缓存器117中的处理。正如参照图8说明过的那样,因为提供给一个通道的处理时间约为1/180秒,所以垂直滤波处理部114在垂直方向处理“1_n_1f”开始后约1/180秒后开始该处理。
垂直方向处理“3_n_1f”是对于通道3的第n帧的第一半帧的垂直方向处理。该处理是垂直滤波处理部114从译码视频缓存器112读出通道2的译码数据,进行垂直方向处理,并且把得到的垂直方向处理后的数据输出到视频垂直缓存器118中的处理。垂直滤波处理部114在垂直方向处理“2_n_1f”开始后约1/180秒后开始该处理。
接着,交替进行了一行的水平方向处理“1_n_1f”和一行的水平方向处理“2_n_1f”,关于通道1、2,结束了半帧的处理后,进行了水平方向处理“3_n_1f”。是为了象图2那样,在画面的上半部分显示通道1、2,在画面的下半部分显示通道3。
水平方向处理“1_n_1f”是对于通道1的第n帧的第一半帧的水平方向处理。该处理是水平滤波处理部120从视频垂直缓存器116读出通道1的垂直方向处理后的数据,进行水平方向处理,把得到的水平方向处理后的数据输出到输出处理部122的处理。水平滤波处理部120在垂直方向处理“1_n_1f”开始后,经过相当于半帧的期间后,例如垂直方向处理“1_n_1f”开始后的最初的垂直消隐期之后,开始该处理。水平滤波处理部120根据系统控制部124的指示,一次一行进行水平方向处理。
同样,水平方向处理“2_n_1f”、“3_n_1f”分别是对于通道2、3的第n帧的第一半帧的水平方向处理。该处理是水平滤波处理部120分别从视频垂直缓存器117、118读出通道2、3的垂直方向处理后的数据,进行水平方向处理,把得到的水平方向处理后的数据输出到输出处理部122的处理。
输出处理“1_n_1f”是对于通道1的第n帧的第一半帧的输出处理。该处理是输出处理部122根据系统控制部124的指示,以恰当的定时向画面输出通道1的水平方向处理后的数据的处理。
输出处理部122开始关于某一行的输出处理是水平滤波处理部120开始了关于该行的处理后,经过了相当于一行的时间以后。
同样,输出处理“2_n_1f”、“3_n_1f”分别是对于通道2、3的第n帧的第一半帧的输出处理。该处理是输出处理部122根据系统控制部124的指示,以恰当的定时向画面输出通道2、3的各自的水平方向处理后的数据的处理。
如果水平滤波处理部120以及输出处理部122垂直滤波处理部114结束了对第一半帧的处理,则垂直滤波处理部114就同样地对第二半帧进行处理。垂直滤波处理部114在垂直方向处理“1_n_1f”开始后的最初的垂直同步信号之后,开始对于第二半帧的垂直方向处理“2_n_1f”。
第n+1以后的帧的处理也同样。译码部108从开始译码处理“1_n”,经过相当于一帧的期间后,例如译码处理“1_n”开始后的第二个垂直同步信号之后,开始对于通道1的第n+1帧的编码数据的译码处理“1_n+1”。
译码部108最好在垂直滤波处理部114在垂直方向处理“1_n_2f”中结束了一个位片的处理后,开始对于接着的第n+1帧的译码处理“1_n+1”。这样,在垂直滤波处理部114使用通道1的第n帧的第二半帧的译码数据,结束垂直方向处理“1_n_2f”之前,译码部108不会在该译码数据上覆盖通道1的第n+1帧的第二半帧的译码数据。另外,能确保译码处理中使用的时间。
三个通道中,最初处理的通道1的译码处理“1_n”的前半(对于第一半帧的处理)可以在该通道1的垂直方向处理“1_n_1f”开始前结束。另外,译码处理“2_n”的前半以及译码处理“3_n”的前半分别可以在垂直方向处理″2_n_1f″、″2_n_1f″开始前结束。
译码部108在开始通道1的垂直方向处理″1_n_1f″之前,即垂直同步信号的间隔V之间,关于全部的通道,没必要结束对于第n帧的译码处理,所以译码部108的性能不是很高也可以。例如,在图11中,用于对全部通道的第n+1帧译码能使用的期间是从一个位片的处理结束到垂直方向处理″1_n_2f″结束,该长度约为1.9V。
垂直滤波处理部114当一个通道的第一半帧的垂直方向处理在开始处理以后,在时间V/c(c为通道数)以内未结束时,在经过了时间V/c的时刻,结束该处理。因此,能不对其它通道的垂直方向处理造成影响。此时,水平滤波处理部120对于无法处理的部分,从视频垂直缓存器116~118中的对应的视频垂直缓存器读出这之前的帧的垂直方向处理后的数据。
图12是说明图5的多通道图象处理装置的动作的其它例子的定时图表。图12象图2(b)那样,表示了在画面的上半部分显示通道1、3,在画面的下半部分显示通道2。图2(a)和图2(b)的不同之处在于:通道2的图象显示的位置和通道3的图象显示的位置相反。因此,在图12中,图11的水平方向处理以及输出处理中的通道2的处理和通道3的处理交换。关于其它的点,与图11时相同,所以省略了说明。
这样,图5的多通道图象处理装置在图11以及图12的时候,在开始输出处理之前,关于全部三个通道,译码处理结束。因此,不会出现一部分的通道的译码处理来不及,而显示该通道的一帧前的图象。因此,能在任意的位置显示译码处理的多个通道的图象的任意一个。
这样,根据图5的多通道图象处理装置,关于各通道,能由一个译码器对依次对多个通道的图象的编码数据译码,并且能在一个显示装置的任意位置同时显示多个通道的图象。
因为图5的多通道图象处理装置在一帧的期间内进行三个通道的一帧的译码就足够了,所以与图1的多通道图象处理装置相比,即使译码处理性能不是很高也可以。因为没必要告诉进行译码处理,所以能减小译码部的硬件的规模。
图13(a)是表示通道3的画面比其它通道的画面在横向长时的显示例的说明图。图(b)是表示通道1的画面比其它通道的画面在纵向长时的显示例的说明图。这样,一部分的通道的画面尺寸可以与其它通道的画面尺寸不同。
图14是说明使通道2冻结时的图5的多通道图象处理装置的动作的例子的定时图表。
译码部108在结束第n-1帧的处理之前,进行与参照图11说明的处理相同的处理。如图14所示,在第n帧的处理中,译码部108对于要冻结的通道2停止译码处理,等待到接着的通道3的译码处理开始。此时,垂直滤波处理部114不是以基于译码部108的该帧的处理时的顺序,而是以与译码部108停止处理的帧的前面的帧(第n-1帧)的垂直方向处理时相同的顺序进行各通道的处理。
对第n+1帧以后的帧也进行同样的处理。
即垂直滤波处理部114不省略通道2的处理,按顺序进行垂直方向处理″1_n_1f″、″2_n_1f″、″3_n_1f″。垂直滤波处理部114在正在冻结的通道2的处理时,从译码视频缓存器111读出冻结前的帧的数据。同样,水平滤波处理部120也不省略通道2的水平方向处理。
这样,在图5的多通道图象处理装置中,即使译码部停止一部分的通道的处理,有的通道,也不影响其他通道的处理。另外,因为对于的通道的图象,进行垂直方向处理、水平方向处理、输出处理,所以能进行垂直方向以及水平方向的放大缩小处理、显示位置的变更。
图15是说明从单一通道的处理向多通道的处理变更处理的通道数时的图5的多通道图象处理装置的动作的例子的定时图表。
在图15中,首先,图5的多通道图象处理装置根据通道1的同步信号工作,系统控制部124为译码部108、垂直滤波处理部114、水平滤波处理部120以及输出处理部122指定应该处理的通道数“1”。另外,该多通道图象处理装置在处理了通道1的第N(N为整数,在图15中N=n-1)帧后,从单一通道的处理向多通道的处理变更处理的通道数。
在流缓存器104中存储了通道1的编码数据。译码部108从流缓存器104读出通道1的编码数据,进行对于第N帧的译码处理“N”。译码部108把得到的译码数据存储在译码视频缓存器110中。
垂直滤波处理部114在开始译码处理“N”之后的下一个垂直同步信号之后以及它的下一个垂直同步信号之后,从译码视频缓存器110读出译码数据,分别进行垂直方向处理“N_1f”以及“N_2f”。垂直滤波处理部114把得到的垂直方向处理后的数据存储在视频垂直缓存器116中。
水平滤波处理部120在垂直方向处理“N_1f”开始后的下一个垂直消隐期之后以及它的下一个垂直消隐期之后,从视频垂直缓存器116读出垂直方向处理后的数据,分别进行水平方向处理“N_1f”以及方向处理“N_2f”。水平滤波处理部120把得到的水平方向处理后的输出输出到输出处理部122。输出处理部122根据输入的数据,生成并输出图象信号。
如果译码处理“N”结束,则系统控制部124就变更应该处理的通道数,为译码部108指定变更后的通道数“3”。系统控制部124在译码处理“N”开始后的第二个垂直同步信号之后,按顺序使译码部108中进行多通道的译码处理“1_n”、“2_n”“3_n”。
另外,如果垂直方向处理“N_2f”结束,系统控制部124就为垂直滤波处理部114指定变更后的通道数“3”。系统控制部124在译码部108开始了译码处理“1_n”后,在它的下一个垂直同步信号之后,按顺序使垂直滤波处理部114中进行多通道的垂直方向处理″1_n_1f″、″2_n_1f″、″3_n_1f″。
而且,如果水平方向处理″N_2f″结束,则系统控制部124就为水平滤波处理部120指定变更后的通道数“3”。系统控制部124在垂直滤波处理部114开始垂直方向处理″1_n_1f″之后,在它的下一个垂直消隐期之后,使水平滤波处理部120中进行多通道的水平方向处理″1_n_1f″、″2_n_1f″、″3_n_1f″。
译码部108、垂直滤波处理部114以及水平滤波处理部120对于以后的半帧也同样地重复处理。
图5的多通道图象处理装置在垂直滤波处理部114开始多通道的处理后,到它的下一个半帧开始之前,与同步信号A、其后的同步信号B同步工作。这里,同步信号A表示用于显示单一通道(通道1)的垂直同步信号以及水平同步信号,同步信号B表示用于显示多通道(通道1~3)的垂直同步信号以及水平同步信号。同步信号A和同步信号B是同步的。
并且,图5的多通道图象处理装置中,用于显示多通道而输出的图象信号、用于显示单一通道而输出的图象信号可以是高精密信号即HDTV(high definition television)信号、标准信号即SDTV(standard definitiontelevision)信号的任意一个。
这样,图5的多通道图象处理装置在从单一通道的处理向多通道的处理变更处理的通道数时,没必要停止图象输出,能连续地输出不紊乱的图象。
图16是说明从多通道的处理向单一通道的处理变更处理的通道数时的图5的多通道图象处理装置的动作的例子的定时图表。
在图16中,首先,图5的多通道图象处理装置根据多通道的同步信号工作,系统控制部124为译码部108、垂直滤波处理部114、水平滤波处理部120以及输出处理部122指定应该处理的通道数“3”。另外,该多通道图象处理装置在处理了通道1~3的第n+1帧后,从多通道的处理向单一通道的处理变更处理的通道数。在图16中,N=n+2。
译码部108按顺序进行对第n+1帧的译码处理“1_n+1”、“2_n+1”、“3_n+1”。垂直滤波处理部114在译码处理“1_n+1”的下一个垂直同步信号之后以及它的下一个垂直同步信号之后,分别结型垂直方向处理“1_n+1_1f”以及“1_n+1_2f”。水平滤波处理部120在垂直方向处理“1_n+1_1f”的下一个垂直消隐期之后以及它的下一个垂直消隐期之后,分别进行水平方向处理“1_n+1_1f”以及“1_n+1_2f”。水平滤波处理部120把得到的水平方向处理后的数据输出到输出处理部122中,输出处理部122把输入的数据合成,生成并输出图象信号。
如果译码处理“3n+1”结束,则系统控制部124变更应该处理的通道数,为译码部108指定变更后的通道数“1”。系统控制部124在译码处理“1_n+1”开始后的第二个垂直同步信号之后,使译码部108中进行通道1的译码处理“N”。
另外,如果垂直方向处理“3_n+1_2f”结束,则系统控制部124为垂直滤波处理部114指定变更后的通道数“1”。系统控制部124在译码部108开始了译码处理“N”后,在它的下一个垂直同步信号之后,使垂直滤波处理部114进行通道1的垂直方向处理“N_1f”。
而且,如果水平方向处理“3_n+1_2f”结束,则系统控制部124为水平滤波处理部120指定变更后的通道数“1”。系统控制部124在垂直滤波处理部114开始垂直方向处理“N_1f”之后,在它的下一个垂直消隐期之后,使水平滤波处理部120进行通道1的水平方向处理“N_1f”。
译码部108、垂直滤波处理部114以及水平滤波处理部120对于以后的半帧也同样地重复处理。
图5的多通道图象处理装置在垂直滤波处理部114开始通道1的处理后,到它的下一半帧开始之前,与同步信号B,然后与同步信号A同步工作。这里,同步信号A以及同步信号B与参照图15说明了的同样,同步信号A和同步信号B是同步的。
这样,图5的多通道图象处理装置在从多通道的处理向单一通道的处理变更处理的通道数时,没必要停止图象输出,能连续地输出不紊乱的图象。
(实施例2的变形例1)
图17是表示本发明的实施例2的变形例1的多通道图象处理装置的结构的例子的框图。图17的多通道图象处理装置是在图5的多通道图象处理装置中,还具有选择器251、252、253,代替系统控制部124,具有系统控制部224。关于其它的构成要素,与参照图5说明了的同样。
流分离部102把分离后的各通道的位流分别输出到选择器251~253。另外,分别具有一个通道的图象编码数据的位流EB1、EB2、EB3从图17的多通道图象处理装置的外部分别输入到选择器251~253中。选择器251~253分别根据系统控制部224的指示,把输入的两个位流的任意一个输出到流缓存器104、105、106中的对应的流缓存器中。
在图17中,选择器251~253选择流分离部102输出的位流输出,选择器252选择从外部输入的位流EB2输出。因此,作为通道2的图象,能显示与输入到流分离部102的位流BST不同的位流的图象。
这样,根据图17的多通道图象处理装置,能从分时多路复用了多通道的图象编码数据的位流、作为外部输入即从其它装置提供的位流组合任意通道的图象来进行显示。
(实施例2的变形例2)
图18是表示本发明的实施例2的变形例2的多通道图象处理装置的结构的例子的框图。图18的多通道图象处理装置是在图5的多通道图象处理装置中,代替流分离部102以及系统控制部124,分别具有存储卡读出器362以及系统控制部324。
在流缓存器104以及106中分别图18的多通道图象处理装置的外部输入了位流EB1以及EB2。存储卡读出器362根据系统控制部324的指示,读出可装卸的存储卡364容纳的数据,作为位流输出到流缓存器105中。存储卡364例如是SD(secure digital)存储卡、压缩闪存(compactflash)、或Smart media等存储卡。须指出的是,存储卡364可以内置在图18的多通道图象处理装置中。
这样,根据图18的多通道图象处理装置,能读出存储卡中存储的数据,与从其它位流得到的图象一起显示。
须指出的是,在以上的实施例中,说明了把多通道图象处理装置输出的图象信号提供给CRT等显示装置,进行显示,但是,也可以把该图象信号在VTR和其它记录仪中记录。另外,也可以把该图象信号提供给计算机,使它在计算机的显示器上显示。此时,可以在显示器上的一个窗口中显示多个通道的图象。
另外,也可以使用CPU,由软件进行以上的多通道图象处理装置的处理。
另外,流分离部、译码部、垂直滤波处理部、水平滤波处理部以及输出处理部也可以包含系统控制部的功能。
另外,本发明的多通道图象处理装置及其方法也能以从DVD(digitalversatile disc)、CD(compact disk)、硬盘等记录媒体读出的位流等为对象来进行处理。
如以上所述的那样,根据本发明,就能实现关于多通道对图象的编码数据译码,生成用于显示多通道的图象的信号的多通道图象处理装置及其方法。因为通过一个译码器,就能进行关于多通道的图象译码,所以能实现低成本化。另外,即使译码处理性能不是很高,也能在任意的位置显示任意的通道的图象,所以能进一步地降低成本。

Claims (26)

1.一种多通道图象处理装置,包括:
从分别具有针对一个通道图象的编码数据的多个位流中,依次选择各位流来在每个位流上逐帧进行分时译码,据此来输出所得到的译码数据的译码部;
从由所述译码部译码的图象所对应的多个通道中依次选择一个,通过对它所对应的所述译码数据进行垂直方向处理,来输出分时处理所选择的多个通道所得到的垂直方向处理后的数据的垂直滤波处理部;
按照图象被显示的位置,从所述多个通道中依次选择一个,通过对它所对应的所述垂直方向处理后的数据进行水平方向处理,来输出分时处理所选择的多个通道所得到的水平方向处理后的数据的水平滤波处理部;
通过合成所述水平方向处理后的数据,生成用于显示多个通道图象的图象信号来进行输出的输出处理部;
其中所述垂直滤波处理部在所述译码部开始了对于一帧的处理后的接着的垂直同步信号之后,开始对于所述帧的处理;所述水平滤波处理部以及所述输出处理部在所述垂直滤波处理部开始了对所述帧的处理后的下一个的垂直消隐期后,开始对于所述帧的处理;并且所述垂直滤波处理部处理的通道的顺序是与对于与成为其处理对象的帧相同的帧的基于所述译码部的处理时相同的顺序。
2.根据权利要求1所述的多通道图象处理装置,其特征在于:所述译码部在所述垂直滤波处理部处理了一帧的第二半帧的1个以上的位片后,开始接着的帧的处理。
3.根据权利要求1所述的多通道图象处理装置,其特征在于:所述垂直滤波处理部在开始一个通道的处理后,在经过了以垂直同步信号的间隔除以所述多个通道的数量而得到的期间后,开始进行下一个通道的处理。
4.根据权利要求1所述的多通道图象处理装置,其特征在于:所述垂直滤波处理部在开始一个通道的处理后,在经过了垂直同步信号的间隔除以所述多个通道的数量而得到的期间后,结束该通道的处理。
5.根据权利要求1所述的多通道图象处理装置,其特征在于:所述输出处理部具有与同一行中表示的图象通道分别对应的输出处理电路;
所述输出处理电路分别存储处理对象的行中表示的图象的通道中对应的通道的所述水平方向处理后的数据。
6.根据权利要求5所述的多通道图象处理装置,其特征在于:所述输出处理部合成并输出所述输出处理电路中存储所述处理对象的行中所表示的图象通道的数据的电路的输出。
7.根据权利要求1所述的多通道图象处理装置,其特征在于:所述垂直滤波处理部在所述译码部停止一部分通道的处理时,以与该垂直滤波处理部处理所述译码部停止所述一部分通道的处理的帧的前面的帧时相同的通道顺序来进行所述垂直方向处理。
8.根据权利要求1所述的多通道图象处理装置,其特征在于:当变更处理的通道数时,所述译码部进行关于变更后的通道数的译码;
所述垂直滤波处理部在所述译码部开始关于所述变更后的通道数的译码后的下一个垂直同步信号后,进行关于所述变更后的通道数的垂直方向处理;
所述水平滤波处理部在所述垂直滤波处理部开始关于所述变更后的通道数的垂直方向处理后的下一个垂直消隐期后,进行关于所述变更后的通道数的水平方向处理。
9.根据权利要求8所述的多通道图象处理装置,其特征在于:所述垂直滤波处理部从开始关于所述变更后的通道数的垂直方向处理后的接着的半帧开始时,与用于显示变更处理的通道数后的图象的同步信号同步来进行工作。
10.根据权利要求1所述的多通道图象处理装置,其特征在于:所述输出处理部生成用于把所述多个通道的图象在水平方向排列、显示的图象信号。
11.根据权利要求1所述的多通道图象处理装置,其特征在于:所述输出处理部生成用于显示多个画面的图象信号,所述多个画面中至少一个与其它画面的尺寸不同。
12.一种多通道图象处理方法,包括:通过从分别具有针对一个通道图象的编码数据的多个位流中依次选择各位流,在各个位流上逐帧进行分时译码,来求出译码数据的译码步骤;
在所述译码步骤中,从译码的图象所对应的多个通道中依次选择一个,通过对它所对应的所述译码数据进行垂直方向处理,来求出分时处理所选择的多个通道所得到的垂直方向处理后的数据的垂直滤波处理步骤;
按照图象被显示的位置,从所述多个通道中依次选择一个,通过对它所对应的所述垂直方向处理后的数据进行水平方向处理,来求出分时处理所选择的多个通道所得到的水平方向处理后的数据的水平滤波处理步骤;
通过合成所述水平方向处理后的数据,来生成用于显示多个通道图象的图象信号的输出处理部。
13.根据权利要求12所述的多通道图象处理方法,其特征在于:还包括:把分时、多路复用了多通道的图象编码数据的位流分离为分别具有对于一个通道的图象的编码数据的多个位流的流分离步骤;
所述译码步骤处理由所述流分离步骤分离的位流。
14.根据权利要求12所述的多通道图象处理方法,其特征在于:还包括:从具有一个通道的图象编码数据的位流和有所述流分离步骤分离的多个位流中的一个选择任意一个后输出的选择步骤;
所述译码步骤处理由所述选择步骤选择的位流。
15.根据权利要求12所述的多通道图象处理方法,其特征在于:在所述译码步骤中,关于所述多个通道,在进行了对于一帧的所述编码数据的处理后,进行对于它的下一帧的处理;
在所述垂直滤波处理步骤中,关于所述多个通道,在进行了对于半帧的所述译码数据的处理后,进行对于接着的半帧的处理;
在所述水平滤波处理步骤中,关于一行中表示的通道,进行了对于该行的所述垂直方向处理后的数据的处理后,进行对于它的下一行的处理。
16.根据权利要求12所述的多通道图象处理方法,其特征在于:在所述垂直滤波处理步骤中,在用所述译码步骤开始了对于一帧的处理后的接着的垂直同步信号之后,开始对于所述帧的处理;
在所述水平滤波处理步骤以及所述输出处理步骤中,在用所述垂直滤波处理步骤开始了对于所述帧的处理后的接着的垂直消隐期之后,开始对于所述帧的处理。
17.根据权利要求12所述的多通道图象处理方法,其特征在于:所述垂直滤波处理步骤中处理的通道的顺序是与对于与成为其处理对象的帧相同的帧的所述译码步骤中的处理时相同的顺序。
18.根据权利要求12所述的多通道图象处理方法,其特征在于:在所述译码步骤中,在用所述垂直滤波处理步骤处理了一帧的第二半帧的1个以上的位片后,开始接着的帧的处理。
19.根据权利要求12所述的多通道图象处理方法,其特征在于:在所述垂直滤波处理步骤中,在开始一个通道的处理后,在经过了垂直同步信号的间隔除以所述多个通道的数量后得到的期间后,开始其下一个通道的处理。
20.根据权利要求12所述的多通道图象处理方法,其特征在于:在所述垂直滤波处理步骤中,在开始一个通道的处理后,在经过了垂直同步信号的间隔除以所述多个通道的数量后得到的期间时,结束该通道的处理。
21.根据权利要求12所述的多通道图象处理方法,其特征在于:在所述输出处理步骤中,合成所述处理对象的行所表示的图象的通道所对应的所述水平方向处理后的数据。
22.根据权利要求12所述的多通道图象处理方法,其特征在于:当用所述译码步骤停止所述一部分通道的处理时,在所述垂直滤波处理步骤中,以与该垂直滤波处理步骤处理用所述译码步骤停止所述一部分通道的处理的帧的前面的帧时相同的通道顺序来进行所述垂直方向处理。
23.根据权利要求12所述的多通道图象处理方法,其特征在于:当变更处理的通道数时,在所述译码步骤中,进行关于变更后的通道数的译码;
在所述垂直滤波处理步骤中,在用所述译码步骤开始关于所述变更后的通道数的译码后的下一个垂直同步信号后,进行关于所述变更后的通道数的垂直方向处理;
在所述水平滤波处理步骤中,在所述垂直滤波处理步骤开始关于所述变更后的通道数的垂直方向处理后的下一个垂直消隐期后,进行关于所述变更后的通道数的水平方向处理。
24.根据权利要求23所述的多通道图象处理方法,其特征在于:从开始所述垂直滤波处理步骤的所述变更后的通道数的垂直方向处理后的接着的半帧开始时,与用于显示变更处理的通道数后的图象的同步信号同步来进行处理。
25.根据权利要求12所述的多通道图象处理方法,其特征在于:所述输出处理步骤生成用于把所述多个通道的图象沿水平方向排列、显示的图象信号。
26.根据权利要求12所述的多通道图象处理方法,其特征在于:所述输出处理步骤生成用于显示多个画面的图象信号,所述多个画面中的至少一个画面中与其它画面的尺寸不同。
CNB02150542XA 2001-11-14 2002-11-13 多通道图象处理装置及其方法 Expired - Fee Related CN1255988C (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2001348523 2001-11-14
JP2001348523 2001-11-14
JP2001-348523 2001-11-14

Publications (2)

Publication Number Publication Date
CN1419375A CN1419375A (zh) 2003-05-21
CN1255988C true CN1255988C (zh) 2006-05-10

Family

ID=19161333

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB02150542XA Expired - Fee Related CN1255988C (zh) 2001-11-14 2002-11-13 多通道图象处理装置及其方法

Country Status (3)

Country Link
US (1) US7042950B2 (zh)
EP (1) EP1313311A3 (zh)
CN (1) CN1255988C (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7142255B2 (en) * 2003-10-08 2006-11-28 Silicon Laboratories Inc. Transport stream and channel selection system for digital video receiver systems and associated method
JP2005258526A (ja) * 2004-03-09 2005-09-22 Nec Saitama Ltd 卓上ホルダ及び携帯端末機器システム
US7996863B2 (en) * 2004-05-13 2011-08-09 Ati Technologies Ulc Method and apparatus for display of a digital video signal
DE602005017624D1 (de) * 2004-07-02 2009-12-24 Panasonic Corp Av-strom-wiedergabevorrichtung, decoderumschaltverfahren, verfahren, programm, programmaufzeichnungsmedium und integrierte schaltung
US7881546B2 (en) * 2004-09-08 2011-02-01 Inlet Technologies, Inc. Slab-based processing engine for motion video
FR2891419A1 (fr) * 2005-09-23 2007-03-30 St Microelectronics Sa Decodage d'une pluralite de flux d'informations codees selon un algorithme de codage par blocs.
JP2009111932A (ja) * 2007-10-31 2009-05-21 Panasonic Corp 動画像復号化装置
US8417253B2 (en) * 2010-02-23 2013-04-09 Intel Corporation Bandwidth and channel notification for wide-channel wireless communication
US9055275B2 (en) 2011-05-11 2015-06-09 Mitsubishi Electric Corporation Image information playback unit, image information playback device and synchronization control method
US10679636B2 (en) * 2018-01-12 2020-06-09 Ribbon Communications Operating Company, Inc. Methods and apparatus for supporting encoding, decoding and/or transcoding of content streams in a communication system
JP2020144412A (ja) * 2019-03-04 2020-09-10 セイコーエプソン株式会社 表示方法及び表示装置
CN112825563B (zh) * 2019-11-20 2023-08-22 西安诺瓦星云科技股份有限公司 视频处理方法及装置、视频处理设备
CN111479162B (zh) * 2020-04-07 2022-05-13 成都酷狗创业孵化器管理有限公司 直播数据传输方法、装置以及计算机可读存储介质

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH066720A (ja) 1992-06-16 1994-01-14 Toshiba Corp 画像信号処理装置
JPH06284392A (ja) * 1993-03-30 1994-10-07 Toshiba Corp 映像信号送受信装置
US5485215A (en) * 1994-05-19 1996-01-16 Matsushita Electric Corporation Of America HDTV raster converter and interpolation filter with section overlap
JPH0993131A (ja) 1995-09-27 1997-04-04 Sony Corp デコード装置
US5926791A (en) * 1995-10-26 1999-07-20 Sony Corporation Recursively splitting the low-frequency band with successively fewer filter taps in methods and apparatuses for sub-band encoding, decoding, and encoding and decoding
KR970078629A (ko) * 1996-05-28 1997-12-12 이형도 다채널 동시검색기능을 구비한 디지탈위성영상수신기
JPH10145788A (ja) 1996-11-11 1998-05-29 Sumitomo Electric Ind Ltd 映像再生装置
JP3937564B2 (ja) * 1998-03-24 2007-06-27 三菱電機株式会社 ディジタルビデオ受信装置
JP2000041226A (ja) 1998-07-21 2000-02-08 Toshiba Corp 番組情報受信装置と番組情報表示方法及び番組情報送信装置並びに番組情報送信方法
US6252906B1 (en) 1998-07-31 2001-06-26 Thomson Licensing S.A. Decimation of a high definition video signal
JP2000287215A (ja) 1999-03-30 2000-10-13 Toshiba Corp 映像復号化装置
JP2000324489A (ja) 1999-05-14 2000-11-24 Sony Corp マルチ画面映像送出方法とマルチ画面映像送出システムおよびマルチ画面映像送出システムのセットアップ方法
KR100320476B1 (ko) * 2000-01-12 2002-01-15 구자홍 비디오 디코더 및 디코딩 방법
JP2001211432A (ja) * 2000-01-26 2001-08-03 Nec Corp 画像復号装置、半導体装置、及び画像復号方法

Also Published As

Publication number Publication date
US20030091115A1 (en) 2003-05-15
US7042950B2 (en) 2006-05-09
CN1419375A (zh) 2003-05-21
EP1313311A3 (en) 2003-09-03
EP1313311A2 (en) 2003-05-21

Similar Documents

Publication Publication Date Title
CN1174607C (zh) 图像编码装置和方法、图像解码装置和方法、记录载体
CN1276648C (zh) 字幕数据编码/解码的方法和器件
CN1247019C (zh) 传输数据流记录/再现装置及方法和程序/数据记录介质
CN1255988C (zh) 多通道图象处理装置及其方法
CN1182715C (zh) 信号传输系统、信号发送装置和信号接收装置
CN1171452C (zh) 多种传输、记录并控制图像数据显示的装置和方法
CN1293763C (zh) 图像重放装置
CN1306811C (zh) 数据发送装置、数据接收装置
CN1299502C (zh) 解码设备和解码方法
CN1901656A (zh) 视频和音频重放设备及方法、输出时刻改变设备及方法
CN1186279A (zh) 图像显示单元、图像显示系统和运动图像检索系统
CN1311958A (zh) 数字视频记录器用的特技播放信号的产生
CN1860785A (zh) 再现设备、再现方法、再现程序、以及记录介质
CN1527605A (zh) 数据块噪声检测装置及数据块噪声消除装置
CN1170312A (zh) 取自运动图像的静止图像文件的图像处理和显示方法及装置
CN1522062A (zh) 传输流记录和再现装置和方法
CN101047777A (zh) 视频和音频处理系统、视频处理装置、音频处理装置、输出装置以及控制该系统的方法
CN1933604A (zh) 图像声音输出系统、装置、声音处理程序和记录介质
CN1754383A (zh) 电视摄像机
CN1393104A (zh) 信号发送装置和信号接收装置
CN1190076C (zh) 数据流处理器
CN101031056A (zh) 图像处理装置及方法、程序记录介质、以及程序
CN1925595A (zh) 数据再现系统和方法
CN1703083A (zh) 移动图像处理装置和方法
CN1140125C (zh) 视频处理装置和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20151111

Address after: Kanagawa

Patentee after: Co., Ltd. Suo Si future

Address before: Osaka Japan

Patentee before: Matsushita Electric Industrial Co., Ltd.

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20060510

Termination date: 20151113

CF01 Termination of patent right due to non-payment of annual fee