[go: up one dir, main page]

KR100968842B1 - 복호 장치 및 복호 방법 - Google Patents

복호 장치 및 복호 방법 Download PDF

Info

Publication number
KR100968842B1
KR100968842B1 KR1020047002301A KR20047002301A KR100968842B1 KR 100968842 B1 KR100968842 B1 KR 100968842B1 KR 1020047002301 A KR1020047002301 A KR 1020047002301A KR 20047002301 A KR20047002301 A KR 20047002301A KR 100968842 B1 KR100968842 B1 KR 100968842B1
Authority
KR
South Korea
Prior art keywords
storage area
image frame
image
stream data
frame
Prior art date
Application number
KR1020047002301A
Other languages
English (en)
Other versions
KR20050010747A (ko
Inventor
가리모토다카시
미즈노마사요시
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20050010747A publication Critical patent/KR20050010747A/ko
Application granted granted Critical
Publication of KR100968842B1 publication Critical patent/KR100968842B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4347—Demultiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4405—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video stream decryption
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42646—Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42661—Internal components of the client ; Characteristics thereof for reading from or writing on a magnetic storage medium, e.g. hard disk drive
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4383—Accessing a communication channel
    • H04N21/4384—Accessing a communication channel involving operations to reduce the access time, e.g. fast-tuning for reducing channel switching latency
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/7921—Processing of colour television signals in connection with recording for more than one processing mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N11/00—Colour television systems
    • H04N11/24—High-definition television systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/46—Receiver circuitry for the reception of television signals according to analogue transmission standards for receiving on more than one standard at will
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/50—Tuning indicators; Automatic tuning control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/781—Television signal recording using magnetic recording on disks or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)
  • Television Systems (AREA)

Abstract

본 발명은, 디지털 하이비젼 방송과 멀티뷰 방송의 전환점에 있어서, 불필요한 지연이 생기지 않는 복호 처리를 실현하는 복호 장치이며, 복호부(33)에 의해 복호된 HD 화상 프레임을 HD용 기억 영역 단위로 기억하고, m개의 SD 화상 프레임을 SD용 기억 영역 단위로 기억하는 화상 프레임 기억부(34)와, HD 화상 스트림 데이터가 입력된 경우, 관리 테이블의 HD용 기억 영역 정보 및 SD용 기억 영역 정보에 따라 HD용 기억 영역을 확보하고, m개의 SD 화상 스트림 데이터가 입력된 경우, HD용 기억 영역 정보 및 SD용 기억 영역 정보에 따라 SD용 기억 영역을 확보하는 기억 영역 확보부(호스트 CPU)(14)와, 확보된 HD용 기억 영역인 HD 화상 프레임을 기입하고, 확보된 SD용 기억 영역인 m개의 SD 화상 프레임을 기입하는 화상 프레임 기입부(15)를 구비한다.
Figure R1020047002301
복호 장치, 복호 방법, 화상 스트림 데이터, 화상 프레임.

Description

복호 장치 및 복호 방법{DECODING APPARATUS AND DECODING METHOD}
본 발명은, 디지털 텔레비젼 방송에 관한 것이며, 상세하게는, 수신한 방송의 화상 스트림 데이터를, 화상 스트림 데이터의 종류, 개수 등에 따라 적절하게 복호하는 복호 장치 및 복호 방법에 관한 것이다.
본 출원은, 일본국에 있어서, 2002년 6월 20일자에 출원된 일본 특허 출원 번호 2002-180410를 기초로 하여 우선권을 주장하는 것이며, 이 출원은 참조함으로써, 본 출원에 원용된다.
종래, 고품질의 프로그램의 제공, 다채널에 의한 프로그램의 제공이라고 하는 특징을 구비한 방송 서비스를 가능하게 하는 디지털 방송 서비스는, 방송 위성(BS: Broadcasting Satellite), 통신 위성(CS: Communications Satellite)을 통한 방송으로서 실현되어 있다.
디지털 방송 서비스에서는 디지털 하이비젼 방송(HDTV: High Definition Television)이 서비스의 중심이 되어 있지만, 예를 들면, BS 디지털 방송 서비스에 있어서는, 디지털 하이비젼 방송을 행하지 않는 시간대에는, 멀티뷰 방송이라고 하는 서비스를 행하는 것이 고안되어 있다.
멀티뷰 방송이란 도 1에 나타낸 바와 같이, 디지털 하이비젼 방송의 대역을 3개의 채널로 분할하여, 1프로그램 내에서 관련된 복수의 내용을 종래의 표준 텔레비젼 방송(SDTV: Standard Definition Television)으로 하여 복수 동시에 방송한다고 하는 서비스이다.
예를 들면, 멀티뷰 방송을 수신하면, 스포츠 프로그램이나, 극장 중계 등에 있어서, 3개의 카메라 앵글로부터의 영상을 동시에 시청하거나 선호하는 앵글로부터의 영상만을 시청하거나 할 수 있다.
멀티뷰 방송을 시청하려면, 멀티뷰 방송을 수신하는 수신 장치로 수신한 모든 디지털 표준 텔레비젼 방송을 디코드 처리할 필요가 있다.
일반적으로, 전술한 디지털 방송을 수신하는 수신 장치에 구비된 수신한 화상 스트림을 디코드하는 디코더는, 디코드 처리한 화상 데이터를 프레임 메모리에 일시적으로 저장하여 화상 프레임으로서 출력하고 있다.
따라서, 디코더에서의 디코드 처리는, 프레임 메모리의 사용 상태, 즉 프레임 메모리의 메모리 영역의 빈 상태가 확인되지 않으면 실행할 수 없다. 동일 시간 내에 공급되는 화상 스트림의 수가 1개의 경우는, 프레임 메모리는, 디코드된 저장된 화상 프레임을 순차 출력하여, 빈 영역을 확보하여 나가면 되었다.
그러나, 전술한 바와 같은 멀티뷰 방송을 수신하는 수신 장치에서는, 동일 시간 내에 디코드하는 채널수가 증가한 만큼, 동일 시간 내에서의 프레임 메모리의 메모리 영역의 사용율이 높아지기 때문에, 프레임 메모리의 빈 영역의 확보가 어려워진다. 그러므로, 디코드 처리에 지연이 생겨 스무스하게 화상 프레임이 출력되지 않을 가능성이 높다고 하는 문제가 있다. 특히, 멀티뷰 방송으로부터 디지털 하이비젼 방송으로 전환되는 점에 있어서, 디코드 처리의 지연에 의한 영향은 현저하다고 생각된다.
또, 프레임 메모리는, 코스트나, 장치 구성의 점 등에서 단순하게 증가시키는 것이 어렵다고 하는 문제도 있다.
본 발명의 목적은, 전술한 바와 같은 종래의 멀티뷰 방송을 수신하는 수신 장치가 가지는 문제점을 해소할 수 있는 신규한 복호 장치 및 복호 방법을 제공하는 것에 있다.
본 발명의 다른 목적은, 프레임 메모리의 관리에 의해 멀티뷰 방송에 대응한 복호 장치 및 복호 방법을 제공하는 것에 있다.
전술한 바와 같은 목적을 달성하기 위해 제안되는 본 발명에 관한 복호 장치는, HD(High Definition) 방식으로 부호화된 HD 화상 스트림 데이터를 HD 화상 프레임으로 복호하여, SD(Standard Definition) 방식으로 부호화된 m(m은 자연수)개의 SD 화상 스트림 데이터를 시분할로 SD 화상 프레임으로 복호하는 복호 수단과 복호 수단에 의해 복호된 HD 화상 프레임을 기억하고, 복호 수단에 의해 복호된 SD 화상 프레임을 기억하는 화상 프레임 기억 수단과, HD 화상 스트림 데이터를 복호할 때는, 복호된 HD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하는 동시에, m개의 SD 화상 스트림 데이터를 복호할 때는, 복호된 각각의 스트림에 대응하는 SD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하도록 화상 프레임 기억 수단을 제어하는 제어 수단과, 화상 프레임 기억 수단에 HD 화상 프레임, 또는 SD 화상 프레임을 기입하는 화상 프레임 기입 수단과, 화상 프레임 기억 수단에 기입된 HD 화상 프레임이 보유하는 출력 시간 정보에 따라 HD 화상 프레임을 판독하고, SD용 기억 영역에 기입된 SD 화상 프레임이 보유하는 출력 시간 정보에 따라 SD 화상 프레임을 판독하는 화상 프레임 판독 수단과, 화상 프레임 판독 수단에 의해 판독된 HD 화상 프레임을 출력하여, 화상 프레임 판독 수단에 의해 판독된 SD 화상 프레임을 동일 화면 상에 배치되도록 출력하는 출력 수단을 구비한 다.
본 발명에 관한 복호 방법은, HD(High Definition) 방식으로 부호화된 HD 화상 스트림 데이터를 HD 화상 프레임으로 복호하여, SD(Standard Definition) 방식으로 부호화된 m(m은 자연수)개의 SD 화상 스트림 데이터를 시분할로 SD 화상 프레임으로 복호하는 복호 스텝과, 복호 스텝에 의해 복호된 HD 화상 프레임을 기억하고, 복호 스텝에 의해 복호된 SD 화상 프레임을 기억하는 화상 프레임 기억 스텝과, HD 화상 스트림 데이터를 복호할 때는, 복호된 HD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하는 동시에, m개의 SD 화상 스트림 데이터를 복호할 때는, 복호된 각각의 스트림에 대응하는 SD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하도록 화상 프레임 기억 수단을 제어하는 스텝과, 화상 프레임 기억 수단에 HD 화상 프레임, 또는 SD용 기억 영역에 m개의 SD 화상 프레임을 기입하는 화상 프레임 기입 스텝과, 화상 프레임 기억 수단에 기입된 HD 화상 프레임이 보유하는 출력 시간 정보에 따라 HD 화상 프레임을 판독하고, SD용 기억 영역에 기입된 SD 화상 프레임이 보유하는 출력 시간 정보에 따라 SD 화상 프레임을 판독하는 화상 프레임 판독 스텝과, 화상 프레임 판독 스텝에 의해 판독된 HD 화상 프레임을 출력하여, 화상 프레임 판독 스텝에 의해 판독된 SD 화상 프레임을 동일 화면 상에 배치되도록 출력하는 출력 스텝을 포함한다.
본 발명에 관한 다른 복호 장치는, HD(High Definition) 방식으로 부호화된 HD 화상 스트림 데이터, 또는 SD(Standard Definition) 방식으로 부호화된 m(m은 자연수)개의 SD 화상 스트림 데이터가 다중화된 다중화 SD 화상 스트림 데이터를 입력하는 입력 수단과, 입력 수단에 의해 다중화 SD 화상 스트림 데이터가 입력된 경우, 다중화 SD 화상 스트림 데이터를 m개의 화상 스트림 데이터로 분리하는 분리 수단과, 입력 수단에 의해 입력된 HD 화상 스트림 데이터를 HD 화상 프레임으로 복호하고, 분리 수단에 의해 분리된 m개의 SD 화상 스트림 데이터를 시분할로 SD 화상 프레임으로 복호하는 복호 수단과, 복호 수단에 의해 복호된 HD 화상 프레임을 기억하고, 복호 수단에 의해 복호된 SD 화상 프레임을 기억하는 화상 프레임 기억 수단과, HD 화상 스트림 데이터를 복호할 때는, 복호된 HD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하는 동시에, m개의 SD 화상 스트림 데이터를 복호할 때는, 복호된 각각의 스트림에 대응하는 SD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하도록 화상 프레임 기억 수단을 제어하는 제어 수단과, 화상 프레임 기억 수단에 HD 화상 프레임, 또는 SD 화상 프레임을 기입하는 화상 프레임 기입 수단과 화상 프레임 기억 수단에 기입된 HD 화상 프레임이 보유하는 출력 시간 정보에 따라 HD 화상 프레임을 판독하고, SD용 기억 영역에 기입된 SD 화상 프레임이 보유하는 출력 시간 정보에 따라 SD 화상 프레임을 판독하는 화상 프레임 판독 수단과, 화상 프레임 판독 수단에 의해 판독된 HD 화상 프레임을 출력하여, 화상 프레임 판독 수단에 의해 판독된 SD 화상 프레임을 동일 화면 상에 배치되도록 출력하는 출력 수단을 구비한다.
본 발명에 관한 다른 복호 방법은, HD(High Definition) 방식으로 부호화된 HD 화상 스트림 데이터, 또는 SD(Standard Definition) 방식으로 부호화된 m(m은 자연수)개의 SD 화상 스트림 데이터가 다중화된 다중화 SD 화상 스트림 데이터를 입력하는 입력 스텝과, 입력 스텝에 의해 다중화 SD 화상 스트림 데이터가 입력된 경우, 다중화 SD 화상 스트림 데이터를 m개의 화상 스트림 데이터로 분리하는 분리 스텝과, 입력 스텝에 의해 입력된 HD 화상 스트림 데이터를 HD 화상 프레임으로 복호하고, 분리 스텝에 의해 분리된 m개의 SD 화상 스트림 데이터를 시분할로 SD 화상 프레임으로 복호하는 복호 스텝과, 복호 스텝에 의해 복호된 HD 화상 프레임을 기억하고, 복호 스텝에 의해 복호된 SD 화상 프레임을 기억하는 화상 프레임 기억 스텝과, HD 화상 스트림 데이터를 복호할 때는, 복호된 HD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하는 동시에, m개의 SD 화상 스트림 데이터를 복호할 때는, 복호된 각각의 스트림에 대응하는 SD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하도록 화상 프레임 기억 수단을 제어하는 스텝과, 화상 프레임 기억 수단에 HD 화상 프레임, 또는 SD용 기억 영역에 m개의 SD 화상 프레임을 기입하는 화상 프레임 기입 스텝과, 화상 프레임 기억 수단에 기입된 HD 화상 프레임이 보유하는 출력 시간 정보에 따라 HD 화상 프레임을 판독하고, SD용 기억 영역에 기입된 SD 화상 프레임이 보유하는 출력 시간 정보에 따라 SD 화상 프레임을 판독하는 화상 프레임 판독 스텝과, 화상 프레임 판독 스텝에 의해 판독된 HD 화상 프레임을 출력하고, 화상 프레임 판독 스텝에 의해 판독된 SD 화상 프레임을 동일 화면 상에 배치되도록 출력하는 출력 스텝을 포함한다.
본 발명의 또 다른 목적, 본 발명에 의해 얻을 수 있는 구체적인 이점은, 이하에 있어서 도면을 참조하여 설명되는 실시예의 설명으로부터 한층 명백하게 될 것이다.
도 1은, 멀티뷰 방송을 설명하기 위한 도면이다.
도 2는, 본 발명을 적용한 기록 재생 장치의 사용 형태를 나타낸 도면이다.
도 3은, 본 발명을 적용한 기록 재생 장치의 주요부 구성을 나타낸 블럭도이다.
도 4는, 본 발명을 적용한 기록 재생 장치를 구성하는 MPEG 비디오 디코더를 나타낸 블럭도이다.
도 5는, 본 발명을 적용한 기록 재생 장치에 있어서, MPEG 비디오 디코더에 1개의 HD 스트림이 공급된 경우의 코드 버퍼, 셀렉터의 모습을 나타낸 도면이다.
도 6은, 본 발명을 적용한 기록 재생 장치에 있어서, MPEG 비디오 디코더에 1개의 SD 스트림이 공급된 경우의 코드 버퍼, 셀렉터의 모습을 나타낸 도면이다.
도 7은, 본 발명을 적용한 기록 재생 장치에 있어서, MPEG 비디오 디코더에 2개의 SD 스트림이 공급된 경우의 코드 버퍼, 셀렉터의 모습을 나타낸 도면이다.
도 8은, 본 발명을 적용한 기록 재생 장치에 있어서, MPEG 비디오 디코더에 3개의 SD 스트림이 공급된 경우의 코드 버퍼, 셀렉터의 모습을 나타낸 도면이다.
도 9는, 본 발명을 적용한 기록 재생 장치에 대하여, MPEG 비디오 디코더의 동작을 나타낸 플로차트이다.
도 10은, MPEG 비디오 디코더의 디코드 처리 동작을 나타낸 플로차트이다.
도 11는, 가상 프레임을 해방할 때의 동작을 나타낸 플로차트이다.
도 12 (A)는, 본 발명을 적용한 기록 재생 장치에서의 프레임 메모리의 전체 메모리 영역을 설명하기 위한 도면이며, 도 12 (B)는, 프레임 메모리를 SD용으로서 정의한 경우의 메모리 영역을 나타낸 도면이며, 도 12 (C)는, 프레임 메모리를 HD용으로서 정의한 경우의 메모리 영역을 나타낸 도면이다.
도 13은, 프레임 메모리와 가상 프레임과의 대응에 대해 설명하기 위한 도면이다.
도 14는, 가상 프레임의 일례를 나타낸 도면이다.
도 15는, 멀티뷰 방송을 디코드할 때의 가상 프레임을 이용한 호스트 CPU의 관리 동작을 나타낸 플로차트이다.
도 16은, 도 15에 나타낸 플로차트의 동작을 설명할 때에 사용한 가상 프레임의 일례를 나타낸 도면이다.
도 17은, 본 발명을 적용한 기록 재생 장치에 있어서, 디지털 하이비젼 방송을 디코드할 때의 가상 프레임을 이용한 호스트 CPU의 관리 동작에 대해 설명하기 위한 플로차트이다.
이하, 본 발명에 관한 복호 장치 및 복호 방법을 도면을 참조하여 상세하게 설명한다.
본 발명은, 도 2에 나타낸 것 같은 기록 재생 장치(100)에 적용된다. 이 기록 재생 장치(100)는, 도 2에 나타낸 바와 같이, 텔레비젼 수상기(200)와 접속되어 있다.
텔레비젼 수상기(200)는, 지상파를 수신 가능한 지상파 튜너, BS(Broadcasting Satellite) 튜너, BS 디지털 튜너, CS(Communications Sate1lite)튜너, CS 디지털 튜너를 내장하고 있어도 된다.
기록 재생 장치(100)의 각종 기능은, 도 2에 나타낸 바와 같이, 리모트 콘트롤러(300)에 의해 원격 조작 가능하다. 또, 이 리모트 콘트롤러(300)는, 텔레비젼 수상기(200)의 각종 기능도, 원격 조작 가능하다.
본 발명을 적용한 기록 재생 장치(100)는, 기록 매체에 디지털 하이비젼 방송을 압축없이, 영상 신호, 음성 신호, 각종 데이터를 기록하는 것이 가능한 기록 재생 장치이다. 또 기록 재생 장치(100)는, 후술하는 바와 같이 디지털 튜너를 내장하고 있어, 예를 들면, BS 디지털 방송으로 제공되는 디지털 하이비젼 방송을 수신하고, 수신한 디지털 하이비젼 방송을 전술한 바와 같이 기록 매체에 기록할 수 있다.
도 3을 참조하여, 기록 재생 장치(100)의 주요부 구성에 대하여 설명한다.
기록 재생 장치(100)는, 지상파 튜너(1)와, 입력 전환 회로(2)와, YC 분리 회로(3)와, 입력 전환 회로(4)와, NTSC(National Television System Standard Committee)디코더(5)와, 동기 제어 회로(6)와, 프리 영상 신호 처리 회로(7)와, MPEG(Moving Picture Experts Group) 비디오 인코더(8)와, 음성 A/D 변환기(9)와, MPEG 오디오 인코더(10)와, 디지털 튜너(11), 다중/분리 회로(MUX/DMX)(12)와, 기록/재생 처리부(13)와, 호스트 CPU(14)와, SDRAM(Synchronous Dynamic Random Access Memory)(15)와, ROM(Read 0nly Memory)(16)과, MPEG 비디오 디코더(17)와, 포스트 영상 신호 처리 회로(18)와, OSD(0n Screen Display)(19)와, NTSC 인코더(20)와, MPEG 오디오 디코더(21)와, 전환 회로(22)와, 음성 D/A 변환기(23)와, 디지털에 IN/OUT(24)와, 디지털 인터페이스 회로(25)와, 지상파 EPG용 튜너(26)와, 데이터 슬라이서(27)를 구비한다.
지상파 튜너(1)는, 지상파 방송을 수신하고, 수신한 방송의 컴퍼지트 영상 신호와 음성 신호를 입력 전환 회로(2)에 공급한다.
입력 전환 회로(2)는, 지상파 튜너(1)로부터 컴퍼지트 영상 신호와 음성 신호가 공급되어 외부 장치로부터 컴퍼지트 영상 신호와 음성 신호가 공급된다. 입력 전환 회로(2)는, 호스트 CPU(14)로부터의 지시에 따라, 지상파 튜너(1)로부터 공급되는 컴퍼지트 영상 신호와 음성 신호, 또는, 외부 장치로부터 공급되는 컴퍼지트 영상 신호와 음성 신호의 어느 쪽인지를 선택한다. 입력 전환 회로(2)는, 선택한 컴퍼지트 영상 신호를 YC 분리 회로(3)에, 음성 신호를 음성 A/D 변환기(9)에 각각 출력한다.
YC 분리 회로(3)는, 입력 전환 회로(2)로부터 입력된 컴퍼지트 영상 신호를 YC 분리하여, 입력 전환 회로(4)에 공급한다.
입력 전환 회로(4)는, 호스트 CPU(14)로부터의 지시에 따라, 외부 S영상 입력, 또는, YC 분리 회로(3)로부터의 출력을 선택하고, 선택한 신호를 NTSC 디코더(5)에 공급한다.
NTSC 디코더(5)는, 입력된 영상 신호에 A/D 변환, 크로마 인코드의 처리를 가하여, 디지털 컴퍼넌트 비디오 신호(이하, 화상 데이터라고 함)로 변환하여, 프리 영상 신호 처리 회로(7)에 공급한다. 또, NTSC 디코더(5)는, 입력 영상 신호의 수평 동기 신호를 기준으로 생성한 클록과 동기 분리하여 얻은 수평 동기 신호, 수직 동기 신호, 필드 판별 신호를 동기 제어 회로(6)에 공급한다.
동기 제어 회로(6)에서는, 수평 동기 신호, 수직 동기 신호, 필드 판별 신호를 기준으로 하여, 후술하는 각 블록에 필요한 타이밍으로 변환한 클록, 동기 신호를 생성하여, 기록 재생 장치(100)을 구성하는 각 블록에 공급한다.
프리 영상 신호 처리 회로(7)에서는, NTSC 디코더(5)로부터 공급된 화상 데이터에 프리 필터 등의 각종 영상 신호 처리를 행하고, MPEG 비디오 인코더(8)와, 포스트 영상 신호 처리 회로(18)에 공급한다.
MPEG 비디오 인코더(8)는, 프리 영상 신호 처리 회로(7)로부터 공급된 화상 데이터에 블록 DCT(Discrete Cosine Transform: 이산 코사인 변환) 등의 부호화 처리를 행하여, 화상의 ES(Elementary Stream)를 생성하여, 다중/분리 회로(12)에 공급한다. 그리고, 본 예에서는 압축 방식으로서 MPEG를 채용하고 있지만, 다른 압축 방식이라도, 비압축이라도 상관없다.
음성 A/D 변환기(9)는, 입력 전환 회로(2)에 의해 선택된 음성 신호를 디지 털 음성 신호로 변환하여, MPEG 오디오 인코더(10)에 공급한다.
MPEG 오디오 인코더(10)는, 공급된 디지털 음성 신호를 MPEG 포맷에 따라 압축한 후, 음성의 ES를 생성하여, 영상 신호와 마찬가지로 다중/분리 회로(12)에 공급한다. 그리고, 본 예에서는 압축 방식으로서 MPEG를 채용하고 있지만, 다른 압축 방식이라도, 비압축이라도 상관없다.
디지털 튜너(11)는, BS 디지털 방송, CS 디지털 방송, 지상파 디지털 방송을 수신하는 튜너이다. BS 디지털 방송은, 디지털 하이비젼 방송을 중심으로 한 서비스이지만, 표준 텔레비젼 방송도 제공 가능하게 된다. 예를 들면, BS 디지털 방송은, 디지털 하이비젼 방송의 프레임을 3개의 표준 텔레비젼 방송으로 분할하여 동시에 방송하는 멀티 채널 방송이나, 같은 디지털 하이비젼 방송의 대역을 3개의 채널로 분할하여 1프로그램 내에서 관련되는 복수의 내용을 표준 텔레비젼 방송으로서 복수 동시에 방송하는 멀티뷰 방송을 제공하고 있는 것으로 한다.
디지털 튜너(11)는, 예를 들면, MPEG2 트랜스포트 스트림으로 다중화되어 소정의 변조 방식으로 변조되어 송신되는 BS 디지털 방송을 수신하고, 수신한 TS신호를 다중/분리 회로(12)에 공급한다.
그리고, 지상파 튜너(1) 또는 디지털 튜너(11)에 의해 수신된 NTSC 방식의 영상 신호의 수평 유효 화소수(picture_coding_h_size)가 720 이상, 또는 수직 유효 화소수(picture_coding_v_size)가 480 이상인 경우, 수신한 영상 신호를 디지털 하이비젼 방송(High Definition Television)의 영상 신호, 즉 HD 방식으로 부호화된 영상 신호로 한다. 그 이외의 영상 신호는, SD 방식으로 부호화된 영상 신호로 한다.
또, 지상파 튜너(1) 또는 디지털 튜너(11)에 의해 수신된 영상 신호가 PAL(Phase Alternation by Line) 방식인 경우, 영상 신호의 수평 유효 화소수가 720 이상, 또는 수직 유효 화소수가 540 이상일 때, 디지털 하이비젼 방송된 영상 신호, 즉 HD 방식으로 부호화된 영상 신호로 한다. 상기 이외의 영상 신호는, SD 방식으로 부호화된 영상 신호로 한다.
예를 들면, 일본에서의 BS 디지털 방송, CS 디지털 방송, 지상파 디지털 방송에서는, "ARIB STD-B32「디지털 방송에서의 영상 부호화, 음성 인코드 다중 방식」, 사단법인 전파 산업회, 제5장" 에 있어 수평 유효 화소수, 수직 유효 화소수, 프레임 레이트를 이용하여, 디지털 하이비젼 방송의 영상 신호와 표준 텔레비젼 방송의 영상 신호가 규정되어 있다.
구체적으로는, 디지털 하이비젼 방송의 영상 신호는, 수평 유효 화소수, 수직 유효 화소수, 프레임 레이트를, (수평 유효 화소수×수직 유효 화소수;프레임 레이트)로서 나타내면, (1920×1080i;29.97Hz), (1440×1080i;29.97Hz), (1280×720p;59.94Hz), (720×480p; 59.94Hz)로 규정되어 있다.
또, 표준 텔레비젼 방송의 영상 신호는, (720×480i;29.97Hz), (544×480i; 29.97Hz, 실(實)영상 데이터의 수평 유효 화소수는 540), (480×480i;29.97Hz)로 규정되어 있다. BS 디지털 방송에서의 강우(降雨) 대응 방송으로서 저계층 전송되는 영상 신호는, (352×240p;29.97Hz 이하)로 규정되어 표준 텔레비젼 방송으로 된다.
그리고, "i" 및 "p"는, 각각 "인터페이스", "프로그래시브"라고 하는 주사 방식을 나타내고 있다.
또, 미국에서의 ATSC(Advanced TV System Committee) 지상파 방송, ATSC 케이블 방송에서는, "ATSC Standard A/53B with Amendment 1: ATSC Digital Television Standard, Rev. B Annex A, Table-A3"에 있어서, 수평 유효 화소수, 수직 유효 화소수, 프레임 레이트를 이용하여, 디지털 하이비젼 방송의 영상 신호가 규정되어 있다.
구체적으로는, 디지털 하이비젼 방송의 영상 신호는, 수평 유효 화소수, 수직 유효 화소수, 프레임 레이트를 (수평 유효 화소수×수직 유효 화소수; 프레임 레이트)로서 나타내면, (1920×1080p;23.976, 24, 29.97, 30Hz), (1920×1080i; 29.97, 30Hz), (1280×720p;23.976, 24, 29.97, 30, 59.94, 60Hz), (704×480p; 23.976, 24, 29.97, 30, 59.94, 60Hz), (704×480i;29.97, 30Hz), (640×480p; 23.976, 24, 29.97, 30, 59.94, 60Hz), (640×480i;29.97, 30Hz)로 규정되어 있다.
다중/분리 회로(12)에서는, 후술 하는 기록 매체(50)에의 기록시에는 영상 ES와 음성 ES 및 각종 제어 신호의 다중화 처리를 행한다. 다중/분리 회로(12)는, 입력된 MPEG 영상 ES와, MPEG 음성 ES와, 각종 제어 신호와 맞추어, 다중화 처리(예를 들면 MPEG 시스템의 트랜스포트 스트림의 생성), 버퍼 제어 처리를 행하여, 기록/재생 처리부(13)에 출력한다.
버퍼 제어 처리란, 연속적으로 입력되는 TS를, 후단의 기록/재생 처리부(13)에 단속적으로 보내기 위한 제어를 행하는 것이다. 예를 들면, 기록/재생 처리부(13)가 기록 매체(50)의 시크 동작을 행하고 있을 때는, TS의 기입을 할 수 없으므로, 버퍼에 TS를 일시적으로 저장하고, 기입이 가능할 때는, 입력의 레이트보다 높은 레이트로 기입을 행함으로써, 연속적으로 입력되는 TS신호가 끊어지는 일 없이 기록을 행한다.
다중/분리 회로(12)는, 후술하는 기록 매체(50)의 재생시에는, 기록/재생 처리부(13)에 의해 재생되어 단속적으로 공급되는 TS(Transport Stream)를, 연속적으로 되도록 버퍼 제어를 행한 후, 분리 처리를 행한다. 다중/분리 회로(12)의 분리 처리에서는, TS로부터 PES(Packetized Elementary Stream)를 추출하고, 또한 영상 ES와 음성 ES로 분리한 후, MPEG 비디오 디코더(17)와, MPEG 오디오 디코더(21)에 공급한다.
디지털 튜너(11)는, 디지털 방송을 수신하여, TS신호로 행해진 디지털 방송 특유의 스크램블을 푼 후, 다중/분리 회로(12)에 TS를 공급하는, 다중/분리 회로(12)는, 공급되는 TS신호로부터 PES를 추출하여, 기록 매체(50)를 재생했을 때 와 마찬가지로, 또한 영상 ES와 음성 ES로 분리한 후, 각각을 MPEG 비디오 디코더(17), MPEG 오디오 디코더(21)에 공급한다.
다중/분리 회로(12)는, 전술한 분리 처리를 실행할 때, TS로 다중화 되어 있는 방송 프로그램을 구성하는 영상이나 음성, 관련 정보 등의 서비스가 수용되어 있는 TS패킷의 PID를 기술한 PMT(Program Map Table)라고 하는 PSI(Program Specific Information)를 취득하고, 취득한 PSI를 호스트 CPU(14)에 출력한다.
취득한 PSI 정보로부터, 호스트 CPU(14)는, 추출한 PES가 디지털 하이비젼 방송의 스트림인 HD 스트림인지, 표준 텔레비젼 방송의 스트림인 SD 스트림인지, 또 SD 스트림인 경우, 그 송신되는 SD 스트림의 개수는 몇개인지를 검출할 수 있다.
또, 다중/분리 회로(12)는, 해당 다중/분리 회로(12)에 내장된 각종 정보의 퍼징 기능에 의하여, BS신호에 삽입되어 있는 전자 프로그램 정보(EPG)를 뽑아내, 호스트 CPU(14)에 공급한다. 호스트 CPU(14)에서는, 이 EPG 신호의 해석을 행하여, GUI 상에 프로그램 정보의 표시 등을 행한다.
기록/재생 처리부(13)는, 기록 매체(50)에의 데이터 기록 처리, 기록 매체(50)에 기록된 데이터의 재생 처리를 행한다. 기록 매체(50)는, 도시하지 않는 해당 기록 재생 장치의 장착부에 장착 가능한 광디스크, 광학 자기 디스크, 고체 메모리 등이나, 미리 해당 기록 재생 장치에 탑재된 HDD(Hard Disk Drive) 등이다. 기록/재생 처리부(13)는, 다중/분리 회로(12)로부터 공급되는 TS를 기록 매체(50)에 기록하여, 기록 매체(50)로부터 재생한 TS를 다중/분리 회로(12)에 출력한다.
호스트 CPU(14)는, 해당 기록 재생 장치(100)의 모든 기능 블록을 통괄적으로 제어한다. 또, 호스트 CPU(14)는, 호스트 버스를 통하여, SDRAM(15), ROM(16)에 필요에 따라서 액세스하여 시스템 전체의 제어를 행한다.
MPEG 비디오 디코더(17)은, 입력된 영상 ES에 복호 처리를 행하여, 베이스 밴드의 화상 데이터를 취득하여, 포스트 영상 신호 처리 회로(18)에 공급한다. MPEG 비디오 디코더(17)의 구성 및 동작에 대해서는 다음에 상세하게 설명을 한다.
포스트 영상 신호 처리 회로(18)는, 도시하지 않는 전환 회로, 필드 순회형 노이즈듀서, 움직임 검출, 영상 신호 보간 처리 회로 등으로 구성되어 있고, MPEG 비디오 디코더(17)로부터 공급되는 화상 데이터와 프리 영상 신호 처리 회로(7)로부터 공급되는 화상 데이터를 변환한 후, 각종 처리를 행하여, OSD(19)에 화상 데이터를 공급한다.
OSD(19)는, 화면 표시용의 그래픽스 등의 생성을 행하여, 화상 데이터에 중첩시키거나 부분적으로 표시하는 등의 처리를 행하여, NTSC 인코더(20)에 공급한다.
NTSC 인코더(20)는, 입력된 화상 데이터(컴퍼넌트 디지탈 신호)를 YC신호로 변환한 후, D/A 변환을 행하여, 아날로그의 컴퍼지트 영상 신호와 S영상 신호를 취득하여, 텔레비젼 수상기(200)에 구비된 영상 입력 단자에 입력한다.
MPEG 오디오 디코더(21)는, 다중/분리 회로(12)로부터 공급된 음성 ES신호를 복합 처리하여 베이스 밴드 음성 신호를 취득하여, 전환 회로(22)에 공급한다.
전환 회로(22)는, MPEG 오디오 디코더(2l)로부터 공급되는 음성 데이터와, 음성 A/D 변환기(9)로부터 공급되는 음성 데이터의 선택을 행하여, 선택한 음성 데이터를 음성 D/A 변환기(23)에 출력한다.
음성 D/A 변환기(23)는, 음성 데이터를 아날로그 음성 신호로 변환하고, 변환한 아날로그 음성 신호를 텔레비젼 수상기(200)에 구비된 음성 입력 단자에 입력한다.
다음에, 디지털 IN/OUT(24)으로부터 공급, 출력되는 신호에 대해 설명한다. 예를 들면, 외부의 IRD(Integrated Receiver Decoder)로부터, IEEE1394와 같은 디지털 인터페이스인 디지털 IN/OUT(24)를 통하여 입력된 신호를 기록하는 경우, 디지털 신호는 디지털 인터페이스 회로(25)에 입력된다.
디지털 인터페이스 회로(25)에서는, 본 방식에 적합하도록, 포맷 변환 등의 처리를 행하여 TS를 생성하고, 다중/분리 회로(12)에 공급한다. 다중/분리 회로(12)에서는, 또한 제어 신호 등의 해석이나 생성을 행하여, 본 방식에 적응하는 TS로 변환한다.
이와 동시에 다중/분리 회로(12)에서, 분리 처리를 행하여, MPEG 비디오 디코더(17)에 영상 ES, MPEG 오디오 디코더(21)에 음성 ES를 각각 공급함으로써, 아날로그의 영상, 음성 신호를 얻을 수 있다.
기록 매체(50)를 기록/재생 처리부(13)에 의해 재생한 경우, 재생된 TS는, 전술한 바와 같이 다중/분리 회로(12)에 입력된다. 다중/분리 회로(12)에 입력된 TS는, 필요에 따라, 제어 신호의 해석, 생성을 행하여, 디지털 인터페이스 회로(25)에 공급한다. 디지털 인터페이스 회로(25)에서는, 기록시와는 역의 변환을 행하여, 외부의 IRD에 적합한 디지탈 신호로 변환하여, 디지털 IN/OUT(24)을 통하여 출력한다.
이와 동시에 다중/분리 회로(12)에서, 분리 처리를 행하여, MPEG 비디오 디코더(17), MPEG 오디오 디코더(21)에 PES를 공급함으로써, 아날로그의 영상, 음성 신호를 얻을 수 있다.
본 예에서는, IRD와의 접속에 대해 설명했지만, TV 등의 AV기기나, 퍼스널 컴퓨터와 접속하는 것도 가능하다.
지상파 EPG용 튜너(26)는, 호스트 CPU(14)에 의해 제어되고 EPG가 중첩되어 있는 CH(채널)를 수신하고, 수신한 비디오 신호를 데이터 슬라이서(27)에 공급한다.
데이터 슬라이서(27)에서는, 입력된 비디오 신호로부터 EPG 데이터를 추출하여, 호스트 CPU(14)에 공급한다. 호스트 CPU(14)에서는, 이 EPG 신호의 해석을 행하여, GUI 상에 프로그램 정보의 표시 등을 행한다. BS 디지털이나 지상파 방송으로부터 취득한 EPG 데이터는, 프로그램표의 표시 뿐만 아니라, 타이머 기록이나 기록 완료 프로그램의 타이틀 표시의 정보로서 사용된다.
계속하여, 도 4를 참조하여, 본 발명을 적용한 기록 재생 장치(1O0)에 대하여, 디지털 튜너(11) 또는 기록 매체(50)로부터 다중/분리 회로(12)를 통하여 공급되는 TS를 디코드하는 MPEG 비디오 디코더(17)의 상세한 구성에 대해 설명을 한다.
MPEG 비디오 디코더(17)는, 코드 버퍼(31), 셀렉터(32), 디코드 코어(33), 프레임 메모리(34), 디스플레이 믹서(35)를 구비하고 있다.
코드 버퍼(31)는, 다중/분리 회로(12)로부터 공급된 영상 ES를 복수 픽쳐분 , 일시적으로 버퍼인하는 버퍼이다. 코드 버퍼(31)는, 호스트 CPU(14)의 제어에 의해, 다중/분리 회로(12)로부터 공급되는 영상 ES의 스트림의 개수에 따라 해당 코드버퍼(31)의 버퍼링 영역을 동적으로 변화시켜, 입력되는 각 스트림에 할당할 수 있다.
전술한 바와 같이, BS 디지털 방송으로 제공되는 서비스로서 고안되어 있는 멀티뷰 방송을 디지털 튜너(11)로 수신한 경우, 다중/분리 회로(12)에는 2 또는 3개의 SD 스트림이 다중화된 TS가 공급되게 된다.
TS가 공급된 다중/분리 회로(12)는, TS로 다중화된 PSI를 취득하여, 호스트 CPU(14)에 공급한다. 호스트 CPU(14)는 다중/분리 회로(12)로부터 공급된 PSI로부터, 스트림의 타입과 스트림의 개수를 파악하여, 공급되는 영상 ES가 SD 스트림이며 스트림의 개수가 2 또는 3개였던 경우는 코드 버퍼(31)를 제어하여 버퍼링하는 영역을 동적으로 변화시켜, 각 스트림에 버퍼링 영역을 할당한다.
그리고, 기록 매체(50)에 기록된 스트림이 재생되어, 다중/분리 회로(12)에 공급된 경우, 스트림 타입, 스트림의 개수라고 하는 정보는, 기록 매체(50)에 구축된 데이터 베이스로부터 취득할 수 있다.
셀렉터(32)는, SD 스트림이 2개, 또는, 3개였던 경우에, 호스트 CPU(14)의 제어에 따라, 코드 버퍼(31)로부터의 출력을 시분할로 스위칭하여 디코드 코어(33)에 공급하도록 동작한다.
그리고, 셀렉터(32)는, HD 스트림이 공급된 경우, 및 SD 스트림이 단독으로 공급된 경우에는, 코드 버퍼(31)로부터의 출력을 스위칭 동작없이 디코드 코어(33)에 공급을 한다.
예를 들면, MPEG 비디오 디코더(17)에 1개의 HD 스트림이 공급된 경우, 또는 1개의 SD 스트림이 공급된 경우는, 각각 도 5, 도 6에 나타낸 바와 같이 된다.
또, MPEG 비디오 디코더(17)에 2개의 SD 스트림, 또는 3개의 SD 스트림이 공급된 경우는, 각각 도 7, 도 8에 나타낸 바와 같이 된다. 이 경우, 코드 버퍼(31)의 버퍼링 영역은, 입력되는 스트림마다 할당되어 있고, 셀렉터(32)도, 디코드 코어(33)에의 입력을 시분할로 제어하도록 동작한다.
스트림의 식별은, PID에 의해 이루어지고 다중/분리 회로(12)로부터 코드 버퍼(31)에 공급되는 2개, 또는 3개의 SD 스트림도 PID에 따라 소정의 버퍼링 영역에 공급된다.
디코드 코어(33)는, 코드 버퍼(31)로부터 프레임 단위로 공급되는 HD 스트림, SD 스트림을 MPEG 디코드 처리하여 화상 데이터를 생성한다. 생성된 화상 데이터는, 후단의 프레임 메모리(34)에 공급된다.
그리고, 이하의 설명에 있어서는, 디코드 코어(33)에 의해 디코드 처리된 HD 스트림을 HD 프레임이라고 하고, 같은 디코드 코어(33)에 의해 디코드 처리된 SD 스트림을 SD 프레임이라고 한다.
프레임 메모리(34)는, 소정의 기억 용량, 예를 들면, SD 프레임이면 16프레임, HD 프레임이면 4프레임을 기억 가능한 기억 용량을 구비하고 있다. 프레임 메모리(34)는, 디코드 코어(33)에 의해 디코드된 HD 프레임, SD 프레임을 호스트 CPU(14)의 제어에 따라 소정의 메모리 영역에 일시적으로 기억한다. 또, 기억된 HD 프레임, SD 프레임은, 동일하게, 호스트 CPU(14)의 제어에 따라 판독되어 후단의 디스플레이 믹서(35)에 출력된다.
디코드 코어(33)에 의해 디코드 처리되어 프레임 메모리(34)에 기억되는 SD 프레임, HD 프레임은, 호스트 CPU(14)에 의해, 프레임 메모리(34)의 어느 메모리 영역에 기억되어 있는지가 관리된다.
디스플레이 믹서(35)는, 호스트 CPU(14)에 의해 프레임 메모리(34)로부터 판독된 HD 프레임, SD 프레임의 해당 기록 재생 장치(100)로부터, 예를 들면 텔레비젼 수상기(200)에 출력되었을 때의 위치 결정을 호스트 CPU(14)의 제어에 따라 실행하여, 호스트 영상 신호 처리 회로(18)에 공급한다. 특히, BS 디지털 방송에 있어서 제공되는 멀티뷰 방송을 디지털 튜너(11)에 의해 수신했을 때에는, 최대로 3개의 프레임을 같은 화면 상에 적절히 배치되도록 호스트 CPU(14)의 제어에 따라 위치 결정을 행한다.
도 4에 구성을 나타낸 MPEG 비디오 디코더(17)에서의 디코드 처리는, 디코드 코어(33)에 의해 단지 스트림을 디코드한다고 하는 처리를 나타낸 것이 아니고, 디코드 코어(33)에 의해 디코드된 스트림을 프레임으로 하여 프레임 메모리(34)에 저장하는 것을 포함하고 있다.
따라서, MPEG 비디오 디코더(17)에 의해 디코드 처리를 실행하려면, 프레임 메모리(34)의 메모리 영역의 관리, 즉 디코드 코어(33)에 의해 디코드된 프레임이 프레임 메모리(34)의 어느 메모리 영역에 기억되는 것인가라고 하는 관리까지가 필요해진다. 디코드 코어(33)에 의해 스트림을 디코드하려면, 프레임 메모리(34)에 빈 영역이 없는 한 실행되지 않는다.
구체적으로는, 호스트 CPU(14)가, SDRAM(15)에 프레임 메모리(34)의 사용 상황을 일괄해 관리하기 위한 관리 테이블을 준비하고, 이 관리 테이블을 참조하면서 프레임 메모리(34)의 빈 메모리 영역을 관리하고, 디코드 코어(33)에서의 디코드 처리를 제어한다. 또, 호스트 CPU(14)는, SDRAM(15)에 준비된 관리 테이블을 참조 하면서, 프레임 메모리(34)에 저장된 프레임의 출력도 제어한다.
예를 들면, HD 스트림 또는 SD 스트림이 단독으로 코드 버퍼(31)에 공급되는 경우는, 호스트 CPU(14)는, 프레임 메모리(34)에 먼저 저장된 프레임으로부터 차례로 출력을 행하고, 프레임 메모리(34)의 빈 메모리 영역을 확보하여 디코드 코어(33)에 디코드 허가를 하면 된다.
멀티뷰 방송에서의 디코드 처리에서는, 디코드 코어(33)를 시분할로 사용하여 코트 버퍼(31)에 공급되는 2 또는 3개의 SD 스트림으로부터 SD 프레임을 생성한다. 생성된 각각의 SD 프레임을 구성하는 SD 프레임은 프레임 메모리(34)에 기억된다. 여기서, 2프레임 또는 3프레임의 SD 프레임은, 프레임 메모리(34)로부터 동시에 출력될 필요가 있다.
따라서, 프레임 메모리(34)의 메모리 영역에는, 디코드 코어(33)에 의해 디코드된 다른 채널의 SD 프레임이 복수 프레임 기억되기 때문에, 호스트 CPU(14)는, 채널을 구별하기 위한 정보나, 프레임 메모리(34)로부터 출력하는 시간 정보 등을 파악하고 있지 않으면 안된다.
따라서, 전술한 바와 같이 호스트 CPU(14)는, 관리 테이블을 준비하여 프레임 메모리(34)의 사용 상황을 관리하는 것이 요구된다. 호스트 CPU(14)가, SDRAM(15)에 준비하는 관리 테이블을 가상 프레임이라고도 한다.
호스트 CPU(14)에 의하여, SDRAM(15)에 구축되는 관리 테이블인 가상 프레임은, 프레임 메모리(34)의 메모리 영역에 대응하고 있고, 프레임 메모리(34)의 메모리 영역에의 프레임 저장 상황 등이 반영되어 정보로서 보유되고 있다.
호스트 CPU(14)는, SDRAM(15)에 전개된 관리 테이블인 가상 메모리에 따라, 디코드 코어(33)에 디코드의 실행 허가를 하거나 프레임 메모리(34)에 저장되어 있는 프레임의 출력을 제어하는 것으로, MPEG 비디오 디코더(17)에서의 디코드 처리를 정확하게 실행시킬 수가 있다.
호스트 CPU(14)는, SDRAM(15)에 전개된 가상 프레임을 이용하여, MPEG 비디오 디코더(17)의 디코드 처리를 관리할 때, 채널마다, 즉 비디오 디코드 처리마다 비디오 디코드 관리부, 가상 프레임 관리부, 표시 관리부로서 기능한다.
비디오 디코드 관리부는, MPEG 비디오 디코더(17)에 입력된 스트림의 프레임에의 디코드 처리를 관리한다. 비디오 디코드 관리부가 관리하는 디코드 처리는, 프레임 메모리(34)의 빈 영역의 확보로 시작하여, 빈 영역이 확보되었던 것에 따른 디코드 코어(33)에서의 디코드, 디코드 코어(33)에 의해 디코드되어 프레임 메모리(34)의 빈 영역에 저장된 프레임의 표시 순서의 결정까지를 가리킨다. 이러한 호스트 CPU(14)의 비디오 디코드 관리부로서의 디코드 처리의 관리는, 모두, 관리 테이블인 SDRAM(15)에 전개된 가상 프레임을 통하여 실행된다.
예를 들면, 비디오 디코드 관리부는, 스트림을 디코드하는 경우, 가상 프레임의 관리를 실행하는 가상 프레임 관리부에 HD 스트림인지 SD 스트림인가 라고 하는 스트림 타입에 따른, 빈 영역이 있는지 여부를 검색하는 요구를 하여, 가상 프레임에 빈 영역이 존재하는 경우, 해당 빈 영역을 확보하고, 그 가상 프레임의 빈 영역에 대응한 프레임 메모리(34)의 메모리 영역에 화상의 디코드가 실행되도록 제어를 한다.
비디오 디코드 관리부는, S1ow R, Step R, FR라고 하는 디코드 순서와 표시 순서가 다르게 한 특수 재생(역방향 재생)의 요구에 따라, 표시 순서의 관리도 행한다. 비디오 디코드 관리부에 의한 표시 순서의 관리도, 관리 테이블인 가상 프레임을 이용하여, 예를 들면, 프레임이 저장된 프레임 메모리(34)에 대응하는 가상 프레임에 유저의 요구에 따른 표시 순서를 넘버링한 정보를 부여하는 등하여 표시 순서의 관리를 행한다.
표시 관리부는, 비디오 디코드 관리부에서 결정된 디코드된 프레임의 표시 순서에 따라 표시 처리를 관리하여 실행한다. 표시 관리부는, 표시 처리를 실행할 때, 관리 테이블인 가상 프레임에 기술된 정보를 이용하여 실행한다.
예를 들면, 표시 관리부는, VSynC 인터럽트마다, 가상 프레임 내에서 표시 가능한 프레임을 검색하여, 표시 조건에 일치한 프레임을 선택하여 표시한다. 또 표시 관리부는, 표시가 끝난 프레임에 대한 선별을 행하여, 이후 불필요하다고 판단한 가상 프레임을 가상 프레임 관리부에 반환한다. 이것에 의하여, 그 가상 프레임은 빈 영역이 되고, 프레임 메모리(34)의 메모리 영역에 실제로 저장되어 있던 프레임이 표시됨으로써 프레임 메모리(34)의 메모리 영역이 빈 영역으로 된 것과 대응하게 된다.
가상 프레임 관리부는, SDRAM(15)에 전개되어 있는 프레임 메모리(34)의 관리 테이블인 가상 프레임의 관리를 실행한다. 가상 프레임 관리부는, 가상 프레임의 관리나, 해당 채널에 있어서 사용 가능한 가상 프레임의 파악 등을 행하고 있다.
예를 들면, 가상 프레임 관리부는, 비디오 디코드 관리부로부터 가상 프레임에 빈 곳이 있는지 여부와 같은 요구에 따라, 가상 프레임 상으로부터 빈 영역을 검색하거나, 표시 관리부로부터 반환되는 가상 프레임을 해방하는 처리를 실행한다.
위에서 설명한 바와 같이 구성되는 MPEG 비디오 디코더(17)는, 호스트 CPU(14)에 의한 SDRAM(15)에 전개된 가상 프레임을 이용한 제어에 의하여, 다중/분리 회로(12)로부터 공급되는 HD 스트림, SD 스트림을 HD 프레임, SD 프레임으로 디코드하여 출력할 수 있다.
계속하여, 도 9, 도 10, 도 11에 나타낸 플로차트를 참조하여, MPEG 비디오 디코더(17)에서의 디코드 처리 동작에 대해 설명을 한다.
MPEG 비디오 디코더(17)에서의 복수 채널의 디코드 처리에서는, 시분할 디코드 처리, 프레임 메모리의 공유화 이외는, 각 채널에서의 디코드 처리로서 독립된 동작으로 되어 있다.
따라서, 각 채널의 디코드 처리는, 실제는 1개의 디코드 코어(33)밖에 구비하지 않은 MPEG 비디오 디코더(17) 단체로 실행하고 있지만, 채널마다 독립하여 설치된 복수의 디코더에 의한 처리가 실행되는 모델을 상정하여 디코드 처리 동작을 설명할 수 있다.
전술한 바와 같이 MPEG 비디오 디코더(17)에서의 디코드 처리에 있어서는, BS 디지털 방송으로 제공되는 멀티뷰 방송에 대응하는 2 또는 3개의 채널의 디코드 처리를 실행하는 경우에 있어서도, 독립된 디코더에 의한 처리로 간주하여 모델화 할 수 있으므로, 1개의 채널의 디코드 처리에 대해 설명을 하는 것으로, MPEG 비디오 디코더(17)의 디코드 처리 동작의 설명으로 한다.
우선, 도 9에 나타낸 플로차트의 스텝 S1에 있어서, 해당 채널의 비디오 디코드 관리부는, 가상 프레임 관리부에 대해서, MPEG 비디오 디코더(17)에 스트림이 공급되었던 것에 따라, SDRAM(15)에 전개되어 있는 관리 테이블인 가상 프레임으로부터 디코드할 때에 필요한 프레임수의 가상 프레임을 요구한다. 요구되는 가상 프레임의 수를, 요구 가상 프레임수(req_num[ch])로 한다.
스텝 S2에 있어서, 해당 채널의 가상 프레임 관리부는, 비디오 디코드 관리부의 요구에 따라, SDRAM(15)에 전개되어 있는 가상 프레임을 검색하여, 해당 채널에 있어서 사용하고 있는 가상 프레임의 프레임수(used_num[ch])와 해당 채널에서 사용 가능하며, 한편, 사용되지 않은 가상 프레임의 프레임수(blank_num[ch])를 카운트한다.
스텝 S3에 있어서, 가상 프레임 관리부는, 해당 채널에 있어서 사용하고 있는 가상 프레임의 프레임수(used_num[ch])와, 비디오 디코드 관리부에 의해 요구된 가상 프레임의 요구 가상 프레임수(req」(1u)m[ch])와의 합이, 해당 채널에 있어서 디코드 처리에 사용하는 것이 가능한 가상 프레임의 최대수 이하(used_num[ch]+req_num[ch]≤ max_num[ch])로 된 경우 스텝을 스텝 S4로 진행하고, 최대수를 넘어 버린 경우, 스텝을 스텝 S5로 진행한다.
스텝 S4에 있어서, 가상 프레임 관리부는, 비디오 디코드 관리부에 의해 요구된 가상 프레임의 요구 가상 프레임수(req_num[ch])가, 해당 채널에서 사용 가능 하고, 한편, 사용되고 있지 않은 가상 프레임의 프레임수(blank_num[ch]) 이하로 된 경우에 스텝을 스텝 S6로 진행하고, 사용되고 있지 않은 가상 프레임의 프레임수(blank_num[ch])를 넘어 버린 경우 스텝을 스텝 S5로 진행한다.
스텝 S5에 있어서, 가상 프레임 관리부는, 스텝 S3, 스텝 S4에 의한 판정 처리의 결과, 조건을 만족시키지 않았던 것에 따라서, 프레임 메모리(34)에는 해당 채널에 있어서 디코드 코어(33)로 디코드를 한 프레임을 저장하는 영역이 없다고 판단하여, 디코드 처리에 사용 가능한 영역을 확보하기 위한 대기 상태로 된다.
스텝 S6에 대하여, 가상 프레임 관리부는, 스텝 S3, 스텝 S4에 의한 판정 처리의 결과, 조건을 채웠던 것에 따라, 프레임 메모리(34)에는 해당 채널에 있어서 디코드 코어(33)에 의해 디코드한 프레임을 저장하는 영역이 있다고 판단되어 비디오 디코드 관리부에 그 취지가 통지된다.
스텝 S6에서 가상 프레임 관리부에 의해 디코드한 프레임의 프레임 메모리(34)에의 저장 영역이 확보되어, 디코드 코어(33)에 의한 디코드 처리가 가능하다고 통지(이하, 디코드 처리 요구라고도 함)된 것에 따라, 스텝 S7에 있어서, 비디오 디코더 관리부는, 해당 MPEG 비디오 디코더(17)의 디코드 처리를 실행한다.
다음에, 도 10에 나타낸 플로차트를 참조하여, 도 9의 플로차트의 스텝 S7에서의 디코드 처리의 동작에 대해 설명을 한다.
스텝 S21에 있어서, 비디오 디코드 관리부는, 가상 프레임 관리부에 의해 요구되는 디코드 처리 요구를 받아들인다.
스텝 S22에 있어서, 비디오 디코드 관리부는, 비디오 디코드 코어(33)가 현 재 디코드 처리 중인지의 여부의 체크를 행한다. MPEG 비디오 디코더(17)에 있어서 실제로 비디오 디코드 처리를 실행하는 비디오 디코드 코어(33)는, 1개 밖에 없기 때문에 1번에 1채널의 비디오 디코드 처리 밖에 실행할 수 없다. 따라서, 해당 스텝 S22에 대하여, 디코드 코어(33)가 사용중인지의 여부의 판단이 필요하다.
디코드 코어(33)가 현재 디코드 처리 중인 경우는 스텝을 스텝 S23로 진행하고, 디코드 처리 중이 아닌 경우는 스텝을 스텝 S24로 진행한다.
스텝 S23에 있어서, 비디오 디코드 관리부는, 디코드 코어(33)이 디코드 처리 중인 것에 따라, 디코드 코어(33)의 처리가 종료하는 것을 기다리는 대기 상태로 된다.
스텝 S24에 있어서, 비디오 디코드 관리부는, 디코드 코어(33)가 디코드 처리 중이 아닌 것에 따라, 코드 버퍼(31)에 버퍼링된 해당 채널의 스트림이 디코드 코어(33)에 적절히 공급되도록 셀렉터(32)를 제어한다.
디코드 코어(33)는, 코드 버퍼(31)로부터 셀렉터(32)를 통하여 스트림이 공급되었던 것에 따라, 공급된 스트림의 프레임에의 디코드 처리를 실행한다. 디코드 코어(33)는 스트림을 프레임 단위로 디코드 처리한다. 디코드 코어(33)에 의해 디코드되어 생성된 프레임은, SDRAM(15)에 전개된 가상 프레임을 이용한 관리에 따라, 프레임 메모리(34)의 해당하는 메모리 영역에 저장된다.
그리고, 디코드 처리를 하는 스트림이, 참조면을 필요로 하는 Picture(P-picture 또는 B-picture)의 경우, 참조면을 프레임 메모리(34)로부터 검색하고, 검색한 참조면을 이용하여 디코드 처리를 실행한다. 참조면의 검색에 대해서는, 관 리 테이블인 가상 프레임을 이용한다.
스텝 S25에 대하여, 비디오 디코드 관리부는, 디코드 코어(33)에 의해 디코드 처리가 종료한 것에 따라, 디코드 코어(33)의 디코드 처리가 종료되는 것을 대기하고 있는 채널이 있는지 여부를 체크한다. 비디오 디코드 관리부는, 디코드 처리가 종료하는 것을 대기하고 있는 채널이 있었던 경우 스텝을 스텝 S26로 진행하고, 대기 채널이 없는 경우는 스텝 S27로 진행한다.
스텝 S26에 대하여, 비디오 디코드 관리부는, 디코드 코어(33)에 의한 해당 채널의 디코드 처리가 종료한 것을 디코드 처리의 종료를 대기하고 있는 채널의 비디오 디코드 관리부에 통지한다.
스텝 S27에 대하여, 비디오 디코드 관리부는, 해당 채널의 디코드 처리 종료를 대기하고 있는 채널이 없는 것에 따라 디코드 처리의 전스텝을 종료시킨다.
스텝 S27에서의 스텝이 종료하면, 다시, 도 9에 나타낸 플로차트로 돌아와, 스텝 S8의 표시 처리, 스텝 S9의 가상 프레임의 해방 처리가 실행된다.
스텝 S8에 있어서, 표시 관리부는, 프레임 메모리(34)에 저장된 프레임의 표시 타이밍인 비디오 동기 신호(VSync)가 발생될 때마다, 관리 테이블인 가상 프레임이 보유하는 표시 순서를 나타낸 정보를 참조하여 표시해야 할 프레임을 결정한다. 표시 관리부는, 가상 프레임에 의해 표시되는 것이 결정된 프레임을 대응하는 프레임 메모리(34)로부터 판독하여 디스플레이 믹서(35)의 임의의 위치에 배치한다.
표시 관리부에 의해 가상 프레임으로부터 표시가 결정되는 프레임은, 재생의 모드에 따라서 달라, 예를 들면, 통상 재생의 경우이면, STC(System Timing Clock)에 일치하는 PTS(Presentation Time Stamp)를 가지는 프레임이 선택된다. 또, 특수 재생이 되는 Slow R의 경우는 현재 표시 중인 프레임보다 시간적으로 1Picture 전의 프레임이 선택된다.
복수의 SD 스트림을 재생하는 경우에 있어서, SD 스트림을 디코드한 SD 프레임을 디스플레이 믹서(35)로 믹싱하여 표시할 때, 겹치지 않게 프레임을 배치한다.
스텝 S9에 대하여, 표시 관리부는, 디코드 처리하여 프레임 메모리(34)의 소정의 메모리 영역에 저장된 프레임을 디스크 플레이 믹서(35)에 출력한 것에 따라, 프레임 메모리(34)의 소정의 메모리 영역에 대응한 가상 프레임을 해방하는 가상 프레임 해방 처리를 실행한다.
가상 프레임 해방 처리가 실행되면, SDRAM(15)에 전개된 가상 프레임 중 해방된 소정의 가상 프레임은, 빈 가상 프레임이 된다. 이것은 빈 가상 프레임으로 된 가상 프레임과 대응하는 프레임 메모리(34)의 메모리 영역이, 저장하고 있던 프레임을 디스플레이 믹서(35)에 출력한 것에 의해 빈 메모리 영역이 되었던 것에 대응시키기 위한 처리이다.
도 11에 나타낸 플로차트를 참조하여, 이 가상 프레임 영역 해방 처리의 동작에 대해 설명을 한다.
우선, 스텝 S31에 있어서, 표시 관리부는, 프레임 메모리(34)의 소정의 메모리 영역에 저장되어 있던 프레임을 디스플레이 믹서(35)에 출력시킨 것에 따라, 가상 프레임 관리부에 대해서, 소정의 메모리 영역에 대응하는 가상 프레임을 해방하 도록 요구를 한다.
스텝 S32에 있어서, 가상 프레임 관리부는, 표시 관리부로부터 해방 요구된 가상 프레임의 스테이터스 정보(state[n])를 빈 가상 프레임인 것을 나타내는 "BLANK"로 한다.
스텝 S33에 있어서, 가상 프레임 관리부는, 비디오 디코드 관리부로부터 가상 프레임이 요구되어 있는지 여부를 판단한다. 가상 프레임 관리부에 가상 프레임의 요구가 이루어지지 않은 경우는 스텝을 종료하고, 가상 프레임의 요구가 이루어지고 있는 경우는 도 9에 나타낸 플로차트에서의 스텝 S2로 스텝을 되돌려, 스텝 S2 이하의 스텝을 다시 실행한다.
이와 같이, MPEG 비디오 디코더(17)은, 1개의 디코드 코어(33), 1개의 프레임 메모리(34)라고 하는 구성이지만, 멀티뷰 방송과 같은 복수 채널의 디코드 처리를 필요로 하는 경우에 있어서도, 호스트 CPU(14)의 가상 프레임 관리부에 의해 관리 테이블인 가상 프레임을 이용한 프레임 메모리(34)의 관리를 행하여, 디코드 코어(33)를 호스트 CPU(14)의 비디오 디코드 관리부의 제어에 의해 시분할로 사용하는 것으로 디코드 처리를 실현할 수 있다.
계속하여, SDRAM(15)에 구축된 가상 프레임을 이용한, 호스트 CPU(14)에 의한, 보다 구체적인 관리 수법에 대해 설명을 한다.
호스트 CPU(14)에 의한 관리 수법을 설명하기 전에, MPEG 비디오 디코더(17)의 프레임 메모리(34)의 메모리 영역을 도 12 (A)~도 12 (C)에 나타낸 바와 같이 정의한다. 프레임 메모리(34)의 전메모리 영역을 도 12 (A)에 나타낸다.
도 12 (B)에 나타낸 바와 같이, 프레임 메모리(34)를 SD 프레임용의 프레임 메모리로서 16프레임의 SD 프레임을 저장 가능한 것으로 정의한다. 또, 도 12 (C)에 나타낸 바와 같이, 프레임 메모리(34)를 HD 프레임용의 프레임 메모리로서 4프레임의 HD 프레임을 저장 가능한 것으로 정의한다.
도 12 (B), 도 12 (C)에 나타낸 바와 같이 프레임 메모리(34)를 정의하면, HD 프레임을 저장하는데 필요한 메모리 영역은, SD 프레임을 저장하는데 필요한 메모리 영역의 4배로 되어 있다.
다음에, 도 13을 이용하여, SDRAM(15)에 구축하는 관리 테이블인 가상 프레임과, 프레임 메모리(34)의 메모리 영역과의 대응을 행한다.
SDRAM(15)에 구축하는 가상 프레임은, 프레임 메모리(34)를 SD용의 프레임 메모리로서 사용한 경우, 프레임 메모리(34)를 HD용의 프레임 메모리로서 사용한 경우를 동시에 파악할 수 있도록 구축될 필요가 있다.
이와 같이 가상 프레임을 구축하는 것으로, 예를 들면, 멀티뷰 방송의 재생을 할 수 있도록 3개의 SD 스트림(이하, 3개의 SD 스트림을 3SD 스트림이라고도 함)이 MPEG 비디오 디코더(17)에 공급되고, 계속하여, 디지털 하이비젼 방송을 재생할 수 있도록 HD 스트림이 공급된 경우에, 멀티뷰 방송과 디지털 하이비젼 방송이 변환되는 전환점에 대하여, 심리스인 전환을 실행할 수 있다.
예를 들면, SDRAM(15)에는, 도 13에 나타낸 바와 같이 프레임 메모리(34)의 메모리 영역과 대응되는 가상 프레임이 구축된다.
전술한 바와 같이, 프레임 메모리(34)를 SD용의 프레임 메모리로서 사용하는 경우와 프레임 메모리(34)를 HD용의 프레임 메모리로서 사용하는 경우가 있기 때문에, 어느 쪽의 정보도 동시에 취득할 필요가 있다.
따라서, SDRAM(15)에는, SD용의 가상 프레임과, HD용의 가상 프레임이 구축된다. 즉 SDRAM(15)에 구축되는 가상 프레임은, 프레임 메모리(34)를 SD용으로서 사용했을 때의 최대 프레임수와 프레임 메모리(34)를 HD용으로서 사용했을 때의 최대 프레임수를 구비하게 된다.
예를 들면, 프레임 메모리(34)를 SD용으로서 사용한 경우, 프레임 메모리(34)에는, SD 프레임을 16프레임 저장하는 것이 가능하고, 프레임 메모리(34)를 HD용으로서 사용한 경우, 프레임 메모리(34)에는, HD 프레임을 4프레임 저장하는 것이 가능하기 때문에 SDRAM(15)에 구축되는 가상 프레임의 프레임수는 20프레임으로 된다.
SDRAM(15)에 구축되는 20프레임의 가상 프레임을 VF_1~VF_20으로 하면 각 가상 프레임은, SD용의 프레임 메모리(34)의 메모리 영역을 나타내는 F_SD1~F_SD16, HD용의 프레임 메모리(34)의 메모리 영역을 나타내는 F_HD1~F_HD4와 다음과 같이 대응하고 있다.
HD용의 프레임 메모리(34)의 메모리 영역을 나타내는 F_HD1~F_HD4는, 가상 프레임의 VF_1~VF_4에 각각 1대 1로 대응하여, SD용의 프레임 메모리(34)의 메모리 영역을 나타내는 F_SD1~F_SD16는, 가상 프레임의 VF_5~VF_20에 각각 1대 1로 대응한다.
SDRAM(15)에 구축된 가상 프레임은, 프레임 메모리(34)의 관리를 실행하기 위해 몇개의 관리 정보를 보유한다. 예를 들면, 관리 정보로서는, 전술한 바와 같이 가상 프레임에 대응하는 프레임 메모리(34)의 메모리 영역을 나타내는 메모리 영역 정보, 현재의 해당 가상 프레임 상태를 나타내는 스테이터스 정보 등이 있다.
스테이터스 정보는, 가상 프레임을 디코드용으로 확보 가능한 상태인 경우는 "BLANK", 가상 프레임을 디코드용으로 확보한 상태인 경우는 "ALLOC", 가상 프레임이 디코드가 끝난 상태인 경우는 "DEC", 가상 프레임이 표시 가능한 경우는, "PRSN" 등을 나타내는 정보이다. ·
호스트 CPU(14)는, 전술한 가상 프레임이 보유하는 스테이터스 정보를 참조함으로써 대응하는 프레임 메모리(34)의 현재 상태를 파악할 수 있다.
예를 들면, SDRAM(15)에 구축된 가상 프레임의 VF_1의 스테이터스 정보가 "BLANK"인 경우는, 프레임 메모리(34)의 메모리 영역 F_HD1를 디코드용으로서 확보 가능한 것을 나타내고 있고, VF_5의 스테이터스 정보가 "ALLOC"인 경우는, 프레임 메모리(34)의 메모리 영역 F_SD1를 디코드용으로 확보한 것 나태내고 있고, VF_13의 스테이터스 정보 "DEC"인 경우는, 프레임 메모리(34)의 메모리 영역 F_SD9에는 디코드 완료 프레임이 저장되어 있는 것을 나타내고, VF_17의 스테이터스 정보가 "PRSN"인 경우는 프레임 메모리(34)의 메모리 영역 F_SD13에는 표시 가능한 프레임이 저장되어 있는 것을 나타내고 있다.
MPEG 비디오 디코더(17)에 있어서 스트림을 디코드하는 경우, 호스트 CPU(14)는, SD 스트림, HD 스트림이라고 하는 스트림의 종류에 따라, 프레임 메모리(34)의 메모리 영역으로부터 필요한 디코드 영역을 확보하고, 계속하여, 디코드 코어(33)에 의한 디코드 처리를 실행시킨다. 호스트 CPU(14)는, 디코드 처리에 필요한 디코드 영역을 SDRAM(15)에 구축된 관리 테이블인 가상 프레임을 이용하여 확보한다.
호스트 CPU(14)는, 스트림을 디코드하는 경우, 우선 SDRAM(15)에 구축된 전체 가상 프레임을 검색하여, 스테이터스 정보가 "BLANK"상태의 가상 프레임을 확보한다.
구체적으로는, 가상 프레임은, 프레임 메모리(34)의 소정의 메모리 영역과 대응하고 있으므로, 예를 들면, HD 스트림이 MPEG 비디오 디코더(17)에 입력된 경우, 호스트 CPU(14)는, SDRAM(15)에 구축된 가상 프레임 중, VF_1~VF_4 중 어느 하나의 가상 프레임을 확보하면, 확보한 가상 프레임에 대응한 HD 스트림을 디코드 가능한 프레임 메모리(34)의 메모리 영역이 확보되게 된다.
그러나, 가상 프레임 VF_1~VF_4에 대응한 프레임 메모리(34)의 메모리 영역을 확보하면, 해당 VF_1~VF_4의 스테이터스 정보만이 아니라 가상 프레임 VF_5~VF_20의 스테이터스 정보도 확인할 필요가 있다.
프레임 메모리(34)는, 전술한 바와 같이 HD용으로서도 SD용으로서도 정의되고, HD용으로서 정의되는 경우, 그 메모리 영역, 즉 HD 프레임을 1프레임 저장 가능한 프레임 메모리(34)의 메모리 영역은, SD용으로서 정의되는 경우의 메모리 영역, 즉 SD 프레임을 1프레임 저장 가능한 프레임 메모리(34)의 메모리 영역의 연속된 4개의 메모리 영역으로 되어 있다.
따라서, HD 스트림을 디코드할 때, 가상 프레임 VF_1~VF_4의 스테이터스 정 보만으로는 디코드할 때의 프레임 메모리(34)의 메모리 영역의 확보에는 불충분한 정보이다. 가상 프레임 VF_5~VF_20의 스테이터스 정보도 확인함으로써, 가상 프레임 VF_1~VF_4의 스테이터스 정보에 따라 확보된 프레임 메모리(34)의 메모리 영역이 완전하게 빈 영역이 되어 있는지 여부를 알 수 있다.
또, SD 스트림을 디코드할 때도 마찬가지이며, 호스트 CPU(14)는, 가상 프레임 VF_5~VF_20의 스테이터스 정보와, 가상 프레임 VF_1~VF_4의 스테이터스 정보를 참조함으로써 프레임 메모리(34)에, SD 스트림을 디코드할 때에 필요한 빈 영역이 있는지 여부를 판단한다.
계속하여, 도 14에 나타낸 SDRAM(15)에 구축된 가상 프레임의 일례를 참조하여 HD 스트림이 디코드 가능한지, SD 스트림이 디코드 가능한지 여부를 검증한다.
우선, HD 스트림이 MPEG 비디오 디코더(17)에 공급된 경우에 대해 검증한다.
HD용의 가상 프레임인 VF_1~VF_4를 보면, VF_4는 스테이터스 정보가 "PRSN"이며 표시용으로 사용되고 있으므로, HD 스트림의 디코드에는 사용할 수 없다.
남는, HD용의 가상 프레임 VF_1~VF_3은, 스테이터스 정보가 "BLANK"이기 때문에 HD 스트림의 디코드에 사용할 수 있을 가능성이 있다.
그러나, 프레임 메모리(34)를 SD용의 프레임 메모리로서 정의한 경우에, 가상 프레임 VF_1에 대응한 프레임 메모리(34)의 메모리 영역을 공유하게 되는 가상 프레임 VF_5~VF_8 중 VF_6의 스테이터스 정보가 "ALLOC"이며, VF_7의 스테이터스 정보가 "PRSN"으로 되어 있으므로 VF_1을 HD 스트림의 디코드에 사용할 수 없다.
동일하게, VF_2에 있어서는, 프레임 메모리(34)의 메모리 영역을 공유하는 가상 프레임 VF_9~VF_12 중 VF_11, VF_12의 스테이터스 정보가 "DEC"로 되어 있으므로 HD 스트림의 디코드에 사용할 수 없다.
VF3에 있어서도, 프레임 메모리(34)의 메모리 영역을 공유하는 가상 프레임 VF_13~VF_16 중 VF_13의 스테이터스 정보 "PRSN"로 되어 있기 때문에 HD 스트림의 디코드에 사용할 수가 없다.
따라서, 도 14에 나타낸 가상 프레임으로부터는, MPEG 비디오 디코더(17)가 HD 스트림의 디코드를 할 수가 없는 상태인 것을 알 수 있다.
계속하여, 도 14에 나타낸 SDRAM(15)에 구축된 가상 프레임의 일례를 이용하고 SD 스트림이 MPEG 비디오 디코더(17)에 공급된 경우에 대해 검증한다.
SD용의 가상 프레임인 VF_5~VF_20을 보면, VF_5, VF_8, VF_9, VF_l0, VF_14~VF_20까지의 스테이터스 정보가 "BLANK"로 되어 있다.
다음에, 가상 프레임 VF_1~VF_4를 보면, VF_4의 스테이터스 정보가 "PRSN"으로 되어 있으므로 VF17~VF20를 SD 스트림의 디코드에 사용할 수가 없다.
한편, VF_1~VF_3의 스테이터스 정보는, "BLANK"이기 때문에 VF_5, VF_8, VF_9, VF_10, VF_14~VF16를 SD 스트림의 디코드에 사용할 수 있다.
따라서, 도 14에 나타낸 가상 프레임으로부터는, MPEG 비디오 디코더(17)가, SD 스트림의 디코드를 할 수 있는 상태인 것을 알 수 있다.
다음에, 도 15에 나타낸 플로차트를 참조하여, BS 디지털 방송의 멀티뷰 방송을 재생할 때의, 가상 프레임을 이용한 디코드 관리 동작에 대해 설명을 한다. 이하의 설명에 있어서는, 멀티뷰 방송으로서 3개의 SD 스트림(3SD 스트림)이 MPEG 비디오 디코더(17)에 공급되고, 각각의 SD 스트림을 디코드 처리하는 채널을 채널1, 채널2, 채널3으로 한다.
또, 채널1에서 디코드 처리하는 SD 프레임을 V_ch1_1, V_ch1_2, V_ch1_3, V_ch1_4로 하고, 채널2에서 디코드 처리하는 SD 프레임을 V_ch2_1, V_ch2_3, V_ch2-3, V_ch2_4로 하고, 채널3에서 디코드 처리하는 SD 프레임을, V_ch3_1, V_ch3_2, V_ch3_3, V_ch3_4로 한다. 각 채널의 SD 프레임의 채널 번호(ch1, ch2, ch3) 이외에 붙여진 숫자는, 편의적으로 PTS를 나타내고 있는 것으로 하고, 채널 간에 동일한 숫자는, 같은 PTS 또는 PTS가 근접하고 있는 것을 나타내고 있는 것으로 한다.
전술한 바와 같이, 각 채널의 디코드 처리는, 독립하여 실행되는 것으로 생각되므로, 여기에서는, 1개의 채널의 디코드 처리를 중심으로 설명을 한다.
우선, 스텝 S41에 있어서, 호스트 CPU(14)는, SD 스트림이 공급되었던 것에 따라, 해당 채널에서의 디코드 처리에 대해 필요한 가상 프레임을 요구한다.
스텝 S42에 대하여, 호스트 CPU(14)는, SDRAM(15)에 구축된 가상 프레임을 참조하여, 스테이터스 정보가 "BLANK"로 되어 있는 가상 프레임이 있는지 여부를 검출한다. 스테이터스 정보가 "BLANK"인 가상 프레임이 있었던 경우는 스텝을 스텝 S44로 진행하고, 스테이터스 정보가 "BLANK" 없는 경우는 스텝을 스텝 S43로 진행한다.
스텝 S43에 있어서, 호스트 CPU(14)는, 가상 프레임의 스테이터스 정보가 "BLANK"로 되어 빈 가상 프레임이 생기는 것을 기다리는, 대기 상태로 된다.
스텝 S44에 있어서, 호스트 CPU(14)는, 해당 채널용으로 확보된 코드 버퍼(31)의 메모리 영역에 공급된 SD 스트림으로부터 재생 출력의 시각 관리 정보인 PTS를 검출한다.
호스트 CPU(14)는, 해당 채널 이외의 다른 채널의 디코드 처리에 확보되어 있는 SD용의 가상 프레임으로부터, 해당 채널로 검출한 PTS에 근접, 또는 일치하는 PTS를 구비하는 SD용의 가상 프레임을 검색한다.
예를 들면, 가상 프레임이 도 16에 나타낸 바와 같으므로, 채널3에서 디코드 처리를 행하는 V_ch3_4의 DPTS가 스텝 S44에서 검출된 것으로 한다.
도 16에 나타낸 가상 프레임은, HD용의 가상 프레임 VF_1~VF_4의 스테이터스 정보가 "BLANK", SD용의 가상 프레임 VF_8, VF_12, VF_16, VF_19, VF_20의 스테이터스 정보가 "BLANK"인 것으로 한다.
전술한 바와 같이, 호스트 CPU(14)는, SDRAM(15)에 구축된 도 16에 나타낸 가상 프레임을 참조하여, V_ch3_4의 PTS에 근접, 혹은 일치하는 PTS를 구비하는 다른 채널의 SD용의 가상 프레임을 검색한다. 도 16의 가상 프레임에서는, SD용의 가상 프레임 VF_17, VF_18에는, VF_17, VF_18에 대응하는 프레임 메모리(34)의 메모리 영역에 V_ch3_4의 PTS에 근접, 혹은 일치하는 PTS를 구비하는 채널1의 V_ch1_4, 채널2의 V_ch2_4가 기억되어 있는 것이 나타나고 있으므로, 해당하는 SD용의 가상 프레임은, VF_17, VF_18인 것을 알 수 있다.
해당하는 가상 프레임이 있었을 경우는 스텝을 스텝 S45로 진행하여 해당하는 SD용의 가상 프레임이 없는 경우는 스텝을 스텝 S48로 진행한다.
스텝 S45에 있어서, 우선, 호스트 CPU(14)는, 스텝 S44에서 검색된 해당 채널의 PTS에 근접, 혹은 일치하는 PTS를 구비하는 다른 채널의 SD용의 가상 프레임과, 프레임 메모리(34)의 메모리 영역을 공유하고 있는 HD용의 가상 프레임을 특정한다.
예를 들면, 도 16에 나타낸 가상 프레임의 경우, 스텝 S44에서 SD용의 가상 프레임 VF_17, VF_18이 특정되었다. 이 SD용의 가상 프레임과 프레임 메모리(34)의 메모리 영역을 공유하고 있는 HD용의 가상 프레임은, VF_4인 것을 알 수 있다.
다음에, 호스트 CPU(14)는, 특정된 HD용의 가상 프레임과 프레임 메모리(34)의 메모리 영역을 공유하는 SD용의 가상 프레임으로부터, 스테이터스 정보가 "BLANK"의 SD용의 가상 프레임이 있는지 여부를 검색한다.
예를 들면, 도 16에 나타낸 가상 프레임의 경우, 특정된 HD용의 가상 프레임 VF_4와, 프레임 메모리(34)의 메모리 영역을 공유하는 SD용의 가상 프레임은, VF_17~VF_20이다. 가상 프레임 VF_17, VF_18은, 이미 채널1, 채널2에서 사용되고 있으므로, 스테이터스 정보가 "BLANK"인 것은 VF_19, VF_20의 SD용 가상 프레임이다.
스테이터스 정보가 "BLANK"의 가상 프레임이 있는 경우는 스텝을 스텝 S46로 진행하고, 스테이터스 정보가 "BLANK"의 가상 프레임이 없는 경우는 스텝은 스텝 S43로 진행되어, 빈 가상 프레임의 대기 상태로 된다.
스텝 S46에 있어서, 스테이터스 정보가 "BLANK"인 가상 프레임이 있었던 것에 따라, 이 가상 프레임을 확보한다.
예를 들면, 도 16에 나타낸 가상 프레임의 경우, VF_19, VF_20 중 한쪽이 확보된다. 여기에서는, VF_19가 확보된 것으로 한다.
스텝 S47에 있어서, 호스트 CPU(14)는, 가상 프레임이 확보되었던 것에 따라, 디코드 대상의 SD 스트림을 디코드 코어(33)로 디코드하고, SD 프레임을 생성하여, 확보된 가상 프레임에 대응한 프레임 메모리(34)의 메모리 영역에 디코드한 SD 프레임을 저장시킨다.
예를 들면, 도 16에 나타낸 가상 프레임의 경우, 가상 프레임 VF_19에 대응하는 프레임 메모리(34)의 메모리 영역에 V_ch3_4가 저장되게 된다.
스텝 S48에 있어서, 호스트 CPU(14)는, 해당 채널에서 검출한 PTS에 근접, 혹은 일치하는 PTS를 구비하는 SD용의 가상 프레임을 검색할 수 없었던 것에 따라, 가상 프레임의 HD용의 가상 프레임과 프레임 메모리(34)의 메모리 영역을 공유하고 있는 SD용의 가상 프레임군으로 구성되는 SD 가상 프레임 그룹의 스테이터스 정보를 참조하여, 해당 SD 가상 프레임 그룹이 빈 상태로 되어 있는지 여부를 판단한다.
가상 프레임 그룹을 구성하는 SD용의 가상 프레임군의 모든 가상 프레임의 스테이터스 정보가 "BLANK"로 되어 있는 경우를, 가상 프레임 그룹이 빈 상태인 것으로 한다.
빈 상태의 가상 프레임 그룹이 존재하는 경우는 스텝을 스텝 S49로 진행하고, 빈 상태의 SD 가상 프레임 그룹이 존재하지 않는 경우는 스텝을 스텝 S50으로 진행한다.
스텝 S49에 있어서, 스테이터스 정보가 "BLANK"로 되어 있는 SD용의 가상 프레임을 확보한다. 스텝 S49가 종료하면, 스텝은 스텝 S47로 진행되어 디코드 코어(33)에 의한 디코드가 실행되어, 확보된 영역에 디코드된 SD 프레임이 기억된다.
스텝 S50에 있어서, 호스트 CPU(14)는, SDRAM(15)에 구축된 가상 프레임의 모든 SD 가상 프레임 그룹이 빈 상태는 아니었던 것에 따라, 스테이터스 정보가 "BLANK"인 SD용의 가상 프레임으로부터, 현시점에서 가장 빨리 재생될 SD 가상 프레임 그룹에 속해 있는 SD용의 가상 프레임을 확보한다.
이것은, 전술한 바와 같이 SD 가상 프레임 그룹의 정의로부터, SD 가상 프레임 그룹에 속하는 SD용의 가상 프레임과 대응하는 프레임 메모리(34)의 메모리 영역에 저장되는 SD 프레임은, 서로가 근접, 혹은 일치하도록 한 PTS를 보유하고 있기 때문에, 해당 SD 프레임 그룹의 PTS도 동일한 것으로 생각된다. 따라서, SD 가상 프레임 그룹 단위로, 재생되는 시각의 검증을 하는 것이 가능해진다. 스텝 S50이 종료하면, 스텝은 스텝 S47로 진행되고, 디코드 코어(33)에 의한 디코드가 실행되어, 확보된 영역에 디코드된 SD 프레임이 기억된다.
이와 같이 하여, SDRAM(15)에 구축된 가상 프레임에 근거한 호스트 CPU(14)의 관리에 의하여, 멀티뷰 방송시에 공급되는 3개의 SD 스트림의 디코드 처리가 실행되면, 예를 들면, 멀티뷰 방송이 종료하고, 통상의 디지털 하이비젼 방송으로 전환된 경우, 도 16에 나타낸 가상 프레임을 이용하여 다음에 나타낸 바와 같이 하여, HD용의 가상 프레임이 확보된다.
예를 들면, 도 16에 나타낸 가상 프레임과 같이, 각 채널의 프레임이 기억되어 있다고 하면, 이 시점에서는, SD용의 가상 프레임 VF5_~VF_7, VF9_~VF_11, VF_13~VF_15, VF17_~VF_19가 사용되고 있기 때문에, 프레임 메모리(34)의 메모리 영역에는 HD용의 프레임을 확보하기 위한 영역이 없게 된다.
따라서, HD용의 가상 프레임인 VF_1, VF_2, VF_3, VF_4도 확보할 수가 없다.
그러나, STC가 진행되어 가상 프레임 중에서 가장 빠른 PTS를 가지는, VF_5~VF_7에 대응하는 프레임 메모리(34)의 메모리 영역에 기억되어 있는 Vch1_1, V_ch2_1, V_ch3_1을 프레임 메모리(34)로부터 판독하면, 프레임 메모리(34)의 메모리 영역을 공유하고 있는 HD용의 가상 프레임 VF_1을 확보할 수 있다.
마찬가지로 하여, 가상 프레임 VF_9~VF_11에 대응하는 프레임 메모리(34)의 메모리 영역에 기억되어 있는 V_ch1-2, V_ch2-2, V_ch3_2)를 판독하고, 가상 프레임 VF_13~VF_15에 대응하는 프레임 메모리(34)의 메모리 영역에 기억되어 있는 V_ch1_3, V_ch2_3, V_ch3_3을 판독하고, 가상 프레임 VF_17~VF_19에 대응하는 프레임 메모리(34)의 메모리 영역에 기억되어 있는 V_ch1_4, V_ch2_4, V_ch3_4를 판독함으로써, 순차 HD용의 가상 프레임 VF_2, VF_3, VF_4를 확보할 수 있다.
이와 같이 하여, HD용의 가상 프레임을 순차 확보하는 것이 가능하기 때문에, 멀티뷰 방송으로부터 디지털 하이비젼 방송으로 전환된다. 이와 같이, MPEG 비디오 디코더(17)에 공급되는 스트림이 3개의 SD 스트림로부터 1개의 HD 스트림으로 전환된 경우라도, 프레임 메모리(34)의 메모리 영역을 확보할 수 없는 것에 의한 디코드 처리의 일시적인 중단을 방지할 수 있다.
즉, 멀티뷰 방송으로부터 디지털 하이비젼 방송으로 전환된 경우라도 "심리스"의 디코드 처리가 가능하기 때문에, 유저에게 제공되는 영상도 멀티뷰 영상으로부터 디지털 하이비젼 영상으로 자연스럽게 전환되게 된다.
계속하여, 도 17에 나타낸 플로차트를 참조하여, 디지털 하이비젼 방송을 재생할 때의 가상 프레임을 이용한 디코드 관리 동작에 대해 설명을 한다.
스텝 S61에 대하여, 호스트 CPU(14)는, HD 스트림가 공급된 것에 따라, 디코드 처리에 대해 필요한 가상 프레임을 요구한다.
스텝 S62에 있어서, 호스트 CPU(14)는, SDRAM(15)에 구축된 가상 프레임 중 HD용의 가상 프레임 VF_1~VF_4의 스테이터스 정보가 "BLANK" 로 되어 있는지 여부를 검색한다. 스테이터스 정보가 "BLANK" 되어 있는 경우는 스텝을 스텝 S63으로 진행하고, 스테이터스 정보가 "BLANK" 로 되지 않은 경우는 스텝을 스텝 S64로 진행한다.
스텝 S63에 있어서, 호스트 CPU(14)는, HD용의 가상 프레임 VF_1~VF_4 중 스테이터스 정보가 "BLANK" 였던 HD용의 가상 프레임과, 프레임 메모리(34)의 메모리 영역을 공유하는 SD용의 가상 프레임 메모리의 스테이터스 정보가 모두 "BLANK"인지 여부를 판단한다.
예를 들면, HD용의 가상 프레임 VF_1의 스테이터스 정보가 "BLANK"였던 경우는, SD용의 가상 프레임 메모리 VF_5~VF_8의 스테이터스 정보를 검증하고, HD용의 가상 프레임 VF_2의 스테이터스 정보가 "BLANK"였던 경우는, SD용의 가상 프레임 메모리 VF_9~VF_12의 스테이터스 정보를 검증하고, HD용의 가상 프레임 VF_3의 스 테이터스 정보가 "BLANK"였던 경우는, SD용의 가상 프레임 메모리 VF_13~VF_16의 스테이터스 정보를 검증하고, HD용의 가상 프레임 VF_4의 스테이터스 정보가 "BLANK"였던 경우는, SD용의 가상 프레임 메모리 VF_17~VF_20의 스테이터스 정보를 검증한다.
SD용의 가상 프레임의 스테이터스 정보가 모두 "BLANK" 였던 경우는 스텝을 스텝 S65로 진행하고, 스테이터스 정보가 1개에서도 "BLANK"로 되었던 경우는 스텝을 스텝 S64로 진행한다.
스텝 S64에 있어서, 호스트 CPU(14)는, 가상 프레임의 스테이터스 정보가 "BLANK"로 되어 빈 가상 프레임이 생기는 것을 기다리는 대기 상태가된다.
스텝 S65에 있어서, 호스트 CPU(14)는, 스테이터스 정보가 "BLANK"인 HD용의 가상 프레임였던 것에 따라, 이 가상 프레임을 확보한다.
스텝 S66에 있어서, 호스트 CPU(14)는, HD용의 가상 프레임이 확보되었던 것에 따라, 디코드 대상의 HD 스트림을 디코드 코어(33)로 디코드하여, HD 프레임을 생성하고, 확보된 가상 프레임에 대응한 프레임 메모리(34)의 메모리 영역에 디코드한 HD 프레임을 저장시킨다.
이와 같이 하여, SDRAM(15)에 구축된 가상 프레임에 따른 호스트 CPU(14)의 관리에 의하여, 디지털 하이비젼 방송시에 공급되는 1개의 HD 스트림의 디코드 처리가 실행된다. 여기서, 예를 들면, 디지털 하이비젼 방송이 종료하고, 멀티뷰 방송으로 전환된 경우, 가상 프레임을 이용하여 다음에 나타낸 바와 같이 하여 SD용의 가상 프레임이 확보된다.
예를 들면, HD용의 가상 프레임 VF_1~VF_4가 모두 매입되어 있는 경우에 대하여, HD용의 가상 프레임 중에서 가장 빠른 PTS가 HD용의 가상 프레임 VF_1였던 경우, 호스트 CPU(14)는, HD용의 가상 프레임 VF_1에 대응하는 프레임 메모리(34)의 메모리 영역에 기억되어 있는 HD 프레임을 판독하여, HD용의 가상 프레임 VF_1을 해방한다.
HD용의 가상 프레임 VF_1이 해방되면, 이 가상 프레임 VF_1과 프레임 메모리(34)의 메모리 영역을 공유하는 SD용의 가상 프레임 VF5~VF_8도 해방되게 된다. 동일하게 하여, HD용의 가상 프레임 VF_2~VF_4에 있어서도 순차 실행함으로써, 순차, SD용의 가상 프레임이 4프레임씩 확보되어 간다.
따라서, 해방된 SD용의 가상 프레임을 각 채널이 확보하여 디코드 처리를 실행하는 것으로 디지털 하이비젼 방송으로부터 멀티뷰 방송으로 전환되고, MPEG 비디오 디코더(17)에 공급되는 스트림이 1개의 HD 스트림으로부터 3개의 SD 스트림로 전환된 경우라도, 프레임 메모리(34)의 메모리 영역을 확보할 수 없는 것에 의한 디코드 처리의 일시적인 중단을 방지할 수 있다.
즉, 디지털 하이비젼 방송으로부터 멀티뷰 방송으로 전환된 경우라도 "심리스"인 디코드 처리가 가능하기 때문에, 유저에게 제공되는 영상도 디지털 하이비젼 영상으로부터 멀티뷰 영상으로 자연스럽게 전환하게 된다.
그리고, 본 발명은, 도면을 참조하여 설명한 전술한 실시예에 한정되는 것이 아니고, 첨부의 청구의 범위 및 그 주지를 일탈하는 일 없이, 여러 가지 변경, 치환 또는 그 동등의 것을 행할 수 있는 것은 당업자에게 있어 명백하다.
전술한 바와 같이, 본 발명에 관한 복호 장치는, 복호 수단에 의해 복호 한 화상 프레임을 기억하는 화상 프레임 기억 수단의 기억 영역을, HD 화상 프레임을 기억하는 경우에는 HD용 기억 영역으로서 정의하고, SD 화상 프레임을 기억하는 경우에는 SD용 기억 영역으로서 정의하고, 관리 테이블 기억 수단에 기억된 관리 테이블에 따라, HD용 기억 영역 및 SD용 기억 영역의 관리를 행한다.
이것에 의하여, 복호 수단에 의해 복호되는 HD 화상 프레임, SD 화상 프레임의 기억 영역의 확보를 통괄적으로 행할 수 있으므로, m개의 SD 화상 스트림 데이터가 입력되는 경우라도 복호 처리를 순조롭게 실행하는 것이 가능해진다.
또, 본 발명의 복호 장치는, 복호한 SD 화상 프레임을 기억시키는 SD용 기억 영역을 확보할 때, SD 화상 프레임이 보유하는 출력 시간 정보가 일치, 또는, 근접하는 SD 화상 프레임이 기억되어 있는 SD 화상 프레임이 기억되어 있는 제1 SD용 기억 영역과, 기록 영역을 공유하여 정의된 HD용 기억 영역을 검출하고, 검출한 HD용 기억 영역과 화상 프레임 기억 수단의 기억 영역을 공유하는 빈 영역의 제2 SD용 기억 영역을 확보한다. 이것에 의하여, 예를 들면, 해당 복호 장치에 m개의 SD 화상 스트림 데이터가 공급되고, 계속하여, 1개의 HD 화상 스트림 데이터가 공급되는 경우에, 출력 시간을 대략 동일하게 하는 SD 화상 프레임이, 1프레임의 HD용 화상 프레임을 기억하는 HD용 기억 영역으로서도 정의되는 화상 프레임 기억 수단의 기억 영역에 기억되어 있기 때문에, HD용 기억 영역의 확보가 용이해져, 복호 수단에서의 복호 처리의 지연을 방지하여, 스트림 타입이 바뀌는 전환점에 있어서 도 "심레스" 의 복호 처리를 가능하게 한다.
이상의 설명으로부터도 명백한 바와 같이, 본 발명의 복호 방법은, 복호 스텝에 의해 복호한 화상 프레임을 기억하는 화상 프레임 기억 수단의 기억 영역을, HD 화상 프레임을 기억하는 경우에는 HD용 기억 영역으로서 정의하고, SD 화상 프레임을 기억하는 경우는 SD용 기억 영역으로서 정의하고, 관리 테이블 기억 수단에 기억된 관리 테이블에 따라, HD용 기억 영역 및 SD용 기억 영역의 관리를 행한다.
이것에 의하여, 복호 스텝에 의해 복호되는 HD 화상 프레임, SD 화상 프레임의 기억 영역의 확보를 통괄적으로 행할 수 있으므로, m개의 SD 화상 스트림 데이터가 입력되는 경우라도 복호 처리를 순조롭게 실행하는 것이 가능해진다.
또, 본 발명에 관한 복호 방법은, 복호한 SD 화상 프레임을 기억시키는 SD용 기억 영역을 확보할 때, SD 화상 프레임이 보유하는 출력 시간 정보가 일치, 또는, 근접하는 SD 화상 프레임이 기억되어 있는 SD 화상 프레임이 기억되어 있는 제1 SD용 기억 영역과, 기록 영역을 공유하여 정의된 HD용 기억 영역을 검출하고, 검출한 HD용 기억 영역과 화상 프레임 기억 수단의 기억 영역을 공유하는 빈 영역의 제2 SD용 기억 영역을 확보한다. 이것에 의하여, 예를 들면, 해당 복호 장치에 m개의 SD 화상 스트림 데이터가 공급되고, 계속하여, 1개의 HD 화상 스트림 데이터가 공급되는 경우에, 출력 시간을 대략 동일하게 하는 SD 화상 프레임이, 1프레임의 HD용 화상 프레임을 기억하는 HD용 기억 영역으로서도 정의되는 화상 프레임 기억 수단의 기억 영역에 기억되어 있으므로, HD용 기억 영역의 확보가 용이해져, 복호 스텝에서의 복호 처리의 지연을 방지하여, 스트림 타입이 바뀌는 전환점에 있어서도 "심리스"의 복호 처리를 가능하게 한다.

Claims (28)

  1. HD(High Definition) 방식으로 부호화된 HD 화상 스트림 데이터를 HD 화상 프레임으로 복호하고, SD(Standard Definition) 방식으로 부호화된 m(m은 자연수)개의 SD 화상 스트림 데이터를 시분할로 SD 화상 프레임으로 복호하는 복호 수단과,
    상기 복호 수단에 의해 복호된 상기 HD 화상 프레임을 기억하고, 상기 복호 수단에 의해 복호된 상기 SD 화상 프레임을 기억하는 화상 프레임 기억 수단과,
    상기 HD 화상 스트림 데이터를 복호할 때는 복호된 HD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하는 동시에 상기 m개의 SD 화상 스트림 데이터를 복호할 때는 복호된 각각의 스트림에 대응하는 SD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하도록 상기 화상 프레임 기억 수단을 제어하는 제어 수단과,
    상기 화상 프레임 기억 수단에 상기 HD 화상 프레임 또는 상기 SD 화상 프레임을 기입하는 화상 프레임 기입 수단과,
    상기 화상 프레임 기억 수단에 기입된 상기 HD 화상 프레임이 보유하는 출력 시간 정보에 따라 상기 HD 화상 프레임을 판독하고, 상기 SD용 기억 영역에 기입된 상기 SD 화상 프레임이 보유하는 출력 시간 정보에 따라 상기 SD 화상 프레임을 판독하는 화상 프레임 판독 수단과,
    상기 화상 프레임 판독 수단에 의해 판독된 상기 HD 화상 프레임을 출력하고, 상기 화상 프레임 판독 수단에 의해 판독된 상기 SD 화상 프레임을 동일 화면 상에 배치되도록 출력하는 출력 수단
    을 구비하는 복호 장치.
  2. 청구항 2은(는) 설정등록료 납부시 포기되었습니다.
    제1항에 있어서,
    상기 화상 프레임 기억 수단의 상기 HD 화상 프레임의 기억 영역의 사용 상황을 나타내는 HD용 기억 영역 정보와 상기 화상 프레임 기억 수단의 상기 SD 화상 프레임의 기억 영역의 사용 상황을 나타내는 SD용 기억 영역 정보를 관리하는 관리 테이블을 기억하는 관리 테이블 기억 수단을 추가로 가지며,
    상기 제어 수단은 상기 HD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라 상기 화상 프레임 기억 수단의 HD용 기억 영역을 확보하는, 복호 장치.
  3. 청구항 3은(는) 설정등록료 납부시 포기되었습니다.
    제2항에 있어서,
    상기 제어 수단은 상기 m개의 SD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라, 입력된 상기 m개의 SD 화상 스트림 데이터가 보유하는 상기 복호 수단에 의한 복호 후의 SD 화상 프레임의 출력 시간 정보와, 동일한 출력 시간 정보를 보유하는 SD 화상 프레임이 기억된 제1 SD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하는, HD용 기억 영역을 검출하고,
    검출한 상기 HD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하고, 또한 빈 영역인 제2 SD용 기억 영역을 확보하는, 복호 장치.
  4. 청구항 4은(는) 설정등록료 납부시 포기되었습니다.
    제2항에 있어서,
    상기 제어 수단은 상기 m개의 SD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라 빈 영역인 상기 HD용 기억 영역을 검출하고,
    검출한 상기 HD용 기억 영역과 기억 영역을 공유하는 상기 SD용 기억 영역을 확보하는, 복호 장치.
  5. 청구항 5은(는) 설정등록료 납부시 포기되었습니다.
    제2항에 있어서,
    상기 제어 수단은 상기 m개의 SD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라 가장 빨리 출력되는 출력 시간 정보를 보유하는 SD 화상 프레임이 기억된 제1 SD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하는 HD용 기억 영역을 검출하고,
    검출한 상기 HD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하고, 또한 빈 영역인 제2 SD용 기억 영역을 확보하는, 복호 장치.
  6. HD 방식으로 부호화된 HD 화상 스트림 데이터를 HD 화상 프레임으로 복호하고, SD 방식으로 부호화된 m(m은 자연수)개의 SD 화상 스트림 데이터를 시분할로 SD 화상 프레임으로 복호하는 복호 스텝과,
    상기 복호 스텝에서 복호된 상기 HD 화상 프레임을 기억하고, 상기 복호 스텝에서 복호된 상기 SD 화상 프레임을 기억하는 화상 프레임 기억 스텝과,
    상기 HD 화상 스트림 데이터를 복호할 때는 복호된 HD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하는 동시에 상기 m개의 SD 화상 스트림 데이터를 복호할 때는 복호된 각각의 스트림에 대응하는 SD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하도록 화상 프레임 기억 수단을 제어하는 스텝과,
    상기 화상 프레임 기억 수단에 HD 화상 프레임 또는 상기 SD용 기억 영역에 m개의 상기 SD 화상 프레임을 기입하는 화상 프레임 기입 스텝과,
    상기 화상 프레임 기억 수단에 기입된 상기 HD 화상 프레임이 보유하는 출력 시간 정보에 따라 상기 HD 화상 프레임을 판독하고, 상기 SD용 기억 영역에 기입된 SD 화상 프레임이 보유하는 출력 시간 정보에 따라 상기 SD 화상 프레임을 판독하는 화상 프레임 판독 스텝과,
    상기 화상 프레임 판독 스텝에 의해 판독된 상기 HD 화상 프레임을 출력하고, 상기 화상 프레임 판독 스텝에 의해 판독된 상기 SD 화상 프레임을 동일 화면 상에 배치되도록 출력하는 출력 스텝
    을 포함하는 복호 방법.
  7. 제6항에 있어서,
    상기 화상 프레임 기억 수단의 상기 HD 화상 프레임의 기억 영역의 사용 상황을 나타내는 HD용 기억 영역 정보와 상기 화상 프레임 기억 수단의 상기 SD 화상 프레임의 기억 영역의 사용 상황을 나타내는 SD용 기억 영역 정보를 관리하는 관리 테이블을 관리 테이블 기억 수단에 기억하는 관리 테이블 기억 스텝을 추가로 포함하며,
    상기 제어 스텝은 상기 HD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라 상기 화상 프레임 기억 수단의 HD용 기억 영역을 확보하도록 제어하는, 복호 방법.
  8. 제7항에 있어서,
    상기 제어 스텝은 상기 m개의 SD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라, 입력된 상기 m개의 SD 화상 스트림 데이터가 보유하는 상기 복호 스텝에 의한 복호 후의 SD 화상 프레임의 출력 시간 정보와, 동일한 출력 시간 정보를 보유하는 SD 화상 프레임이 기억된 제1 SD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하는, HD용 기억 영역을 검출하고,
    검출한 상기 HD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하고, 또한 빈 영역인 제2 SD용 기억 영역을 확보하는, 복호 방법.
  9. 제7항에 있어서,
    상기 제어 스텝은 상기 m개의 SD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라 빈 영역인 상기 HD용 기억 영역을 검출하고,
    검출한 상기 HD용 기억 영역과 기억 영역을 공유하는 상기 SD용 기억 영역을 확보하는, 복호 방법.
  10. 제7항에 있어서,
    상기 제어 스텝은 상기 m개의 SD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라 가장 빨리 출력되는 출력 시간 정보를 보유하는 SD 화상 프레임이 기억된 제1 SD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하는 HD용 기억 영역을 검출하고,
    검출한 상기 HD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하고, 또한 빈 영역인 제2 SD용 기억 영역을 확보하는, 복호 방법.
  11. HD 방식으로 부호화된 HD 화상 스트림 데이터 또는 SD 방식으로 부호화된 m(m은 자연수)개의 SD 화상 스트림 데이터가 다중화된 다중화 SD 화상 스트림 데이터를 입력하는 입력 수단과,
    상기 입력 수단에 의해 상기 다중화 SD 화상 스트림 데이터가 입력된 경우 다중화 SD 화상 스트림 데이터를 m개의 화상 스트림 데이터로 분리하는 분리 수단과,
    상기 입력 수단에 의해 입력된 HD 화상 스트림 데이터를 HD 화상 프레임으로 복호하고, 상기 분리 수단에 의해 분리된 m개의 SD 화상 스트림 데이터를 시분할로 SD 화상 프레임으로 복호하는 복호 수단과,
    상기 복호 수단에 의해 복호된 상기 HD 화상 프레임을 기억하고, 상기 복호 수단에 의해 복호된 상기 SD 화상 프레임을 기억하는 화상 프레임 기억 수단과,
    상기 HD 화상 스트림 데이터를 복호할 때는 복호된 HD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하는 동시에 상기 m개의 SD 화상 스트림 데이터를 복호할 때는 복호된 각각의 스트림에 대응하는 SD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하도록 상기 화상 프레임 기억 수단을 제어하는 제어 수단과,
    상기 화상 프레임 기억 수단에 상기 HD 화상 프레임 또는 상기 SD 화상 프레임을 기입하는 화상 프레임 기입 수단과,
    상기 화상 프레임 기억 수단에 기입된 상기 HD 화상 프레임이 보유하는 출력 시간 정보에 따라 상기 HD 화상 프레임을 판독하고, 상기 SD용 기억 영역에 기입된 상기 SD 화상 프레임이 보유하는 출력 시간 정보에 따라 상기 SD 화상 프레임을 판독하는 화상 프레임 판독 수단과,
    상기 화상 프레임 판독 수단에 의해 판독된 상기 HD 화상 프레임을 출력하고, 상기 화상 프레임 판독 수단에 의해 판독된 상기 SD 화상 프레임을 동일 화면 상에 배치되도록 출력하는 출력 수단
    을 구비하는 복호 장치.
  12. 청구항 12은(는) 설정등록료 납부시 포기되었습니다.
    제11항에 있어서,
    상기 화상 프레임 기억 수단의 상기 HD 화상 프레임의 기억 영역의 사용 상황을 나타내는 HD용 기억 영역 정보와 상기 화상 프레임 기억 수단의 상기 SD 화상 프레임의 기억 영역의 사용 상황을 나타내는 SD용 기억 영역 정보를 관리하는 관리 테이블을 기억하는 관리 테이블 기억 수단을 추가로 가지며,
    상기 제어 수단은 상기 HD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라 상기 화상 프레임 기억 수단의 HD용 기억 영역을 확보하는, 복호 장치.
  13. 청구항 13은(는) 설정등록료 납부시 포기되었습니다.
    제12항에 있어서,
    상기 제어 수단은 상기 m개의 SD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라, 입력된 상기 m개의 SD 화상 스트림 데이터가 보유하는 상기 복호 수단에 의한 복호 후의 SD 화상 프레임의 출력 시간 정보와, 동일한 출력 시간 정보를 보유하는 SD 화상 프레임이 기억된 제1 SD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하는, HD용 기억 영역을 검출하고,
    검출한 상기 HD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하고, 또한 빈 영역인 제2 SD용 기억 영역을 확보하는, 복호 장치.
  14. 청구항 14은(는) 설정등록료 납부시 포기되었습니다.
    제12항에 있어서,
    상기 제어 수단은 상기 m개의 SD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라 빈 영역인 상기 HD용 기억 영역을 검출하고,
    검출한 상기 HD용 기억 영역과 기억 영역을 공유하는 상기 SD용 기억 영역을 확보하는, 복호 장치.
  15. 청구항 15은(는) 설정등록료 납부시 포기되었습니다.
    제12항에 있어서,
    상기 제어 수단은 상기 m개의 SD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라 가장 빨리 출력되는 출력 시간 정보를 보유하는 SD 화상 프레임이 기억된 제1 SD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하는 HD용 기억 영역을 검출하고,
    검출한 상기 HD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하고, 또한 빈 영역인 제2 SD용 기억 영역을 확보하는, 복호 장치.
  16. 청구항 16은(는) 설정등록료 납부시 포기되었습니다.
    제11항에 있어서,
    소정의 주파수로 변조되어 송신된 HD 화상 스트림 데이터 또는 m개의 SD 화상 스트림 데이터가 다중화된 다중화 SD 화상 스트림 데이터를 수신하는 수신 수단을 추가로 구비하고,
    상기 입력 수단은 상기 수신 수단에 의해 수신된 상기 HD 화상 스트림 데이터 또는 m개의 다중화 SD 화상 스트림 데이터를 입력하는, 복호 장치.
  17. 청구항 17은(는) 설정등록료 납부시 포기되었습니다.
    제16항에 있어서,
    상기 수신 수단에서 수신한 HD 화상 스트림 데이터 또는 다중화 SD 화상 스트림 데이터를 기록 매체에 기록하는 기록 수단을 구비하는, 복호 장치.
  18. 청구항 18은(는) 설정등록료 납부시 포기되었습니다.
    제17항에 있어서,
    상기 기록 수단에 의해 상기 기록 매체에 기록된 HD 화상 스트림 데이터 또는 다중화 SD 화상 스트림 데이터를 재생하는 재생 수단을 구비하고,
    상기 입력 수단은 상기 재생 수단에 의해 재생된 HD 화상 스트림 데이터 또는 다중화 SD 화상 스트림 데이터를 더 입력하는, 복호 장치.
  19. 청구항 19은(는) 설정등록료 납부시 포기되었습니다.
    제18항에 있어서,
    HD 화상 스트림 데이터, 또는 m개의 SD 화상 스트림 데이터가 다중화된 다중화 SD 화상 스트림 데이터를 기록한 기록 매체를 장착하는 장착 수단을 구비하고,
    상기 재생 수단은 상기 장착 수단에 장착된 상기 기록 매체에 기록되어 있는 HD 화상 스트림 데이터 또는 상기 다중화 SD 화상 스트림 데이터를 재생하는, 복호 장치.
  20. HD 방식으로 부호화된 HD 화상 스트림 데이터 또는 SD 방식으로 부호화된 m(m은 자연수)개의 SD 화상 스트림 데이터가 다중화된 다중화 SD 화상 스트림 데이터를 입력하는 입력 스텝과,
    상기 입력 스텝에 의해 상기 다중화 SD 화상 스트림 데이터가 입력된 경우 다중화 SD 화상 스트림 데이터를 m개의 화상 스트림 데이터로 분리하는 분리 스텝과,
    상기 입력 스텝에 의해 입력된 HD 화상 스트림 데이터를 HD 화상 프레임으로 복호하고, 상기 분리 스텝에 의해 분리된 m개의 SD 화상 스트림 데이터를 시분할로 SD 화상 프레임으로 복호하는 복호 스텝과,
    상기 복호 스텝에 의해 복호된 상기 HD 화상 프레임을 기억하고, 상기 복호 스텝에 의해 복호된 상기 SD 화상 프레임을 기억하는 화상 프레임 기억 스텝과,
    상기 HD 화상 스트림 데이터를 복호할 때는 복호된 HD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하는 동시에 상기 m개의 SD 화상 스트림 데이터를 복호할 때는 복호된 각각의 스트림에 대응하는 SD 화상 프레임을 소정 프레임수씩 기억할 수 있는 영역을 확보하도록 화상 프레임 기억 수단을 제어하는 스텝과,
    상기 화상 프레임 기억 수단에 HD 화상 프레임 또는 상기 SD용 기억 영역에 m개의 상기 SD 화상 프레임을 기입하는 화상 프레임 기입 스텝과,
    상기 화상 프레임 기억 수단에 기입된 상기 HD 화상 프레임이 보유하는 출력 시간 정보에 따라 상기 HD 화상 프레임을 판독하고, 상기 SD용 기억 영역에 기입된 SD 화상 프레임이 보유하는 출력 시간 정보에 따라 상기 SD 화상 프레임을 판독하는 화상 프레임 판독 스텝과,
    상기 화상 프레임 판독 스텝에 의해 판독된 상기 HD 화상 프레임을 출력하고, 상기 화상 프레임 판독 스텝에 의해 판독된 상기 SD 화상 프레임을 동일 화면 상에 배치되도록 출력하는 출력 스텝
    을 포함하는 복호 방법.
  21. 제20항에 있어서,
    상기 화상 프레임 기억 수단의 상기 HD 화상 프레임의 기억 영역의 사용 상황을 나타내는 HD용 기억 영역 정보와 상기 화상 프레임 기억 수단의 상기 SD 화상 프레임의 기억 영역의 사용 상황을 나타내는 SD용 기억 영역 정보를 관리하는 관리 테이블을 관리 테이블 기억 수단에 기억하는 관리 테이블 기억 스텝을 더 포함하며,
    상기 제어 스텝은 상기 HD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라 상기 화상 프레임 기억 수단의 HD용 기억 영역을 확보하도록 제어하는, 복호 방법.
  22. 제21항에 있어서,
    상기 제어 스텝은 상기 m개의 SD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라, 입력된 상기 m개의 SD 화상 스트림 데이터가 보유하는 상기 복호 스텝에 의한 복호 후의 SD 화상 프레임의 출력 시간 정보와, 동일한 출력 시간 정보를 보유하는 SD 화상 프레임이 기억된 제1 SD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하는, HD용 기억 영역을 검출하고,
    검출한 상기 HD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하고, 또한 빈 영역인 제2 SD용 기억 영역을 확보하는, 복호 방법.
  23. 제21항에 있어서,
    상기 제어 스텝은 상기 m개의 SD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라 빈 영역인 상기 HD용 기억 영역을 검출하고,
    검출한 상기 HD용 기억 영역과 기억 영역을 공유하는 상기 SD용 기억 영역을 확보하는, 복호 방법.
  24. 제21항에 있어서,
    상기 제어 스텝은 상기 m개의 SD 화상 스트림 데이터가 입력된 경우 상기 관리 테이블 기억 수단에 의해 기억되어 있는 관리 테이블로 관리되는 상기 HD용 기억 영역 정보 및 상기 SD용 기억 영역 정보에 따라 가장 빨리 출력되는 출력 시간 정보를 보유하는 SD 화상 프레임이 기억된 제1 SD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하는 HD용 기억 영역을 검출하고,
    검출한 상기 HD용 기억 영역과 상기 화상 프레임 기억 수단의 기억 영역을 공유하고, 또한 빈 영역인 제2 SD용 기억 영역을 확보하는, 복호 방법.
  25. 제20항에 있어서,
    소정의 주파수로 변조되어 송신된 HD 화상 스트림 데이터 또는 m개의 SD 화상 스트림 데이터가 다중화된 다중화 SD 화상 스트림 데이터를 수신하는 수신 스텝을 포함하며,
    상기 입력 스텝은 상기 수신 스텝에 의해 수신된 상기 HD 화상 스트림 데이터 또는 m개의 다중화 SD 화상 스트림 데이터를 입력하는, 복호 방법.
  26. 제25항에 있어서,
    상기 수신 스텝에서 수신한 HD 화상 스트림 데이터 또는 다중화 SD 화상 스트림 데이터를 기록 매체에 기록하는 기록 스텝을 포함하는, 복호 방법.
  27. 제26항에 있어서,
    상기 기록 스텝에 의해 상기 기록 매체에 기록된 HD 화상 스트림 데이터 또는 다중화 SD 화상 스트림 데이터를 재생하는 재생 스텝을 포함하며,
    상기 입력 스텝은 상기 재생 스텝에 의해 재생된 HD 화상 스트림 데이터 또는 다중화 SD 화상 스트림 데이터를 더 입력하는, 복호 방법.
  28. 제27항에 있어서,
    HD 화상 스트림 데이터, 또는 m개의 SD 화상 스트림 데이터가 다중화된 다중화 SD 화상 스트림 데이터를 기록한 기록 매체를 장착하는 장착 스텝을 포함하며,
    상기 재생 스텝은 상기 장착 스텝에서 장착된 상기 기록 매체에 기록되어 있는 HD 화상 스트림 데이터 또는 상기 다중화 SD 화상 스트림 데이터를 재생하는, 복호 방법.
KR1020047002301A 2002-06-20 2003-06-11 복호 장치 및 복호 방법 KR100968842B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2002-00180410 2002-06-20
JP2002180410 2002-06-20
PCT/JP2003/007439 WO2004002141A1 (ja) 2002-06-20 2003-06-11 復号装置及び復号方法

Publications (2)

Publication Number Publication Date
KR20050010747A KR20050010747A (ko) 2005-01-28
KR100968842B1 true KR100968842B1 (ko) 2010-07-28

Family

ID=29996605

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020047002301A KR100968842B1 (ko) 2002-06-20 2003-06-11 복호 장치 및 복호 방법

Country Status (7)

Country Link
US (1) US8224148B2 (ko)
EP (1) EP1515550A4 (ko)
JP (1) JP4403404B2 (ko)
KR (1) KR100968842B1 (ko)
CN (1) CN1269352C (ko)
TW (1) TWI242371B (ko)
WO (1) WO2004002141A1 (ko)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101895744B (zh) * 2006-01-12 2013-03-20 Lg电子株式会社 处理多视图视频
CN101371571B (zh) * 2006-01-12 2013-06-19 Lg电子株式会社 处理多视图视频
KR101276847B1 (ko) 2006-01-12 2013-06-18 엘지전자 주식회사 다시점 비디오의 처리
EP1977593A4 (en) 2006-01-12 2010-06-16 Lg Electronics Inc PROCESSING MORE VIEW VIDEO
EP2052546A4 (en) 2006-07-12 2010-03-03 Lg Electronics Inc METHOD AND DEVICE FOR SIGNAL PROCESSING
CN101242530B (zh) * 2007-02-08 2011-06-01 华为技术有限公司 运动估计方法、基于运动估计的多视编解码方法及装置
KR101396975B1 (ko) * 2007-07-23 2014-05-21 엘지전자 주식회사 디지털 티브이의 원격 제어 시스템 및 방법
CN102186038A (zh) * 2011-05-17 2011-09-14 浪潮(山东)电子信息有限公司 一种在数字电视屏幕上同步播放多视角画面的方法
CN103686314B (zh) * 2012-09-04 2017-05-24 深圳中兴力维技术有限公司 采用高清视频通道传输多路标清视频的解复用装置及方法
US9854258B2 (en) * 2014-01-06 2017-12-26 Disney Enterprises, Inc. Video quality through compression-aware graphics layout
US20180070083A1 (en) * 2015-03-24 2018-03-08 Sony Corporation Transmission device, transmission method, reception device, and reception method
CN114093375A (zh) * 2021-03-02 2022-02-25 北京沃东天骏信息技术有限公司 解码方法、装置和计算机可读存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08205161A (ja) * 1994-10-11 1996-08-09 Hitachi Ltd デジタル高精細および／またはデジタル標準精細テレビジョン信号を復号化するためのデジタルビデオデコーダ

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0465110A3 (en) * 1990-06-27 1993-08-11 Matsushita Electric Industrial Co., Ltd. Apparatus for record and playback of a digital signal
JPH07226022A (ja) * 1994-02-15 1995-08-22 Sony Corp ディジタル記録再生装置
JPH09247667A (ja) 1996-03-05 1997-09-19 Sharp Corp 動画像符号化装置および動画像復号化装置
JP3791114B2 (ja) * 1997-04-30 2006-06-28 ソニー株式会社 信号再生装置及び方法
US6341342B1 (en) * 1997-11-04 2002-01-22 Compaq Information Technologies Group, L.P. Method and apparatus for zeroing a transfer buffer memory as a background task
JP3882295B2 (ja) * 1997-11-10 2007-02-14 株式会社日立製作所 デジタル放送受信装置及び映像信号のミュート方法
JPH11252550A (ja) * 1998-03-02 1999-09-17 Sony Corp デイジタル信号符号化装置、デイジタル信号復号化装置、デイジタル信号伝送装置及び方法
KR100511250B1 (ko) * 1998-04-09 2005-11-03 엘지전자 주식회사 디지탈오디오/비디오(a/v)시스템
US7071995B1 (en) * 1999-05-28 2006-07-04 Thomson Licensing Adaptive video image information processing system
JP2001318745A (ja) * 2000-05-11 2001-11-16 Sony Corp データ処理装置およびデータ処理方法、並びに記録媒体
JP3752968B2 (ja) 2000-06-08 2006-03-08 日本電気株式会社 データ記録方法、装置、およびプログラムを記録した記録媒体
JP3639517B2 (ja) * 2000-10-04 2005-04-20 三洋電機株式会社 動画像復号化装置および動画像復号化方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08205161A (ja) * 1994-10-11 1996-08-09 Hitachi Ltd デジタル高精細および／またはデジタル標準精細テレビジョン信号を復号化するためのデジタルビデオデコーダ

Also Published As

Publication number Publication date
CN1545805A (zh) 2004-11-10
JPWO2004002141A1 (ja) 2005-10-27
US8224148B2 (en) 2012-07-17
EP1515550A1 (en) 2005-03-16
TW200409542A (en) 2004-06-01
JP4403404B2 (ja) 2010-01-27
KR20050010747A (ko) 2005-01-28
EP1515550A4 (en) 2010-06-02
TWI242371B (en) 2005-10-21
WO2004002141A1 (ja) 2003-12-31
CN1269352C (zh) 2006-08-09
US20040218893A1 (en) 2004-11-04

Similar Documents

Publication Publication Date Title
KR100997166B1 (ko) 디코딩 장치 및 디코딩 방법
JP3617573B2 (ja) フォーマット変換回路並びに該フォーマット変換回路を備えたテレビジョン受像機
US7639924B2 (en) Audio/video decoding process and device, and video driver circuit and decoder box incorporating the same
CN101018064A (zh) 解码器装置和利用它的接收机
KR100968842B1 (ko) 복호 장치 및 복호 방법
US20010008427A1 (en) Apparatus and method for supporting picture-in-picture type time shifting
US7865021B2 (en) Compressed stream decoding apparatus and method
JP4257478B2 (ja) 記録再生装置
US7446819B2 (en) Apparatus and method for processing video signals
JP4366038B2 (ja) テレビジョン放送処理装置及びテレビジョン放送処理装置の制御方法
JP2004193673A (ja) 受信装置及び方法、再生装置及び方法、並びに記録再生装置及び方法
JP4366912B2 (ja) 復号装置及び復号方法
JP2005184788A (ja) 信号処理装置
JP2003143602A (ja) 復号装置，復号方法，復号プログラム，および復号プログラム記録媒体
JP4288442B2 (ja) 記録再生装置および映像処理方法
JP3184175B2 (ja) 復号化装置
JP2010213362A (ja) 垂直フォーマットコンバータのメモリ管理のための方法及びシステム
JP2008153955A (ja) 映像記録再生装置、その特殊再生方法
JP2000032475A (ja) 動画像再生装置
JP2016096524A (ja) 電子機器及び信号処理方法
JPH11346349A (ja) 番組伝送方法、番組伝送装置、番組受信装置および媒体
JP2011211615A (ja) チューナーの切替装置、チューナーの切替システムおよびチューナーの切替方法
JP2001086495A (ja) 符号化ディジタル信号復号装置及びそれを内臓した受信機、テレビ並びに記録再生装置
JP2005167649A (ja) 連続した複数のデータの記憶出力装置及び方法
JPH11205798A (ja) 画像復号化装置及び多重化装置

Legal Events

Date Code Title Description
PA0105 International application

Patent event date: 20040216

Patent event code: PA01051R01D

Comment text: International Patent Application

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20080414

Comment text: Request for Examination of Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20091127

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20100531

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20100701

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20100701

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
LAPS Lapse due to unpaid annual fee
PC1903 Unpaid annual fee