[go: up one dir, main page]

KR20110116079A - 멀티 채널 신호의 부호화/복호화 장치 및 방법 - Google Patents

멀티 채널 신호의 부호화/복호화 장치 및 방법 Download PDF

Info

Publication number
KR20110116079A
KR20110116079A KR1020100035573A KR20100035573A KR20110116079A KR 20110116079 A KR20110116079 A KR 20110116079A KR 1020100035573 A KR1020100035573 A KR 1020100035573A KR 20100035573 A KR20100035573 A KR 20100035573A KR 20110116079 A KR20110116079 A KR 20110116079A
Authority
KR
South Korea
Prior art keywords
signal
parameters
phase
channel signal
encoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
KR1020100035573A
Other languages
English (en)
Inventor
심환
오은미
김미영
안톤 브이. 포로브
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020100035573A priority Critical patent/KR20110116079A/ko
Priority to US13/088,720 priority patent/US8824577B2/en
Publication of KR20110116079A publication Critical patent/KR20110116079A/ko
Ceased legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/08—Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters
    • G10L19/12—Determination or coding of the excitation function; Determination or coding of the long-term prediction parameters the excitation function being a code excitation, e.g. in code excited linear prediction [CELP] vocoders
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/03—Application of parametric coding in stereophonic audio systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

멀티 채널 신호의 부호화/복호화 장치가 개시된다. 멀티 채널 신호의 부호화 장치는 멀티 채널 신호의 특성을 고려하여 멀티 채널 신호의 위상을 변형시킨다. 위상이 변형된 멀티 채널 신호에서 추출된 다운믹스 신호와 잔여 신호를 이용하여 멀티 채널 신호에 대한 부호화된 비트스트림을 생성한다.

Description

멀티 채널 신호의 부호화/복호화 장치 및 방법{APPARATUS FOR ENCODING/DECODING MULTICHANNEL SIGNAL AND METHOD THEREOF}
본 발명의 실시예들은 멀티 채널 신호의 부호화/복호화 장치 및 방법에 관한 것이다.
스테레오 신호를 부호화하는데 이용되는 방법으로 파라메트릭 스테레오(PS, Parametric Stereo) 기술이 있다. 파라메트릭 스테레오 기술은 입력되는 스테레오 신호를 다운믹싱하여 모노 신호를 생성하고, 스테레오 신호에 대한 부가 정보(side information)를 나타내는 스테레오 파라미터를 추출하고, 생성된 모노 신호와 추출된 스테레오 파라미터를 부호화하여 스테레오 신호를 부호화한다.
이 경우 이용되는 스테레오 파라미터에는, 스테레오 신호에 포함된 적어도 두 채널 신호의 에너지 레벨에 따른 강도 차를 나타내는 IID(Inter-channel Intensity Difference) 혹은 CLD(channel level differences), 스테레오 신호에 포함된 적어도 두 채널 신호의 파형의 유사성에 따른 두 채널 신호 사이의 상관도를 나타내는 ICC(Inter-channel Coherence 혹은 Inter-channel Correlation), 스테레오 신호에 포함된 적어도 두 채널 신호 사이의 위상 차를 나타내는 IPD(Inter-channel Phase Difference), 스테레오 신호에 포함된 적어도 두 채널 신호 사이의 위상 차가 모노 신호를 기준으로 두 채널 사이에 어떻게 분포하는지를 나타내는 OPD(Overall Phase Difference) 등이 있다.
멀티 채널 신호로부터 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 추출하는 파라미터 추출부, 복수의 파라미터 및 복수 채널 각각마다 계산된 위상각을 이용하여 멀티 채널 신호의 위상을 변형시키는 위상 변형부, 복수의 파라미터를 이용하여 위상이 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호(residual signal)를 추출하는 신호 추출부 및 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 부호화하여 비트스트림을 생성하는 비트스트림 생성부를 포함하는 부호화 장치가 제공된다.
일측에 따르면, 위상 변형부는 멀티 채널 신호 각각의 위상이 서로 동일해지도록 멀티 채널 신호의 위상을 변형할 수 있다.
다른 측면에서, 위상 변형부는 채널간 위상차 정보가 미리 설정된 각도 이하의 값을 갖도록 미리 결정된 값만큼 멀티 채널 신호의 위상을 변형시킬 수 있다.
또 다른 측면에서, 위상 변형부는 위상각의 변형이 최소화 되도록 멀티 채널 신호의 위상을 변형시킬 수 있다.
멀티 채널 신호로부터 멀티 채널 신호를 구성하는 복수 채널 간의 공간적 특성 관계를 나타내는 복수의 파라미터를 추출하는 파라미터 추출부, 복수의 파라미터를 이용하여 멀티 채널 신호의 크기를 변형시키는 크기 변형부, 복수의 파라미터를 이용하여 크기가 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 신호 추출부 및 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 부호화하여 비트스트림을 생성하는 비트스트림 생성부를 포함하는 부호화 장치가 제공된다.
멀티 채널 신호의 다운믹스 신호, 잔여 신호 및 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 복원하는 복호화부, 복원된 파라미터를 이용하여 다운믹스 신호 및 잔여 신호를 멀티 채널 신호로 업믹싱하는 업믹싱부 및 복원된 파라미터를 이용하여 업믹싱된 멀티 채널 신호의 위상 및 크기 중 적어도 하나를 복원하는 복원부를 포함하는 복호화 장치가 제공된다.
부호화 장치의 파라미터 추출부가 멀티 채널 신호로부터 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 추출하는 단계, 부호화 장치의 위상 변형부가 복수의 파라미터 및 복수 채널 각각마다 계산된 위상각을 이용하여 멀티 채널 신호의 위상을 변형시키는 단계, 부호화 장치의 신호 추출부가 복수의 파라미터를 이용하여 위상이 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 단계 및 부호화 장치의 비트스트림 생성부가 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 부호화하여 비트스트림을 생성하는 단계를 포함하는 부호화 방법이 제공된다.
부호화 장치의 파라미터 추출부가 멀티 채널 신호로부터 멀티 채널 신호를 구성하는 복수 채널 간의 공간적 특성 관계를 나타내는 복수의 파라미터를 추출하는 단계, 부호화 장치의 크기 변형부가 복수의 파라미터를 이용하여 멀티 채널 신호의 크기를 변형시키는 단계, 부호화 장치의 신호 추출부가 복수의 파라미터를 이용하여 크기가 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 단계 및 부호화 장치의 비트스트림 생성부가 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 부호화하여 비트스트림을 생성하는 단계를 포함하는 부호화 방법이 제공된다.
복호화 장치의 복호화부가 멀티 채널 신호의 다운믹스 신호, 잔여 신호 및 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 복원하는 단계, 복호화 장치의 업믹싱부가 복원된 파라미터를 이용하여 다운믹스 신호 및 잔여 신호를 멀티 채널 신호로 업믹싱하는 단계 및 복호화 장치의 복원부가 복원된 파라미터를 이용하여 업믹싱된 멀티 채널 신호의 위상 및 크기 중 적어도 하나를 복원하는 단계를 포함하는 복호화 방법이 제공된다.
멀티 채널 신호의 위상 또는 크기를 변형시킴으로써, 이득 발산을 막아 이득 발산에 따라 잔여 신호의 값이 변하지 않도록 함으로써, 다운믹스에서 발생하는 손실(loss)을 보상할 수 있다.
도 1은 본 발명의 일실시예에 따른 부호화 장치의 내부 구성을 설명하기 위한 블록도이다.
도 2는 본 발명의 일실시예에 있어서, 스테레오 신호로서의 멀티 채널 신호의 위상 변형을 설명하기 위한 개념도이다.
도 3은 본 발명의 일실시예에 있어서, 멀티 채널 신호를 부호화하는 방법을 도시한 흐름도이다.
도 4는 본 발명의 다른 실시예에 따른 부호화 장치의 내부 구성을 설명하기 위한 블록도이다.
도 5는 본 발명의 일실시예에 있어서, 스테레오 신호로서의 멀티 채널 신호의 크기 변형을 설명하기 위한 개념도이다.
도 6은 본 발명의 다른 실시예에 있어서, 멀티 채널 신호를 부호화하는 방법을 도시한 흐름도이다.
도 7은 본 발명의 일실시예에 있어서, 복호화 장치의 내부 구성을 설명하기 위한 블록도이다.
도 8은 본 발명의 일실시예에 있어서, 복호화 방법을 도시한 흐름도이다.
이하에서, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 그러나, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
도 1은 본 발명의 일실시예에 따른 부호화 장치의 내부 구성을 설명하기 위한 블록도이다. 본 실시예에 따른 부호화 장치(100)는 멀티 채널 신호를 부호화하기 위해 도 1에 도시된 바와 같이, 파라미터 추출부(110), 위상 변형부(120), 신호 추출부(130) 및 비트스트림 생성부(140)를 포함한다. 이하, 각 구성 요소 별로 그 기능을 상술하기로 한다.
여기서, 멀티 채널 신호는 복수의 채널들의 신호를 의미하며, 본 명세서에서는 멀티 채널 신호에 포함된 복수의 채널들 각각을 채널 신호라고 하기로 한다.
파라미터 추출부(110)는 멀티 채널 신호로부터 상기 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 추출한다. 여기서, 복수의 파라미터는 복수 채널간의 에너지 차 파라미터(CLD: Channel Level Differences), 복수 채널 간의 위상 차 파라미터(IPD: Inter-channel Phase Difference) 및 복수 채널 간의 유사도 파라미터(ICC: Inter Channel Coherence) 중 둘 이상을 포함할 수 있다. 상기 파라미터에는 다운믹스와 각 채널의 위상 차 파라미터(OPD: Overall Phase Difference) 및 상응하는 공간 파라미터를 포함할 수 있다.
위상 변형부(120)는 복수의 파라미터 및 복수 채널 각각마다 계산된 위상각을 이용하여 멀티 채널 신호의 위상을 변형시킨다. 이때, 일실시예로, 위상 변형부(120)는 멀티 채널 신호 각각의 위상이 서로 동일해지도록 멀티 채널 신호의 위상을 변형시킬 수 있다. 다른 실시예로, 위상 변형부(120)는 채널간 위상차 정보가 미리 설정된 각도 이하의 값을 갖도록 미리 결정된 값만큼 상기 멀티 채널 신호의 위상을 변형시킬 수 있다. 일례로, 미리 설정된 각도는 90도일 수 있다. 또 다른 실시예로, 위상 변형부(120)는 위상각의 변형이 최소화 되도록 멀티 채널 신호의 위상을 변형시킬 수 있다. 각각의 실시예에 따른 위상 변형부(120)에 대해서는 이후 더욱 자세히 설명한다.
신호 추출부(130)는 복수의 파라미터를 이용하여 위상이 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호(residual signal)를 추출한다. 여기서 다운믹스 신호는 두 채널 이상의 멀티 채널 신호로부터 생성된 한 채널의 신호를 포함할 수 있다. 이때, 두 채널 이상의 멀티 채널 신호로부터 다운믹스 신호를 생성하는 것을 다운믹싱이라 하고, 이러한 다운믹싱을 통하여 부호화 과정에 생성되는 비트스트림의 비트량을 줄일 수 있다. 즉, 다운믹스 신호는 멀티 채널 신호를 대표하는 신호일 수 있다. 이때, 잔여 신호는, 원신호를 다운믹스 신호와 복수의 파라미터로 부호화하는 과정 중에 상실되는 정보를 이용하여 생성될 수 있다. 파라메트릭 표현으로 발생하는 에러신호인 잔여 신호를 부호화하여 높은 비트레이트에서는 잔여 신호를 통해 고음질을 제공할 수 있다.
비트스트림 생성부(140)는 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 부호화하여 비트스트림을 생성한다. 즉, 부호화 장치(100)는 멀티 채널 신호 각각을 부호화하지 않고, 복수의 파라미터를 이용하여 추출된 다운믹스 신호와 잔여 신호만을 부호화하여 전송할 수 있다. 일례로, 멀티 채널 신호가 음성(voice) 신호인 경우, 비트스트림 생성부(140)는 다운믹스 신호 및 잔여 신호를 CELP(Code Excited Linear Prediction) 방식으로 부호화하여 비트스트림을 생성할 수 있다. 또한, 다른 일례로서, 멀티 채널 신호가 음악(music) 신호인 경우, 비트스트림 생성부(140)는 기존의 MPEG-2/4 AAC나 mp3 등의 방법을 이용하여 다운믹스 신호 및 잔여 신호를 부호화하여 비트스트림을 생성할 수 있다. 상기 잔여 신호는 선택에 따라 전송하지 않을 수도 있다.
다른 실시예로, 부호화 장치(100)는 위상 변형부(120)를 별도로 포함하지 않고, 신호 추출부(130)에서 위상 변형과 다운믹스 신호 및 잔여 신호의 추출을 한번에 처리할 수도 있다. 즉, 다른 실시예에 따른 부호화 장치(100)는 멀티 채널 신호로부터 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 추출하는 파라미터 추출부(110), 복수의 파라미터 및 복수 채널 각각마다 계산된 위상각을 이용하여 멀티 채널 신호의 위상을 변형시키고, 위상이 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 신호 추출부(130) 및 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 부호화하여 비트스트림을 생성하는 비트스트림 생성부(140)만을 포함할 수도 있다.
도 2는 본 발명의 일실시예에 있어서, 스테레오 신호로서의 멀티 채널 신호의 위상 변형을 설명하기 위한 개념도이다.
도 2에서는 설명의 편의상 부호화 장치(100)에 입력되는 멀티 채널 신호가 좌채널 신호 및 우채널 신호를 포함하는 스테레오 신호인 것으로 가정한다. 그러나, 본 실시예에 따른 부호화 장치(100)가 스테레오 신호에 한정되지 않고 멀티 채널 신호의 부호화에도 이용될 수 있음은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명하다고 할 수 있다.
도 2에서는 좌채널 신호 'L', 우채널 신호 'R', 다운믹스 신호 'M' 및 잔여 신호 'S'간의 관계를 도시하고 있다. 이러한 스테레오 신호의 다운믹스나 업믹스 시, 좌채널 신호 'L' 및 우채널 신호 'R'가 역위상(out-of-phase) 또는 역위상에 근접(near out-of-phase)일 때, 'L'+'R'의 크기가 감소하고 때에 따라서는 0에 가까워질 수 있다. 이에 따르는 에너지 손실을 보상하기 위해서, 다운믹스 신호 'M'의 크기는 일반적으로 'L'과 'R'의 합에 'L'과 'R'의 각 에너지의 합을 반영하도록 계산된 이득(gain)을 곱해서 설정하게 된다. 이러한 이득은 역위상이나 역위상에 근접할수록 커지게 되고, 추출된 복수의 파라미터의 관계에 따라 발산이 일어나게 될 수 있으며, 구해진 이득은 잔여 신호 'S'에도 곱해지게 되므로 잔여신호의 크기가 커지게 된다. 따라서, 이러한 이득을 제한(gain limiting)할 필요가 있다. 그러나 이러한 이득 제한은 다운믹스 신호 'M' 뿐만 아니라 잔여 신호 'S'에도 영향을 주기 때문에 본 실시예에 따른 부호화 장치(100)는 스테레오 신호의 위상을 변형시켜 위상차 정보인 IPD의 값을 조절함으로써, 이득의 값을 조절할 수 있다. 즉, 도 2에서는 좌채널 신호 'L'의 위상을 변형시킨 위상 변형된 좌채널 신호 'L´'와 우채널 신호 'R'의 위상을 변형시킨 위상 변형된 우채널 신호 'R´'를 나타내고 있다. 이와 같이 위상 변형된 좌채널 신호 'L´'와 위상 변형된 우채널 신호 'R´'를 이용하여 다운믹스나 업믹스를 수행하는 경우, 도 2에 도시된 바와 같이, 역위상이 발생하지 않기 때문에 이득 발산을 막을 수 있다. 또한, 이득 발산을 막음으로써, 이득 발산에 따라 잔여 신호 'S'의 값이 변하지 않도록 함으로써, 다운믹스에서 발생하는 손실(loss)을 보상할 수 있다.
도 3은 본 발명의 일실시예에 있어서, 멀티 채널 신호를 부호화하는 방법을 도시한 흐름도이다. 본 실시예에 따른 부호화 방법은 도 1을 통해 설명한 부호화 장치(100)를 통해 수행될 수 있다. 도 3에서는 부호화 장치(100)를 통해 각각의 단계가 수행되는 과정을 설명함으로써, 부호화 방법을 설명한다.
단계(310)에서 부호화 장치(100)는 멀티 채널 신호로부터 상기 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 추출한다. 여기서, 복수의 파라미터는 복수 채널간의 에너지 차 파라미터, 복수 채널 간의 위상 차 파라미터 및 복수 채널 간의 유사도 파라미터 중 둘 이상을 포함할 수 있다. 이러한 단계(310)는 부호화 장치(100)의 파라미터 추출부(110)에서 수행될 수 있다.
단계(320)에서 부호화 장치(100)는 복수의 파라미터 및 복수 채널 각각마다 계산된 위상각을 이용하여 멀티 채널 신호의 위상을 변형시킨다. 이때, 일실시예로, 부호화 장치(100)는 멀티 채널 신호 각각의 위상이 서로 동일해지도록 멀티 채널 신호의 위상을 변형시킬 수 있다. 다른 실시예로, 부호화 장치(100)는 채널간 위상차 정보가 미리 설정된 각도 이하의 값을 갖도록 미리 결정된 값만큼 상기 멀티 채널 신호의 위상을 변형시킬 수 있다. 일례로, 미리 설정된 각도는 90도일 수 있다. 또 다른 실시예로, 부호화 장치(100)는 위상각의 변형이 최소화 되도록 멀티 채널 신호의 위상을 변형시킬 수 있다. 각각의 실시예에 따른 위상 변형에 대해서는 이후 더욱 자세히 설명한다. 이때, 단계(320)는 부호화 장치(100)의 위상 변형부(120)에서 수행될 수 있다.
단계(330)에서 부호화 장치(100)는 복수의 파라미터를 이용하여 위상이 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출한다. 여기서 다운믹스 신호는 두 채널 이상의 멀티 채널 신호로부터 생성된 한 채널의 신호를 포함할 수 있다. 이때, 두 채널 이상의 멀티 채널 신호로부터 다운믹스 신호를 생성하는 것을 다운믹싱이라 하고, 이러한 다운믹싱을 통하여 부호화 과정에 생성되는 비트스트림의 비트량을 줄일 수 있다. 즉, 다운믹스 신호는 멀티 채널 신호를 대표하는 신호일 수 있다. 이때, 잔여 신호는, 원신호를 다운믹스 신호와 복수의 파라미터로 부호화하는 과정 중에 상실되는 정보를 이용하여 생성될 수 있다. 파라메트릭 표현으로 발생하는 에러신호인 잔여 신호를 부호화하여 높은 비트레이트에서는 잔여 신호를 통해 고음질을 제공할 수 있다. 이러한 단계(330)는 부호화 장치(100)의 비트스트림 생성부(140)에서 수행될 수 있다.
단계(340)에서 부호화 장치(100)는 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 부호화하여 비트스트림을 생성한다. 즉, 부호화 장치(100)는 멀티 채널 신호 각각을 부호화하지 않고, 복수의 파라미터를 이용하여 추출된 다운믹스 신호와 잔여 신호만을 부호화하여 전송할 수 있다. 일례로, 멀티 채널 신호가 음성(voice) 신호인 경우, 부호화 장치(100)는 다운믹스 신호 및 잔여 신호를 CELP(Code Excited Linear Prediction) 방식으로 부호화하여 비트스트림을 생성할 수 있다. 또한, 다른 일례로서, 멀티 채널 신호가 음악(music) 신호인 경우, 부호화 장치(100)는 기존의 MPEG-2/4 AAC나 mp3 등의 방식을 이용하여 다운믹스 신호 및 잔여 신호를 부호화하여 비트스트림을 생성할 수 있다. 이러한 단계(340)은 부호화 장치(100)의 비트스트림 생성부(140)를 통해 수행될 수 있다. 상기 잔여 신호는 선택에 따라 전송하지 않을 수도 있다.
다른 실시예로, 부호화 방법은 위상을 변형시키는 단계(320)를 별도로 포함하지 않고, 신호를 추출하는 단계(330)에서 위상 변형과 다운믹스 신호 및 잔여 신호의 추출을 한번에 처리할 수도 있다. 즉, 다른 실시예에 따른 부호화 방법은 멀티 채널 신호로부터 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 추출하는 단계(310), 복수의 파라미터 및 복수 채널 각각마다 계산된 위상각을 이용하여 멀티 채널 신호의 위상을 변형시키고, 위상이 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 단계(미도시) 및 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 부호화하여 비트스트림을 생성하는 단계(340)를 포함할 수도 있다.
도 1 내지 도 3에서는 멀티 채널 신호의 위상을 변형시켜 부호화하는 부호화 장치 및 방법을 설명하였다. 이후 도 4 내지 도 6에서는 멀티 채널 신호의 크기를 변형시켜 부호화하는 부호화 장치 및 방법에 대해 설명한다.
도 4는 본 발명의 다른 실시예에 따른 부호화 장치의 내부 구성을 설명하기 위한 블록도이다. 본 실시예에 따른 부호화 장치(400)는 도 4에 도시된 바와 같이, 파라미터 추출부(410), 크기 변형부(420), 신호 추출부(430) 및 비트스트림 생성부(440)를 포함한다.
여기서, 멀티 채널 신호는 복수의 채널들의 신호를 의미하며, 본 명세서에서는 멀티 채널 신호에 포함된 복수의 채널들 각각을 채널 신호라고 하기로 한다.
파라미터 추출부(410)는 멀티 채널 신호로부터 상기 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 추출한다. 여기서, 복수의 파라미터는 복수 채널간의 에너지 차 파라미터, 복수 채널 간의 위상 차 파라미터 및 복수 채널 간의 유사도 파라미터 중 둘 이상을 포함할 수 있다.
크기 변형부(420)는 복수의 파라미터를 이용하여 상기 멀티 채널 신호의 크기를 변형시킨다. 이때, 크기 변형부(420)는 멀티 채널 신호 중 적어도 하나의 채널 신호의 크기를 변형시킬 수 있다. 이때, 크기를 변형시키기 위한 값은 추출된 복수의 파라미터에 따라 결정될 수 있다. 예를 들어, 크기 변형부(420)는 이득이 임의의 최대값을 넘지 않도록 멀티 채널 신호 중 하나의 채널 신호의 크기를 변형시킬 수 있다.
신호 추출부(430)는 복수의 파라미터를 이용하여 크기가 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출한다. 여기서 다운믹스 신호는 두 채널 이상의 멀티 채널 신호로부터 생성된 한 채널의 신호를 포함할 수 있다. 이때, 두 채널 이상의 멀티 채널 신호로부터 다운믹스 신호를 생성하는 것을 다운믹싱이라 하고, 이러한 다운믹싱을 통하여 부호화 과정에 생성되는 비트스트림의 비트량을 줄일 수 있다. 즉, 다운믹스 신호는 멀티 채널 신호를 대표하는 신호일 수 있다. 이때, 잔여 신호는, 원신호를 다운믹스 신호와 복수의 파라미터로 부호화하는 과정 중에 상실되는 정보를 이용하여 생성될 수 있다. 파라메트릭 표현으로 발생하는 에러신호인 잔여 신호를 부호화하여 높은 비트레이트에서는 잔여 신호를 통해 고음질을 제공할 수 있다.
비트스트림 생성부(440)는 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 부호화하여 비트스트림을 생성한다. 즉, 부호화 장치(400)는 멀티 채널 신호 각각을 부호화하지 않고, 복수의 파라미터를 이용하여 추출된 다운믹스 신호와 잔여 신호만을 부호화하여 전송할 수 있다. 일례로, 멀티 채널 신호가 음성(voice) 신호인 경우, 비트스트림 생성부(440)는 다운믹스 신호 및 잔여 신호를 CELP(Code Excited Linear Prediction) 방식으로 부호화하여 비트스트림을 생성할 수 있다. 또한, 다른 일례로서, 멀티 채널 신호가 음악(music) 신호인 경우, 비트스트림 생성부(440)는 기존의 MPEG-2/4 AAC나 mp3 등의 방법을 이용하여 다운믹스 신호 및 잔여 신호를 부호화하여 비트스트림을 생성할 수 있다. 상기 잔여 신호는 선택에 따라 전송하지 않을 수도 있다.
다른 실시예로, 부호화 장치(400)는 크기 변형부(420)를 별도로 포함하지 않고, 신호 추출부(430)에서 크기 변형과 다운믹스 신호 및 잔여 신호의 추출을 한번에 처리할 수도 있다. 즉, 다른 실시예에 따른 부호화 장치(400)는 멀티 채널 신호로부터 멀티 채널 신호를 구성하는 복수 채널 간의 공간적 특성 관계를 나타내는 복수의 파라미터를 추출하는 파라미터 추출부(410), 복수의 파라미터를 이용하여 멀티 채널 신호의 크기를 변형시키고, 크기가 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 신호 추출부(430) 및 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 부호화하여 비트스트림을 생성하는 비트스트림 생성부(440)만을 포함할 수도 있다.
도 5는 본 발명의 일실시예에 있어서, 스테레오 신호로서의 멀티 채널 신호의 크기 변형을 설명하기 위한 개념도이다.
도 5에서도 설명의 편의를 위해 부호화 장치(400)에 입력되는 멀티 채널 신호가 좌채널 신호 및 우채널 신호를 포함하는 스테레오 신호인 것으로 가정한다.
도 5에서는 좌채널 신호 'L', 우채널 신호 'R' 및 다운믹스 신호 'M'간의 관계를 도시하고 있다. 이러한 스테레오 신호의 다운믹스나 업믹스 시, 좌채널 신호 'L' 및 우채널 신호 'R'가 역위상(out-of-phase) 또는 역위상에 근접(near out-of-phase)일 때, 'L'+'R'의 크기가 감소하고 때에 따라서는 0에 가까워질 수 있다. 이에 따르는 에너지 손실을 보상하기 위해서, 다운믹스 신호 'M'의 크기는 일반적으로 'L'과 'R'의 합에 'L'과 'R'의 각 에너지의 합을 반영하도록 계산된 이득(gain)을 곱해서 설정하게 된다. 이러한 이득은 역위상이나 역위상에 근접할수록 커지게 되고, 추출된 복수의 파라미터의 관계에 따라 발산이 일어나게 될 수 있으며, 구해진 이득은 잔여 신호 'S'에도 곱해지게 되므로 잔여신호의 크기가 커지게 된다. 따라서, 이러한 이득을 제한(gain limiting)할 필요가 있다. 그러나 이러한 이득 제한은 다운믹스 신호 'M' 뿐만 아니라 잔여 신호 'S'에도 영향을 주기 때문에 본 실시예에 따른 부호화 장치(400)는 이득값이 임의의 최대값을 넘지 않도록 스테레오 신호의 크기를 변형시킬 수 있다. 즉, 도 5에서 좌측 그래프는 좌채널 신호 'L' 및 우채널 신호 'R'가 역위상에 근접할 때의 모습을 나타내고, 우측 그래프는 이득이 임의의 최대값을 넘지 않도록 우채널 신호 'R'의 크기를 변형시킨 모습을 나타낸다. 이와 같이, 크기 변형된 우채널 신호 'R´'과 좌채널 신호 'L'을 이용하여 다운믹스나 업믹스를 수행하는 경우, 도 5에 도시된 바와 같이, 이득 발산을 막을 수 있다. 또한, 이득 발산을 막음으로써, 이득 발산에 따라 잔여 신호 'S'의 값이 변하지 않도록 함으로써, 다운믹스에서 발생하는 손실을 보상할 수 있다.
도 6은 본 발명의 다른 실시예에 있어서, 멀티 채널 신호를 부호화하는 방법을 도시한 흐름도이다. 본 실시예에 따른 부호화 방법은 도 4를 통해 설명한 부호화 장치(400)를 통해 수행될 수 있다. 도 6에서는 부호화 장치(400)를 통해 각각의 단계가 수행되는 과정을 설명함으로써, 부호화 방법을 설명한다.
단계(610)에서 부호화 장치(400)는 멀티 채널 신호로부터 상기 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 추출한다. 여기서, 복수의 파라미터는 복수 채널간의 에너지 차 파라미터, 복수 채널 간의 위상 차 파라미터 및 복수 채널 간의 유사도 파라미터 중 둘 이상을 포함할 수 있다. 이러한 단계(610)는 부호화 장치(400)의 파라미터 추출부(410)에서 수행될 수 있다.
단계(620)에서 부호화 장치(400)는 복수의 파라미터를 이용하여 상기 멀티 채널 신호의 크기를 변형시킨다. 이때, 부호화 장치(400)는 멀티 채널 신호 중 적어도 하나의 채널 신호의 크기를 변형시킬 수 있다. 이때, 크기를 변형시키기 위한 값은 추출된 복수의 파라미터에 따라 결정될 수 있다. 예를 들어, 부호화 장치(400)는 이득이 임의의 최대값을 넘지 않도록 멀티 채널 신호 중 하나의 채널 신호의 크기를 변형시킬 수 있다. 이러한 단계(620)는 부호화 장치(400)의 크기 변형부(420)에서 수행될 수 있다.
단계(630)에서 부호화 장치(400)는 복수의 파라미터를 이용하여 크기가 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출한다. 여기서 다운믹스 신호는 두 채널 이상의 멀티 채널 신호로부터 생성된 한 채널의 신호를 포함할 수 있다. 이때, 두 채널 이상의 멀티 채널 신호로부터 다운믹스 신호를 생성하는 것을 다운믹싱이라 하고, 이러한 다운믹싱을 통하여 부호화 과정에 생성되는 비트스트림의 비트량을 줄일 수 있다. 즉, 다운믹스 신호는 멀티 채널 신호를 대표하는 신호일 수 있다. 이때, 잔여 신호는, 원신호를 다운믹스 신호와 복수의 파라미터로 부호화하는 과정 중에 상실되는 정보를 이용하여 생성될 수 있다. 파라메트릭 표현으로 발생하는 에러신호인 잔여 신호를 부호화하여 높은 비트레이트에서는 잔여 신호를 통해 고음질을 제공할 수 있다. 이러한 단계(630)는 부호화 장치(400)의 신호 추출부(430)에서 수행될 수 있다.
단계(640)에서 부호화 장치(400)는 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 부호화하여 비트스트림을 생성한다. 즉, 부호화 장치(400)는 멀티 채널 신호 각각을 부호화하지 않고, 복수의 파라미터를 이용하여 추출된 다운믹스 신호와 잔여 신호만을 부호화하여 전송할 수 있다. 일례로, 멀티 채널 신호가 음성(voice) 신호인 경우, 부호화 장치(400)는 다운믹스 신호 및 잔여 신호를 CELP(Code Excited Linear Prediction) 방식으로 부호화하여 비트스트림을 생성할 수 있다. 또한, 다른 일례로서, 멀티 채널 신호가 음악(music) 신호인 경우, 부호화 장치(400)는 기존의 MPEG-2/4 AAC나 mp3 등의 방법을 이용하여 다운믹스 신호 및 잔여 신호를 부호화하여 비트스트림을 생성할 수 있다. 이러한 단계(640)는 부호화 장치(400)의 비트스트림 생성부(440)에서 수행될 수 있다. 상기 잔여 신호는 선택에 따라 전송하지 않을 수도 있다.
다른 실시예로, 부호화 방법은 크기를 변형시키는 단계(620)를 별도로 포함하지 않고, 신호를 추출하는 단계(630)에서 크기 변형과 다운믹스 신호 및 잔여 신호의 추출을 한번에 처리할 수도 있다. 즉, 다른 실시예에 따른 부호화 방법은 멀티 채널 신호로부터 멀티 채널 신호를 구성하는 복수 채널 간의 공간적 특성 관계를 나타내는 복수의 파라미터를 추출하는 단계(610), 복수의 파라미터를 이용하여 멀티 채널 신호의 크기를 변형시키고, 크기가 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 단계(미도시) 및 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 부호화하여 비트스트림을 생성하는 단계(640)를 포함할 수도 있다.
도 7은 본 발명의 일실시예에 있어서, 복호화 장치의 내부 구성을 설명하기 위한 블록도이다. 본 실시예에 따른 복호화 장치(700)는 도 7에 도시된 바와 같이 복호화부(710), 업믹싱부(720) 및 복원부(730)를 포함한다.
복호화부(710)는 멀티 채널 신호의 다운믹스 신호, 잔여 신호 및 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 복원한다. 이때, 멀티 채널 신호는 도 1 내지 도 6을 통해 설명한 멀티 채널 신호에 대응될 수 있다. 예를 들어, 부호화 장치(100 또는 400)에서 멀티 채널 신호를 부호화하여 생성한 비트스트림을 복호화 장치(700)에서 수신하여, 수신한 비트스트림으로부터 멀티 채널 신호의 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 복호화하여 복원할 수 있다.
업믹싱부(720)는 복원된 파라미터를 이용하여 다운믹스 신호 및 잔여 신호를 멀티 채널 신호로 업믹싱한다. 여기서, 업믹싱은 하나의 채널 신호인 다운믹스 신호와 잔여 신호를 이용하여 두 채널 이상의 멀티 채널 신호를 생성하는 것으로 다운믹스 신호와 잔여 신호를 추출하기 위한 다운믹싱과 대응된다.
복원부(730)는 복원된 파라미터를 이용하여 업믹싱된 멀티 채널 신호의 위상 및 크기 중 적어도 하나를 복원한다. 즉, 복원부(730)는 도 1 내지 도 3을 통해 설명한 위상 변형을 이용하여 부호화된 멀티 채널 신호에 대해서는 위상을 복원할 수 있고, 도 4 내지 도 6을 통해 설명한 크기 변형을 이용하여 부호화된 멀티 채널 신호에 대해서는 크기를 복원할 수 있다. 이러한 복원 방법에 대해서는 이후 더욱 자세히 설명한다.
도 8은 본 발명의 일실시예에 있어서, 복호화 방법을 도시한 흐름도이다. 본 실시예에 따른 복호화 방법은 도 7을 통해 설명한 복호화 장치(700)를 통해 수행될 수 있다. 도 8에서는 복호화 장치(700)를 통해 각각의 단계가 수행되는 과정을 설명함으로써, 복호화 방법을 설명한다.
단계(810)에서 복호화 장치(700)는 멀티 채널 신호의 다운믹스 신호, 잔여 신호 및 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 복원한다. 이때, 멀티 채널 신호는 도 1 내지 도 6을 통해 설명한 멀티 채널 신호에 대응될 수 있다. 예를 들어, 부호화 장치(100 또는 400)에서 멀티 채널 신호를 부호화하여 생성한 비트스트림을 복호화 장치(700)에서 수신하여, 수신한 비트스트림으로부터 멀티 채널 신호의 다운믹스 신호, 잔여 신호 및 복수의 파라미터를 복호화하여 복원할 수 있다. 이러한 단계(810)는 복호화 장치(700)의 복호화부(710)에서 수행될 수 있다.
단계(820)에서 복호화 장치(700)는 복원된 파라미터를 이용하여 다운믹스 신호 및 잔여 신호를 멀티 채널 신호로 업믹싱한다. 여기서, 업믹싱은 하나의 채널 신호인 다운믹스 신호와 잔여 신호를 이용하여 두 채널 이상의 멀티 채널 신호를 생성하는 것으로 다운믹스 신호와 잔여 신호를 추출하기 위한 다운믹싱과 대응된다. 이러한 단계(820)는 복호화 장치(700)의 업믹싱부(720)에서 수행될 수 있다.
단계(830)에서 복호화 장치(700)는 복원된 파라미터를 이용하여 업믹싱된 멀티 채널 신호의 위상 및 크기 중 적어도 하나를 복원한다. 즉, 복원부(730)는 도 1 내지 도 3을 통해 설명한 위상 변형을 이용하여 부호화된 멀티 채널 신호에 대해서는 위상을 복원할 수 있고, 도 4 내지 도 6을 통해 설명한 크기 변형을 이용하여 부호화된 멀티 채널 신호에 대해서는 크기를 복원할 수 있다. 이러한 단계(830)는 복호화 장치(700)의 복원부(730)에서 수행될 수 있고, 복원 방법에 대해서는 이후 더욱 자세히 설명한다.
아래 수학식 1은 복호화 장치 및 방법에서 멀티 채널 신호의 업믹싱에 이용될 수 있는 매트릭스 '
Figure pat00001
'의 일례를 나타낸다. 예를 들어, 다운믹스 신호의 값과 잔여 신호의 값을 원소로 갖는 매트릭스와 매트릭스 '
Figure pat00002
'간의 매트릭스 연산을 통해 업믹싱이 이루어질 수 있다.
Figure pat00003
여기서, 'resBands'는 잔여 신호의 대역(bands)을 나타내고, '
Figure pat00004
', '
Figure pat00005
' 및 '
Figure pat00006
' 는 각각 아래 수학식 2 내지 수학식 4와 같이 표현될 수 있다.
Figure pat00007
Figure pat00008
Figure pat00009
또한, 아래 수학식 5는 본 발명의 일실시예에 따른 부호화 장치 및 방법에서 멀티 채널 신호의 다운믹싱에 이용될 수 있는 매트릭스 '
Figure pat00010
'의 일례를 나타낸다. 예를 들어, 좌채널 신호의 값과 우채널 신호의 값을 원소로 갖는 매트릭스와 매트릭스 '
Figure pat00011
'간의 매트릭스 연산을 통해 다운믹싱이 이루어질 수 있다.
Figure pat00012
이때, 상술한 수학식들에서 'θ 1'과 'θ 2'를 통해 멀티 채널 신호의 위상이 변형될 수 있다. 즉, 'θ 1'과 'θ 2'는 도 1 및 도 3에서 설명한 채널 각각의 위상각에 대응될 수 있다. 즉, '
Figure pat00013
', '
Figure pat00014
' 및 '
Figure pat00015
'의 분모 값이 아래 수학식 6과 같이 임의의 값 ε보다 크도록 'θ 1'과 'θ 2'를 설정함으로써, 이득 제한을 최소화할 수 있다.
Figure pat00016
즉, 상술한 바와 같이, 본 실시예에 따른 부호화 장치는 멀티 채널 신호 각각의 위상이 서로 동일해지도록 멀티 채널 신호의 위상을 변형시킬 수 있다. 예를 들어, 'θ 1 - θ 2'의 값이 'IPDl , m'의 값과 동일한 값을 갖는 경우, 완전한 위상 얼라이닝(aligning)이 이루어져 이득 발산을 막을 수 있다.
또한, 다른 실시예로 부호화 장치는 채널간 위상차 정보가 미리 설정된 각도 이하의 값을 갖도록 미리 결정된 값만큼 상기 멀티 채널 신호의 위상을 변형시킬 수도 있다. 예를 들어, 부호화 장치는 'IPDl , m'의 값이 파이(π)보다 작거나 같은 경우에는 'θ 1'과 'θ 2'를 각각 'π/4' 및 '-(π/4)'로 설정하거나 또는 하여 'IPDl,m'의 값이 파이(π)보다 큰 경우에는 'θ 1'과 'θ 2'를 각각 'π/4' 및 '-(π/4)'로 설정하여, 'cos(IPDl ,m - (θ 1 - θ 2))'의 값이 항상 0보다 크거나 같도록 할 수 있다. 이 경우, 미리 설정된 각도는 90도 일 수 있다. θ 1, θ 2값은 임의의 상수이거나 상기 추출된 복수의 파라미터에 의해 계산될 수 있다.
또 다른 실시예로 부호화 장치는 위상각의 변형이 최소화 되도록 멀티 채널 신호의 위상을 변형시킬 수도 있다. 즉, 변형되는 위상의 크기를 최소화함으로써, 복호화 장치의 업믹싱은 기존의 방법을 그대로 사용하고, 부호화 장치에서 다운믹싱하는 경우에만, 이러한 위상이 변형되도록 할 수도 있다.
본 발명의 다른 실시예에 따른 부호화 장치는 상술한 바와 같이, 멀티 채널 신호 중 적어도 하나의 채널 신호의 크기를 변형시킬 수 있다. 이때, 아래 수학식 7은 다른 실시예에 따른 부호화 장치에서 다운믹싱에 이용될 매트릭스의 일례를 나타내고, 수학식 8은 다른 실시예에 따른 복호화 장치에서 업믹싱에 이용될 매트릭스의 일례를 나타낸다.
Figure pat00017
Figure pat00018
여기서, 'L' 및, 'R'은 멀티 채널 신호가 스테레오 신호인 경우의 좌채널 신호의 값 및 우채널 신호의 값을, 'M'은 다운믹스 신호의 값을 그리고 'S'는 잔여 신호의 값을 각각 의미할 수 있다. 또한, 'A'는 아래 수학식 9와 같이 표현될 수 있다.
Figure pat00019
즉, 수학식 7에 따르면, 우채널 신호의 값인 크기를 'A'에 기초하여 변형시킴으로써, 이득의 값이 임의의 최대값을 넘지 않도록 제어할 수 있다.
상술한 수학식 1 내지 수학식 9는 하나의 일례일 뿐, '
Figure pat00020
', '
Figure pat00021
'를 계산하는 방법이나 'θ 1'과 'θ 2'를 결정하는 방법 등은 크기나 위상 파라미터(예를 들어 IPD)에 기초하여 다양하게 변경될 수 있다. 예를 들어, OPD 추정(estimation)을 사용하거나 IPD, CLD 및 ICC에 의존적으로 값을 설정할 수도 있으며 'θ 1 = -θ 2'으로 설정하여 간단히 할 수도 있다.
이와 같이, 본 발명의 실시예들에 따르면, 멀티 채널 신호의 위상 또는 크기를 변형시킴으로써, 이득 발산을 막아 이득 발산에 따라 잔여 신호의 값이 변하지 않도록 함으로써, 다운믹스에서 발생하는 손실을 보상할 수 있다.
또한, 본 발명의 실시예들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 일실시예들의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.
100: 부호화 장치
110: 파라미터 추출부
120: 위상 변형부
130: 신호 추출부
140: 비트스트림 생성부

Claims (16)

  1. 멀티 채널 신호로부터 상기 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 추출하는 파라미터 추출부;
    상기 복수의 파라미터 및 상기 복수 채널 각각마다 계산된 위상각을 이용하여 상기 멀티 채널 신호의 위상을 변형시키는 위상 변형부;
    상기 복수의 파라미터를 이용하여 상기 위상이 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호(residual signal)를 추출하는 신호 추출부; 및
    상기 다운믹스 신호, 상기 잔여 신호 및 상기 복수의 파라미터를 부호화하여 비트스트림을 생성하는 비트스트림 생성부
    를 포함하는 부호화 장치.
  2. 제1항에 있어서,
    상기 위상 변형부는,
    상기 멀티 채널 신호 각각의 위상이 서로 동일해지도록 상기 멀티 채널 신호의 위상을 변형시키는, 부호화 장치.
  3. 제1항에 있어서,
    상기 위상 변형부는,
    상기 채널간 위상차 정보가 미리 설정된 각도 이하의 값을 갖도록 미리 결정된 값만큼 상기 멀티 채널 신호의 위상을 변형시키는, 부호화 장치.
  4. 제1항에 있어서,
    상기 위상 변형부는,
    상기 위상각의 변형이 최소화 되도록 상기 멀티 채널 신호의 위상을 변형시키는, 부호화 장치.
  5. 제1항에 있어서,
    상기 복수의 파라미터는,
    상기 복수 채널간의 에너지 차 파라미터(CLD: Channel Level Differences), 상기 복수 채널 간의 위상 차 파라미터(IPD: Inter-channel Phase Difference) 및 상기 복수 채널 간의 유사도 파라미터(ICC: Inter Channel Coherence) 중 둘 이상을 포함하는, 부호화 장치.
  6. 멀티 채널 신호로부터 상기 멀티 채널 신호를 구성하는 복수 채널 간의 공간적 특성 관계를 나타내는 복수의 파라미터를 추출하는 파라미터 추출부;
    상기 복수의 파라미터를 이용하여 상기 멀티 채널 신호의 크기를 변형시키는 크기 변형부;
    상기 복수의 파라미터를 이용하여 상기 크기가 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 신호 추출부; 및
    상기 다운믹스 신호, 상기 잔여 신호 및 상기 복수의 파라미터를 부호화하여 비트스트림을 생성하는 비트스트림 생성부
    를 포함하는 부호화 장치.
  7. 제6항에 있어서,
    상기 크기 변형부는,
    이득(gain)의 값이 임의의 최대값을 넘지 않도록 상기 멀티 채널 신호 중 적어도 하나의 채널 신호의 크기를 변형시키는, 부호화 장치.
  8. 멀티 채널 신호의 다운믹스 신호, 잔여 신호 및 상기 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 복원하는 복호화부;
    상기 복원된 파라미터를 이용하여 상기 다운믹스 신호 및 상기 잔여 신호를 상기 멀티 채널 신호로 업믹싱하는 업믹싱부; 및
    상기 복원된 파라미터를 이용하여 업믹싱된 멀티 채널 신호의 위상 및 크기 중 적어도 하나를 복원하는 복원부
    를 포함하는 복호화 장치.
  9. 멀티 채널 신호로부터 상기 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 추출하는 파라미터 추출부;
    상기 복수의 파라미터 및 상기 복수 채널 각각마다 계산된 위상각을 이용하여 상기 멀티 채널 신호의 위상을 변형시키고, 상기 위상이 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 신호 추출부; 및
    상기 다운믹스 신호, 상기 잔여 신호 및 상기 복수의 파라미터를 부호화하여 비트스트림을 생성하는 비트스트림 생성부
    를 포함하는 부호화 장치.
  10. 멀티 채널 신호로부터 상기 멀티 채널 신호를 구성하는 복수 채널 간의 공간적 특성 관계를 나타내는 복수의 파라미터를 추출하는 파라미터 추출부;
    상기 복수의 파라미터를 이용하여 상기 멀티 채널 신호의 크기를 변형시키고, 상기 크기가 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 신호 추출부; 및
    상기 다운믹스 신호, 상기 잔여 신호 및 상기 복수의 파라미터를 부호화하여 비트스트림을 생성하는 비트스트림 생성부
    를 포함하는 부호화 장치.
  11. 부호화 장치에서 멀티 채널 신호를 부호화하는 방법에 있어서,
    상기 부호화 장치의 파라미터 추출부가 멀티 채널 신호로부터 상기 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 추출하는 단계;
    상기 부호화 장치의 위상 변형부가 상기 복수의 파라미터 및 상기 복수 채널 각각마다 계산된 위상각을 이용하여 상기 멀티 채널 신호의 위상을 변형시키는 단계;
    상기 부호화 장치의 신호 추출부가 상기 복수의 파라미터를 이용하여 상기 위상이 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 단계; 및
    상기 부호화 장치의 비트스트림 생성부가 상기 다운믹스 신호, 상기 잔여 신호 및 상기 복수의 파라미터를 부호화하여 비트스트림을 생성하는 단계
    를 포함하는 부호화 방법.
  12. 멀티 채널 신호로부터 상기 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 추출하는 단계;
    상기 복수의 파라미터 및 상기 복수 채널 각각마다 계산된 위상각을 이용하여 상기 멀티 채널 신호의 위상을 변형시키고, 상기 위상이 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 단계; 및
    상기 다운믹스 신호, 상기 잔여 신호 및 상기 복수의 파라미터를 부호화하여 비트스트림을 생성하는 단계
    를 포함하는 부호화 방법.
  13. 부호화 장치에서 멀티 채널 신호를 부호화하는 방법에 있어서,
    상기 부호화 장치의 파라미터 추출부가 멀티 채널 신호로부터 상기 멀티 채널 신호를 구성하는 복수 채널 간의 공간적 특성 관계를 나타내는 복수의 파라미터를 추출하는 단계;
    상기 부호화 장치의 크기 변형부가 상기 복수의 파라미터를 이용하여 상기 멀티 채널 신호의 크기를 변형시키는 단계;
    상기 부호화 장치의 신호 추출부가 상기 복수의 파라미터를 이용하여 상기 크기가 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 단계; 및
    상기 부호화 장치의 비트스트림 생성부가 상기 다운믹스 신호, 상기 잔여 신호 및 상기 복수의 파라미터를 부호화하여 비트스트림을 생성하는 단계
    를 포함하는 부호화 방법.
  14. 멀티 채널 신호로부터 상기 멀티 채널 신호를 구성하는 복수 채널 간의 공간적 특성 관계를 나타내는 복수의 파라미터를 추출하는 단계;
    상기 복수의 파라미터를 이용하여 상기 멀티 채널 신호의 크기를 변형시키고, 상기 크기가 변형된 멀티 채널 신호에서 다운믹스 신호와 잔여 신호를 추출하는 단계; 및
    상기 다운믹스 신호, 상기 잔여 신호 및 상기 복수의 파라미터를 부호화하여 비트스트림을 생성하는 단계
    를 포함하는 부호화 방법.
  15. 복호화 장치에서 멀티 채널 신호를 복호화하는 방법에 있어서,
    상기 복호화 장치의 복호화부가 멀티 채널 신호의 다운믹스 신호, 잔여 신호 및 상기 멀티 채널 신호를 구성하는 복수 채널 간의 특성 관계를 나타내는 복수의 파라미터를 복원하는 단계;
    상기 복호화 장치의 업믹싱부가 상기 복원된 파라미터를 이용하여 상기 다운믹스 신호 및 상기 잔여 신호를 상기 멀티 채널 신호로 업믹싱하는 단계; 및
    상기 복호화 장치의 복원부가 상기 복원된 파라미터를 이용하여 업믹싱된 멀티 채널 신호의 위상 및 크기 중 적어도 하나를 복원하는 단계
    를 포함하는 복호화 방법.
  16. 제11항 내지 제15항 중 어느 한 항의 방법을 수행하는 프로그램을 기록한 컴퓨터 판독 가능 기록 매체.
KR1020100035573A 2010-04-17 2010-04-17 멀티 채널 신호의 부호화/복호화 장치 및 방법 Ceased KR20110116079A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020100035573A KR20110116079A (ko) 2010-04-17 2010-04-17 멀티 채널 신호의 부호화/복호화 장치 및 방법
US13/088,720 US8824577B2 (en) 2010-04-17 2011-04-18 Apparatus and method for encoding and decoding multichannel signal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100035573A KR20110116079A (ko) 2010-04-17 2010-04-17 멀티 채널 신호의 부호화/복호화 장치 및 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020160103126A Division KR101873771B1 (ko) 2016-08-12 2016-08-12 멀티 채널 신호의 부호화/복호화 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20110116079A true KR20110116079A (ko) 2011-10-25

Family

ID=44788175

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100035573A Ceased KR20110116079A (ko) 2010-04-17 2010-04-17 멀티 채널 신호의 부호화/복호화 장치 및 방법

Country Status (2)

Country Link
US (1) US8824577B2 (ko)
KR (1) KR20110116079A (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014023443A1 (en) * 2012-08-10 2014-02-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Encoder, decoder, system and method employing a residual concept for parametric audio object coding
EP2838086A1 (en) * 2013-07-22 2015-02-18 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. In an reduction of comb filter artifacts in multi-channel downmix with adaptive phase alignment
KR102160254B1 (ko) * 2014-01-10 2020-09-25 삼성전자주식회사 액티브다운 믹스 방식을 이용한 입체 음향 재생 방법 및 장치
US20160098245A1 (en) * 2014-09-05 2016-04-07 Brian Penny Systems and methods for enhancing telecommunications security
PT3539125T (pt) * 2016-11-08 2023-01-27 Fraunhofer Ges Forschung Aparelho e método para codificar ou descodificar um sinal multicanal utilizando um ganho side e um ganho residual

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2324926T3 (es) 2004-03-01 2009-08-19 Dolby Laboratories Licensing Corporation Descodificacion de audio multicanal.
US8175280B2 (en) 2006-03-24 2012-05-08 Dolby International Ab Generation of spatial downmixes from parametric representations of multi channel signals
US8027479B2 (en) 2006-06-02 2011-09-27 Coding Technologies Ab Binaural multi-channel decoder in the context of non-energy conserving upmix rules
EP2118887A1 (en) 2007-02-06 2009-11-18 Koninklijke Philips Electronics N.V. Low complexity parametric stereo decoder
KR101453732B1 (ko) * 2007-04-16 2014-10-24 삼성전자주식회사 스테레오 신호 및 멀티 채널 신호 부호화 및 복호화 방법및 장치
KR20090122145A (ko) 2008-05-23 2009-11-26 엘지전자 주식회사 신호의 처리 방법 및 장치
US8060042B2 (en) * 2008-05-23 2011-11-15 Lg Electronics Inc. Method and an apparatus for processing an audio signal
US8666752B2 (en) * 2009-03-18 2014-03-04 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding multi-channel signal

Also Published As

Publication number Publication date
US8824577B2 (en) 2014-09-02
US20110255588A1 (en) 2011-10-20

Similar Documents

Publication Publication Date Title
CN107710323B (zh) 使用频谱域重新取样来编码或解码音频多通道信号的装置及方法
JP5922684B2 (ja) マルチチャネルの復号化装置
US8254584B2 (en) Method, medium, and system encoding/decoding multi-channel signal
KR20100105496A (ko) 멀티 채널 신호의 부호화/복호화 장치 및 방법
KR20110044693A (ko) 위상 정보와 잔여 신호를 이용한 부호화／복호화 장치 및 방법
KR20160111042A (ko) 스테레오 오디오 인코더 및 디코더
CN102292772B (zh) 多声道信号的编码/解码装置和方法
RU2696952C2 (ru) Аудиокодировщик и декодер
KR101697550B1 (ko) 멀티채널 오디오 대역폭 확장 장치 및 방법
JP6031201B2 (ja) オーディオ符号器及び復号器
US9305556B2 (en) Apparatus and method for encoding and decoding multi-channel audio signal
KR20140123015A (ko) 다채널 신호를 위한 인코더 및 인코딩 방법, 다채널 신호를 위한 디코더 및 디코딩 방법
KR20110116079A (ko) 멀티 채널 신호의 부호화/복호화 장치 및 방법
KR102657547B1 (ko) 저연산 포맷 변환을 위한 인터널 채널 처리 방법 및 장치
DK3201918T3 (en) DECODING PROCEDURE AND DECODS FOR DIALOGUE IMPROVEMENT
JP5949270B2 (ja) オーディオ復号装置、オーディオ復号方法、オーディオ復号用コンピュータプログラム
KR101873771B1 (ko) 멀티 채널 신호의 부호화/복호화 장치 및 방법
JP6179122B2 (ja) オーディオ符号化装置、オーディオ符号化方法、オーディオ符号化プログラム
JP6051621B2 (ja) オーディオ符号化装置、オーディオ符号化方法、オーディオ符号化用コンピュータプログラム、及びオーディオ復号装置
JP6299202B2 (ja) オーディオ符号化装置、オーディオ符号化方法、オーディオ符号化プログラム及びオーディオ復号装置
US9837085B2 (en) Audio encoding device and audio coding method
KR101709690B1 (ko) 멀티 채널 신호의 복호화방법
KR101500972B1 (ko) 멀티 채널 신호의 부호화/복호화 방법 및 장치
KR101613979B1 (ko) 멀티 채널 신호의 복호화방법
KR101735619B1 (ko) 멀티 채널 신호의 부호화/복호화 장치 및 방법

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20100417

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20150417

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20100417

Comment text: Patent Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20151120

Patent event code: PE09021S01D

E601 Decision to refuse application
PE0601 Decision on rejection of patent

Patent event date: 20160601

Comment text: Decision to Refuse Application

Patent event code: PE06012S01D

Patent event date: 20151120

Comment text: Notification of reason for refusal

Patent event code: PE06011S01I

E601 Decision to refuse application
E801 Decision on dismissal of amendment
PE0601 Decision on rejection of patent

Patent event date: 20160713

Comment text: Decision to Refuse Application

Patent event code: PE06012S01D

Patent event date: 20151120

Comment text: Notification of reason for refusal

Patent event code: PE06011S01I

PE0801 Dismissal of amendment

Patent event code: PE08012E01D

Comment text: Decision on Dismissal of Amendment

Patent event date: 20160713

Patent event code: PE08011R01I

Comment text: Amendment to Specification, etc.

Patent event date: 20160704

Patent event code: PE08011R01I

Comment text: Amendment to Specification, etc.

Patent event date: 20160222

A107 Divisional application of patent
PA0107 Divisional application

Comment text: Divisional Application of Patent

Patent event date: 20160812

Patent event code: PA01071R01D