JPH11205791A - 画像符号化方法及び画像符号化装置 - Google Patents

Abstract

(57)【要約】 【課題】 テレビ会議システム等に於ける画像符号化方
法及び画像符号化装置に関し、再生画像の動きを滑らか
にする。 【解決手段】 入力画像信号を加えるフレームメモリ１
と、ＤＣＴ演算部１１，量子化部１２，可変長符号化部
１３等を含む符号化処理部２と、バッファメモリ３と、
制御部４と、操作部５とを有する画像符号化装置は、制
御部４は、操作部５による設定情報を読取り、且つ前記
バッファメモリ３の占有量を監視し、前記設定情報と前
記占有量とを基に、次符号化開始タイミングに於ける前
記バッファメモリ３の占有量を予測し、この予測した占
有量が閾値の範囲外の時に目標フレームレートを切替え
る目標フレームレート設定部２３及び設定情報読取部２
１，量子化ステップ設定部２２，占有量監視部２４等を
備えている。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像情報を符号化
し、復号して再生した画像の動きが滑らかとなる画像符
号化方法及び画像符号化装置に関する。テレビ会議シス
テムや他の画像を伝送するシステムに於いては、圧縮符
号化すると共に、復号して再生した画像の画質の劣化が
少なく、且つ動画の場合の動きの滑らかさが要望されて
いる。

【０００２】

【従来の技術】図１６は従来例の画像符号化装置の説明
図であり、５１はフレームメモリ、５２は符号化処理
部、５３はバッファメモリ、５４は制御部、５５はＤＣ
Ｔ演算部、５６は量子化部、５７は可変長符号化部であ
り、テレビカメラ等からのディジタル化された入力画像
信号がフレームメモリ５１に入力される。

【０００３】符号化処理部５２は、既に各種の構成が知
られており、例えば、図示のように、ＤＣＴ演算部５５
により、８×８画素のブロック毎にＤＣＴ（離散コサイ
ン変換）演算を施し、ＤＣＴ係数について量子化部５６
に於いて量子化し、可変長符号化部５７により生起確率
に従った定められた符号長の符号に変換し、バッファメ
モリ５３を介して伝送路に一定速度で出力画像信号とし
て送出する。なお、フレーム間差分を求める構成や動き
補償を行う構成等を含む符号化処理部も知られている。

【０００４】制御部５４は、バッファメモリ５３の占有
量を監視し、且つ符号化処理部５２に於けるフレームメ
モリ５１からのフレーム対応の画像信号の読込みと、占
有量に対応して量子化部５６に於ける量子化ステップの
設定とを行い、バッファメモリ５３のアンダーフロー及
びオーバーフローを防止するものである。

【０００５】図１７は従来例の画像符号化処理のフロー
チャートであり、前述の制御部５４と符号化処理部５２
とに於ける処理の要部を示すもので、制御部５４は、操
作部で設定した設定値の読込み処理を行い（Ｌ１）、前
回読込んだ設定値と今回読込んだ設定値とが等しいか否
かを判定し（Ｌ２）、等しくない場合は、今回読込んだ
設定値に対応してビットレート設定処理（Ｌ３）、フレ
ームレート設定処理（Ｌ４）、バッファ閾値の設定処理
（Ｌ５）を順次行う。そして、１フレーム符号化終了か
否かを判定する（Ｌ５）。又ステップ（Ｌ２）に於い
て、前設定値と今回の設定値とが等しい場合、ステップ
（Ｌ５）に移行する。

【０００６】１フレーム符号化終了の場合は、バッファ
容量読込み処理を行い（Ｌ７）、符号化フレーム設定処
理を行い（Ｌ８）、そして、符号化処理を行う（Ｌ
９）。又ステップ（Ｌ６）に於いて１フレーム符号化終
了でない場合は、ステップ（Ｌ９）に移行して符号化処
理を行う。

【０００７】図１８は従来例の駒落し処理の説明図であ
り、フレーム番号ｎ，ｎ＋１，ｎ＋２，・・・のフレー
ム単位の画像信号を（ａ）に示し、矢印で示すように、
偶数フレーム番号を符号化対象フレームとして、１秒間
に３０フレームの画像信号の１５フレームについて符号
化する場合を示し、符号化処理時に、時刻ｔ１のフレー
ム番号ｎのフレームの符号化による発生情報量は小さい
が、動きの大きい画面等に相当する時刻ｔ２，ｔ３のフ
レーム番号ｎ＋２，ｎ＋４のフレームについては発生情
報量が大きく、それにより、バッファメモリ５３の占有
量が大きくなって閾値を超える状態となると、符号化処
理のウエイト状態となり、例えば、フレーム番号ｎ＋
６，ｎ＋８，ｎ＋１０のフレームの符号化が中止され
る。即ち、駒落ちが生じる。

【０００８】そして、時刻ｔ４に、バッファメモリ５３
の占有量が少なくなってフレーム番号ｎ＋１１のフレー
ムから符号化を開始し、その時の発生情報量が中程度で
あることにより、フレーム番号ｎ＋１３のフレームの符
号化が中止され、次の時刻ｔ５のフレーム番号ｎ＋１４
のフレームの符号化が行われ、このフレームについての
発生情報量も中程度であることにより、バッファメモリ
５３の占有量が閾値を超えることがなくなって、次の時
刻ｔ６のフレームの符号化が行われる。即ち、（ｂ）に
示すフレームの矢印で示すフレーム単位の符号化が行わ
れる。

【０００９】

【発明が解決しようとする課題】従来例の画像符号化方
法又は画像符号化装置に於いては、バッファメモリ５３
のオーバーフローが生じないように、バッファメモリ５
３の占有量を監視して、閾値を超える状態となると、フ
レームの符号化を中止することにより、駒落ちの状態と
する。このような駒落ちは不連続的に発生するものであ
り、静止画に近い場合は、受信側の復号再生画像の画質
の劣化は生じないことになるが、動きのある画像の場合
は、例えば、図１８に示すように、多数の連続したフレ
ームの符号化が中止される。即ち、駒落ちが不連続的と
なる為に、受信側の復号再生画像は不自然な動きを示す
問題がある。本発明は、受信側の復号再生画像の動くを
円滑となるようにすることを目的とする。

【００１０】

【課題を解決するための手段】本発明の画像符号化方法
は、（１）入力画像信号を符号化処理し、バッファメモ
リを介して送出する画像符号化方法であって、バッファ
メモリの占有量を監視し、この占有量と設定情報とを基
に次の符号化開始タイミングに於けるバッファメモリの
占有量を予測し、この予測した占有量が閾値の範囲外の
時に、目標フレームレートを切替えて、この目標フレー
ムレートに従ってフレーム単位の符号化を行う過程を含
むものである。

【００１１】又（２）設定した画質モードが動き重視モ
ードか画質重視モードかに応じて前記目標フレームレー
トを切替える過程を含むことができる。

【００１２】又（３）ビデオレートを設定し、このビデ
オレートに応じて前記目標フレームレートを決定する過
程を含むことができる。

【００１３】又本発明の画像符号化装置は、（４）入力
画像信号を加えるフレームメモリ１と、符号化処理部２
と、バッファメモリ３と、制御部４と、操作部５とを有
する画像符号化装置であって、制御部４は、操作部５に
よる設定情報を読取り、且つ前記バッファメモリ３の占
有量を監視し、前記設定情報と前記占有量とを基に、次
符号化開始タイミングに於ける前記バッファメモリ３の
占有量を予測し、この予測した占有量が閾値を超える時
に目標フレームレートを切替える目標フレームレート設
定部２３を有するものである。

【００１４】

【発明の実施の形態】図１は本発明の実施の形態の画像
符号化装置の説明図であり、１はフレームメモリ、１
ａ，１ｂ，１ｃ，１ｄはフレーム単位の画像信号の格納
領域、２は符号化処理部、３はバッファメモリ、４は制
御部 、５は操作部、１１はＤＣＴ演算部、１２は量子
化部、１３は可変長符号化部、２１は設定情報読取部、
２２は量子化ステップ設定部、２３は目標フレームレー
ト設定部、２４は占有量監視部である。

【００１５】入力画像信号は、フレームメモリ１の格納
領域１ａ，１ｂ，１ｃ，１ｄに順次フレーム単位で書込
まれる。例えば、格納領域１ｄに画像信号を書込んだ次
のフレームの画像信号を格納領域１ａに書込み、次のフ
レームの画像信号を格納領域１ｂに書込むことになる。

【００１６】又符号化処理部２は、ＤＣＴ演算部１１
と、量子化部１２と、可変長符号化部１３とを含む構成
の場合を示し、制御部４からの符号化フレームの指示に
従ったフレームメモリ１の格納領域からフレーム単位の
画像信号を読取り、ＤＣＴ演算部１１に於いてＤＣＴ演
算を行い、量子化部１２に於いてＤＣＴ係数の量子化を
行い、可変長符号化部１３に於いて可変長符号化し、バ
ッファメモリ３に格納し、伝送路の伝送速度に従った一
定の速度で読出して送出する。なお、符号化処理部２
は、フレーム間符号化や動き補償等の処理を含む構成と
することができるものである。

【００１７】又制御部４は、操作部５で設定した伝送路
のビットレートと、画質モードとを設定情報読取部２１
により読取り、占有量監視部２４によりバッファメモリ
３の占有量を監視し、閾値の範囲外か否かを監視する。
この閾値は、オーバーフローを監視する第１の閾値と、
アンダーフローを監視する第２の閾値とを設定すること
ができる。

【００１８】目標フレーム設定部２３は、伝送路のビッ
トレートと、画質モードとを基に目標フレームレートを
設定し、この目標フレームレートに従って符号化処理部
２に於ける符号化フレームを指示する。又占有量監視部
２４による監視結果によって目標フレームレートを変更
する。又量子化ステップ設定部２２により符号化処理部
２の量子化部１２に於けるＤＣＴ係数の量子化ステップ
を設定する。前述の制御部４の各部は、プロセッサ等に
よる演算，処理機能によって実現することもできる。

【００１９】図２はフレームレートの説明図であり、フ
レーム番号ｎ，ｎ＋１，ｎ＋２，・・・について、１秒
間３０フレームの全フレームの符号化を行う場合のフレ
ームレートは３０フレーム／ｓｅｃとなる。又点線で示
すフレームは符号化しないフレームとして示しており、
１フレームおきに符号化を行う場合のフレームレートは
１５フレーム／ｓｅｃとなる。又２フレームおきに符号
化を行う場合のフレームレートは１０フレーム／ｓｅｃ
となり、３フレームおきに符号化を行う場合のフレーム
レートは７．５フレーム／ｓｅｃとなる。

【００２０】図３は量子化ステップと発生情報及び画質
モードと目標フレームレートとの関係説明図であり、
（Ａ）は量子化ステップと発生情報量（バッファ占有
量）との関係の概要を示し、量子化ステップを大きくす
ると、即ち、再生画像を粗い画質とすると、発生情報量
は少なくなり、反対に、量子化ステップを小さくする
と、即ち、再生画像を密な画質とすると、発生情報量は
多くなる。

【００２１】又（Ｂ）は画質モードと目標フレームレー
トとの関係の概要を示し、画質モードとして、動きを重
視するモードの場合、目標フレームレートを大きくし
て、円滑な動きを再現させることになり、反対に画質を
重視するモードの場合、例えば、静止画に近い状態の画
質を重視する場合は、目標フレームレートは小さくして
も良いことになる。

【００２２】図４は本発明の第１の実施の形態の動作説
明図であり、（ａ）はフレーム番号ｎ，ｎ＋１，ｎ＋
２，・・・のフレームを示し、例えば、目標フレームレ
ートを１５フレーム／ｓｅｃとすると、図２の２段目に
示すように、１フレームおきに符号化されることにな
る。この１５フレーム／ｓｅｃの目標フレームレートに
於いて、（ｂ）に示すように、フレーム番号ｎの時刻ｔ
１に於ける次の符号化開始タイミングのバッファ占有量
が小さく、次の符号化するフレーム番号ｎ＋２の時刻ｔ
２に於ける次の符号化開始タイミングのバッファ占有量
が大きく、第１の閾値を超えると予想される場合は、目
標フレームレートを変更し、１５フレーム／ｓｅｃから
１０フレーム／ｓｅｃとする。

【００２３】それによって、フレーム番号ｎ＋２の次
は、時刻ｔ３のフレーム番号ｎ＋５のフレームの符号化
を行うことになる。そして、このフレーム番号ｎ＋５の
発生情報量も大であるが、次の時刻ｔ４のフレーム番号
ｎ＋８のフレームについての発生情報量が中程度でバッ
ファ占有量が第１の閾値を超えない場合は、目標フレー
ムレートはそのまま変更しないので、次の時刻ｔ５のフ
レーム番号ｎ＋１１のフレームの符号化が行われる。

【００２４】そして、次の時刻ｔ６に於けるフレーム番
号ｎ＋１４のフレームの符号化開始タイミングのバッフ
ァ占有量が第２の閾値以下になる場合、目標フレームレ
ートを変更し、１０フレーム／ｓｅｃから元の１５フレ
ーム／ｓｅｃとする。従って、次の時刻ｔ７に於いて
は、フレーム番号ｎ＋１６のフレームの符号化を行うこ
となる。

【００２５】従って、図４の（ｂ）に示すように、矢印
で示す符号化フレームと点線で示す符号化しないフレー
ムとの関係は、図１８に示す従来例と同様な発生情報量
の場合でも、駒落ちに相当するフレーム数が急激に多く
なることを回避できるから、受信側の復号再生画像の動
きは滑らかなものとなる。

【００２６】図５は本発明の第１の実施の形態のフロー
チャートであり、操作部５（図１参照）に於いて設定し
た伝送路の伝送速度や画質モード等の設定値を制御部４
が読込み（Ａ１）、前回読込んだ設定値と今回読込んだ
設定値とが等しいか否かを判定し（Ａ２）、等しくない
場合は、ビットレート設定処理（Ａ３）、フレームレー
ト設定処理（Ａ４）、バッファ閾値設定処理（Ａ５）を
順次行う。

【００２７】又ステップ（Ａ２）に於いて前回の設定値
と今回の設定値とが等しい場合、ビットレートの設定処
理，フレームレートの設定処理，バッファ閾値の設定処
理を省略できるから、ステップ（Ａ５）の処理終了後と
同右に、１フレーム符号化終了か否かを判定し（Ａ
６）、終了した場合は、次のフレームの符号化処理の為
に、バッファ容量読込み処理（Ａ７）、フレームレート
更新処理（Ａ８）、符号化フレーム設定処理（Ａ９）を
順次行う。そして、ステップ（Ａ６）に於いて１フレー
ム符号化終了でない場合、及びステップ（Ａ９）の処理
終了後に、符号化処理を行う（Ａ１０）。

【００２８】図６はフレームレート設定処理のフローチ
ャートであり、図５のフローチャートに於けるステップ
（Ａ４）の処理の概要を示し、先ず、ビットレートを読
出し（Ｂ１）、このビットレートが１２８ｋｂｐｓより
小さいか否かを判定し（Ｂ２）、小さい場合は１２８ｋ
ｂｐｓ未満用フレームレートを設定する（Ｂ３）。即
ち、最小のフレームレートを設定する。又ビットレート
が１２８ｋｂｐｓより小さくない場合は、１２８ｋｂｐ
ｓと等しいか否かを判定し（Ｂ４）、等しい場合は、１
２８ｋｂｐｓ用フレームレートを設定する（Ｂ５）。即
ち、最小フレームレートより１段上のフレームレートを
設定する。

【００２９】又ビットレートが１２８ｋｂｐｓと等しく
ない場合、即ち、１２８ｋｂｐｓより大きい場合は、１
９２ｋｂｐｓと等しいか否かを判定し（Ｂ６）、等しい
場合は、１９２ｋｂｐｓ用フレームレートを設定する
（Ｂ７）。又１９２ｋｂｐｓと等しくない場合、即ち、
ビットレートが１９２ｋｂｐｓより大きい場合、２５６
ｋｂｐｓと等しいか否かを判定し（Ｂ８）、等しい場合
は２５６ｋｂｐｓ用フレームレートを設定する（Ｂ
９）。又２５６ｋｂｐｓと等しくない場合、即ち、ビッ
トレートが２５６ｋｂｐｓより大きい場合、３２０ｋｂ
ｐｓより大きいか否かを判定し（Ｂ１０）、大きい場合
は３２０ｋｂｐｓ以上のフレームレートを設定し（Ｂ１
１）、大きくない場合は３２０ｋｂｐｓ用のフレームレ
ートを設定する（Ｂ１２）。即ち、ビットレートに従っ
てフレームレートが設定される。

【００３０】図７はフレームレート更新処理のフローチ
ャートであり、図５のフローチャートに於けるステップ
（Ａ８）の処理の概要を示す。先ず、次符号化終了時の
予想バッファ容量を算出する（Ｃ１）。次バッファ容
量、即ち、ステップ（Ｃ１）で算出した予想バッファ容
量とＵＰＰＥＲ閾値とを比較する（Ｃ２）。このＵＰＰ
ＥＲ閾値及び次のステップに於けるＬＯＷＥＲ閾値は、
図５のフローチャートに於けるステップ（Ａ５）により
設定処理したオーバーフローを監視する為の第１の閾値
及びアンダーフローを監視する為の第２の閾値に相当す
るものである。

【００３１】そして、ステップ（Ｃ２）に於いて、ＵＰ
ＰＥＲ閾値より次バッファ容量が大きい場合は、現フレ
ームレートと目標フレームレート、即ち、目標とする最
大フレームレートと等しいか否かを判定し（Ｃ４）、等
しい場合は、既に目標フレームレートが最大フレームレ
ートとなっているから、ステップ（Ｃ８）に移行し、等
しくない場合は、次フレームレートを低下させる更新処
理を行い（Ｃ５）、次のステップ（Ｃ８）に移行する。

【００３２】又ステップ（Ｃ２）に於いて、ＵＰＰＥＲ
閾値より次バッファ容量が大きくない場合は、ＬＯＷＥ
Ｒ閾値と次バッファ容量とを比較し（Ｃ３）、ＬＯＷＥ
Ｒ閾値より次バッファ容量が小さい場合は、現フレーム
レートが７．５フレーム／ｓｅｃと等しいか否かを判定
し（Ｃ６）、等しい場合は、既に、最小フレームレート
となっているから、更新処理することなく、ステップ
（Ｃ８）に移行し、等しくない場合は、次フレームレー
トを増加させる更新処理を行って、ステップ（Ｃ８）に
移行する。又ステップ（Ｃ３）に於いて、ＬＯＷＥＲ閾
値より次バッファ容量が小さくない場合は、ステップ
（Ｃ８）に移行する。このステップ（Ｃ８）では、次フ
レームの目標フレームレートを設定する。

【００３３】図８は次符号化終了時の予想バッファ容量
算出のフローチャートであり、図７のフローチャートに
於けるステップ（Ｃ１）の処理の概要を示す。１フレー
ムの伝送可能情報量を決定する（Ｄ１）。この１フレー
ム間の伝送可能情報量は、伝送速度によって求めること
ができる。そして、次フレーム伝送可能情報量を決定し
（Ｄ２）、次フレームのバッファ容量を決定する（Ｄ
３）。即ち、次の符号化開始タイミングに於けるバッフ
ァ占有量は、現時点のバッファ占有量に、次フレームの
予想発生情報量と伝送可能情報量との差分値を加算した
値となる。

【００３４】図９はバッファ閾値設定処理のフローチャ
ートであり、図５のフローチャートに於けるステップ
（Ａ５）の処理の概要を示す。先ず、ビットレート読出
しを行い（Ｅ１）、このビットレートが６４ｋｂｐｓよ
り小さいか否かを判定し（Ｅ２）、小さい場合は、１２
８ｋｂｐｓ未満用バッファ閾値を設定する（Ｅ３）。又
ビットレートが６４ｋｂｐｓより小さくない場合は、ビ
ットレートが１２８ｋｂｐｓと等しいか否かを判定し
（Ｅ４）、等しい場合は、１２８ｋｂｐｓ用バッファ閾
値を設定する（Ｅ５）。

【００３５】又ビットレートが１２８ｋｂｐｓと等しく
ない場合は、１９２ｋｂｐｓと等しいか否かを判定し
（Ｅ６）、等しい場合は、１９２ｋｂｐｓ用バッファ閾
値を設定する（Ｅ７）。又等しくない場合は、２５６ｋ
ｂｐｓと等しいか否かを判定し（Ｅ８）、等しい場合
は、２５６ｋｂｐｓ用バッファ閾値を設定する（Ｅ
９）。

【００３６】又ビットレートが２５６ｋｂｐｓと等しく
ない場合は、３２０ｋｂｐｓより大きいか否かを判定し
（Ｅ１０）、大きい場合は、３２０ｋｂｐｓ以上に対す
るバッファ閾値を設定し（Ｅ１１）、大きくない場合
は、３２０ｋｂｐｓ用バッファ閾値を設定する（Ｅ１
２）。

【００３７】例えば、ビデオレートとして前述のビット
レートを設定した場合、６４ｋｂｐｓの場合の第１の閾
値は、１２８ｋｂｐｓの場合の第１の閾値に比較して、
バッファメモリ３（図１参照）から送出するビットレー
トが小さいことにより、バッファメモリ３の占有量が多
くなり易い。従って、この場合のバッファ閾値としての
第１の閾値を大きい値に設定する。又目標フレームレー
トは、第１の閾値に対応して設定することができるが、
例えば、ビデオレートが６４ｋｂｐｓの場合より１２８
ｋｂｐｓとした方の目標フレームレートを大きくするこ
とができる。それにより、動画像符号化伝送に於いて、
ビデオレートとして設定して、大幅な駒落しを発生させ
ることなく、伝送することができる。

【００３８】図１０は本発明の第２の実施の形態のフロ
ーチャートであり、ステップ（Ｆ１）〜（Ｆ５）は、図
５に示す第１の実施の形態のフローチャートのステップ
（Ａ１）〜（Ａ５）と同様の処理を行うものであり、こ
の実施の形態に於いては、画質モード設定処理（Ｆ６）
を設けたものである。そして、それ以降のステップ（Ｆ
７）〜（Ｆ１１）は、図５に示す第１の実施の形態のフ
ローチャートのステップ（Ａ６）〜（Ａ１０）と同様の
処理を行うものであり、重複した説明は省略する。

【００３９】図１１は画質モードに対応したフレームレ
ートの変更処理のフローチャートであり、図１０のフロ
ーチャートに於けるステップ（Ｆ６）に於いて設定処理
した画質モードに対応した処理を示し、フレームレート
読込み処理を行い（Ｇ１）、画質モードが動き重視か否
かを判定し（Ｇ２）、動き重視でない場合は、画質重視
か否かを判定し（Ｇ３）、画質重視でもない場合は終了
とする。

【００４０】又画質モードが動き重視の場合は、フレー
ムレートが３０フレーム／ｓｅｃか否かを判定し（Ｇ
４）、３０フレーム／ｓｅｃの場合は処理を終了する。
又３０フレーム／ｓｅｃでない場合は、動き重視フレー
ムレートを設定して（Ｇ５）、処理を終了する。

【００４１】又画質モードが動き重視の場合は、フレー
ムレートが７．５フレーム／ｓｅｃか否かを判定し（Ｇ
６）、７．５フレーム／ｓｅｃの場合は処理を終了す
る。又７．５フレーム／ｓｅｃでない場合は、画質重視
フレームレートを設定して（Ｇ７）、処理を終了する。

【００４２】図１２は画質モードによるバッファ閾値変
更処理のフローチャートであり、図１０のフローチャー
トに於けるステップ（Ｆ５）の処理により設定したバッ
ファ閾値を読込み（Ｈ１）、画質モードが動き重視か否
かを判定し（Ｈ２）、動き重視の場合は、動き重視用バ
ッファ閾値を設定する（Ｈ６）。又動き重視でない場合
は、画質重視か否かを判定し（Ｈ３）、画質重視の場合
は、画質重視用バッファ閾値を設定する（Ｈ５）。又動
き重視でもなく、画質重視でもない場合は、標準バッフ
ァ閾値を設定する（Ｈ４）。又画質モードとして、前述
のビデオレートの設定を行うことができる。このビデオ
レート設定の場合、動き重視となる場合が一般的であ
り、前述の動き重視に準じたバッファ閾値設定処理を行
うことができる。

【００４３】図１３は本発明の第３の実施の形態のフロ
ーチャートであり、この実施の形態は、遅延制御設定処
理のステップ（Ｉ６）を有するもので、他のステップ
（Ｉ１）〜（Ｉ５）は、図５に於けるステップ（Ａ１）
〜（Ａ５）及び図１０に於けるステップ（Ｆ１）〜（Ｆ
５）と同様の処理を行うものであり、又ステップ（Ｉ
７）〜（Ｉ１１）は、図５に於けるステップ（Ａ６）〜
（Ａ１０）及び図１０に於けるステップ（Ｆ７）〜（Ｆ
１１）と同様の処理を行うものである。これらの同様の
処理のステップについては重複した説明を省略する。

【００４４】図１４は遅延制御によるバッファ閾値変更
処理のフローチャートであり、図１３に於けるステップ
（Ｉ６）の処理の概要を示し、バッファ閾値の読込み処
理を行い（Ｊ１）、遅延制御が低遅延であるか否かを判
定し（Ｊ２）、低遅延に設定されている場合は、低遅延
用バッファ閾値を設定し（Ｊ３）、処理を終了する。又
低遅延制御でない場合は、処理を終了する。即ち、バッ
ファメモリ３（図１参照）のオーバーフローするか否か
の判定のバッファ閾値を大きくすると、蓄積情報量を多
くすることが可能となって、符号化されたデータの送出
が遅れることになる。従って、低遅延に設定した場合
は、遅延が大きくならないように、バッファ閾値を設定
することになる。

【００４５】図１５は本発明の第４の実施の形態のフロ
ーチャートであり、この実施の形態は、フレームレート
の更新処理をフレーム毎ではなく、設定したフレーム数
毎に行う場合であり、ステップ（Ｋ１）〜（Ｋ６）は、
図５のフローチャートに於けるステップ（Ａ１）〜（Ａ
６）と同様であり、重複した説明は省略する。

【００４６】ステップ（Ｋ６）に於いて１フレーム符号
化終了と判定した場合、フレーム終了カウンタをカウン
トアップし（Ｋ７）、フレーム終了カウンタのカウント
値が設定値と等しいか否かを判定し（Ｋ８）、等しくな
い場合はステップ（Ｋ１２）に移行し、等しい場合は、
フレーム終了カウンタをクリアし（Ｋ９）、バッファ容
量読込み処理を行い（Ｋ１０）、バッファ容量に対応し
てフレームレート更新処理を行う（Ｋ１１）。

【００４７】又１フレームの符号化処理が継続している
場合は、ステップ（Ｋ１３）に移行して、符号化処理
（Ｋ１３）を継続することになる。又ステップ（Ｋ１
２）により符号化フレームの設定処理を行って、次に符
号化処理（Ｋ１３）に移行する。従って、予め設定した
フレーム毎にフレームレートの更新処理を行うか否かを
判定することになり、フレーム毎に更新処理を行うか否
かを判定する場合に比較して処理が容易となる。

【００４８】

【発明の効果】以上説明したように、本発明は、バッフ
ァメモリ３の占有量と伝送速度や画質モード等の設定情
報とを基に、次の符号化開始タイミングに於けるバッフ
ァメモリ３の占有量を予測し、この予測した占有量が閾
値より大きくなる時は、目標フレームレートを切替える
ものであり、この目標フレームレートの切替えにより、
極端に駒落ちのフレーム数が増加することはなくなり、
従って、受信側の再生画像の動きが滑らかとなる利点が
ある。

【図面の簡単な説明】

【図１】本発明の実施の形態の画像符号化装置の説明図
である。

【図２】フレームレートの説明図である。

【図３】量子化ステップと発生情報量及び画質モードと
目標フレームレートとの関係説明図である。

【図４】本発明の第１の実施の形態の動作説明図であ
る。

【図５】本発明の第１の実施の形態のフローチャートで
ある。

【図６】フレームレート設定処理のフローチャートであ
る。

【図７】フレームレート更新処理のフローチャートであ
る。

【図８】次符号化終了時の予想バッファ容量算出のフロ
ーチャートである。

【図９】バッファ閾値設定処理のフローチャートであ
る。

【図１０】本発明の第２の実施の形態のフローチャート
である。

【図１１】画質モードに対応したフレームレートの変更
処理のフローチャートである。

【図１２】画質モードによるバッファ閾値変更処理のフ
ローチャートである。

【図１３】本発明の第３の実施の形態のフローチャート
である。

【図１４】遅延制御によるバッファ閾値変更処理のフロ
ーチャートである。

【図１５】本発明の第４の実施の形態のフローチャート
である。

【図１６】従来例の画像符号化装置の説明図である。

【図１７】従来例の画像符号化処理のフローチャートで
ある。

【図１８】従来例の駒落し処理の説明図である。

【符号の説明】

１ フレームメモリ ２ 符号化処理部 ３ バッファメモリ ４ 制御部 ５ 操作部 １１ ＤＣＴ演算部 １２ 量子化部 １３ 可変長符号化部 ２１ 設定情報読取部 ２２ 量子化ステップ設定部 ２３ 目標フレーム設定部 ２４ 占有量監視部

Claims (4)

【特許請求の範囲】
1. 【請求項１】 入力画像信号を符号化処理し、バッファ
   メモリを介して送出する画像符号化方法に於いて、 前記バッファメモリの占有量を監視し、該占有量と設定
   情報とを基に次の符号化開始タイミングに於ける前記バ
   ッファメモリの占有量を予測し、該予測した占有量が閾
   値の範囲外の時に、目標フレームレートを切替えて、該
   目標フレームレートに従ってフレーム単位の符号化を行
   う過程を含むことを特徴とする画像符号化方法。
2. 【請求項２】 設定した画質モードが動き重視モードか
   画質重視モードかに応じて前記目標フレームレートを切
   替える過程を含むことを特徴とする請求項１記載の画像
   符号化方法。
3. 【請求項３】 ビデオレートを設定し、該ビデオレート
   に応じて前記目標フレームレートを決定する過程を含む
   ことを特徴とする請求項１記載の画像符号化方法。
4. 【請求項４】 入力画像信号を加えるフレームメモリ
   と、符号化処理部と、バッファメモリと、制御部と、操
   作部とを有する画像符号化装置に於いて、 前記制御部は、前記操作部による設定情報を読取り、且
   つ前記バッファメモリの占有量を監視し、前記設定情報
   と前記占有量とを基に、次符号化開始タイミングに於け
   る前記バッファメモリの占有量を予測し、該予測した占
   有量が閾値を超える時に目標フレームレートを切替える
   目標フレームレート設定部を有することを特徴とする画
   像符号化装置。