JP3529246B2 - Karaoke video playback device - Google Patents
Karaoke video playback deviceInfo
- Publication number
- JP3529246B2 JP3529246B2 JP20604597A JP20604597A JP3529246B2 JP 3529246 B2 JP3529246 B2 JP 3529246B2 JP 20604597 A JP20604597 A JP 20604597A JP 20604597 A JP20604597 A JP 20604597A JP 3529246 B2 JP3529246 B2 JP 3529246B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- data
- karaoke
- time
- mood
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000036651 mood Effects 0.000 claims description 43
- 230000000694 effects Effects 0.000 claims description 42
- 238000012545 processing Methods 0.000 claims description 23
- 230000003287 optical effect Effects 0.000 claims description 13
- 239000000463 material Substances 0.000 description 52
- 238000000034 method Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 101000969688 Homo sapiens Macrophage-expressed gene 1 protein Proteins 0.000 description 2
- 102100021285 Macrophage-expressed gene 1 protein Human genes 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000007654 immersion Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Landscapes
- Reverberation, Karaoke And Other Acoustics (AREA)
Description
【発明の詳細な説明】
【0001】
【発明の属する技術分野】この発明は、カラオケ楽曲の
伴奏音楽の演奏時にムード映像をディスプレイに表示す
るカラオケ映像再生装置に関するものである。
【0002】
【従来の技術】従来、カラオケ装置において、カラオケ
伴奏音楽の演奏時にディスプレイに表示されるムード映
像は、カラオケ用パッケージソフトなどのように各カラ
オケ楽曲毎に1つずつ専用に作成されていた。このパッ
ケージソフトは、CDなどの記録メディアに伴奏音楽と
歌詞入りのムード映像が一体的に収録されて提供され
る。そのため、カラオケ楽曲の曲風に合致するとともに
歌詞に込められている首尾一貫したストーリー性を備え
たムード映像を表示することができる。しかし、各カラ
オケ楽曲毎に専用のムード映像を制作しているため、膨
大な制作時間と制作コストを要する。また、絶え間なく
リリースされる新曲に対応して素早くその楽曲のカラオ
ケソフト(伴奏音楽と歌詞入りムード映像)を提供する
ことも困難である。さらに、多数のカラオケ楽曲に対応
するためには、多数のカラオケ用パッケージソフトを用
意する必要があり、記録メディアの数など記録容量やそ
の設置場所に要するスペースが膨大なものとなる。
【0003】上述した方式に対し、長時間分の映像を映
像データベースに格納しておき、このデータベース中の
任意の格納位置から素材映像(長時間分の映像の一部
分)を適当に選んで取り出し、その素材映像を演奏期間
中に順次切り替えてつなぎ合わせながら再生することで
一連のムード映像とする方式がある。新曲のリリースに
素早く対応できるとともに、少ない記憶容量で膨大な楽
曲数を収容できる通信カラオケシステムの普及に伴っ
て、この方式を採用するカラオケ装置が現在主流となり
つつある。この共有の素材映像を各カラオケ楽曲で使い
回す共用映像データベース方式の採用によって、ムード
映像の制作時間や制作コストあるいは記録容量や記録メ
ディアの設置場所を大幅に削減することが可能となっ
た。しかし、多数の素材映像を無作為に各カラオケ楽曲
で使い回していたのでは、カラオケ楽曲の曲風とムード
映像とが全く合わなくなる。そこで、特許255042
3号公報(従来例)に開示されている技術では、共用映
像データベース方式を採用しつつ、楽曲の曲風とムード
映像を合致させようとしている。この技術の詳細は以下
の通りである。
【0004】各カラオケ楽曲にはその楽曲の演奏中に使
用する素材映像を指定するためのインデックス情報が付
帯している。インデックス情報は「演奏楽曲に関連し
た」情報である。この演奏楽曲に関連した情報は、具体
的にはジャンルであり膨大なカラオケ楽曲を複数に分類
するためのものである。
【0005】映像データベースに格納されている長時間
分の映像は、素材映像を単位として処理される。この素
材映像は1シーンなど適宜な映像表現毎に区切られてい
る。この素材映像もジャンルによって複数のグループに
分類される。従って、各カラオケ楽曲と所定の素材映像
群とが、ジャンルを仲介にして対応付けされることにな
る。
【0006】また、インデックス情報にはパラメータが
付帯している。パラメータは、そのカラオケ楽曲の演奏
期間中における映像切り替えポイントを複数設定するポ
イント時間データと、映像切り替え時における映像効果
を記述している。なお映像効果は各楽曲毎にそれぞれ1
つずつ指定されている。
【0007】そして、あるカラオケ楽曲がリクエストさ
れると、その楽曲に付帯したジャンルに対応する素材映
像群から、映像切り替えポイントの数に応じた数の素材
映像がランダムに選択される。さらに、この複数の素材
映像を再生する時の順番もランダムに設定される。
【0008】カラオケ楽曲が演奏されると、最初の素材
映像の収録先頭位置を再生開始位置として連続した映像
が次の映像切り替え時間まで再生され続ける。最初の映
像切り替えポイントの時間が来ると、指定された映像効
果によって次の素材映像に切り替わる。このようにし
て、楽曲の演奏期間中に順次素材映像を切り替えてムー
ド映像としている。
【0009】
【発明が解決しようとする課題】現在でも、各カラオケ
楽曲専用に制作されたムード映像とともに歌唱する醍醐
味に大きな魅力を感じているカラオケ愛好家はかなり多
いはずである。しかし、1万曲以上のカラオケ楽曲が存
在する現在においては、上述した理由からこの方式より
もムード映像をカラオケ楽曲数よりはるかに数が少ない
素材映像を各楽曲で使い回す方式を選択せざるを得ない
のが現状であろう。
【0010】確かに、上記従来例に開示された技術で
は、各カラオケ楽曲をジャンル毎に素材映像を振り分け
ることで各カラオケ楽曲の曲風とムード映像を合致させ
ようとしている。しかし、楽曲の演奏とともに時々刻々
と変化する情景や歌詞に込められたストーリーの起承転
結などは、各楽曲毎に全く異なっている。そして、ムー
ド映像は、演奏中のその時々で想起される「イメージに
合った映像」がストーリー性と合致した「特定の順番」
で展開されるものである。にもかかわらず、従来例で
は、1万曲以上という膨大な数のカラオケ楽曲と、数十
時間以上ある長時間分の映像を極めて数が少ないジャン
ルによって分類してしまっている。すなわち、各ジャン
ルに属する膨大な数の楽曲の中の1つに対し、各ジャン
ルに属する多数の素材映像からランダムに選択されたほ
んの数シーンの素材映像を適当に演奏時間内に割り当て
て使用している。
【0011】多数の素材映像のそれぞれが全く異なる内
容を有しているにもかかわらず、表面的な関連性のみで
分類された素材映像をすべて同等に扱い、その中から適
当に選んで適当につなぎ合わせている。すなわち、全く
関連性のない複数の素材映像を前後の脈絡を無視した順
番で編集したものをムード映像としている。従って、従
来例による技術では、演奏中の情景変化やストーリー展
開などにムード映像を追従させることなど完全に不可能
であると結論づけられる。場合によっては、演奏中の楽
曲のイメージとムード映像とが全く合致しないこともあ
り得る。
【0012】また、素材映像をジャンルで分類すること
は、楽曲毎に使用できる素材映像の数を自ら限定してし
まうことも意味する。すなわち、あるジャンルの楽曲が
選択されると他のジャンルに属する素材映像がすべて無
駄となる。また、新規な映像を追加してもこの映像が使
用される確率も低く、データ量を増加するだけの結果と
なる。これでは、共有映像データベースによって収録映
像を有効利用するという本来の目的を十分に達成してい
るとは言い難い。
【0013】さらに、選択される各素材映像はその収録
開始位置を再生開始位置として次の映像切り替えポイン
トまで再生され続けることになる。各映像切り替えポイ
ント間の時間間隔と、各素材映像の収録時間を同程度に
したとしても、各楽曲ごとに演奏時間が異なるため、最
後に再生される素材映像は、どうしても中途半端で終わ
ってしまう。楽曲の終了という「余韻」に浸ることなく
突然ムード映像が途切れてしまっては、歌唱者にとって
大いに不満が残る。
【0014】加えて、楽曲毎に映像効果が一律であるこ
とも問題である。ストーリーに追従した素材映像がその
時々で最適な映像効果で切り替わりながらムード映像が
展開されることによって楽曲の歌詞に込められたストー
リーの起承転結をより際だたせる効果を生む。たとえ、
それぞれの映像切り替わりポイントで映像効果を変えた
としても、「前後の脈絡が全くない映像」を安易な映像
効果でごまかしていると言わざるを得ない。
【0015】結局のところ、この従来例は、新曲の追加
など楽曲の増加に対し、素材映像をいかにして簡単に割
り当てるかを目的とした技術であり、ジャンルなど楽曲
における表面的なイメージとムード映像とが全くかけ離
れないようにするだけの効果しか得られない。
【0016】そこで本発明は、使い回しの素材映像を使
用しながらも、演奏中に変化する楽曲の内容に合致した
ムード映像を表示できるカラオケ映像再生装置を提供す
ることを目的としている。
【0017】
【課題を解決するための手段】この発明に係るカラオケ
映像再生装置は、つぎの事項(1)〜(7)により特定
されるものである。
(1)映像データベース、映像データベースアクセス手
段、映像再生手段、映像効果処理手段、制御手段を備
え、カラオケ楽曲毎に作成された台本情報に基づいてカ
ラオケ演奏時にムード映像を出力するカラオケ映像再生
装置である。
(2)映像データベースは、長時間分の映像データを多
数の光ディスクに格納する。
(3)映像データベースアクセス手段は、並列的に動作
可能な複数台の光ディスク駆動装置を含み、映像データ
ベース中の指定された光ディスクの指定された位置の映
像データを読み出す。
(4)映像再生手段は、複数台の光ディスク駆動装置が
出力する複数系統の映像データをそれぞれ再生して複数
系統の映像信号を出力する。
(5)映像効果処理手段は、複数系統の映像信号を入力
し、その映像信号に指定された映像効果処理を施しなが
ら一方の系統の映像信号から他方の系統の映像信号に切
り替えて出力する。
(6)台本情報は、映像切り替えポイントの時間を複数
指定するポイント時間データと、各映像切り替えポイン
トの前後にてそれぞれ出力すべき各映像データの格納位
置をそれぞれ指定する格納位置データと、複数種類の映
像効果の中から各映像切り替えポイントで使用する各映
像効果をそれぞれ指定する映像効果データとを含む。
(7)制御手段は、台本情報のポイント時間データおよ
び格納位置データに従って各映像効果切り替えポイント
間で使用する映像データを映像データベースアクセス手
段により光ディスク駆動装置を切り替えながら読み出さ
せるとともに、各映像効果切り替えポイントにて映像効
果データに従って映像効果処理手段を動作させる。
【0018】
【0019】
【0020】
【0021】
【0022】
【0023】
【発明の実施の形態】
===カラオケ装置の構成と基本動作===
図1は、本発明のカラオケ装置における実施例の構成図
である。カラオケ装置1は、通信カラオケシステムにお
ける演奏端末とほぼ同じ構成をとり、その基本動作もほ
ぼ同様である。内部にCPU、RAM、ROMを含む中
央制御部11がホスト装置60より電話回線50を通じ
て配信されるカラオケデータをモデム23を介して受け
取りハードディスク装置24に蓄積していく。そして、
リモコン送信器12や操作パネル13から入力された選
曲情報を操作制御部15を介して受け取ると、ハードデ
ィスク装置24より該当するカラオケデータを取り出
す。カラオケデータ中のMIDIデータなど伴奏音楽生
成データはシンセサイザ16に順次転送され、ここで生
成された伴奏音楽はミキシングアンプ18でマイクロホ
ン17からの歌唱者の音声信号と混合されてスピーカ1
9に出力される。また、中央制御部11はカラオケデー
タ中の歌詞描出データを処理することで、伴奏音楽に同
期した歌詞画像をビデオRAM20内に順次ビットマッ
プ展開させていく。
【0024】一方、ムード映像は適宜なデータ形式によ
って映像データベース30に格納されている。映像デー
タ再生部40は、映像データベース30から再生時の時
間にして適宜な時間長さの素材映像を順次取り出して再
生するとともに、この素材映像をつなぎ合わせるように
切り替えて一連のムード映像に編集する。映像データ再
生部40から出力された映像信号は、映像制御部21で
歌詞画像と合成されディスプレイ22に歌詞がスーパー
インポーズされたムード映像として表示される。次に、
本発明の要件であるこのムード映像の再生システムにつ
いて説明する。
【0025】===ムード映像再生システム===
映像データベース
本実施例において、ムード映像は、MPEG1形式によ
ってデジタル化された映像データとしてCD−ROMに
収録されている。長時間分の映像に対応するため、多数
のCD−ROMが用意されている。各CD−ROMに
は、通常のビデオCDと同じく、再生時間にして74分
の映像に相当する映像データが記録されている。所望の
格納位置にある映像データは、CD−ROMのデータセ
クタ毎に割り当てられたセクタアドレスによって指定す
ることができる。所望のセクタアドレスには、CD−R
OMに収録されている映像を最初から再生したときの経
過時間に対応したタイムコード(分/秒/フレーム<1
秒=75フレーム>)を指定することによって1秒以下
の時間単位でアクセスできる(この辺りの規格はビデオ
CDに準拠しているので詳細な説明は省略する。)。
【0026】従って、本発明で言う素材映像は、1シー
ンなどの映像表現を単位として指定されるものではな
く、1枚のCD−ROMに記録された収録時間分の映像
から任意のセクタアドレスと、ここを再生開始位置とし
た任意の再生時間長さとによって指定される。これによ
って、素材映像は事実上無数に存在することになる。
【0027】ハードウエア構成
図2は、ムード映像再生システムにおけるハードウエア
の中核である、映像データベース30および映像データ
再生部40の構成をより詳細に示している。映像データ
ベース30は、並列動作する3系統のCD―ROMチェ
ンジャ31〜33によって構成され、長時間分の映像を
収録した多数のCD−ROMがこの3系統のCD−RO
Mチェンジャ31〜33に分納されている。中央制御部
は、任意の系統のCD−ROMチェンジャ31〜33を
制御し、そこに格納されている任意のCD−ROMをそ
の駆動装置にセットさせ、そのCD−ROMに記録され
ている任意の素材映像データの読み取りと出力をさせ
る。また、中央制御部は、素材映像データを読み出して
いるCD−ROMチェンジャと次に素材映像データの読
み取りを行わせるCD−ROMチェンジャが異なる場
合、該当するCD−ROMを次のCD−ROMチェンジ
ャの駆動装置に前もってセットさせておく。そうするこ
とによって、CD−ROMが駆動装置にセットされるま
でのタイムラグが吸収される。
【0028】一方、映像データ再生部40は、2系統の
MPEGデコーダ41、42と、この2系統のMPEG
デコーダ41、42の出力経路に接続された映像効果処
理部43を含んでいる。2系統のMPEGデコーダ4
1、42は、それぞれが3系統のCD―ROMチェンジ
ャ31〜33の出力経路に接続されている。そして、3
系統のCD−ROMチェンジャ31〜33から出力され
るMPEG1形式の映像データを入力し、そのうちの1
つの経路からの映像データを選択して復号処理し、ムー
ド映像を再生する。さらに、この2系統のMPEGデコ
ーダ41、42は、並列動作も可能であり、交互に素材
映像データの処理を受け持つようになっている。
【0029】映像効果処理部43は、MPEGデコーダ
41、42からの2系統の映像信号を入力し、その1系
統の映像信号を出力する切り替え動作のほかに、必要に
応じて、並列して入力される2系統の映像信号に各種映
像効果処理(オーバーラップ合成、フェードイン/フェ
ードアウトやワイプによる映像の切り替えなど)を加え
てその映像効果処理後の映像信号を出力する動作もす
る。中央制御部は、これらのハードウエアを後述する台
本情報に従って制御し、再生した素材映像を適宜につな
ぎ合わせて一連のムード映像に編集する。次に、その台
本情報とそれに基づく中央制御部のムード映像編集処理
について説明する。
【0030】台本情報
前出の台本情報は、ハードディスク装置に楽曲番号に対
応させて格納されている。従って、各カラオケ楽曲と台
本情報とは1対1の関係で対応づけられている。なお、
カラオケ楽曲ID―台本ID対照表などを用意すること
で各楽曲と台本情報とを対応づけてもよい。図3に台本
情報の概略を示した。この台本情報には、楽曲番号と、
映像切り替えポイントと、映像効果、および素材映像格
納位置が記述されている。1つのカラオケ楽曲の演奏期
間中に複数設定される映像切り替えポイントは、ポイン
ト時間データによって指定されている。このポイント時
間データはこの楽曲における演奏開始時点からの経過時
間を記述している。映像効果は、各映像切り替えポイン
トにおいて素材映像が切り替わるときの映像効果のタイ
プと、その効果をどの位の時間をかけて行うかを示す所
要時間とを指定している。なお、本実施例において、前
述の映像切り替えポイント時間は、この所要時間を考慮
して映像効果処理を開始する時間としてある。素材映像
格納位置は、ディスクの格納場所と、そのディスク内で
の時間的位置によって指定されている。ディスクの格納
場所は、CD−ROMチェンジャのIDとそのチェンジ
ャ内でのディスク番号で指定し、時間的位置は、前述し
た分/秒/フレームによって指定している。また、素材
映像の格納位置は、連続した映像切り替えポイント間で
同じCD−ROMチェンジャが指定されないようにも配
慮されており、ここでも、上述したタイムラグの発生を
回避している。なお、ディスクの格納場所は、各CD−
ROMに付帯したディスクIDと映像データベース内で
の格納場所を対応づけた対照表などを用意することによ
って、直接ディスクIDで指定してもよい。
【0031】上述した台本情報を用意することによっ
て、各映像切り替えポイント間で使用される素材映像
は、ジャンルなど楽曲に関連させた中間媒体的な情報を
介さずに直接的に一意的に指定されている。しかも、1
フレーム時間である1/75秒単位で再生開始位置を指
定することができる。そのため1シーンはおろか、1カ
ット中のさらに一部分の映像さえも素材映像として自在
に指定することもできる。
【0032】ムード映像編集処理
中央制御部は、台本情報に従って各映像切り替えポイン
ト間で使用する素材映像を適宜に編集して一連のムード
映像に編集する。図4にその編集処理におけるフローチ
ャートを示した。カラオケ楽曲がリクエストされると、
そのカラオケ楽曲に対応する台本情報がハードディスク
装置より読み出される。楽曲の演奏が開始されると、演
奏経過時間の計測も開始する。そして、映像切り替えポ
イントに該当する時間と比較する。さらに、最初の映像
切り替えポイント(演奏開始時点)に記述されている素
材映像格納位置に従って、適宜なCD−ROMチェンジ
ャを制御し適宜なCD−ROMをその駆動装置にセット
させ、記述された時間位置を先頭としてデータを出力さ
せる。そして、適宜な系統のMPEGデコーダにこの映
像データの復号処理をリアルタイムで行わせて、その映
像信号を出力させる。出力された映像信号は、映像効果
処理部、映像制御部を経由してディスプレイに出力され
る。(101〜103)◎
次の映像切り替えポイント時間になると、それまでの素
材映像を復号した系統とは別の系統のMPEGデコーダ
に次の素材映像データの復号処理を行わせる。このと
き、映像効果処理部を制御して、指定された映像効果処
理を行いながら映像の切り替え制御を行う(105、1
06)。以後、同様にして指定されたポイント時間に指
定されたCD−ROMの指定された時間位置からの映像
を再生させて順々に切り替えていく(107→10
3)。
【0033】===その他の実施例など===
台本情報は、カラオケデータとは独立したデータとして
ハードディスクに格納されているが、各カラオケ楽曲の
カラオケデータに付帯させることも可能である。また、
台本情報をハードディスクに格納せず、台本情報用のC
D−ROMを用意してもよい。この場合は、楽曲の演奏
に先だって、このCD−ROMから該当する台本情報を
読み出し、中央制御部内のRAMなどに一時格納するこ
とでムード映像の編集処理が行える。また、新曲を追加
したり台本情報を更新する場合は、ホスト装置から新規
な台本情報が適時に配信されるようにしてもよい。複数
のCD−ROMチェンジャの代わりに、多数のCD−R
OMを格納する1台のディスクトレイと、複数のCD−
ROM駆動装置からなる構成とし、搬送装置によって、
ディスクトレイから任意のCD−ROMを取り出して所
定のCD−ROM駆動装置にセットする方式を採用して
もよい。図5にその1例を示した。中央制御部の制御の
下、搬送装置45がディスクトレイ34よりCD−RO
Mを取り出し、3系統のCD−ROM駆動装置31b〜
33bのいずれかにセットする。そして、搬送装置45
が次にデータが読み出されるCD−ROMを別系統のC
D−ROM駆動装置に予めセットしておくことで、素材
映像の切り替わり時に発生するタイムラグをなくすよう
にしている。
【0034】なお、映像データはMPEG1形式に限ら
ずMPEG2や他のデジタルデータ、あるいは光学式ア
ナログビデオディスクなどのようなアナログの映像信号
としてもよい。そして、それぞれのデータ形式の信号を
格納する適宜な記録媒体による映像データベースと、そ
れぞれの形式の映像データを処理してムード映像を再生
するための映像再生手段を備えるようにすることも可能
である。もちろん、カラオケ装置本体も通信カラオケシ
ステム用の演奏端末である必要はなく、ムード映像を共
用映像データベース方式によって編集するタイプのカラ
オケ装置ならいかなるものでもよいことは言うまでもな
い。
【0035】
【発明の効果】各カラオケ楽曲に対応した台本情報に従
って映像データベースに収録されている映像から取り出
される素材映像は、ジャンルなど楽曲に関連した情報を
介さずに任意の再生開始位置で直接指定されるととも
に、指定された再生時間長さと指定された順番によって
再生される。そのため、すべてのカラオケ楽曲におい
て、その演奏期間中にその時々で変化する内容に合致し
た部分だけを素材映像としてタイミング良く再生するこ
とができる。その結果、楽曲の時系列的な変化にも十分
に追従した内容のムード映像を表示することができる。
加えて、映像データベース中のすべての収録映像を無駄
なく使用することができる。翻って、少ない映像データ
量でも多彩なムード映像に編集することができる。その
ため、共用映像データベースに格納する映像データの容
量を従来よりさらに削減することも可能となる。
【0036】もちろん、演奏期間における最後の素材映
像をその楽曲の演奏時間や演奏終了の雰囲気に合わせて
自在に指定できる。そのため、中途半端な映像のまま楽
曲の演奏が終了してしまうことがない。
【0037】また、並列動作可能な複数系統の映像デー
タベースアクセス手段と、並列動作可能な複数系統の映
像再生手段とを備えることによって、素材映像の再生切
り替え時に発生するタイムラグを回避することができ
る。また、複数系統の映像再生手段からの映像信号を並
列に入力して適宜な映像効果処理を行う映像効果処理手
段を備えているため、素材映像の切り替わり時をよりス
ムースに、より自然に楽曲の内容に合致させて映像移行
することが可能となる。
【0038】さらに、長時間分の映像を圧縮符号化した
デジタル動画データとして光ディスクに格納すること
で、光ディスクのタイムコードに基づいて1秒以下の単
位で動画データの任意の格納位置にアクセスし、任意の
再生時間分の動画データを取り出すことができる。その
ため、微妙なストーリー展開にもきめ細かく追従した素
材映像をより的確なタイミングで再生するできる。Description: BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a karaoke picture reproducing apparatus for displaying a mood picture on a display when accompaniment music of karaoke music is performed. 2. Description of the Related Art Conventionally, in a karaoke apparatus, a mood image displayed on a display at the time of playing karaoke accompaniment music is created exclusively for each karaoke music piece, such as karaoke package software. Was. This package software is provided by integrally recording a mood image including accompaniment music and lyrics on a recording medium such as a CD. Therefore, it is possible to display a mood image that matches the style of the karaoke song and has a consistent storyline contained in the lyrics. However, since a special mood image is produced for each karaoke song, a huge production time and production cost are required. It is also difficult to quickly provide karaoke software (accompaniment music and mood video with lyrics) for new songs that are constantly released. Furthermore, in order to support a large number of karaoke songs, it is necessary to prepare a large number of karaoke package software, and the recording capacity such as the number of recording media and the space required for the installation location are enormous. In contrast to the above-described method, a long-time video is stored in a video database, and a material video (a part of a long-time video) is appropriately selected and extracted from an arbitrary storage position in the database. There is a method in which a series of mood images is formed by sequentially switching the material images during a performance period and playing back the connected images. With the spread of a communication karaoke system that can quickly respond to the release of a new song and can accommodate a large number of songs with a small storage capacity, karaoke apparatuses adopting this method are becoming mainstream at present. The adoption of the shared video database system, which uses the shared material video for each karaoke song, has made it possible to significantly reduce the mood video production time and production cost, the recording capacity, and the location of the recording media. However, if a large number of material videos are randomly used in each karaoke song, the karaoke song style and mood video will not match at all. Then, patent 2555042
In the technology disclosed in Japanese Patent Publication No. 3 (conventional example), the music style of the music and the mood video are matched while adopting the shared video database system. The details of this technique are as follows. [0004] Each karaoke song is accompanied by index information for designating a material video used during the performance of the song. The index information is information “related to the musical composition”. The information related to the performance music is specifically a genre and is used for classifying a large number of karaoke music into a plurality. The long-time video stored in the video database is processed in units of material video. This material video is divided into appropriate video expressions such as one scene. These material videos are also classified into a plurality of groups according to genres. Therefore, each karaoke song and a predetermined material video group are associated with each other with the genre as an intermediary. [0006] A parameter is attached to the index information. The parameters describe point time data for setting a plurality of video switching points during the performance period of the karaoke song, and video effects at the time of video switching. The video effect is 1 for each song.
Are specified one by one. [0007] When a certain karaoke song is requested, a number of source videos corresponding to the number of video switching points are randomly selected from a source video group corresponding to a genre attached to the song. Further, the order in which the plurality of material videos are reproduced is also set at random. [0008] When a karaoke song is played, a continuous video is continuously reproduced until the next video switching time with the recording start position of the first material video as a reproduction start position. When the time of the first video switching point comes, the video is switched to the next material video according to the specified video effect. In this way, the material video is sequentially switched during the performance period of the music to make the mood video. [0009] Even now, there should be quite a lot of karaoke enthusiasts who feel the great attraction of singing along with the mood video produced exclusively for each karaoke song. However, at present, when there are more than 10,000 karaoke songs, for the above-mentioned reason, there is no choice but to choose a method of using mood videos, which are far fewer in number than karaoke songs, in each song. It would not be possible at present. Certainly, in the technique disclosed in the above-mentioned conventional example, the karaoke music of each karaoke music is matched with the mood video by allocating the material video to each genre. However, scenes that change moment by moment with the performance of the music, and the origination and relocation of the story contained in the lyrics are completely different for each music. And the mood video is a “specific order” where the “video that matches the image” recalled at each time during the performance matches the storyline
It is developed in. Nevertheless, in the conventional example, an enormous number of karaoke songs of 10,000 or more and videos of a long time of several tens of hours or more are classified according to extremely few genres. That is, for one of a huge number of songs belonging to each genre, material videos of only a few scenes selected at random from a large number of material videos belonging to each genre are appropriately allocated and used within the performance time. ing. [0011] Even though each of a large number of material images has completely different contents, all material images classified only based on their superficial relevance are treated equally, and an appropriate one is selected from among them. They are stitched together. That is, a mood video is obtained by editing a plurality of material videos that are completely unrelated in the order in which the contexts before and after are ignored. Therefore, it can be concluded that the technique according to the prior art is completely impossible to follow a mood image to a scene change or a story development during performance. In some cases, the image of the music being played may not match the mood video at all. [0012] Classifying material videos by genre also means that the number of material videos that can be used for each music piece is limited by itself. That is, when a song of a certain genre is selected, all material videos belonging to another genre are wasted. Further, even if a new video is added, the probability that this video will be used is low, and only the data amount is increased. In this case, it cannot be said that the original purpose of effectively using the recorded video by the shared video database is sufficiently achieved. Further, each selected material video is continuously reproduced until the next video switching point with the recording start position as the reproduction start position. Even if the time interval between each video switching point and the recording time of each material video are the same, the playing time differs for each song, so the material video that is played last will inevitably end halfway . Suddenly, the singer will be dissatisfied if the mood video is suddenly interrupted without immersion in the "finish" of the end of the song. In addition, there is another problem that the video effect is uniform for each music piece. The mood video is developed while the material video following the story is switched with the optimal video effect from time to time, thereby creating an effect that makes the story contained in the lyrics of the song more clear and conclude. for example,
Even if the video effect is changed at each video switching point, it must be said that the "video without any context before and after" is cheated by the easy video effect. After all, this conventional example is a technique aimed at how to easily assign a material image to an increase in music such as the addition of a new music. The only effect that can be obtained is to make sure that it is not far from the image. SUMMARY OF THE INVENTION It is an object of the present invention to provide a karaoke video reproducing apparatus capable of displaying a mood video that matches the content of a musical piece that changes during a performance while using a reusable material video. [0017] A karaoke video reproducing apparatus according to the present invention is specified by the following items (1) to (7). (1) A karaoke video reproducing apparatus that includes a video database, a video database access unit, a video reproducing unit, a video effect processing unit, and a control unit, and outputs a mood video during a karaoke performance based on script information created for each karaoke song. is there. (2) The video database stores video data for a long time on many optical disks. (3) The video database access means includes a plurality of optical disk drive devices that can operate in parallel, and reads video data at a specified position of a specified optical disk in a video database. (4) The video reproducing means reproduces the video data of a plurality of systems output from the plurality of optical disk drive devices and outputs a plurality of video signals. (5) The video effect processing means inputs a plurality of systems of video signals, switches the video signals of one system to the video signals of the other system and outputs the video signals while performing the specified video effect processing on the video signals. (6) script information, and point time data specifying multiple time video switching point, and storing position data respectively specify the storage location of each video data to be outputted at the front and rear of the video switching point, a plurality of types Of the
And a video effect data designating each respective movies <br/> image effects to be used for each video switching point from the image effects. (7) The control means causes the video database access means to read out the video data to be used between the video effect switching points while switching the optical disc drive device according to the point time data and the storage position data of the script information, and to switch each video effect. At the point, the video effect processing means is operated according to the video effect data. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS === Configuration and Basic Operation of Karaoke Apparatus === FIG. 1 shows an embodiment of a karaoke apparatus according to the present invention. FIG. The karaoke apparatus 1 has almost the same configuration as the performance terminal in the communication karaoke system, and its basic operation is almost the same. The central control unit 11 including a CPU, a RAM, and a ROM receives karaoke data distributed from the host device 60 through the telephone line 50 via the modem 23 and stores the karaoke data in the hard disk device 24. And
When the music selection information input from the remote control transmitter 12 or the operation panel 13 is received via the operation control unit 15, the corresponding karaoke data is extracted from the hard disk device 24. Accompaniment music generation data such as MIDI data in the karaoke data is sequentially transferred to a synthesizer 16, and the generated accompaniment music is mixed with a singer's voice signal from a microphone 17 by a mixing amplifier 18, and
9 is output. Further, the central control unit 11 processes the lyrics rendering data in the karaoke data, and sequentially develops the lyrics images synchronized with the accompaniment music into the video RAM 20 in the bitmap. On the other hand, the mood video is stored in the video database 30 in an appropriate data format. The video data reproduction unit 40 sequentially retrieves and reproduces material videos of an appropriate time length from the video database 30 as a time at the time of reproduction, and switches the material videos so as to be connected to edit them into a series of mood videos. . The video signal output from the video data reproducing unit 40 is combined with the lyrics image by the video control unit 21 and displayed on the display 22 as a mood video in which the lyrics are superimposed. next,
The mood video reproduction system which is a requirement of the present invention will be described. === Mood Video Reproduction System === Video Database In this embodiment, the mood video is recorded on a CD-ROM as video data digitized in the MPEG1 format. A large number of CD-ROMs are prepared in order to handle a long-time video. In each CD-ROM, video data corresponding to a video of 74 minutes in reproduction time is recorded as in a normal video CD. The video data at the desired storage location can be specified by a sector address assigned to each data sector of the CD-ROM. The desired sector address contains a CD-R
Time code (minute / second / frame <1) corresponding to the elapsed time when the video recorded in the OM is reproduced from the beginning
By designating “second = 75 frames>”, access can be made in a time unit of 1 second or less (a detailed description is omitted because the standard around this is based on a video CD). Therefore, the material video referred to in the present invention is not specified in units of a video expression such as one scene, but an arbitrary sector address and an arbitrary sector address from the video for the recording time recorded on one CD-ROM. , And an arbitrary playback time length with this as a playback start position. As a result, there are virtually countless source images. Hardware Configuration FIG. 2 shows in more detail the configurations of the video database 30 and the video data reproduction unit 40, which are the core of the hardware in the mood video reproduction system. The video database 30 is composed of three systems of CD-ROM changers 31 to 33 operating in parallel, and a large number of CD-ROMs that record video for a long time are stored in the three systems of CD-ROs.
It is distributed to M changers 31 to 33. The central control unit controls an arbitrary system of CD-ROM changers 31 to 33, sets an arbitrary CD-ROM stored therein to the driving device, and sets an arbitrary CD-ROM recorded on the CD-ROM. Read and output material video data. If the CD-ROM changer for reading the material video data is different from the CD-ROM changer for reading the material video data next, the central control unit stores the corresponding CD-ROM in the next CD-ROM changer. Set it in the drive device in advance. By doing so, the time lag until the CD-ROM is set in the drive device is absorbed. On the other hand, the video data reproducing section 40 has two MPEG decoders 41 and 42, and these two MPEG decoders.
It includes a video effect processing unit 43 connected to the output paths of the decoders 41 and 42. Two MPEG decoders 4
Reference numerals 1 and 42 are respectively connected to output paths of three systems of CD-ROM changers 31 to 33. And 3
MPEG-1 format video data output from the CD-ROM changers 31 to 33 of the system is input.
The video data from the two paths is selected and decoded, and the mood video is reproduced. Further, the two MPEG decoders 41 and 42 can also operate in parallel, and alternately handle the processing of the material video data. The video effect processing unit 43 receives two video signals from the MPEG decoders 41 and 42 and performs a switching operation of outputting one video signal. The video signal of the two systems is also subjected to various video effect processing (overlap synthesis, fade-in / fade-out, video switching by wipe, etc.), and the video signal after the video effect processing is output. The central control unit controls these hardware according to script information described later, and connects the reproduced material images as appropriate to edit them into a series of mood images. Next, the script information and the mood video editing process of the central control unit based on the script information will be described. Script information The script information described above is stored in the hard disk device in association with the music number. Therefore, each karaoke music piece and script information are associated in a one-to-one relationship. In addition,
By preparing a karaoke song ID-script ID comparison table or the like, each song may be associated with script information. FIG. 3 shows an outline of the script information. This script information includes the song number,
A video switching point, a video effect, and a material video storage position are described. A plurality of video switching points set during the performance period of one karaoke music piece are specified by point time data. The point time data describes the elapsed time from the performance start time of the music. The video effect specifies the type of video effect when the source video is switched at each video switching point, and the required time indicating how long the effect is to be performed. In the present embodiment, the above-described video switching point time is a time at which the video effect processing is started in consideration of the required time. The material video storage position is specified by the storage location of the disc and the temporal position within the disc. The storage location of the disk is specified by the ID of the CD-ROM changer and the disk number in the changer, and the time position is specified by the minute / second / frame described above. Also, the storage location of the material video is designed so that the same CD-ROM changer is not designated between successive video switching points, and the occurrence of the above-described time lag is also avoided. The storage location of the disc is
By preparing a comparison table or the like in which the disk ID attached to the ROM is associated with the storage location in the video database, the disk ID may be directly specified by the disk ID. By preparing the above-mentioned script information, the material video used between the video switching points is directly and uniquely specified without the media-related information related to the music such as the genre. ing. Moreover, 1
The playback start position can be specified in units of 1/75 second, which is the frame time. Therefore, let alone one scene, even a part of the image in one cut can be freely designated as a material image. The mood video editing processing central controller appropriately edits the material video used between the video switching points in accordance with the script information and edits it into a series of mood videos. FIG. 4 shows a flowchart of the editing process. When a karaoke song is requested,
The script information corresponding to the karaoke song is read from the hard disk device. When the performance of the music starts, the measurement of the elapsed performance time also starts. Then, the time is compared with the time corresponding to the video switching point. Further, an appropriate CD-ROM changer is controlled in accordance with the material image storage position described at the first video switching point (start time of performance), and an appropriate CD-ROM is set in the driving device, and the described time position is set. The data is output starting with. Then, an MPEG decoder of an appropriate system performs decoding processing of the video data in real time, and outputs the video signal. The output video signal is output to the display via the video effect processing unit and the video control unit. (101-103) When the next video switching point time comes, an MPEG decoder of a system different from the system which decoded the material video up to that time is made to perform decoding processing of the next material video data. At this time, the video effect processing unit is controlled to perform video switching control while performing the specified video effect processing (105, 1).
06). Thereafter, the video from the specified time position on the specified CD-ROM is reproduced at the specified point time in the same manner, and sequentially switched (107 → 10).
3). === Other Embodiments === Although the script information is stored on the hard disk as data independent of the karaoke data, it can also be attached to the karaoke data of each karaoke song. Also,
Do not store the script information on the hard disk.
A D-ROM may be prepared. In this case, prior to the performance of the music, the corresponding script information is read from the CD-ROM and temporarily stored in a RAM or the like in the central control unit, whereby the mood video editing process can be performed. When a new song is added or script information is updated, new script information may be distributed from the host device in a timely manner. Instead of multiple CD-ROM changers, multiple CD-Rs
One disk tray for storing OM and multiple CD-
It is composed of a ROM drive device, and by the transport device,
A method of taking out an arbitrary CD-ROM from the disk tray and setting it in a predetermined CD-ROM drive may be adopted. FIG. 5 shows an example. Under the control of the central control unit, the transport device 45 moves the CD-RO from the disc tray 34.
M is taken out, and three systems of CD-ROM drive devices 31b-
33b. Then, the transport device 45
Is a CD-ROM from which data is read next
By setting in advance in the D-ROM drive device, a time lag that occurs at the time of switching the material video is eliminated. The video data is not limited to the MPEG1 format, but may be MPEG2 or other digital data, or an analog video signal such as an optical analog video disk. It is also possible to provide a video database of an appropriate recording medium for storing signals of the respective data formats, and a video reproducing means for processing the video data of the respective formats and reproducing the mood video. . Of course, the karaoke apparatus itself does not need to be a performance terminal for the communication karaoke system, and it goes without saying that any karaoke apparatus of the type that edits mood videos by the shared video database system may be used. According to the script information corresponding to each karaoke tune, the material video extracted from the video recorded in the video database is directly at an arbitrary reproduction start position without passing through information related to the tune such as genre. Playback is performed according to the specified playback time length and the specified order. Therefore, in all the karaoke songs, only a portion that matches the content that changes from time to time during the performance period can be reproduced as a material video with good timing. As a result, it is possible to display a mood video having a content that sufficiently follows the time-series change of the music.
In addition, all recorded videos in the video database can be used without waste. In turn, even a small amount of video data can be edited into various mood videos. Therefore, the capacity of the video data stored in the shared video database can be further reduced as compared with the related art. Of course, the last material video in the performance period can be freely designated according to the performance time of the music or the atmosphere of the performance end. Therefore, the performance of the music does not end with the halfway video. Further, by providing a plurality of systems of video database access means capable of operating in parallel and a plurality of systems of video reproducing means capable of operating in parallel, it is possible to avoid a time lag that occurs when switching the reproduction of the material video. In addition, since video signal processing means for inputting video signals from a plurality of systems of video reproduction means in parallel and performing appropriate video effect processing is provided, the switching of the material video can be performed more smoothly and the music can be reproduced more naturally. The video can be transferred according to the content. Further, by storing a long-time video as compression-encoded digital moving image data on the optical disk, an arbitrary storage position of the moving image data can be accessed in units of 1 second or less based on the time code of the optical disk. Moving image data for an arbitrary reproduction time can be extracted. Therefore, the material video that closely follows the subtle story development can be reproduced at more accurate timing.
【図面の簡単な説明】
【図1】本発明の実施例によるカラオケ装置の構成図で
ある。
【図2】上記実施例におけるムード映像再生システムに
おける主要部分の構成図である。
【図3】上記実施例において処理される台本情報の概略
構造図である。
【図4】上記実施例において中央制御部が行うムード映
像編集処理を示したフローチャートである。
【図5】上記ムード映像再生システムにおけるその他の
実施例の構成図である。
【符号の説明】
1 カラオケ装置
11 中央制御部
22 ディスプレイ
30 映像データベース
40 映像データ再生部BRIEF DESCRIPTION OF THE DRAWINGS FIG. 1 is a configuration diagram of a karaoke apparatus according to an embodiment of the present invention. FIG. 2 is a configuration diagram of a main part in the mood video reproduction system in the embodiment. FIG. 3 is a schematic structural diagram of script information processed in the embodiment. FIG. 4 is a flowchart showing a mood video editing process performed by a central control unit in the embodiment. FIG. 5 is a configuration diagram of another embodiment of the mood video reproduction system. [Description of Signs] 1 Karaoke device 11 Central control unit 22 Display 30 Video database 40 Video data playback unit
Claims (1)
クセス手段、映像再生手段、映像効果処理手段、制御手
段を備え、カラオケ楽曲毎に作成された台本情報に基づ
いてカラオケ演奏時にムード映像を出力するカラオケ映
像再生装置であって、 映像データベースは、長時間分の映像データを多数の光
ディスクに格納し、 映像データベースアクセス手段は、並列的に動作可能な
複数台の光ディスク駆動装置を含み、映像データベース
中の指定された光ディスクの指定された位置の映像デー
タを読み出し、 映像再生手段は、複数台の光ディスク駆動装置が出力す
る複数系統の映像データをそれぞれ再生して複数系統の
映像信号を出力し、 映像効果処理手段は、複数系統の映像信号を入力し、そ
の映像信号に指定された映像効果処理を施しながら一方
の系統の映像信号から他方の系統の映像信号に切り替え
て出力し、 台本情報は、映像切り替えポイントの時間を複数指定す
るポイント時間データと、各映像切り替えポイントの前
後にてそれぞれ出力すべき各映像データの格納位置をそ
れぞれ指定する格納位置データと、複数種類の映像効果
の中から各映像切り替えポイントで使用する各映像効果
をそれぞれ指定する映像効果データとを含み、 制御手段は、台本情報のポイント時間データおよび格納
位置データに従って各映像効果切り替えポイント間で使
用する映像データを映像データベースアクセス手段によ
り光ディスク駆動装置を切り替えながら読み出させると
ともに、各映像効果切り替えポイントにて映像効果デー
タに従って映像効果処理手段を動作させるカラオケ映像
再生装置。(57) [Claims] 1. A karaoke performance based on script information created for each karaoke song, comprising a video database, a video database access unit, a video reproduction unit, a video effect processing unit, and a control unit. A karaoke video playback device that sometimes outputs mood video, wherein the video database stores a long time of video data on a large number of optical discs, and the video database access means comprises a plurality of optical disc drive devices operable in parallel. And reads out video data at a specified position of a specified optical disc in a video database. The video reproducing means reproduces a plurality of video data output from a plurality of optical disc driving devices, respectively, and reproduces a plurality of video data. The video effect processing means inputs a plurality of video signals and outputs a video signal designated by the video signal. While performing image effect processing, the video signal of one system is switched to the video signal of the other system and output. The script information includes point time data that specifies a plurality of video switching point times, and the time information before and after each video switching point. its storage position of each video data to be outputted Te
Each storage location data to be specified and multiple types of video effects
And a video effect data designating each respective video effect to be used for each video switching point from the control means, the image data to be used between the video effect switching point according to point time data and stores the position data of the script information A karaoke video reproducing apparatus which reads out the video data while switching the optical disc drive by the video database access means and operates the video effect processing means at each video effect switching point according to the video effect data.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP20604597A JP3529246B2 (en) | 1997-07-31 | 1997-07-31 | Karaoke video playback device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP20604597A JP3529246B2 (en) | 1997-07-31 | 1997-07-31 | Karaoke video playback device |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004014003A Division JP4060278B2 (en) | 2004-01-22 | 2004-01-22 | Karaoke equipment |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH1152964A JPH1152964A (en) | 1999-02-26 |
JP3529246B2 true JP3529246B2 (en) | 2004-05-24 |
Family
ID=16516977
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP20604597A Expired - Fee Related JP3529246B2 (en) | 1997-07-31 | 1997-07-31 | Karaoke video playback device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3529246B2 (en) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR19990046548A (en) * | 1999-03-24 | 1999-07-05 | 김승영 | Computer music player and there of method for singer image output |
KR20000061554A (en) * | 1999-03-27 | 2000-10-25 | 이승자 | an apparatus for controlling an image for a karaoke and thereof method |
JP4627264B2 (en) * | 2006-01-27 | 2011-02-09 | 株式会社第一興商 | Karaoke guest room system linked with food and beverage self-order POS system at karaoke gathering stores |
JP5355251B2 (en) * | 2009-06-30 | 2013-11-27 | 株式会社第一興商 | Karaoke background video display system |
-
1997
- 1997-07-31 JP JP20604597A patent/JP3529246B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JPH1152964A (en) | 1999-02-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CA2233443C (en) | Karaoke system and contents storage medium therefor | |
US20040136695A1 (en) | Method for enabling displaying of a still picture at a plurality of predetermined timings during playback of recorded audio data and playback apparatus therefor | |
EP1653471A2 (en) | Content using apparatus, content using method, distribution server apparatus, information distribution method, and recording medium | |
JP3529246B2 (en) | Karaoke video playback device | |
JP3320056B2 (en) | Karaoke video playback device | |
JP2002023771A (en) | Audio player | |
JP3926432B2 (en) | Karaoke equipment | |
JP4060278B2 (en) | Karaoke equipment | |
JP4016665B2 (en) | VIDEO REPRODUCTION DEVICE AND VIDEO REPRODUCTION DEVICE CONTROL METHOD | |
JP3180703B2 (en) | Image supply device | |
JP3911243B2 (en) | Karaoke device characterized by karaoke video system | |
JP3408750B2 (en) | Video database controller for karaoke | |
JP3893075B2 (en) | Background video system in karaoke equipment | |
JP3106076B2 (en) | Video playback device | |
JP3908058B2 (en) | Karaoke device characterized by background video selection system | |
JP3412633B1 (en) | Recording method | |
JP3766305B2 (en) | Recording medium, reproducing apparatus and reproducing method thereof | |
JP3412630B1 (en) | Recording method | |
JP2001313889A (en) | Data-reproducing apparatus | |
JPH10290431A (en) | Contents recording medium for karaoke device | |
JP2003295870A (en) | Background video selection system for karaoke equipment | |
JP2003289507A (en) | Karaoke system | |
JPH08279233A (en) | Karaoke sing-along machine | |
JP2000099046A (en) | Karaoke device | |
JPH09212183A (en) | Karaoke recording medium and reproducing device for karaoke recording medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040122 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040224 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090305 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100305 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100305 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110305 Year of fee payment: 7 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110305 Year of fee payment: 7 |
|
LAPS | Cancellation because of no payment of annual fees |