JP3239706B2 - 歌唱音声合成装置 - Google Patents
歌唱音声合成装置Info
- Publication number
- JP3239706B2 JP3239706B2 JP21649495A JP21649495A JP3239706B2 JP 3239706 B2 JP3239706 B2 JP 3239706B2 JP 21649495 A JP21649495 A JP 21649495A JP 21649495 A JP21649495 A JP 21649495A JP 3239706 B2 JP3239706 B2 JP 3239706B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- lyrics
- performance
- supplied
- instruction data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000002194 synthesizing effect Effects 0.000 claims description 13
- 230000015572 biosynthetic process Effects 0.000 claims description 10
- 238000003786 synthesis reaction Methods 0.000 claims description 10
- 230000029058 respiratory gaseous exchange Effects 0.000 claims description 8
- 230000029087 digestion Effects 0.000 claims 1
- 238000000034 method Methods 0.000 description 23
- 238000010586 diagram Methods 0.000 description 4
- 230000030279 gene silencing Effects 0.000 description 3
- 101150047731 MTDH gene Proteins 0.000 description 2
- 238000001308 synthesis method Methods 0.000 description 2
- 101100328887 Caenorhabditis elegans col-34 gene Proteins 0.000 description 1
- 239000013256 coordination polymer Substances 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 101150090124 vtg1 gene Proteins 0.000 description 1
Landscapes
- Electrophonic Musical Instruments (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Description
【０００１】
【発明の属する技術分野】本発明は、人の声で歌を歌わ
せるための歌唱音声合成装置に関する。
せるための歌唱音声合成装置に関する。
【０００２】
【従来の技術】音声を合成する手法は従来より種々の手
法が提案されており、例えば特開平３−２００２９９号
公報に示されるようなフォルマント合成方式による音声
合成装置が知られている。
法が提案されており、例えば特開平３−２００２９９号
公報に示されるようなフォルマント合成方式による音声
合成装置が知られている。
【０００３】また、演奏前に歌詞を音声で入力してその
音韻データを記憶し、演奏モードにおいて鍵盤操作によ
りその音韻データを読み出すとともに音高を指定して、
予め音声で入力した歌詞の順に音声を発音して歌唱を行
う歌唱電子楽器も従来より知られている（特開昭５８−
３７６９３号公報）。
音韻データを記憶し、演奏モードにおいて鍵盤操作によ
りその音韻データを読み出すとともに音高を指定して、
予め音声で入力した歌詞の順に音声を発音して歌唱を行
う歌唱電子楽器も従来より知られている（特開昭５８−
３７６９３号公報）。
【０００４】
【発明が解決しようとする課題】しかしながら、音声合
成による歌唱のためではなく、通常の楽器演奏のために
作成された演奏データに基づいて歌唱を行う電子装置
は、未だ提案されていない。そこで、従来の自動演奏装
置の音源を単純に音声合成装置に置き換え、歌詞の音声
で発音する手法が考えられるが、もともと楽器演奏のた
めに作成された演奏データでは、音声として発音した場
合には歌唱が不自然なものとなるという問題があった。
成による歌唱のためではなく、通常の楽器演奏のために
作成された演奏データに基づいて歌唱を行う電子装置
は、未だ提案されていない。そこで、従来の自動演奏装
置の音源を単純に音声合成装置に置き換え、歌詞の音声
で発音する手法が考えられるが、もともと楽器演奏のた
めに作成された演奏データでは、音声として発音した場
合には歌唱が不自然なものとなるという問題があった。
【０００５】本発明はこの点に着目してなされたもので
あり、もともと楽器演奏のために作成された演奏データ
を生かして自然な歌唱を行うことができる歌唱音声合成
装置を提供することを目的とする。
あり、もともと楽器演奏のために作成された演奏データ
を生かして自然な歌唱を行うことができる歌唱音声合成
装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】上記目的を達成するため
本発明は、少なくとも発音指示データ及び消音指示デー
タを含む演奏データであって、外部から供給される演奏
データを受信する受信手段と、複数の音韻で構成される
歌詞を記憶する歌詞記憶手段と、該記憶した歌詞に対応
する音声を合成する音声合成手段とを備えた歌唱音声合
成装置において、前記音声合成手段は、前記受信手段か
ら前記発音指示データが供給される毎に、前記歌詞記憶
手段に記憶された複数の音韻に対応する音声を順次合成
し、該音声合成中に、前記受信手段から前記消音指示デ
ータが供給されたとしても該消音指示データによる消音
指示を無視することを特徴とする。
本発明は、少なくとも発音指示データ及び消音指示デー
タを含む演奏データであって、外部から供給される演奏
データを受信する受信手段と、複数の音韻で構成される
歌詞を記憶する歌詞記憶手段と、該記憶した歌詞に対応
する音声を合成する音声合成手段とを備えた歌唱音声合
成装置において、前記音声合成手段は、前記受信手段か
ら前記発音指示データが供給される毎に、前記歌詞記憶
手段に記憶された複数の音韻に対応する音声を順次合成
し、該音声合成中に、前記受信手段から前記消音指示デ
ータが供給されたとしても該消音指示データによる消音
指示を無視することを特徴とする。
【０００７】また、好ましくは、息継ぎタイミングを示
す息継ぎ情報を供給する息継ぎ情報供給手段を有し、前
記音声合成手段は、前記供給された息継ぎ情報が示す息
継ぎタイミングにおいて前記消音指示データが供給され
た場合には、当該タイミングにおいて合成中の音声を消
音することを特徴とする。
す息継ぎ情報を供給する息継ぎ情報供給手段を有し、前
記音声合成手段は、前記供給された息継ぎ情報が示す息
継ぎタイミングにおいて前記消音指示データが供給され
た場合には、当該タイミングにおいて合成中の音声を消
音することを特徴とする。
【０００８】
【０００９】また、請求項２の歌唱音声合成装置では、
息継ぎ情報が供給されたときは、そのとき合成されてい
る音声は前記消音指示データ発生時に消音処理を行うこ
とにより、前記息継ぎ情報が示す息継ぎタイミングでは
音声を消音するようにしている。
息継ぎ情報が供給されたときは、そのとき合成されてい
る音声は前記消音指示データ発生時に消音処理を行うこ
とにより、前記息継ぎ情報が示す息継ぎタイミングでは
音声を消音するようにしている。
【００１０】このように本発明によれば、演奏データに
基づいて音声が途切れないように順次合成され、演奏デ
ータに対応した歌唱が行われる。
基づいて音声が途切れないように順次合成され、演奏デ
ータに対応した歌唱が行われる。
【００１１】
【発明の実施の形態】以下本発明の実施の形態を図面を
参照して説明する。
参照して説明する。
【００１２】図１は本発明の実施の一形態にかかる歌唱
電子装置の構成を示すブロック図であり、この装置は、
装置全体の制御を行うＣＰＵ１と、ＣＰＵ１で実行され
るプログラムやプログラムの実行に必要なテーブル等が
記憶されるＲＯＭ２と、ＣＰＵ１のワーキングエリアと
して使用され、演算途中のデータ等を記憶するＲＡＭ３
と、音声合成のためのフォルマントデータ、歌詞データ
及びメロディデータ（演奏データ）を記憶するデータメ
モリ４と、各種パラメータや装置の動作モード等を表示
する表示部５と、演奏者が演奏操作を行う、例えば鍵盤
のような演奏操作子６と、演奏モードの指定等を行うた
めの設定操作子７と、フォルマントデータに基づいて音
声又は楽音の合成を行うフォルマント音源８と、フォル
マント音源８から出力されるデジタル信号をアナログ信
号に変換するＤＡ変換器９と、ＤＡ変換器の出力信号を
増幅してスピーカから出力するサウンドシステム１０
と、上記構成要素１〜８を相互に接続するバス１１とを
備えている。
電子装置の構成を示すブロック図であり、この装置は、
装置全体の制御を行うＣＰＵ１と、ＣＰＵ１で実行され
るプログラムやプログラムの実行に必要なテーブル等が
記憶されるＲＯＭ２と、ＣＰＵ１のワーキングエリアと
して使用され、演算途中のデータ等を記憶するＲＡＭ３
と、音声合成のためのフォルマントデータ、歌詞データ
及びメロディデータ（演奏データ）を記憶するデータメ
モリ４と、各種パラメータや装置の動作モード等を表示
する表示部５と、演奏者が演奏操作を行う、例えば鍵盤
のような演奏操作子６と、演奏モードの指定等を行うた
めの設定操作子７と、フォルマントデータに基づいて音
声又は楽音の合成を行うフォルマント音源８と、フォル
マント音源８から出力されるデジタル信号をアナログ信
号に変換するＤＡ変換器９と、ＤＡ変換器の出力信号を
増幅してスピーカから出力するサウンドシステム１０
と、上記構成要素１〜８を相互に接続するバス１１とを
備えている。
【００１３】フォルマント音源８は、複数の音源チャン
ネル８０を有し、音源チャンネル８０は、４つの母音フ
ォルマント発生部ＶＴＧ１〜ＶＴＧ４と、４つの子音フ
ォルマント発生部ＵＴＧ１〜ＵＴＧ４とから構成されて
いる。このように、母音及び子音についてぞれぞれ４個
ずつのフォルマント発生部を設け、これらのフォルマン
ト発生部の出力を加算して音声を合成する手法は、例え
ば前記特開平３−２００２９９号公報に示されるように
公知である。
ネル８０を有し、音源チャンネル８０は、４つの母音フ
ォルマント発生部ＶＴＧ１〜ＶＴＧ４と、４つの子音フ
ォルマント発生部ＵＴＧ１〜ＵＴＧ４とから構成されて
いる。このように、母音及び子音についてぞれぞれ４個
ずつのフォルマント発生部を設け、これらのフォルマン
ト発生部の出力を加算して音声を合成する手法は、例え
ば前記特開平３−２００２９９号公報に示されるように
公知である。
【００１４】図２はデータメモリ４に記憶されるデータ
の構成を示す図であり、データメモリ４は、フォルマン
トデータＦＲＭＮＴＤＡＴＡ、歌詞データＬＹＲＩＣＤ
ＡＴＡ及びメロディデータＭＥＬＯＤＹＳＥＱＤＡＴＡ
を記憶している。
の構成を示す図であり、データメモリ４は、フォルマン
トデータＦＲＭＮＴＤＡＴＡ、歌詞データＬＹＲＩＣＤ
ＡＴＡ及びメロディデータＭＥＬＯＤＹＳＥＱＤＡＴＡ
を記憶している。
【００１５】フォルマントデータＦＲＭＮＴＤＡＴＡ
は、日本語の５０音のそれぞれに対応してＦＲＭＮＴＤ
ＡＴＡａ，ＦＲＭＮＴＤＡＴＡｉ，…が記憶されてお
り、各フォルマントデータＦＲＭＮＴＤＡＴＡは、４つ
の母音フォルマント発生部ＶＴＧ１〜ＶＴＧ４及び４つ
の子音フォルマント発生部ＵＴＧ１〜ＵＴＧ４のそれぞ
れに供給するパラメータ群ＶＦＲＭＮＴ１〜４，ＵＦＲ
ＭＡＮＴ１〜４及びその他のデータＭＩＳＣ（例えば聴
感上の音量をそろえるためのレベル補正データ等）から
成る。そして各パラメータ群は、フォルマント中心周波
数ＦＲＭＮＴＦＲＥＱ、フォルマントレベルＦＲＭＮＴ
ＬＶＬ、フォルマント帯域幅ＦＲＭＮＴＢＷ及びその他
のデータＦＲＭＮＴＭＩＳＣ（例えば各フォルマント成
分の立ち上がりタイミング等）から成る。さらに、フォ
ルマント中心周波数ＦＲＭＮＴＦＲＥＱは、ｋ個の時系
列データから成り、図には示していないが、フォルマン
トレベルＦＲＭＮＴＬＶＬ及びフォルマント帯域幅ＦＲ
ＭＮＴＢＷも同様にｋ個の時系列データで構成されてい
る。これらの時系列データは、フレームタイミング毎に
読み出され、時変動フォルマントが再生される。
は、日本語の５０音のそれぞれに対応してＦＲＭＮＴＤ
ＡＴＡａ，ＦＲＭＮＴＤＡＴＡｉ，…が記憶されてお
り、各フォルマントデータＦＲＭＮＴＤＡＴＡは、４つ
の母音フォルマント発生部ＶＴＧ１〜ＶＴＧ４及び４つ
の子音フォルマント発生部ＵＴＧ１〜ＵＴＧ４のそれぞ
れに供給するパラメータ群ＶＦＲＭＮＴ１〜４，ＵＦＲ
ＭＡＮＴ１〜４及びその他のデータＭＩＳＣ（例えば聴
感上の音量をそろえるためのレベル補正データ等）から
成る。そして各パラメータ群は、フォルマント中心周波
数ＦＲＭＮＴＦＲＥＱ、フォルマントレベルＦＲＭＮＴ
ＬＶＬ、フォルマント帯域幅ＦＲＭＮＴＢＷ及びその他
のデータＦＲＭＮＴＭＩＳＣ（例えば各フォルマント成
分の立ち上がりタイミング等）から成る。さらに、フォ
ルマント中心周波数ＦＲＭＮＴＦＲＥＱは、ｋ個の時系
列データから成り、図には示していないが、フォルマン
トレベルＦＲＭＮＴＬＶＬ及びフォルマント帯域幅ＦＲ
ＭＮＴＢＷも同様にｋ個の時系列データで構成されてい
る。これらの時系列データは、フレームタイミング毎に
読み出され、時変動フォルマントが再生される。
【００１６】なお、フォルマント中心周波数等の時系列
データは、記憶容量圧縮のため、時間経過に対して粗く
データを記憶しておき、適宜補間演算を行って時間的に
密なデータを発生したり、定常的な部分は所定のデータ
あるいはデータ区間をループ読み出しするようにしても
よい。
データは、記憶容量圧縮のため、時間経過に対して粗く
データを記憶しておき、適宜補間演算を行って時間的に
密なデータを発生したり、定常的な部分は所定のデータ
あるいはデータ区間をループ読み出しするようにしても
よい。
【００１７】歌詞データＬＹＲＩＣＤＡＴＡは、歌詞名
ＬＹＲＩＣＮＡＭＥ、歌詞の１音素ずつに対応するｍｘ
個の音声シーケンスデータＶＯＩＣＥ１，ＶＯＩＣＥ
２，…，ＶＯＩＣＥｍｘ及びエンドデータＥＮＤから成
り、各音声シーケンスデータＶＯＩＣＥは、フォルマン
トデータＦＲＭＮＴＤＡＴＡを指定するインデックスデ
ータＶＯＩＣＥＩＮＤＥＸ及び息継ぎすべきタイミング
を示す呼気フラグＢＲＥＡＴＨＦＬＧから成る。例えば
「咲いた」で始まる歌詞の場合、「さ」がＶＯＩＣＥ
１、「い」がＶＯＩＣＥ２、「た」がＶＯＩＣＥ３とい
うように記憶されている。また、呼気フラグＢＲＥＡＴ
ＨＦＬＧ＝１のときは、後述するように該当音素キーオ
フ時に消音され、次の音素キーオンまでにデュレーショ
ンがあれば、その間は無音期間となる。
ＬＹＲＩＣＮＡＭＥ、歌詞の１音素ずつに対応するｍｘ
個の音声シーケンスデータＶＯＩＣＥ１，ＶＯＩＣＥ
２，…，ＶＯＩＣＥｍｘ及びエンドデータＥＮＤから成
り、各音声シーケンスデータＶＯＩＣＥは、フォルマン
トデータＦＲＭＮＴＤＡＴＡを指定するインデックスデ
ータＶＯＩＣＥＩＮＤＥＸ及び息継ぎすべきタイミング
を示す呼気フラグＢＲＥＡＴＨＦＬＧから成る。例えば
「咲いた」で始まる歌詞の場合、「さ」がＶＯＩＣＥ
１、「い」がＶＯＩＣＥ２、「た」がＶＯＩＣＥ３とい
うように記憶されている。また、呼気フラグＢＲＥＡＴ
ＨＦＬＧ＝１のときは、後述するように該当音素キーオ
フ時に消音され、次の音素キーオンまでにデュレーショ
ンがあれば、その間は無音期間となる。
【００１８】メロディデータＭＥＬＯＤＹＳＥＱＤＡＴ
Ａは、タイトル名ＴＩＴＬＥＮＡＭＥ、演奏イベントに
対応するｎｘ個のイベントデータＥＶＥＮＴ１，ＥＶＥ
ＮＴ２，…，ＥＶＥＮＴｎｘ及びエンドデータＥＮＤか
ら成り、イベントデータは、キーオン又はキーオフを示
すデータＫＯＮ，ＫＯＦＦ、キーコードを示すデータＫ
ＥＹＣＯＤＥ及びタッチを示すデータＴＯＵＣＨから成
るキーオン／キーオフデータ、あるいは無音期間を示す
デュレーションデータＤＵＲＡＴＩＯＮ等である。な
お、本装置は単音で歌唱を行うものであり、単音の（キ
ーオンが重複しない）演奏データを対象としている。
Ａは、タイトル名ＴＩＴＬＥＮＡＭＥ、演奏イベントに
対応するｎｘ個のイベントデータＥＶＥＮＴ１，ＥＶＥ
ＮＴ２，…，ＥＶＥＮＴｎｘ及びエンドデータＥＮＤか
ら成り、イベントデータは、キーオン又はキーオフを示
すデータＫＯＮ，ＫＯＦＦ、キーコードを示すデータＫ
ＥＹＣＯＤＥ及びタッチを示すデータＴＯＵＣＨから成
るキーオン／キーオフデータ、あるいは無音期間を示す
デュレーションデータＤＵＲＡＴＩＯＮ等である。な
お、本装置は単音で歌唱を行うものであり、単音の（キ
ーオンが重複しない）演奏データを対象としている。
【００１９】図３は、ＣＰＵ１で実行されるメインプロ
グラムのフローチャートであり、本プログラムは本装置
の電源がオンされると実行が開始される。先ずステップ
Ｓ１では、各種パラメータの初期設定を行い、次いで演
奏操作子６及び設定操作子７における操作イベントの検
出処理を行う（ステップＳ２）。続くステップＳ３で
は、図４及び５に詳細を示す演奏発音処理を実行し、ス
テップＳ４でその他の処理を行って、ステップＳ２に戻
る。電源がオンされている間は、ステップＳ２〜Ｓ４を
繰り返し実行する。
グラムのフローチャートであり、本プログラムは本装置
の電源がオンされると実行が開始される。先ずステップ
Ｓ１では、各種パラメータの初期設定を行い、次いで演
奏操作子６及び設定操作子７における操作イベントの検
出処理を行う（ステップＳ２）。続くステップＳ３で
は、図４及び５に詳細を示す演奏発音処理を実行し、ス
テップＳ４でその他の処理を行って、ステップＳ２に戻
る。電源がオンされている間は、ステップＳ２〜Ｓ４を
繰り返し実行する。
【００２０】次に図４及び５を参照して演奏発音処理の
詳細を説明する。
詳細を説明する。
【００２１】先ずステップＳ１１では、演奏中であるこ
とを「１」で示す演奏フラグＰＬＡＹＯＮが「０」であ
るか、すなわち非演奏中（演奏していない状態）か否か
を判別し、非演奏中のときは、歌唱スタートイベントが
あったか否かを判別する（ステップＳ１２）。非演奏中
であって歌唱スタートイベントがあったときは、デュレ
ーション計測用のデュレーションタイマーをリセット
し、イベントポインタｎ及び歌詞ポインタｍを共に
「１」にセットするとともに、演奏フラグＰＬＡＹＯＮ
を「１」にセットして（ステップＳ１３）、ステップＳ
１６に進む。
とを「１」で示す演奏フラグＰＬＡＹＯＮが「０」であ
るか、すなわち非演奏中（演奏していない状態）か否か
を判別し、非演奏中のときは、歌唱スタートイベントが
あったか否かを判別する（ステップＳ１２）。非演奏中
であって歌唱スタートイベントがあったときは、デュレ
ーション計測用のデュレーションタイマーをリセット
し、イベントポインタｎ及び歌詞ポインタｍを共に
「１」にセットするとともに、演奏フラグＰＬＡＹＯＮ
を「１」にセットして（ステップＳ１３）、ステップＳ
１６に進む。
【００２２】ステップＳ１１又はＳ１２の答が否定（Ｎ
Ｏ）のとき、すなわち演奏中のとき又は非演奏中であっ
て歌唱スタートイベントが発生していないときは、演奏
ストップイベントがあったか否かを判別し（ステップＳ
１４）、なければステップＳ１６に進む。演奏ストップ
イベントがあったときは、演奏フラグＰＬＡＹＯＮを
「０」にリセットすると共に発音中のチャンネルをすべ
て消音する等の演奏終了処理を行い（ステップＳ１
５）、本処理を終了してメインプログラムに戻る。
Ｏ）のとき、すなわち演奏中のとき又は非演奏中であっ
て歌唱スタートイベントが発生していないときは、演奏
ストップイベントがあったか否かを判別し（ステップＳ
１４）、なければステップＳ１６に進む。演奏ストップ
イベントがあったときは、演奏フラグＰＬＡＹＯＮを
「０」にリセットすると共に発音中のチャンネルをすべ
て消音する等の演奏終了処理を行い（ステップＳ１
５）、本処理を終了してメインプログラムに戻る。
【００２３】ステップＳ１６では、デュレーションタイ
マーのカウントが完了したか否かを判別し、完了してい
なければ直ちに本処理を終了する。一方完了したとき
（歌唱スタートイベント発生直後はデュレーションタイ
マーがリセットされるので、ステップＳ１６の答は肯定
（ＹＥＳ）となる）は、指定されたメロディデータＭＥ
ＬＯＤＹＳＥＱＤＡＴＡからイベントデータＥＶＥＮＴ
ｎを読み出し（ステップＳ１７）、その読み出したイベ
ントデータＥＶＥＮＴｎがキーイベントか否かを判別す
る（ステップＳ１８）。そしてキーイベントでないとき
は、ステップＳ１９に進んでデュレーションデータか否
かを判別し、デュレーションデータのときは、デュレー
ションタイマーをスタートさせるとともに（ステップＳ
２０）、イベントポインタｎを「１」だけインクリメン
トして（ステップＳ２１）、本処理を終了する。また、
ステップＳ１９でデュレーションデータでないときは、
エンドデータＥＮＤか否かを判別し（ステップＳ２
２）、エンドデータでなければ直ちに本処理を終了する
一方、エンドデータであるときは、演奏フラグＰＬＡＹ
ＯＮを「０」にリセットし（ステップＳ２３）、ステッ
プＳ１５と同様に演奏終了処理を行って（ステップＳ２
４）本処理を終了する。
マーのカウントが完了したか否かを判別し、完了してい
なければ直ちに本処理を終了する。一方完了したとき
（歌唱スタートイベント発生直後はデュレーションタイ
マーがリセットされるので、ステップＳ１６の答は肯定
（ＹＥＳ）となる）は、指定されたメロディデータＭＥ
ＬＯＤＹＳＥＱＤＡＴＡからイベントデータＥＶＥＮＴ
ｎを読み出し（ステップＳ１７）、その読み出したイベ
ントデータＥＶＥＮＴｎがキーイベントか否かを判別す
る（ステップＳ１８）。そしてキーイベントでないとき
は、ステップＳ１９に進んでデュレーションデータか否
かを判別し、デュレーションデータのときは、デュレー
ションタイマーをスタートさせるとともに（ステップＳ
２０）、イベントポインタｎを「１」だけインクリメン
トして（ステップＳ２１）、本処理を終了する。また、
ステップＳ１９でデュレーションデータでないときは、
エンドデータＥＮＤか否かを判別し（ステップＳ２
２）、エンドデータでなければ直ちに本処理を終了する
一方、エンドデータであるときは、演奏フラグＰＬＡＹ
ＯＮを「０」にリセットし（ステップＳ２３）、ステッ
プＳ１５と同様に演奏終了処理を行って（ステップＳ２
４）本処理を終了する。
【００２４】ステップＳ１８でキーイベントデータであ
るときは、演奏データを歌唱として発音する歌唱モード
に設定されているか否かを判別し（ステップＳ２５）、
歌唱モードでないとき、すなわち通常の自動演奏モード
であるときは、所定の指定音色で対応するイベント（キ
ーオン又はキーオフ）の出力処理を行って（ステップＳ
２６）、本処理を終了する。
るときは、演奏データを歌唱として発音する歌唱モード
に設定されているか否かを判別し（ステップＳ２５）、
歌唱モードでないとき、すなわち通常の自動演奏モード
であるときは、所定の指定音色で対応するイベント（キ
ーオン又はキーオフ）の出力処理を行って（ステップＳ
２６）、本処理を終了する。
【００２５】また歌唱モードであるときは、キーイベン
トがキーオンイベントか否かを判別し（ステップＳ２
７）、キーオンイベントであるときは、指定された歌詞
データＬＹＲＩＣＤＡＴＡから歌詞シーケンスデータＶ
ＯＩＣＥｍを読み出し（ステップＳ２８）、図５のステ
ップＳ２９に進む。ステップＳ２９では、前の歌詞シー
ケンスデータＶＯＩＣＥｍ−１の発音状態をチェック
し、次いでそのＶＯＩＣＥｍ−１に対応する音源チャン
ネルが発音中か否かを判別する（ステップＳ３０）。そ
の結果、発音中でなければ直ちに、また発音中のとき
は、その音源チャンネルに対してキーオフを出力した
後、ステップＳ３２に進む。
トがキーオンイベントか否かを判別し（ステップＳ２
７）、キーオンイベントであるときは、指定された歌詞
データＬＹＲＩＣＤＡＴＡから歌詞シーケンスデータＶ
ＯＩＣＥｍを読み出し（ステップＳ２８）、図５のステ
ップＳ２９に進む。ステップＳ２９では、前の歌詞シー
ケンスデータＶＯＩＣＥｍ−１の発音状態をチェック
し、次いでそのＶＯＩＣＥｍ−１に対応する音源チャン
ネルが発音中か否かを判別する（ステップＳ３０）。そ
の結果、発音中でなければ直ちに、また発音中のとき
は、その音源チャンネルに対してキーオフを出力した
後、ステップＳ３２に進む。
【００２６】ステップＳ３２では、発音していない音源
チャンネルをサーチし、ついで歌詞シーケンスデータＶ
ＯＩＣＥｍに対応するフォルマントデータＦＲＭＮＴＤ
ＡＴＡに基づいて、ステップＳ３２でサーチした空きチ
ャンネルにキーオンを出力する（ステップＳ３３）。そ
して、イベントポインタｎを「１」だけインクリメント
して（ステップＳ３４）、本処理を終了する。
チャンネルをサーチし、ついで歌詞シーケンスデータＶ
ＯＩＣＥｍに対応するフォルマントデータＦＲＭＮＴＤ
ＡＴＡに基づいて、ステップＳ３２でサーチした空きチ
ャンネルにキーオンを出力する（ステップＳ３３）。そ
して、イベントポインタｎを「１」だけインクリメント
して（ステップＳ３４）、本処理を終了する。
【００２７】一方前記ステップＳ２７の答が否定（Ｎ
Ｏ）、すなわちキーオフイベントのときは、ステップＳ
３５に進み、発音中の歌詞シーケンスデータＶＯＩＣＥ
ｍをチェックし、そのＶＯＩＣＥｍの呼気フラグＢＲＥ
ＡＴＨＦＬＧが「１」か否か、すなわち息継ぎ指定があ
るか否かを判別する（ステップＳ３６）。そして、ＢＲ
ＥＡＴＨＦＬＧ＝０のときは直ちに、またＢＲＥＡＴＨ
ＦＬＧ＝１であるときは、発音中の音源チャンネルに対
してキーオフを出力した後、ステップＳ３８に進む。ス
テップＳ３８では、イベントポインタｎ及び歌詞ポイン
タｍを共に「１」だけインクリメントして、本処理を終
了する。
Ｏ）、すなわちキーオフイベントのときは、ステップＳ
３５に進み、発音中の歌詞シーケンスデータＶＯＩＣＥ
ｍをチェックし、そのＶＯＩＣＥｍの呼気フラグＢＲＥ
ＡＴＨＦＬＧが「１」か否か、すなわち息継ぎ指定があ
るか否かを判別する（ステップＳ３６）。そして、ＢＲ
ＥＡＴＨＦＬＧ＝０のときは直ちに、またＢＲＥＡＴＨ
ＦＬＧ＝１であるときは、発音中の音源チャンネルに対
してキーオフを出力した後、ステップＳ３８に進む。ス
テップＳ３８では、イベントポインタｎ及び歌詞ポイン
タｍを共に「１」だけインクリメントして、本処理を終
了する。
【００２８】以上のように図４及び５の処理では、歌唱
モードでの演奏中は、キーオフイベント（ノートオフイ
ベント）があっても、呼気フラグＢＲＥＡＴＨＦＬＧが
「１」であるときを除き、消音処理がされず（ステップ
Ｓ３６、Ｓ３７）、次の歌詞シーケンスデータのキーオ
ンイベント（ノートオンイベント）発生時に消音処理を
行う（ステップＳ３０、Ｓ３１）ようにしたので、息継
ぎ指定をしない限り歌詞が途切れることなくつながり、
もともと楽器演奏のために作成された演奏データを生か
して自然な歌唱を行うことができる。
モードでの演奏中は、キーオフイベント（ノートオフイ
ベント）があっても、呼気フラグＢＲＥＡＴＨＦＬＧが
「１」であるときを除き、消音処理がされず（ステップ
Ｓ３６、Ｓ３７）、次の歌詞シーケンスデータのキーオ
ンイベント（ノートオンイベント）発生時に消音処理を
行う（ステップＳ３０、Ｓ３１）ようにしたので、息継
ぎ指定をしない限り歌詞が途切れることなくつながり、
もともと楽器演奏のために作成された演奏データを生か
して自然な歌唱を行うことができる。
【００２９】なお、呼気フラグＢＲＥＡＴＨＦＬＧを設
けないで、すべての歌詞を途切れないないようにして歌
唱を行うようにしてもよい。
けないで、すべての歌詞を途切れないないようにして歌
唱を行うようにしてもよい。
【００３０】また、メロディデータＭＥＬＯＤＹＳＥＱ
ＤＡＴＡは、データメモリに記憶したものに限るもので
はなく、ＭＩＤＩインターフェースを設けて外部の機器
から供給するようにしてもよい。
ＤＡＴＡは、データメモリに記憶したものに限るもので
はなく、ＭＩＤＩインターフェースを設けて外部の機器
から供給するようにしてもよい。
【００３１】また、音声合成の方法は、フォルマント合
成方式に限らず、他の方式を採用してもよい。又、ＣＰ
Ｕに音声合成処理まで実行させてもよい。
成方式に限らず、他の方式を採用してもよい。又、ＣＰ
Ｕに音声合成処理まで実行させてもよい。
【００３２】
【発明の効果】以上詳述したように本発明によれば、楽
器演奏のために作成された、消音指示データを必ず含む
演奏データに基づいて音声合成を行うに際し、外部から
発音指示データが供給される毎に、歌詞記憶手段に記憶
された複数の音韻に対応する音声が順次合成され、該音
声合成中に、外部から消音指示データが供給されたとし
ても、この消音指示データによる消音指示は無視される
ので、もともと楽器演奏のために作成された演奏データ
を生かして自然な歌唱を行うことができる。
器演奏のために作成された、消音指示データを必ず含む
演奏データに基づいて音声合成を行うに際し、外部から
発音指示データが供給される毎に、歌詞記憶手段に記憶
された複数の音韻に対応する音声が順次合成され、該音
声合成中に、外部から消音指示データが供給されたとし
ても、この消音指示データによる消音指示は無視される
ので、もともと楽器演奏のために作成された演奏データ
を生かして自然な歌唱を行うことができる。
【図１】本発明の実施の一形態にかかる歌唱電子装置の
構成を示すブロック図である。
構成を示すブロック図である。
【図２】図１のデータメモリに記憶されるデータの構成
を示す図である。
を示す図である。
【図３】図１のＣＰＵで実行されるメインプログラムの
フローチャートである。
フローチャートである。
【図４】図３の演奏発音処理の手順を示すフローチャー
トである。
トである。
【図５】図３の演奏発音処理の手順を示すフローチャー
トである。
トである。
１ ＣＰＵ ２ ＲＯＭ ３ ＲＡＭ ４ データメモリ ８ フォルマント音源 ９ ＤＡ変換器 １０ サウンドシステム
Claims (2)
- 【請求項１】 少なくとも発音指示データ及び消音指示
データを含む演奏データであって、外部から供給される
演奏データを受信する受信手段と、複数の音韻で構成さ
れる歌詞を記憶する歌詞記憶手段と、該記憶した歌詞に
対応する音声を合成する音声合成手段とを備えた歌唱音
声合成装置において、 前記音声合成手段は、前記受信手段から前記発音指示デ
ータが供給される毎に、前記歌詞記憶手段に記憶された
複数の音韻に対応する音声を順次合成し、該音声合成中
に、前記受信手段から前記消音指示データが供給された
としても該消音指示データによる消音指示を無視するこ
とを特徴とする歌唱音声合成装置。 - 【請求項２】 息継ぎタイミングを示す息継ぎ情報を供
給する息継ぎ情報供給手段を有し、 前記音声合成手段は、前記供給された息継ぎ情報が示す
息継ぎタイミングにおいて前記消音指示データが供給さ
れた場合には、当該タイミングにおいて合成中の音声を
消音することを特徴とする請求項１記載の歌唱音声合成
装置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP21649495A JP3239706B2 (ja) | 1995-08-03 | 1995-08-03 | 歌唱音声合成装置 |
| US08/687,976 US5703311A (en) | 1995-08-03 | 1996-07-29 | Electronic musical apparatus for synthesizing vocal sounds using format sound synthesis techniques |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP21649495A JP3239706B2 (ja) | 1995-08-03 | 1995-08-03 | 歌唱音声合成装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH0944179A JPH0944179A (ja) | 1997-02-14 |
| JP3239706B2 true JP3239706B2 (ja) | 2001-12-17 |
Family
ID=16689318
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP21649495A Expired - Fee Related JP3239706B2 (ja) | 1995-08-03 | 1995-08-03 | 歌唱音声合成装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3239706B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008170592A (ja) * | 2007-01-10 | 2008-07-24 | Yamaha Corp | 歌唱合成のための装置およびプログラム |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3834804B2 (ja) * | 1997-02-27 | 2006-10-18 | ヤマハ株式会社 | 楽音合成装置および方法 |
| JP4630918B2 (ja) * | 2008-07-01 | 2011-02-09 | 武範 西 | 歌唱レベル判定方法 |
-
1995
- 1995-08-03 JP JP21649495A patent/JP3239706B2/ja not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008170592A (ja) * | 2007-01-10 | 2008-07-24 | Yamaha Corp | 歌唱合成のための装置およびプログラム |
| JP4735544B2 (ja) * | 2007-01-10 | 2011-07-27 | ヤマハ株式会社 | 歌唱合成のための装置およびプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| JPH0944179A (ja) | 1997-02-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2921428B2 (ja) | カラオケ装置 | |
| JP3144273B2 (ja) | 自動歌唱装置 | |
| JP3598598B2 (ja) | カラオケ装置 | |
| JP3319211B2 (ja) | 音声変換機能付カラオケ装置 | |
| JP2838977B2 (ja) | カラオケ装置 | |
| JPH10105169A (ja) | ハーモニーデータ生成装置およびカラオケ装置 | |
| JP4174940B2 (ja) | カラオケ装置 | |
| JP2003099032A (ja) | コード提示装置およびコード提示用コンピュータプログラム | |
| JP3127722B2 (ja) | カラオケ装置 | |
| JPH10319947A (ja) | 音域制御装置 | |
| EP1638077A1 (en) | Automatic rendition style determining apparatus, method and computer program | |
| JP2000122674A (ja) | カラオケ装置 | |
| JP4038836B2 (ja) | カラオケ装置 | |
| JP3116937B2 (ja) | カラオケ装置 | |
| JP3239706B2 (ja) | 歌唱音声合成装置 | |
| JP3518253B2 (ja) | データ編集装置 | |
| JPH10268895A (ja) | 音声信号処理装置 | |
| JPH11338480A (ja) | カラオケ装置 | |
| JP4300764B2 (ja) | 歌唱音声を合成する方法および装置 | |
| JP3265995B2 (ja) | 歌唱音声合成装置及び方法 | |
| JPH1078750A (ja) | カラオケ装置 | |
| JP3233036B2 (ja) | 歌唱音合成装置 | |
| JP2002221978A (ja) | ボーカルデータ生成装置、ボーカルデータ生成方法および歌唱音合成装置 | |
| JP2904045B2 (ja) | カラオケ装置 | |
| JPH08328555A (ja) | 演奏制御装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313532 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20071012 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081012 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091012 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101012 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101012 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111012 Year of fee payment: 10 |
|
| LAPS | Cancellation because of no payment of annual fees |