[go: up one dir, main page]

JP2001111910A - TV video character information extraction conversion device and emergency telop character recognition conversion display device - Google Patents

TV video character information extraction conversion device and emergency telop character recognition conversion display device

Info

Publication number
JP2001111910A
JP2001111910A JP28557899A JP28557899A JP2001111910A JP 2001111910 A JP2001111910 A JP 2001111910A JP 28557899 A JP28557899 A JP 28557899A JP 28557899 A JP28557899 A JP 28557899A JP 2001111910 A JP2001111910 A JP 2001111910A
Authority
JP
Japan
Prior art keywords
image
telop
extracted
region
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP28557899A
Other languages
Japanese (ja)
Inventor
Keiko Watabe
景子 渡部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP28557899A priority Critical patent/JP2001111910A/en
Publication of JP2001111910A publication Critical patent/JP2001111910A/en
Pending legal-status Critical Current

Links

Landscapes

  • Studio Circuits (AREA)

Abstract

(57)【要約】 【課題】 瞬時に流れるTV映像中の文字情報を取り出
す場合に、ユーザーが取り出す情報を選択する前にあら
かじめ情報を記憶しておく必要があり、画像をそのまま
記憶していくと記憶容量が莫大になってしまうことを低
減することを目的とする。 【解決手段】 テロップ領域抽出手段もしくはフリップ
領域抽出手段においてTV映像画像から文字領域を抽出
し、抽出画像比較判定手段において文字領域画像を比較
して新規画像だけを画像蓄積手段に蓄積し、文字認識手
段を用いて抽出画像をテキストデータに変換することを
特徴とするTV映像文字情報抽出変換装置。
(57) [Summary] [Problem] To extract character information in a TV video that flows instantaneously, it is necessary to store information in advance before the user selects information to be extracted, and the image is stored as it is. And to reduce the storage capacity from being enormous. SOLUTION: A character region is extracted from a TV video image by a telop region extraction unit or a flip region extraction unit, a character region image is compared by an extraction image comparison determination unit, and only a new image is stored in an image storage unit, and character recognition is performed. A TV video character information extraction / conversion device characterized by converting an extracted image into text data using a means.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、デジタルテレビな
どの画面上の文字情報を取り出して記憶し、必要に応じ
て加工を行うTV映像文字情報抽出変換装置に関するも
のである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a TV video character information extracting / converting apparatus which extracts and stores character information on a screen of a digital television or the like, and performs processing as necessary.

【0002】[0002]

【従来の技術】テレビ映像中の文字情報を取り出す場
合、従来はビデオで記憶して巻き戻して再生しながら情
報を検索したり、文字を含んだ画像を保存していた。
2. Description of the Related Art Conventionally, when character information in a television image is taken out, information has been searched for while being stored and rewound and played back as a video, or an image containing characters has been stored.

【0003】[0003]

【発明が解決しようとする課題】上記の方法では、ビデ
オをセットするなどあらかじめ情報を抽出・記憶する準
備をしなければならず、コマーシャルや懸賞の応募要項
などユーザーが欲しいと思った一瞬の情報を記憶するに
は手間がかかりすぎてしまう問題があった。
In the above-mentioned method, it is necessary to prepare for extracting and storing information in advance, such as setting a video. There was a problem that it took too much time to memorize.

【0004】一瞬の情報を漏らさず取り出すためには、
ユーザーが取り出す情報を選択する前にあらかじめ情報
を記憶しておく必要がある。しかし、画像をそのまま記
憶していくと記憶容量が莫大になってしまう可能性があ
る。
[0004] In order to retrieve instant information without leaking,
Before the user selects the information to retrieve, the information must be stored in advance. However, if the image is stored as it is, the storage capacity may become enormous.

【0005】本発明では、このような問題を解決するた
めにできるだけ必要な情報だけを取り出すシステムを実
現することを目的にした。
An object of the present invention is to realize a system that extracts only necessary information as much as possible to solve such a problem.

【0006】本発明では、必要な情報を記憶する文字領
域を抽出し、文字領域画像を比較して新規画像だけを記
憶し、文字認識を用いてテキストデータに変換すること
を目的にした。
An object of the present invention is to extract a character area for storing necessary information, compare character area images, store only a new image, and convert the new image into text data using character recognition.

【0007】[0007]

【課題を解決するための手段】前記課題を解決するため
に、TV映像文字情報抽出変換装置はテロップ領域抽出
手段もしくはフリップ領域抽出手段においてTV映像画
像から文字領域を抽出し、抽出画像比較判定手段におい
て文字領域画像を比較して新規画像だけを画像蓄積手段
に蓄積し、文字認識手段を用いて抽出画像をテキストデ
ータに変換することを特徴とする。
In order to solve the above-mentioned problems, a TV video character information extracting / converting device extracts a character region from a TV video image by a telop region extracting unit or a flip region extracting unit, and extracts and compares the extracted image. Wherein the character area images are compared, only the new image is stored in the image storage means, and the extracted image is converted into text data using the character recognition means.

【0008】[0008]

【発明の実施の形態】以下本発明のTV映像文字情報抽
出変換装置及び緊急放送文字情報変換装置の実施の形態
について、図面を参照しながら説明する。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Embodiments of a TV video character information extracting and converting device and an emergency broadcast character information converting device of the present invention will be described below with reference to the drawings.

【0009】(実施の形態1)図1は、デジタルTV及
びアナログTVにおいてTV映像文字情報抽出変換装置
110の構成図であり、TV映像文字情報抽出変換装置
110を構成する101は映像蓄積部、102はテロッ
プ領域抽出部、103はフリップ領域抽出部、104は
抽出画像比較判定手段、105は抽出された画像を蓄積
する画像蓄積手段、106は文字認識対象選択手段、1
07は文字認識手段、108はテキストデータ記憶手
段、109はテキストデータ編集・加工手段である。
(Embodiment 1) FIG. 1 is a block diagram of a TV video character information extraction / conversion device 110 in a digital TV and an analog TV. 102 is a telop area extraction unit, 103 is a flip area extraction unit, 104 is an extracted image comparison determination unit, 105 is an image storage unit that stores extracted images, 106 is a character recognition target selection unit, 1
Reference numeral 07 denotes character recognition means, reference numeral 108 denotes text data storage means, and reference numeral 109 denotes text data editing / processing means.

【0010】映像蓄積部101は外部から入ってきた映
像信号を蓄積する。具体的にはフレームバッファなどで
ある。
The video storage unit 101 stores a video signal input from the outside. Specifically, it is a frame buffer or the like.

【0011】テロップ領域抽出部102は映像蓄積部1
01に蓄積された画像を取り出し、画像中のテロップ領
域を抽出し、抽出画像を抽出画像比較判定手段104に
送る。
[0011] The telop area extraction unit 102 is a video storage unit 1.
The extracted image is extracted, a telop area in the image is extracted, and the extracted image is sent to the extracted image comparison / determination unit 104.

【0012】フリップ領域抽出部103は、映像蓄積部
101から取り出された画像がテロップ領域抽出部10
2でテロップ領域を抽出されなかった場合に、映像蓄積
部101から取り出された画像からフリップ領域を抽出
し、抽出画像を抽出画像比較判定手段104に送る。
The flip region extracting unit 103 converts the image extracted from the video storage unit 101 into a telop region extracting unit 10.
If no telop area is extracted in step 2, a flip area is extracted from the image extracted from the video storage unit 101, and the extracted image is sent to the extracted image comparison / determination unit 104.

【0013】抽出画像比較判定手段104は、テロップ
領域抽出部102、もしくは、フリップ領域抽出部10
3から抽出された画像と画像蓄積手段105に蓄積され
ている最新画像とを比較し、二つの画像が異なるものか
どうかを判定する。
The extracted image comparison / determination means 104 includes a telop area extraction unit 102 or a flip area extraction unit 10
3 is compared with the latest image stored in the image storage unit 105 to determine whether the two images are different.

【0014】画像蓄積手段105は、抽出画像比較判定
手段104で画像蓄積手段105が蓄積している最新画
像と異なると判定された画像を蓄積する。
The image storage means 105 stores an image determined by the extracted image comparison / determination means 104 to be different from the latest image stored in the image storage means 105.

【0015】文字認識対象選択手段106は、画像蓄積
手段105に蓄積された画像を取り出し画面の特定個所
に画像に番号をつけて表示し、ユーザーがその番号に対
してリモコンやキーボード等の入力手段を用いて選択番
号を入力することで、文字認識対象となる画像を選択
し、選択された画像を文字認識手段に送る。
The character recognition target selection means 106 takes out the image stored in the image storage means 105, displays the image at a specific location on the screen with a number attached thereto, and inputs the number to the input means such as a remote controller or a keyboard. By inputting a selection number using, an image to be subjected to character recognition is selected, and the selected image is sent to character recognition means.

【0016】文字認識手段107は、文字認識対象選択
手段106でユーザーが選択した画像を文字認識して、
テキストデータに変換する。
The character recognizing means 107 performs character recognition on the image selected by the user by the character recognizing target selecting means 106,
Convert to text data.

【0017】テキストデータ記憶手段108は、文字認
識手段107で変換されたテキストデータを識別IDを
付属して記憶する。
The text data storage means 108 stores the text data converted by the character recognizing means 107 together with an identification ID.

【0018】テキストデータ編集・加工手段109は、
リモコンやキーボード等の入力を受けて、テキストデー
タ記憶手段108に記憶されたテキストデータを取り出
し、TV画面上に表示された編集画面上に取り出したテ
キストデータを表示し、編集を行う。もしくは、取り出
したデータ別の語学に変換したり、別のテキストとパタ
ーンマッチングさせて違いを検出させる。
The text data editing / processing means 109 includes:
In response to an input from a remote controller, a keyboard, or the like, the text data stored in the text data storage unit 108 is extracted, and the extracted text data is displayed on an editing screen displayed on a TV screen to perform editing. Alternatively, the extracted data is converted into another language, or the difference is detected by pattern matching with another text.

【0019】以下、本実施の形態におけるTV映像文字
情報抽出変換装置110におけるTV映像上の文字情報
を抽出する手段について図2のフローチャートを用いて
説明する。
The means for extracting character information on a TV video in the TV video character information extraction and conversion device 110 according to the present embodiment will be described below with reference to the flowchart of FIG.

【0020】(ステップ201)映像蓄積部101から
取り出された画像を取り出し、テロップ領域抽出部10
2に送る。テロップ領域抽出手段102で受信した画像
に入ってきた順番に識別番号を割り当て、画像中のテロ
ップ領域を抽出する。識別番号の値は1つずつ加算され
る。一定時間後に識別番号の値はリセットされていく。
(Step 201) The image taken out from the video storage unit 101 is taken out, and the telop area extraction unit 10
Send to 2. Identification numbers are assigned in the order in which the telop area extracting means 102 enters the image received, and the telop area in the image is extracted. The values of the identification numbers are added one by one. After a certain time, the value of the identification number is reset.

【0021】(ステップ202)テロップ領域抽出手段
102でテロップ領域が抽出されたかどうかを判定す
る。テロップ領域が抽出された場合は抽出画像比較判定
手段104に抽出画像と識別IDを送る。識別IDはス
テップ201で割り当てられた識別番号と画像属性から
なる。画像属性には0の値が入っており、テロップ領域
が抽出された場合には1の値を入れる。テロップ画像が
抽出されなかった場合にはフリップ領域抽出手段103
に原画像と識別IDを送る。この時の画像属性は0のま
ま送る。
(Step 202) It is determined whether or not a telop area has been extracted by the telop area extraction means 102. When the telop area is extracted, the extracted image and the identification ID are sent to the extracted image comparison / determination means 104. The identification ID includes the identification number assigned in step 201 and the image attribute. A value of 0 is entered in the image attribute, and a value of 1 is entered when a telop area is extracted. If no telop image has been extracted, the flip area extraction means 103
The original image and the identification ID. At this time, the image attribute is sent as 0.

【0022】(ステップ203)ステップ202から送
られた原画像をフリップ領域抽出手段103を用いて画
像中のフリップ領域を抽出する。
(Step 203) Using the flip region extracting means 103, the original image sent from step 202 is used to extract a flip region in the image.

【0023】(ステップ204)ステップ203でフリ
ップ画像が抽出された場合、抽出されたフリップ画像と
識別IDを抽出画像比較判定手段104に送る。識別I
Dはステップ201で割り当てられた識別番号と画像属
性にフリップ領域であることを示す2の値を入った画像
属性からなる。フリップ画像が抽出されなかった場合は
原画像と識別IDは記憶せずに棄てる。
(Step 204) When the flip image is extracted in Step 203, the extracted flip image and the identification ID are sent to the extracted image comparison / determination means 104. Identification I
D is composed of an identification number assigned in step 201 and an image attribute having a value of 2 indicating a flip area in the image attribute. If the flip image is not extracted, the original image and the identification ID are discarded without being stored.

【0024】(ステップ205)抽出画像比較判定手段
104でステップ202、または、ステップ204で送
信された画像と画像蓄積手段105に蓄積された最新蓄
積画像(添付IDが一番大きい画像)と比較する。比較
画像が異なるものであると判定された場合、ステップ2
02、または、ステップ204で送信された画像を識別
IDとともに画像蓄積手段105に蓄積する。比較画像
が同一のものであると判定された場合はステップ20
2、または、ステップ204で送信された画像をデータ
から消す。
(Step 205) The extracted image comparison / determination means 104 compares the image transmitted in step 202 or step 204 with the latest stored image (the image with the largest attached ID) stored in the image storage means 105. . If it is determined that the comparison images are different, step 2
02 or the image transmitted in step 204 is stored in the image storage unit 105 together with the identification ID. If the comparison images are determined to be the same, step 20
2, or delete the image transmitted in step 204 from the data.

【0025】(ステップ206)ステップ205におい
て抽出画像比較判定手段104から画像蓄積手段105
に送信された画像を添付IDとともに蓄積する(一定時
間が経てば、蓄積された画像は消去される。or蓄積容量
が許容範囲を超える場合は最も古い画像から順番に消去
される。)。
(Step 206) In step 205, the extracted image comparison / determination means 104 switches to the image storage means 105
Is stored together with the attached ID (the stored image is deleted after a certain period of time. If the storage capacity exceeds the allowable range, the images are deleted in order from the oldest image).

【0026】(ステップ207)(TVを見ているユー
ザーが文字認識対象画像選択入力をリモコンもしくはキ
ーボード等で入力した場合に)画像蓄積手段105に蓄
積された画像に番号を振り分け、番号とともに蓄積画像
をTV画面上に表示する。ユーザーは選択した文字認識
対象画像の番号をリモコンもしくはキーボード等で入力
する。入力された番号に対応する画像のIDを文字認識
手段107に送信し、選択された画像は画像蓄積手段1
05に蓄積したままにする。選択されなかった抽出画像
は消去する。
(Step 207) Numbers are assigned to the images stored in the image storage means 105 (when the user watching the TV inputs a character recognition target image selection input using a remote controller or a keyboard, etc.) Is displayed on the TV screen. The user inputs the number of the selected character recognition target image using a remote controller, a keyboard, or the like. The ID of the image corresponding to the input number is transmitted to the character recognition unit 107, and the selected image is stored in the image storage unit 1.
05. The unselected extracted images are deleted.

【0027】(ステップ208)ステップ207で送信
された画像IDに対応する画像を画像蓄積手段105か
ら取り出し、文字認識を行いテキストデータに変換す
る。テキストデータに新たにテキストデータIDを振り
分ける。テキストデータと付属IDをテキストデータ記
憶手段108に送る。
(Step 208) The image corresponding to the image ID transmitted in step 207 is taken out from the image storage means 105, and is subjected to character recognition and converted into text data. A text data ID is newly assigned to the text data. The text data and the attached ID are sent to the text data storage means 108.

【0028】(ステップ209)ステップ208で送信
されたテキストデータとIDをテキストデータ記憶手段
108に記憶する。
(Step 209) The text data and the ID transmitted in step 208 are stored in the text data storage means 108.

【0029】(ステップ210)ユーザーから要求があ
った場合にテキストデータ記憶手段108に記憶された
データを取り出し編集画面に表示して編集したり、プロ
グラムによって変更を行い、新たにIDを割り当ててテ
キストデータ記憶手段108に記憶する。
(Step 210) When requested by the user, the data stored in the text data storage means 108 is taken out, displayed on an editing screen, edited, or changed by a program, and a new ID is assigned to the text. The data is stored in the data storage unit 108.

【0030】図3は、映像蓄積部101から送られた画
像データからテロップ領域を抽出する具体例として原画
像とその抽出例を示すものである。
FIG. 3 shows an original image and an example of the extraction as a specific example of extracting a telop area from the image data sent from the video storage unit 101.

【0031】301はテロップ領域を含む原画像の例
で、302は原画像301の高輝度領域を検出した場合
の検出領域の例、303は原画像301の高周波領域を
検出してテロップ領域のエッジ部分を抽出した図で、3
04は302と303を組み合わせた図で、305は3
04から抽出されたテロップ領域を示す。
Reference numeral 301 denotes an example of an original image including a telop area, reference numeral 302 denotes an example of a detection area when a high-brightness area of the original image 301 is detected, and reference numeral 303 denotes an edge of the telop area by detecting a high-frequency area of the original image 301. In the figure where the part is extracted, 3
04 is a combination of 302 and 303, 305 is 3
4 shows a telop area extracted from the telop area 04.

【0032】以下、本実施の形態におけるテロップ領域
抽出部102におけるTV映像上のテロップ領域を抽出
する手段について図4のフローチャートを用いて説明す
る。
The means for extracting a telop area on a TV video in the telop area extraction unit 102 according to the present embodiment will be described below with reference to the flowchart of FIG.

【0033】(ステップ401)映像蓄積部101から
送られた画像データの画素で輝度が閾値a以上の画素を
取り出し、取り出した画素領域をテロップ一時蓄積手段
411に蓄積する。
(Step 401) Pixels having a luminance equal to or higher than the threshold value a are extracted from the pixels of the image data sent from the video storage unit 101, and the extracted pixel area is stored in the telop temporary storage unit 411.

【0034】(ステップ402)映像蓄積部101から
送られた画像データの高周波領域を抽出し、テロップ画
像のエッジ個所を抽出する。
(Step 402) The high frequency region of the image data sent from the video storage unit 101 is extracted, and the edge portion of the telop image is extracted.

【0035】(ステップ403)ステップ401とステ
ップ402の出力結果に重み付けをして各画素を加算し
て、評価値を算出し、この評価値に基づいてテロップ領
域を抽出する。
(Step 403) The output results of steps 401 and 402 are weighted, each pixel is added, an evaluation value is calculated, and a telop area is extracted based on the evaluation value.

【0036】図5は、テロップ領域抽出部102から送
られた画像データからフリップ領域を抽出するときに抽
出される原画像とその抽出領域の具体例を示すものであ
る。
FIG. 5 shows a specific example of an original image extracted when a flip area is extracted from the image data sent from the telop area extraction unit 102 and the extracted area.

【0037】501はテロップ領域抽出部102から送
られた原画像データの具体例である。
Reference numeral 501 denotes a specific example of the original image data sent from the telop area extraction unit 102.

【0038】502は501から淡色領域を抽出した場
合の抽出領域の例である。
Reference numeral 502 denotes an example of an extraction area when a light color area is extracted from 501.

【0039】503は画面全体を幾つかのセグメントに
分けた場合に、502の淡色領域を含むセグメント群の
例を示す。
Reference numeral 503 denotes an example of a segment group including 502 light-colored areas when the entire screen is divided into several segments.

【0040】504はフリップ領域判定対象となる50
3で抽出されたセグメント群の中心セグメントを示す。
Reference numeral 504 denotes a flip region determination target 50.
3 shows the center segment of the segment group extracted in FIG.

【0041】505は504の対象セグメントがフリッ
プ領域と判定された場合に、504のセグメント角に接
するセグメントで、503のセグメント群に属するセグ
メントを次のフリップ領域判定対象としてサンプリング
した場合のフリップ領域判定対象セグメントを示す。
Reference numeral 505 denotes a segment which is in contact with the segment angle of 504 when the target segment of 504 is determined to be a flip area, and a flip area is determined by sampling a segment belonging to the segment group of 503 as the next flip area determination target. Indicates the target segment.

【0042】506は505の対象セグメントがフリッ
プ領域と判定された場合に、504のセグメントに接す
るセグメントで505のセグメントに囲まれたセグメン
トで503のセグメント群に属するセグメントを次のフ
リップ領域判定対象とした場合の対象セグメントを示
す。
Reference numeral 506 denotes a segment which is in contact with the segment 504 and which is surrounded by the segment 505 and which belongs to the segment group 503 when the target segment 505 is determined to be a flip area. This shows the target segment in the case where it is performed.

【0043】507は506の対象セグメントがフリッ
プ領域と判定された場合に、未だフリップ領域判定対象
となっていない503のセグメント群に属するセグメン
トを次のフリップ領域判定対象としてサンプリングした
場合のフリップ領域判定対象セグメントを示す。
Reference numeral 507 denotes a flip region determination when a segment belonging to the 503 segment group which is not yet a flip region determination target is sampled as a next flip region determination target when the target segment 506 is determined to be a flip region. Indicates the target segment.

【0044】508は507のフリップ領域判定セグメ
ントがフリップ領域と判定されなかった場合最終的に抽
出されたフリップ領域を示す。
Reference numeral 508 denotes a flip region finally extracted when the flip region determination segment 507 is not determined to be a flip region.

【0045】以下、本実施の形態におけるTV映像文字
情報抽出変換装置110におけるTV映像上のフリップ
領域を抽出する手段について図6のフローチャートを用
いて説明する。
The means for extracting a flip area on a TV video in TV video character information extraction and conversion apparatus 110 according to the present embodiment will be described below with reference to the flowchart of FIG.

【0046】(ステップ601)テロップ領域抽出部1
02から送られた画像データ中で、各画素のRGB各値と
その和が決められた閾値以上のピクセルの領域をとる。
(Step 601) Telop area extraction unit 1
In the image data sent from 02, a region of a pixel whose RGB value of each pixel and the sum thereof are equal to or larger than a predetermined threshold is taken.

【0047】(ステップ602)画面を6×6の計48
分割のセグメントに分ける。
(Step 602) The screen is 6 × 6 for a total of 48
Divide the segment into segments.

【0048】(ステップ603)S601で抽出された
領域を含むS602のセグメント群を取り出す。
(Step 603) The group of segments in S602 including the region extracted in S601 is extracted.

【0049】(ステップ604)フリップ領域であるか
どうかを判定する対象として、S603で抽出されたセ
グメントの中心に位置する4個のセグメントを取り出
し、各セグメントのRGBの各平均・分散を調べる(ま
た、RGBの各平均値を代表色1とし、この代表色の次に
出現頻度の高い色を代表色2とする。)。
(Step 604) Four segments located at the center of the segment extracted in S603 are taken out as targets for determining whether or not the region is a flip region, and the average and variance of RGB of each segment are examined (and , RGB, the average value is set as a representative color 1, and the color having the highest frequency after this representative color is set as a representative color 2.)

【0050】(ステップ605)S604で取り出した
平均・分散値が閾値以下であるかどうかを判定する。
(Step 605) It is determined whether or not the average / variance value extracted in S604 is equal to or smaller than a threshold value.

【0051】(ステップ606)S605の判定が閾値
以下であった場合、S604のセグメント群をフリップ
領域として、フリップ領域記憶手段に記憶する。
(Step 606) If the determination in S605 is equal to or smaller than the threshold value, the segment group in S604 is stored as a flip area in the flip area storage means.

【0052】(ステップ607)S604で抽出された
各セグメントの平均値の差が閾値以下であれば同じ領域
として、閾値より大きければ別領域とする。領域が二つ
以上ある場合にはグループ番号を割り当てる。
(Step 607) If the difference between the average values of the segments extracted in S604 is equal to or smaller than the threshold value, the area is determined to be the same, and if it is larger than the threshold value, it is determined to be another area. If there are two or more areas, a group number is assigned.

【0053】(ステップ608)S606で抽出された
フリップ領域の角に接していてまだ抽出されていないセ
グメントをサンプルとして選出する。
(Step 608) A segment that is in contact with a corner of the flip area extracted in S606 and has not been extracted is selected as a sample.

【0054】(ステップ609)S608で選出された
セグメントの画素の平均・分散を調べる。
(Step 609) The average and variance of the pixels of the segment selected in S608 are examined.

【0055】(ステップ610)S605−S607と
同じ操作を行う。
(Step 610) The same operation as in steps S605 to S607 is performed.

【0056】(ステップ611)S610で新たに抽出
されたセグメントに囲まれたセグメントの画素の平均・
分散をとる。
(Step 611) The average of the pixels of the segment surrounded by the segment newly extracted in S610
Take dispersion.

【0057】(ステップ612) S605−S607の
操作を行う。
(Step 612) The operations of S605 to S607 are performed.

【0058】(ステップ613) S603で取り出され
たセグメント領域中の全セグメントの平均・分散を調べ
たかどうかを判定する。残っている領域がある場合には
S608からの動作を繰り返す。調べ終わった場合に
は、フリップ領域が2つ以上ある場合には属するセグメ
ントが多いものから順番に1,2,3とグループ番号を
割り当てる。フリップ領域がひとつの場合はグループ番
号は0が割り当てられる。識別IDの画像属性にフリッ
プ領域を示す2の値をいれる。
(Step 613) It is determined whether the average and variance of all the segments in the segment area extracted in S603 have been checked. If there is any remaining area, the operation from S608 is repeated. When the check is completed, if there are two or more flip areas, group numbers 1, 2, 3 are assigned in order from the one to which the segment belongs. If there is only one flip area, the group number is assigned 0. A value of 2 indicating a flip area is put in the image attribute of the identification ID.

【0059】S201で割り当てられた識別番号と画像
属性とグループ番号を識別IDとして、抽出画像ととも
に抽出画像比較判定手段104に送信する。フリップ領
域検出の操作を終了する。
The identification number, image attribute, and group number assigned in S201 are transmitted as identification IDs to the extracted image comparison / determination means 104 together with the extracted image. The operation of the flip area detection ends.

【0060】テロップ領域抽出部102、もしくはフリ
ップ領域抽出部103で抽出されて送られてきた画像と
画像蓄積手段105に蓄積された画像を比較して同一の
ものであるかどうかを判定する抽出画像比較判定手段1
04の動作について図7のフローチャートを用いて説明
する。
An image extracted by the telop area extraction unit 102 or the flip area extraction unit 103 and compared with the image stored in the image storage unit 105 to determine whether or not they are the same. Comparison determination means 1
The operation of Step 04 will be described with reference to the flowchart of FIG.

【0061】(ステップ701)テロップ領域抽出部1
02もしくはフリップ領域抽出部103から送られてき
た画像と識別IDを受信する。
(Step 701) Telop area extraction unit 1
02 or the image and the identification ID sent from the flip area extraction unit 103 are received.

【0062】(ステップ702)画像蓄積手段105か
ら識別IDの中で識別番号の値が最も大きいものを最新
蓄積画像のIDとして取り出す。
(Step 702) Among the identification IDs, the one with the largest value of the identification number is taken out from the image storage means 105 as the ID of the latest stored image.

【0063】(ステップ703)S701で受信した識
別IDの画像属性の値とS702で取り出した識別ID
の画像属性の値が同じかどうかを判断する。同じである
と判断された場合はS704に行き、異なると判断され
た場合はS708に行く。
(Step 703) The value of the image attribute of the identification ID received in S701 and the identification ID extracted in S702
It is determined whether the values of the image attributes are the same. If it is determined that they are the same, the procedure goes to S704, and if they are different, the procedure goes to S708.

【0064】(ステップ704)S702で取り出され
た識別IDに対応する画像を画像蓄積手段105から取
り出す。
(Step 704) The image corresponding to the identification ID extracted in S702 is extracted from the image storage means 105.

【0065】(ステップ705)S701で受信した画
像の画素とS704で取り出した画像の画素の差分をあ
らかじめ決めておいたサンプル点でとる。
(Step 705) The difference between the pixel of the image received in S701 and the pixel of the image extracted in S704 is obtained at a predetermined sampling point.

【0066】(ステップ706)S705で計算した各
サンプル点の差分値を2乗し、足し合わせていく。
(Step 706) The difference value of each sample point calculated in S705 is squared and added.

【0067】(ステップ707)S706で取った各サ
ンプルの差分値の2乗の総和が閾値より大きいかどうか
を判定する。閾値より大きい場合には2つの画像は別画
像としてみなしてS708に行く。閾値より小さい場合
は二つの画像は同じ画像であるとみなし、S701で受
信した画像と識別IDを棄てる。
(Step 707) It is determined whether or not the sum of the squares of the difference values of each sample taken in S706 is larger than a threshold value. If it is larger than the threshold, the two images are regarded as different images, and the process proceeds to S708. If it is smaller than the threshold value, the two images are regarded as the same image, and the image and the identification ID received in S701 are discarded.

【0068】(ステップ708)S701で受信した画
像と識別信号を画像識別手段105に蓄積する。
(Step 708) The image and the identification signal received in S701 are stored in the image identification means 105.

【0069】図8は識別IDの構成例を示す。識別番号
はS201で各画像に割り当てられる番号で新しい画像
ほど値は大きくなる。ただし、一定時間毎に値をリセッ
トする。画像属性は画像が原画像かテロップ画像かフリ
ップ画像かを示す。画像が原画像の場合は0を、テロッ
プ画像の場合は1を、フリップ画像の場合は2の値をと
る。グループ番号は、フリップ領域抽出手段で同一画像
上に複数のフリップ領域がある場合にそれぞれに振り分
ける番号である。フリップ領域が単一の場合は0をと
る。
FIG. 8 shows a configuration example of the identification ID. The identification number is a number assigned to each image in S201, and the newer the image, the larger the value. However, the value is reset at regular intervals. The image attribute indicates whether the image is an original image, a telop image, or a flip image. The value takes 0 when the image is the original image, 1 when the image is a telop image, and 2 when the image is a flip image. The group number is a number assigned to each of a plurality of flip areas on the same image by the flip area extracting means. When the flip region is single, the value is 0.

【0070】図9は文字認識対象選択手段106の画面
表示例を示している。画像蓄積手段105に蓄積されて
いる画像に1から順番に番号を振り分けて、番号と縮小
された画像を画面に表示する。
FIG. 9 shows a screen display example of the character recognition target selecting means 106. Numbers are assigned to the images stored in the image storage unit 105 in order from 1 and the numbers and the reduced images are displayed on the screen.

【0071】図10は緊急テロップ放送が流れた場合、
テロップ放送の画面とテロップ認識後の出力画面を示
す。上下二つ領域はそれぞれ地震警報テロップと洪水警
報テロップの例を示す。
FIG. 10 shows a case where an emergency telop broadcast is played.
4 shows a telop broadcast screen and an output screen after telop recognition. The upper and lower areas show examples of earthquake warning telop and flood warning telop, respectively.

【0072】各領域の左上の図はテロップ放送の原画像
を、その下の図はテロップ放送の内容に対応して変換し
た図柄と英文字の画面表示の例を、右上の図はテロップ
状に出てきた地域の場所と地名のローマ字変換したもの
の画面表示の例を示す。変換画面の枠の色はテロップ内
容の緊急度に対応している。
The upper left figure of each area shows the original image of the telop broadcast, the lower figure shows an example of a screen display of symbols and English characters converted according to the contents of the telop broadcast, and the upper right figure shows a telop broadcast. An example of a screen display of a place and a place name of an appearing area converted into Roman characters is shown. The color of the frame of the conversion screen corresponds to the urgency of the telop content.

【0073】図1のTV映像文字情報抽出変換装置で緊
急テロップ放送が入った場合の緊急文字放送の認識処理
について図11のフローチャートを用いて説明する。
The process of recognizing an emergency text broadcast in the case where an emergency telop broadcast is entered by the TV video text information extraction / conversion device of FIG. 1 will be described with reference to the flowchart of FIG.

【0074】(ステップ801)緊急テロップ放送用音
声認識手段が緊急テロップ放送開始音声を認識した場合
に、ステップ802に行く。
(Step 801) When the emergency telop broadcast speech recognition means recognizes the emergency telop broadcast start speech, the procedure goes to step 802.

【0075】(ステップ802)緊急テロップ放送がテ
レビ画面の上部分にしか表示されない特徴より、図1の
映像蓄積部101から送られる画像の上から3分の1の
領域画像を取り出す。取り出した画像を前記テロップ領
域抽出手段102を用いてテロップ個所を抽出する。
(Step 802) Because of the feature that the emergency telop broadcast is displayed only on the upper part of the television screen, a one-third area image is extracted from the image sent from the video storage unit 101 in FIG. The telop portion is extracted from the extracted image by using the telop area extracting means 102.

【0076】(ステップ803)抽出画像をS201で
与えられた識別IDとともに緊急放送画像蓄積手段に送
る。文字認識処理待機キューに識別IDを入れる。
(Step 803) The extracted image is sent to the emergency broadcast image storage means together with the identification ID given in S201. The identification ID is put in the character recognition processing waiting queue.

【0077】(ステップ804)前記文字認識処理待機
キューから前記識別IDをFIFOの順番で取り出し、対応
する画像を前記緊急放送画像蓄積手段から取り出して、
文字認識手段107を用いて、画像中の文字を文字認識
してテキストデータに変換する。取り出された前記テキ
ストデータには、テキストデータIDが振り分けられ
る。前記テキストデータと前記テキストデータIDはテ
キストデータ蓄積手段に蓄積し、前記テキストデータI
Dを図柄変換処理待機キューに入れる。文字認識手段1
07の処理が終わり次第、再び前記文字認識処理待機キ
ューに入っているIDを取り出し、対応する画像を前記
緊急放送画像蓄積手段から取り出し引き続き処理を行
う。
(Step 804) The identification IDs are extracted from the character recognition processing standby queue in the order of FIFO, and the corresponding images are extracted from the emergency broadcast image storage means.
Characters in the image are recognized using the character recognition unit 107 and converted into text data. A text data ID is assigned to the extracted text data. The text data and the text data ID are stored in text data storage means.
D is put into a symbol conversion processing standby queue. Character recognition means 1
As soon as the process 07 is completed, the ID in the character recognition processing standby queue is taken out again, the corresponding image is taken out from the emergency broadcast image storage means, and the process is continued.

【0078】(ステップ805)前記図柄変換処理待機
キューに入っているテキストデータIDをFIFOの順番で
取り出し、対応するテキストデータを前記テキストデー
タ蓄積手段から取り出す。テキストデータと緊急用語・
地域用語データベース中の用語とパターンマッチングさ
せて、テキストデータ中の緊急用語・地域用語を抽出す
る。同時に”警報”や”注意報”等の危険度を表す用語
が検出された場合はその危険度を”1(安全)”、”2
(注意が必要)”、”3(やや危険)”、”4(非常に
危険)”の4つのレベルに分類する。”震度4”のよう
に数値が付随する場合も数値の値により危険度を分類す
る。前記テキストデータIDとグループIDと前記英文
字と前記緊急用語・地域用語と前記危険度を緊急用語・
地域用語蓄積手段に蓄積する。幾つかの地域名が検出さ
れた場合は、各地域に対して1から順番にグループID
を割り振る。地域名がひとつの場合にはグループIDは
0の値を入れる。
(Step 805) Text data IDs in the symbol conversion processing standby queue are fetched in FIFO order, and the corresponding text data is fetched from the text data storage means. Text data and emergency terms
Emergency terms and regional terms in the text data are extracted by pattern matching with terms in the regional term database. At the same time, if a term indicating a danger such as “alarm” or “advisory” is detected, the danger is set to “1 (safety)” or “2”.
(Needs attention) It is classified into four levels, "3 (slightly dangerous)" and "4 (very dangerous)." Even if a numerical value is attached such as "seismic intensity 4," the degree of risk is determined by the numerical value The text data ID, the group ID, the English characters, the urgent term / regional term, and the risk are referred to as an urgent term.
Store in local term storage means. If several region names are detected, group IDs are sequentially assigned to each region from 1
Allocate. If there is only one area name, a value of 0 is entered for the group ID.

【0079】(ステップ806)S805で抽出された
緊急用語・地域用語に対応する図柄・英文字・地域図形
を図柄・英文字・地域図形データベースから抽出する。
(Step 806) The design, English character, and local graphic corresponding to the emergency term and the local term extracted in S805 are extracted from the design, English character, and local graphic database.

【0080】(ステップ807)S806で抽出された
図柄・英文字を図10のように画面に表示する。
(Step 807) The symbols and English characters extracted in S806 are displayed on the screen as shown in FIG.

【0081】図柄は枠で囲まれており、枠の色は危険度
に対応している。例えば、”青(1=安全)”、”緑
(2=注意が必要)”、”黄(3=やや危険)”、”赤
(4=非常に危険)”というように色分けをする。前記
枠はレベル2から点滅を行い、危険度が高くなるにつれ
て点滅速度を速める。また、一定時間毎に前記図柄・英
文字の画面表示と図11のように危険地域を示した地図
と地域名の画面表示を交互に行う。
The symbol is surrounded by a frame, and the color of the frame corresponds to the degree of danger. For example, the colors are classified into blue (1 = safe), green (2 = needs attention), yellow (3 = somewhat dangerous), and red (4 = very dangerous). The frame blinks from level 2, and the blinking speed increases as the degree of danger increases. Further, the screen display of the symbols and English characters, the map showing the dangerous area and the screen display of the area name are alternately performed at regular time intervals as shown in FIG.

【0082】S805でグループIDが1以上の場合
は、前記図柄・英文字の画面表示方法は同じで、危険地
域の画面表示は全ての地域をひとつの地図にまとめて表
示する。危険地域はそれぞれの危険度に対応した色で表
示する。この場合、枠は取り出された危険地域の中でも
っとも高い危険度に対応した表示を行う。
If the group ID is 1 or more in step S805, the screen display method of the symbols and English characters is the same, and the screen display of the dangerous area displays all areas collectively on one map. The danger areas are displayed in colors corresponding to the respective danger levels. In this case, the frame provides a display corresponding to the highest degree of danger in the extracted danger area.

【0083】図12は緊急テロップ文字認識変換表示装
置の構成図である。916は緊急テロップ文字認識変換
表示装置である。緊急テロップ文字認識変換表示装置9
16を構成する901は緊急用テロップ音声認識手段、
902は緊急放送画像蓄積手段、903はテロップ領域
抽出部、904は緊急放送テロップ画像蓄積手段、90
5は文字認識処理待機キュー、906は文字認識手段、
907はテキストデータ蓄積手段、908は図柄変換処
理待機キュー、909は緊急用語検出手段、910は緊
急用語データベース、911は緊急用語・地域用語蓄積
手段、912は図柄・英文字・地域図形抽出手段、91
3は図柄・英文字・地域図形蓄積手段、914は変換画
像画面表示手段、915は図柄・英文字・地域図形デー
タベースである。
FIG. 12 is a configuration diagram of the emergency telop character recognition conversion display device. Reference numeral 916 denotes an emergency telop character recognition conversion display device. Emergency telop character recognition conversion display device 9
Reference numeral 901 which constitutes 16 is an emergency telop speech recognition means;
902 is an emergency broadcast image storage unit, 903 is a telop area extraction unit, 904 is an emergency broadcast telop image storage unit, 90
5 is a character recognition processing standby queue, 906 is character recognition means,
907 is a text data storage unit, 908 is a symbol conversion processing standby queue, 909 is an emergency term detection unit, 910 is an emergency term database, 911 is an emergency term / region term storage unit, 912 is a design / English character / region figure extraction unit, 91
3 is a symbol / English character / region graphic storage means, 914 is a converted image screen display means, and 915 is a symbol / English character / region graphic database.

【0084】緊急用テロップ音声認識手段901は緊急
テロップ音声を認識する。緊急テロップ音声が認識され
た場合は映像蓄積部101に画像を緊急放送画像蓄積手
段902に送信するように指示する。
The emergency telop speech recognition means 901 recognizes emergency telop speech. When the emergency telop voice is recognized, the video storage unit 101 is instructed to transmit the image to the emergency broadcast image storage unit 902.

【0085】緊急放送画像蓄積手段902は映像蓄積部
101から送られる画像の上から3分の1の領域画像を
取り出して蓄積する。
The emergency broadcast image storage means 902 takes out one third of the area image from the image sent from the video storage section 101 and stores it.

【0086】テロップ領域抽出部903はテロップ領域
を抽出し、S201で与えられた識別IDとテロップ領
域抽出部903で抽出されたテロップ領域を緊急放送テ
ロップ画像蓄積手段904に送信し、緊急放送テロップ
画像蓄積手段904はS201で与えられた前記識別I
Dとテロップ領域抽出部903で抽出されたテロップ領
域を蓄積する。
The telop area extraction unit 903 extracts the telop area, transmits the identification ID given in S201 and the telop area extracted by the telop area extraction unit 903 to the emergency broadcast telop image storage unit 904, and outputs the emergency broadcast telop image. The storage unit 904 stores the identification I given in S201.
D and the telop area extracted by the telop area extraction unit 903 are accumulated.

【0087】文字認識処理待機キュー905は前記識別
IDを送られた順番で格納し、文字認識手段906から
取り出し要求があった場合には格納された順番で取り出
す。
The character recognition standby queue 905 stores the identification IDs in the order in which they were sent, and when there is a request from the character recognition means 906 to retrieve them, retrieves them in the order in which they were stored.

【0088】文字認識手段906は文字認識処理待機キ
ュー905から前記識別IDを取り出して対応する画像
を緊急放送テロップ画像蓄積手段904から取り出し、
文字認識を行ってテキストデータに変換する。
The character recognition means 906 takes out the identification ID from the character recognition processing standby queue 905, takes out the corresponding image from the emergency broadcast telop image storage means 904,
Perform character recognition and convert to text data.

【0089】テキストデータ蓄積手段907は文字認識
手段906の出力であるテキストデータとそのテキスト
データIDを蓄積する。
The text data storage means 907 stores text data output from the character recognition means 906 and its text data ID.

【0090】図柄変換処理待機キュー908は前記テキ
ストデータIDを送られた順番で格納し、格納された順
番で取り出す。
The symbol conversion processing standby queue 908 stores the text data IDs in the order in which they were sent, and retrieves them in the order in which they were stored.

【0091】緊急用語検出手段909は図柄変換処理待
機キュー908から前記テキストデータIDを取り出し
て対応するテキストデータをテキストデータ蓄積手段9
07から取り出し、取り出したテキストデータと緊急用
語データベースにある用語をパターンマッチングで検索
して取り出す。
The emergency term detecting means 909 takes out the text data ID from the symbol conversion processing standby queue 908 and stores the corresponding text data in the text data storing means 9.
07, the extracted text data and the terms in the emergency term database are searched and extracted by pattern matching.

【0092】緊急用語データベース910はテロップ緊
急放送に頻出する緊急用語・地域名・数値を集めたデー
タベースである。
The emergency term database 910 is a database in which emergency terms, area names, and numerical values frequently appearing in telop emergency broadcasts are collected.

【0093】緊急用語・地域用語蓄積手段911は前記
テキストデータIDとグループIDと前記緊急用語・地
域用語と前記危険度を緊急用語・地域用語蓄積手段に蓄
積する。
The emergency term / region term storage unit 911 stores the text data ID, the group ID, the emergency term / region term, and the risk in the emergency term / region term storage unit.

【0094】図柄・英文字・地域図形抽出手段912は
緊急用語・地域用語蓄積手段911からFIFOの順にデー
タを取り出し、取り出したデータに対応する図柄・英文
字・地域図形を図柄・英文字・地域図形データベースか
ら検出する。
The pattern / English character / region graphic extracting means 912 retrieves data from the emergency term / region term storage means 911 in the order of FIFO, and converts the pattern / English character / region graphic corresponding to the retrieved data into the pattern / English character / region. Detect from the figure database.

【0095】図柄・英文字・地域図形蓄積手段913は
図柄・英文字・地域図形抽出手段912で検出された図
柄・英文字・地域図形を蓄積する。
The design / English character / region graphic storage means 913 stores the design / English character / region graphic detected by the design / English character / region graphic extraction means 912.

【0096】変換画像画面表示手段914は図柄・英文
字・地域図形蓄積手段913に蓄積された図柄・英文字
・地域図形を画面に表示する。
The converted image screen display means 914 displays the design / English character / region graphic stored in the design / English character / region graphic storage means 913 on the screen.

【0097】図柄・英文字・地域図形データベース91
5は緊急用語データベース910の緊急用語に対応した
図柄・英文字・地域図形を集めたデータベースである。
Pattern / English / Regional figure database 91
Reference numeral 5 denotes a database in which symbols, English characters, and regional figures corresponding to the emergency terms in the emergency term database 910 are collected.

【0098】[0098]

【発明の効果】以上のように、本発明は、必要な情報だ
けを取り出すことにより、限られた記憶容量であっても
情報を漏らさず記憶できるという優れた効果を有するT
V映像文字情報抽出変換装置を提供するものである。
As described above, the present invention has an excellent effect that, by extracting only necessary information, information can be stored without leaking even with a limited storage capacity.
It is intended to provide a V-video character information extraction and conversion device.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明に係る映像文字情報抽出装置の実施の形
態となる映像文字情報抽出装置の構成図
FIG. 1 is a configuration diagram of a video character information extraction device that is an embodiment of a video character information extraction device according to the present invention.

【図2】前記映像文字情報抽出装置の動作を説明するた
めのフローチャート
FIG. 2 is a flowchart for explaining the operation of the video character information extraction device.

【図3】本発明に係る映像文字情報抽出装置におけるテ
ロップ領域抽出部においてテロップ領域を含む原画像か
らテロップ領域を抽出していく各段階における抽出画像
の具体例を示す図
FIG. 3 is a diagram showing a specific example of an extracted image at each stage of extracting a telop area from an original image including a telop area in a telop area extraction unit in the video character information extraction apparatus according to the present invention.

【図4】本発明に係る映像文字情報抽出装置におけるテ
ロップ領域を抽出する動作について説明するフローチャ
ート
FIG. 4 is a flowchart illustrating an operation of extracting a telop area in the video character information extraction device according to the present invention.

【図5】本発明に係る映像文字情報抽出装置におけるフ
リップ領域抽出部においてフリップ領域を含む原画像か
らフリップ領域を抽出する各段階における抽出画像の具
体例を示す図
FIG. 5 is a diagram showing a specific example of an extracted image at each stage of extracting a flip region from an original image including a flip region in the flip region extraction unit in the video character information extraction device according to the present invention.

【図6】本発明に係る映像文字情報抽出装置におけるフ
リップ領域を抽出する動作について説明するフローチャ
ート
FIG. 6 is a flowchart illustrating an operation of extracting a flip region in the video character information extraction device according to the present invention.

【図7】本発明に係る映像文字情報抽出装置における最
新蓄積画像と抽出画像が同一であるか異なるか判定する
動作について説明するフローチャート
FIG. 7 is a flowchart illustrating an operation of determining whether the latest accumulated image and the extracted image are the same or different in the video character information extracting apparatus according to the present invention.

【図8】本発明に係る映像文字情報抽出装置において使
用される識別IDの構成例を示す図
FIG. 8 is a diagram showing a configuration example of an identification ID used in the video character information extracting device according to the present invention.

【図9】本発明に係る映像文字情報抽出装置において文
字認識の対象となる画像を画面に表示した時の表示例を
示す図
FIG. 9 is a diagram showing a display example when an image to be subjected to character recognition is displayed on a screen in the video character information extracting apparatus according to the present invention.

【図10】本発明に係る映像文字情報抽出装置において
緊急テロップ放送の表示例とその緊急放送を図柄・英文
字に変換画面表示の例を示す図
FIG. 10 is a diagram showing a display example of an emergency telop broadcast and an example of a screen display for converting the emergency broadcast into symbols and symbols in the video character information extracting apparatus according to the present invention.

【図11】本発明に係る映像文字情報抽出装置における
緊急テロップ放送の文字をテキストデータに変換して、
図柄・英文字に変換して画面表示する動作を説明するた
めのフローチャート
FIG. 11 is a diagram illustrating an example of a video character information extracting apparatus according to the present invention.
Flowchart for explaining the operation of converting the pattern into English characters and displaying it on the screen

【図12】本発明に係る映像文字情報抽出装置における
緊急テロップ放送文字認識装置の構成図
FIG. 12 is a configuration diagram of an emergency telop broadcast character recognition device in the video character information extraction device according to the present invention.

【符号の説明】[Explanation of symbols]

101 映像蓄積部 102 テロップ領域抽出部 103 フリップ領域抽出部 104 抽出画像比較判定手段 105 画像蓄積手段 106 文字認識対象選択手段 107 文字認識手段 108 テキストデータ記憶手段 109 テキストデータ編集・加工手段 110 TV映像文字情報抽出変換装置 301 テロップ領域を含む原画像の例 302 301の高輝度部分を検出した例 303 301の高周波部分をとってエッジ部分を検出
した例 304 302と303の結果を組み合わせた例 305 304の結果から抽出したテロップ領域例 501 フリップ領域を含む原画像の例 502 501の原画像の淡色領域を抽出した例 503 画像を分割し、淡色領域を含むセグメントを検
出した例 504 フリップ領域を検出の為のサンプル点となる中
心セグメントの例 505 504の中心セグメントがフリップ領域と判定
された場合の次のサンプリングセグメントの例 506 505のサンプリングセグメントがフリップ領
域と判定された場合の次のサンプリングセグメントの例 507 506のサンプリングセグメントがフリップ領
域と判定された場合の次のサンプリングセグメントの例 508 507のサンプリングセグメントがフリップ領
域と判定されなかった場合に抽出されたフリップ領域の
例 901 テロップ音声認識手段 902 緊急放送画像蓄積手段 903 テロップ領域抽出部 904 緊急放送テロップ画像蓄積手段 905 文字認識処理待機キュー 906 文字認識手段 907 テキストデータ蓄積手段 908 図柄変換処理待機キュー 909 緊急用語検出手段 910 緊急用語データベース 911 緊急用語・地域用語蓄積手段 912 図柄・英文字・地域図形抽出手段 913 図柄・英文字・地域図形蓄積手段 914 変換画像画面表示手段 915 図柄・英文字・地域図形データベース 916 緊急テロップ文字認識変換表示装置
Reference Signs List 101 video storage unit 102 telop region extraction unit 103 flip region extraction unit 104 extracted image comparison determination unit 105 image storage unit 106 character recognition target selection unit 107 character recognition unit 108 text data storage unit 109 text data editing / processing unit 110 TV video characters Information extraction conversion device 301 Example of original image including telop area 302 Example of detecting high-luminance part of 301 303 Example of detecting edge part by taking high-frequency part of 301 301 Example of combining results of 302 and 303 305 304 Example of telop area extracted from the result 501 Example of original image including flip area 502 Example of extracting light color area of original image 501 501 Example of dividing image and detecting segment including light color area 504 To detect flip area Center point Example of the next segment when the center segment of 505 504 is determined to be the flip region Example of the next sampling segment when the 505 505 sampling segment is determined to be the flip region 507 The sample segment of 506 is flipped Example of the next sampling segment when it is determined to be a region 508 Example of a flip region extracted when the sampling segment of 507 is not determined to be a flip region 901 Telop voice recognition means 902 Emergency broadcast image storage means 903 Extraction of telop area Part 904 emergency broadcast telop image storage means 905 character recognition processing standby queue 906 character recognition means 907 text data storage means 908 symbol conversion processing standby queue 909 emergency term detection means 910 emergency term data Database 911 Emergency term / regional term storage means 912 Design / English character / regional figure extraction means 913 Design / English character / regional figure storage means 914 Conversion image screen display means 915 Design / English character / regional figure database 916 Emergency telop character recognition conversion Display device

Claims (5)

【特許請求の範囲】[Claims] 【請求項1】 映像信号を蓄積する映像蓄積部と、前記
映像信号からテロップで構成されている領域の画像を抽
出するテロップ領域抽出手段と、 前記テロップ領域抽出手段で抽出する領域がないか否か
判断し、当該領域がない場合に前記映像信号からフリッ
プ領域の画像を抽出するフリップ領域抽出手段と、 前記テロップ領域抽出手段が抽出した領域の画像もしく
は前記フリップ領域抽出手段が抽出した領域の画像を蓄
積する画像蓄積手段と、 前記テロップ領域抽出手段が抽出した領域の画像の画素
もしくは前記フリップ領域抽出手段が抽出した領域の画
像の画素である出力画素と前記画像蓄積手段に蓄積され
ている中で一番新しく蓄積された画像の画素である最新
画素との差分をとり、 その差分値の絶対値の総和が閾値より大きい場合は前記
最新画素が別であると判定し、 前記出力画素を蓄積するように指示をする抽出画像比較
判定手段と、 前記画像蓄積手段に蓄積されている画像から文字認識の
対象を選択する文字認識対象選択手段と、前記選択され
た画像を文字認識してテキストデータに変換する文字認
識手段と、 前記テキストデータを記憶するテキストデータ記憶手段
からなるTV映像文字情報抽出変換装置。
1. A video storage unit for storing a video signal, a telop region extraction unit for extracting an image of a region composed of telops from the video signal, and whether there is no region to be extracted by the telop region extraction unit And a flip region extracting means for extracting an image of a flip region from the video signal when the region does not exist, an image of the region extracted by the telop region extracting device or an image of the region extracted by the flip region extracting device And an output pixel which is a pixel of the image of the area extracted by the telop area extracting means or a pixel of the image of the area extracted by the flip area extracting means, and the image stored in the image storing means. Take the difference with the latest pixel, which is the pixel of the most recently stored image, and if the sum of the absolute values of the difference values is greater than the threshold, An extracted image comparison / determination unit that determines that the latest pixel is different, and instructs to store the output pixel; and a character recognition target that selects a character recognition target from the images stored in the image storage unit. A TV video character information extracting / converting device comprising: a selecting unit; a character recognizing unit for recognizing a character of the selected image to convert it to text data; and a text data storing unit for storing the text data.
【請求項2】 前記フリップ領域抽出手段は、前記映像
信号の画素から白色もしくは淡色の画素で構成される領
域を検出する検出手段と、前記検出手段により検出され
た領域の映像信号の画素レベルと周辺画素レベルを比較
して略均一なレベル領域を検出する均一レベル領域検出
手段を用いてフリップ領域を抽出することを特徴とする
請求項1に記載のTV映像文字情報抽出変換装置。
2. The image processing apparatus according to claim 1, wherein the flip region extracting unit detects a region composed of white or light color pixels from the pixels of the video signal, and detects a pixel level of the video signal in the region detected by the detecting unit. 2. The TV video character information extracting and converting apparatus according to claim 1, wherein the flip area is extracted by using a uniform level area detecting means for detecting a substantially uniform level area by comparing peripheral pixel levels.
【請求項3】 前記テロップ領域抽出手段は、映像信号
の任意の映像平面における周波数成分が閾値より高い画
素を取り出して周波数の高域を検出する高周波領域検出
手段と、前記映像信号の任意の画素レベルと周辺画素レ
ベルを比較して略均一なレベル領域を検出する均一レベ
ル領域検出手段と、前記高周波領域検出手段と前記均一
レベル領域検出手段の各出力を基に特定領域を抽出する
抽出手段とを備えることを特徴とする請求項1に記載の
TV映像文字情報抽出変換装置。
3. The telop area extracting means includes: a high-frequency area detecting means for extracting a pixel having a frequency component higher than a threshold value in an arbitrary image plane of an image signal and detecting a high frequency band; A uniform level area detecting means for comparing a level and a peripheral pixel level to detect a substantially uniform level area, and an extracting means for extracting a specific area based on each output of the high frequency area detecting means and the uniform level area detecting means. The TV video character information extraction and conversion apparatus according to claim 1, further comprising:
【請求項4】 緊急テロップ放送の音声を認識する緊急
テロップ放送用音声認識手段と、前記緊急テロップ放送
用音声認識手段により音声が認識された場合に音声が認
識されたことを示すテロップ音声受信通信手段と、 前記テロップ音声受信通信手段によりテロップ緊急放送
が入ったことが伝わった場合にテロップ緊急放送が流れ
る画面上層部に対して請求項3に記載のテロップ領域を
抽出するテロップ領域抽出手段と、 前記テロップ領域により抽出されたテロップ領域の画像
を前記文字認識手段を用いて文字認識してテキストデー
タに変換し、 テキストデータと緊急用語データベースを照合させてテ
キストデータから緊急用語・地域用語を抽出し、 抽出された緊急用語とそれに対応する画像・英文字・地
域図形で構成される図柄・英文字・地域図形データベー
スと、 前記文字認識手段と図柄・英文字・地域図形データベー
スを照合して対応する画像と英文字と地域図形に変換
し、緊急度を表す用語を抽出し、ひとつの群として記憶
する図柄・英文字・地域図形蓄積手段と、 前記図柄・英文字・地域図形蓄積手段により蓄積された
画像・英単語・地域図形を画面上の枠組みの中に表示す
る変換画像画面表示手段を備えたことを特徴とする請求
項1に記載のTV映像文字情報抽出変換装置。
4. An emergency telop broadcast voice recognition means for recognizing the voice of the emergency telop broadcast, and a telop voice reception communication indicating that the voice has been recognized when the voice is recognized by the emergency telop broadcast voice recognition means. A telop area extracting means for extracting a telop area according to claim 3 for an upper layer portion of a screen where the telop emergency broadcast flows when it is transmitted that the telop emergency broadcast has entered by the telop voice receiving communication means; The image of the telop area extracted by the telop area is subjected to character recognition using the character recognition means and converted into text data, and the text data is compared with the emergency term database to extract emergency terms and regional terms from the text data. , Patterns and English characters composed of extracted emergency terms and their corresponding images, English characters and regional figures The regional graphic database, the character recognition means and the pattern / English / local graphic database are compared and converted into corresponding images, English characters and regional graphics, and terms representing the degree of urgency are extracted and stored as one group. A pattern / English character / region graphic storage means; and a converted image screen display means for displaying the image / English word / region graphic stored by the pattern / English character / region graphic storage means in a frame on a screen. 2. The TV video character information extracting and converting apparatus according to claim 1, wherein:
【請求項5】 請求項4記載の前記変換画像画面表示手
段は、危険度を色に対応させる色づけ手段(安全は緑、
注意は黄色、危険は赤)と危険度を点滅速度に対応させ
る点滅速度手段とからなることを特徴とする請求項1に
記載のTV映像文字情報抽出変換装置。
5. The conversion image screen display means according to claim 4, wherein said conversion means displays a color corresponding to the degree of danger.
2. The TV video character information extracting / converting apparatus according to claim 1, further comprising: a blinking speed means for associating the degree of risk with a blinking speed with yellow for attention and red for danger.
JP28557899A 1999-10-06 1999-10-06 TV video character information extraction conversion device and emergency telop character recognition conversion display device Pending JP2001111910A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP28557899A JP2001111910A (en) 1999-10-06 1999-10-06 TV video character information extraction conversion device and emergency telop character recognition conversion display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP28557899A JP2001111910A (en) 1999-10-06 1999-10-06 TV video character information extraction conversion device and emergency telop character recognition conversion display device

Publications (1)

Publication Number Publication Date
JP2001111910A true JP2001111910A (en) 2001-04-20

Family

ID=17693381

Family Applications (1)

Application Number Title Priority Date Filing Date
JP28557899A Pending JP2001111910A (en) 1999-10-06 1999-10-06 TV video character information extraction conversion device and emergency telop character recognition conversion display device

Country Status (1)

Country Link
JP (1) JP2001111910A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005159955A (en) * 2003-11-28 2005-06-16 Casio Comput Co Ltd Display control apparatus and display control processing program
JP2009206736A (en) * 2008-02-27 2009-09-10 Nec Corp Image display apparatus and method
US8886683B2 (en) 2009-03-04 2014-11-11 Panasonic Intellectual Property Corporation Of America Metadata generation management device, metadata generation system, integrated circuit for managing generation of metadata, metadata generation management method, and program

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005159955A (en) * 2003-11-28 2005-06-16 Casio Comput Co Ltd Display control apparatus and display control processing program
JP2009206736A (en) * 2008-02-27 2009-09-10 Nec Corp Image display apparatus and method
US8886683B2 (en) 2009-03-04 2014-11-11 Panasonic Intellectual Property Corporation Of America Metadata generation management device, metadata generation system, integrated circuit for managing generation of metadata, metadata generation management method, and program

Similar Documents

Publication Publication Date Title
US8094935B2 (en) Representative color extracting method and apparatus based on human color sense and data histogram distributions
EP0720114A2 (en) Method and apparatus for detecting and interpreting textual captions in digital video signals
US20130329059A1 (en) Person detection system
EP2367138B1 (en) Image attribute discrimination apparatus, attribute discrimination support apparatus, image attribute discrimination method, attribute discrimination support apparatus controlling method, and control program
US7243101B2 (en) Program, image managing apparatus and image managing method
US9514225B2 (en) Video recording apparatus supporting smart search and smart search method performed using video recording apparatus
KR100999056B1 (en) Method for performing trimming on image content, terminal and computer readable recording medium
WO2011132387A1 (en) Collating device
CN108052931A (en) A kind of license plate recognition result fusion method and device
CN109104608B (en) Television performance test method, equipment and computer readable storage medium
US9030555B2 (en) Surveillance system
CN110896472B (en) Detection method and system based on display equipment
JP2009123020A (en) Information processor, information processing method, program and recording medium
JP2001111910A (en) TV video character information extraction conversion device and emergency telop character recognition conversion display device
JPH07287753A (en) Article discrimination system
JP2023102806A (en) Map processing system
KR100243350B1 (en) How to extract and recognize news video subtitles
EP3422203A1 (en) Computer implemented simultaneous translation method simultaneous translation device
JPH0636183A (en) Image recorder
JP2002204392A (en) Image processing apparatus, image processing system, image processing method, and storage medium
CN113569604A (en) A method, device, electronic device and medium for handling urban dangerous situations
JP3625935B2 (en) Important image extracting apparatus and important image extracting method for moving images
CN113920537A (en) State judgment platform using image detection
KR100586227B1 (en) Facial region extraction method through color distribution learning
KR100619715B1 (en) Document image capturing method using mobile communication terminal and word extraction method from document image