[go: up one dir, main page]

JP3847952B2 - Wireless communication apparatus and control method - Google Patents

Wireless communication apparatus and control method Download PDF

Info

Publication number
JP3847952B2
JP3847952B2 JP12224498A JP12224498A JP3847952B2 JP 3847952 B2 JP3847952 B2 JP 3847952B2 JP 12224498 A JP12224498 A JP 12224498A JP 12224498 A JP12224498 A JP 12224498A JP 3847952 B2 JP3847952 B2 JP 3847952B2
Authority
JP
Japan
Prior art keywords
wireless communication
control signal
unit
signal received
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP12224498A
Other languages
Japanese (ja)
Other versions
JPH11317724A (en
JPH11317724A5 (en
Inventor
浩文 竹井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP12224498A priority Critical patent/JP3847952B2/en
Publication of JPH11317724A publication Critical patent/JPH11317724A/en
Publication of JPH11317724A5 publication Critical patent/JPH11317724A5/en
Application granted granted Critical
Publication of JP3847952B2 publication Critical patent/JP3847952B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、無線通信装置及び制御方法に関するものである。
【0002】
【従来の技術】
近年、遠隔地との無線通信技術として、スペクトラム拡散通信を利用して互に離れた場所で画像情報を送受信する構成が提案されている。ここでスペクトラム拡散方式を用いた送信手段の一例について説明する。
【0003】
一般に、直接拡散方式を用いたスペクトラム拡散方式では、送信側で、通常送信するディジタル信号のベースバンド信号から、擬似雑音符号(PN符号)等の拡散符号系列を用いて、原データに比べて極めて広い帯域幅を持つベースバンド信号に拡散する。そして、PSK(位相シフトキーイング),FSK(周波数シフトキーイング)等の変調を行い、RF(無線周波数)信号に変換して送信する。
【0004】
受信側では、送信側と同一の拡散符号を用いて受信信号との相関をとる逆拡散を行って受信信号を原データに対応した帯域幅を持つ狭帯域信号に変換する。続いて通常のデータ復調を行い、原データを再生する。
【0005】
図5に、無線通信手段に上記スペクトラム拡散通信を用いた場合の一従来例のシステム構成概要図を示す。図5において、501は画像入力手段のカメラユニット、502は、後述するモデム部、503,504は、前述したスペクトラム拡散通信を用いて送受信を行う無線部、505は、受信されたスペクトラム拡散受信データから画像音声信号を復元し、モニタに出力すると共に、カメラユニット501のズームなどを操作するための各種操作キーを備え、各制御に対応した制御信号をスペクトラム拡散通信のデータに変換して送信するモニタユニットである。このモニタユニット505には、磁気テープ等の記録媒体に画像や音声データを記録できるものもあった。
【0006】
図6は、前述したモデム部502の内部構成を示すブロック図である。図6において、61は画像信号をA/D変換する画像入力部、62は、デジタル化された画像信号を圧縮するデジタル画像圧縮部、63は、音声信号をA/D変換する音声入力部、64は、デジタル化された音声信号を圧縮するデジタル音声圧縮部、65は、入力された画像、音声信号をスペクトラム拡散通信用のパケットデータに変換するパケットデータ変換部である。66は、外部のスペクトラム拡散無線部に接続するコネクタである。
【0007】
67は、スペクトラム拡散通信で受信されたデータから、カメラユニット501の制御データを復元する受信データ復元部、68は、復元された制御データをカメラユニット501に出力する制御信号出力部である。69は、無線通信プロトコル制御やこれら各ブロックを制御するマイクロコンピュータ等で構成される制御部である。
【0008】
次に、以上のような構成で、無線により画像データや制御データを送受信する場合の手順について説明する:
通常、無線により複数の機器が送受信を行うネットワークの通信プロトコルとして従来から知られている有線ネットワークで用いられてきたCSMA/CD(Carrier Sense Multiple Access with Collision Detection)に無線の特性を加味した、CSMA/CA(CSMA with Collision Avoidance) といわれるプロトコルがある。
【0009】
CSMA/CAでは、データを送信しようとする端末は送信前に伝送路(無線チャネル)の信号状態を観察する。観察の結果、所定の時間(ギャップ時間)、伝送路に信号を確認しない状態が続いた場合、伝送路に信号を検出しなかったとしてデータを送信する。また、所定の時間内に伝送路に他からの信号を確認した場合は、送信を一時中止するようなプロトコルである。すなわち、一旦送信側と受信側で通信の連結が確保された場合には、しばらくの間、確保された連結を保ちながら、連続して送受信を行うプロトコルになっている。
【0010】
以上のようなシステム構成により、カメラユニットで撮影した画像音声データをスペクトラム拡散通信を介して、離れた場所にあるモニタユニット505に無線送信すると共に、モニタユニット505で映像を見ながらカメラユニット501のズーム制御やパンニング制御信号等を双方向のスペクトラム拡散通信で送信し、カメラユニット501のリモコン操作も行えるようになっていた。
【0011】
【発明が解決しようとする課題】
しかしながら、上記従来例においては、次のような問題点があった:
すなわち、無線によってカメラ部501を制御する手段は一つしかないため、モニタユニット505で撮影,操作している人と被写体として撮影されている人が離れている場合に、被写体の人はカメラユニット501の操作ができないという問題があった。
【0012】
例えば、従来のシステムを用い一人でゴルフのフォームチェック等を行う場合、モニタユニット505が自分のすぐ近くにあるとプレーの邪魔になるため、ある程度離れた場所に置くことになる。このような場合、フレーミングや記録の開始,停止等を行う場合にいちいちモニタユニット505の設置してある場所まで行って操作しなければならず、不便であった。また、カメラユニット501を監視カメラとして使用している場合などは、カメラ501の設置場所は人の手の届きにくい場所であることが多いため、手元にモニタユニット505がない場合には同様の不便さがあった。
【0013】
さらにまた、従来では、無線による複数の制御手段による制御が可能な構成にした場合も考えられるが、そのときには、相互の制御信号が競合するという問題点があった。
【0014】
そこで、本発明は、複数の制御手段の無線による制御を可能にするとともに、各制御手段からの制御信号の競合を防げるようにすることを目的とる。
【0015】
【課題を解決するための手段】
本発明に係る無線通信装置の一つは、例えば、双方向通信が可能な第1の無線通信手段により受信された制御信号に応じた動作を行うだけでなく、片方向通信が可能な第2の無線通信手段により受信された制御信号に応じた動作を行う無線通信装置であって、前記第1の無線通信手段が前記無線通信装置に接続されているか否かを判定する制御手段を有し、前記第1の無線通信手段が前記無線通信装置に接続されていないと判定した場合、前記制御手段は、前記第2の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定を行えるようにし、前記第1の無線通信手段が前記無線通信装置に接続されていると判定した場合、前記制御手段は、前記第1の無線通信手段により受信された制御信号と前記第2の無線通信手段により受信された制御信号とが競合しないように、前記第1の無線通信手段により受信された制御信号を前記第2の無線通信手段により受信された制御信号よりも優先できるようにすることを特徴とする。
【0016】
本発明に係る無線通信装置の一つは、例えば、双方向通信が可能な第1の無線通信手段により受信された制御信号に応じた動作を行うだけでなく、片方向通信が可能な第2の無線通信手段により受信された制御信号に応じた動作を行う無線通信装置であって、前記第1の無線通信手段が前記無線通信装置に接続されているか否かを判定する制御手段を有し、前記第1の無線通信手段が前記無線通信装置に接続されていないと判定した場合、前記制御手段は、前記第2の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定を行えるようにし、前記第1の無線通信手段が前記無線通信装置に接続されていると判定した場合、前記制御手段は、前記第1の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定を、前記第2の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定よりも先に行えるようにすることを特徴とする。
【0019】
本発明に係る制御方法の一つは、例えば、双方向通信が可能な第1の無線通信手段により受信された制御信号に応じた動作を行うだけでなく、片方向通信が可能な第2の無線通信手段により受信された制御信号に応じた動作を行う無線通信装置の制御方法であって、前記第1の無線通信手段が前記無線通信装置に接続されているか否かを判定し、前記第1の無線通信手段が前記無線通信装置に接続されていないと判定した場合は、前記第2の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定を行えるようにし、前記第1の無線通信手段が前記無線通信装置に接続されていると判定した場合は、前記第1の無線通信手段により受信された制御信号と前記第2の無線通信手段により受信された制御信号とが競合しないように、前記第1の無線通信手段により受信された制御信号を前記第2の無線通信手段により受信された制御信号よりも優先できるようにすることを特徴とする。
【0020】
本発明に係る制御方法の一つは、例えば、双方向通信が可能な第1の無線通信手段により受信された制御信号に応じた動作を行うだけでなく、片方向通信が可能な第2の無線通信手段により受信された制御信号に応じた動作を行う無線通信装置の制御方法であって、前記第1の無線通信手段が前記無線通信装置に接続されているか否かを判定し、前記第1の無線通信手段が前記無線通信装置に接続されていないと判定した場合は、前記第2の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定を行えるようにし、前記第1の無線通信手段が前記無線通信装置に接続されていると判定した場合は、前記第1の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定を、前記第2の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定よりも先に行えるようにしたことを特徴とする。
【0023】
【発明の実施の形態】
以下に、本発明の実施の形態を複数の実施例に基づき、図面を参照して詳細に説明する。
【0024】
【実施例】
(第1の実施例)
図1に、本第1実施例の無線通信装置の画像送信部の構成概要図を示す(図5相当図)。図中、101はカメラユニット(カムコーダ)、102は、前記従来例図5におけると同様に画像,音声データをデジタルデータに変換して圧縮処理を行いスペクトラム拡散通信用のデータに変換,送信し、受信したスペクトラム拡散受信データからカメラ部制御データを復元する働きをするモデム部、103は、スペクトラム拡散通信の無線部、104はカムコーダ101のズームや記録動作等を制御できる赤外線リモコン、105は、赤外線リモコン104の赤外線発光部、106は、カムコーダ101の赤外線受光部である。無線による受信画像を表示し、スペクトラム拡散通信によりカメラ部の制御が可能なモニタ部は図5に示した従来例と同様の構成動作のため、重複説明を省略する。
【0025】
図2は、図1のカムコーダ101の内部構成の一例を示すブロック図である。図中、レンズ光学系200を通過した光学像は、撮像素子201で電気信号に変換され、映像信号処理回路202で映像信号となって、磁気テープ等を用いた記録装置203に出力される。204はマイクロホンユニットであり、外部の音声信号は音声信号処理回路205により処理され、記録装置203に出力される。画像,音声信号は、図1のモデム部102と接続される外部端子にも出力される。
【0026】
206は、カムコーダ101のズーム,記録動作の実行や停止等の各種操作を行うキーユニット、207は、赤外線リモコン104からの制御信号を受光するための赤外線リモコン受光ユニットである。キーユニット206,赤外線リモコン受光ユニット207からの出力は、制御部208に入力される。制御部208は、主としてマイクロコンピュータ等で構成され、入力されたそれぞれの情報を基に、ズーム駆動部209やフォーカス駆動部210,記録装置203を制御する。制御部208にはモデム部102からのスペクトラム拡散通信で受信された制御信号も入力される。
【0027】
このようなスペクトラム拡散通信と赤外線リモコンとのように、無線による複数の制御手段により制御が可能な構成にすることにより、従来問題であった例えば一人でゴルフのフォームチェック等を行う場合など、モニタユニットが被撮影者のすぐ近くにない場合でも、赤外線リモコン104を使ってズームや録画の開始,停止等を自由に操作することができる。
【0028】
しかしながら、このような無線による複数の制御手段により制御が可能な構成にした場合、これら両無線通信の相互の制御信号が競合する可能性がある。このような無線による制御信号の競合が発生した場合には、より効率的な制御信号を優先することが望まれる。
【0029】
本実施例の特徴は、この種の制御信号の競合が生じた場合に優先すべき制御信号として、双方向通信を行っている無線制御手段の制御信号を選択することにある。無線での双方向通信では、前述したように無線通信プロトコルにより相互のコネクションを確保した上で確実な送受信の確認を行いながら通信を行っている。一方、赤外線リモコン104のような片方向の通信は、赤外線リモコン104からカムコーダ101の動作状態に関わらず、一方的に制御信号を送信するのみなのであまり効率的ではない。
【0030】
図3は、この点に鑑みたカムコーダ101内の制御部208(図2)の動作シーケンスを示すフローチャートであり、複数の制御信号の競合に対応した処理を示すものである。
【0031】
まずステップS300にて図2に示す各部分や制御部208のマイクロコントローラの内部を初期化する。次に、ステップS301にてカムコーダ本体101のキー操作入力があったか否かを調べ、キー操作がなされた場合には、図2の制御部208は、ステップ302にてキー操作された内容に応じたズーム制御や記録開始などの制御を行う。
【0032】
ステップS301にてキー操作入力がないと判断された場合には、ステップS303にて双方向通信のスペクトラム拡散通信部からの受信制御データがあったか否かを調べ、何等かの制御データがスペクトラム拡散通信部経由で入力された場合には、制御部208は、ステップS304にて受信された制御データ内容に応じた動作を行う。
【0033】
ステップS303で、スペクトラム拡散通信部からの受信制御データがないと判断された場合には、ステップS305にて赤外線リモコン104からの受信コマンドがあったか否かを調べ、何等かの赤外線リモコンからの受信コマンドが受信された場合には、制御部208はステップS306にて受信されたコマンド内容に応じた動作を行う。ステップS307は、その他のカムコーダ101の処理である。
【0034】
このような制御部208の動作をさせることによって、スペクトラム拡散通信によりカメラ部の制御が可能なモニタ部からの制御信号と、赤外線リモコン104からの制御信号とが競合した場合には、双方向通信を行っているスペクトラム拡散通信部からの制御信号を優先して実行されるようになる。
【0035】
また本第1実施例では、双方向の無線通信手段としてスペクトラム拡散通信を用いたが、特にスペクトラム拡散通信に限定される必要はなく、双方向通信の可能な無線通信手段を用いるのであれば何でも良いことはもちろんである。
【0036】
(第2の実施例)
以下、本発明に係る第2の実施例を説明する。本実施例の構成要素は、前記第1の実施例の図1,2におけると同様なので、重複説明は省略する。本第2実施例の特徴は、図2の制御部208の動作フローにある。
【0037】
図4は、本実施例における制御部208の動作シーケンスを示すフローチャートであり、前記図3の第1実施例に比べて、より強力に双方向通信の無線制御信号に優先順位を与えるようにしたものである。
【0038】
まずステップS400にて、図2に示す各部分や制御部208のマイクロコントローラの内部を初期化する。次にステップS401にて、カムコーダ本体101のキー操作入力があったか否かを調べ、キー操作がなされた場合には、制御部208は、ステップS402にてキー操作された内容に応じたズーム制御や記録開始などの制御を行う。
【0039】
ステップS401にてキー操作入力がないと判断された場合には、次にステップS403にてカムコーダ101に、図1のスペクトラム拡散通信を用いたモデム部102が接続されているか否かを検出する。この検出方法は、モデム部102と通信を行い、応答のACK信号が返されたか否か等で判断する。
【0040】
ステップS403にてスペクトラム拡散通信モデム部102があると判断された場合には、ステップS404にて双方向通信を行っているスペクトラム拡散通信部からの受信制御データがあったか否かを調べ、何等かの制御データがスペクトラム拡散通信経由で入力された場合には、図2の制御部208は、ステップS405にてスペクトラム拡散通信で受信された制御データ内容に応じた動作を行う。一方、ステップS404にてスペクトラム拡散通信の受信制御データがないと判断された場合には、赤外線リモコン104の受信コマンドの有無に関わらず処理を終了する。
【0041】
赤外線リモコン104の信号を受け付けるのは、ステップS403にてスペクトラム拡散通信のモデム部102がないと判断された場合だけであり、その場合に限りステップS406で赤外線リモコン104からの受信コマンドがあったか否かを調べ、何等かの赤外線リモコン104からの受信コマンドが受信された場合には、制御部208は、ステップS407にて受信されたコマンド内容に応じた動作を行う。ステップS408は、その他のカムコーダの処理である。
【0042】
このように双方向通信を行う無線制御手段(本実施例ではスペクトラム拡散通信)が接続された場合に、実質的に赤外線リモコン104の制御コマンドを受け付けないようにすることで、制御信号が競合した場合は元より、他のシステムの赤外線リモコンの光による誤動作を防ぐことも可能になる。
【0043】
また本実施例では、片方向の無線制御手段に赤外線リモコンを用いているが、特に赤外線のみに限定される必要はなく、片方向の通信であれば微弱電波等であっても良いことはもちろんである。
【0044】
【発明の効果】
以上説明したように、本発明によれば、複数の制御手段の無線による制御を可能にするとともに、各制御手段からの制御信号の競合を防ぐことができる。
【図面の簡単な説明】
【図1】 第1実施例の無線通信装置の画像送信部の構成概要図
【図2】 図1のカムコーダの構成ブロック図
【図3】 第1実施例のカムコーダ内の制御部の動作シーケンスフローチャート
【図4】 第2実施例のカムコーダ内の制御部の動作シーケンスフローチャート
【図5】 従来例のスペクトラム拡散通信を用いた無線通信装置のシステム構成概要図
【図6】 図5のモデム部の内部構成ブロック図
【符号の説明】
101 カメラユニット(カムコーダ)
102 モデム部
103 無線部
104 赤外線リモコン
105 赤外線発光部
106 赤外線受光部
200 レンズ光学系
202 映像信号処理回路
203 記録装置
206 キーユニット
207 赤外線リモコン受光ユニット
208 制御部
209 ズーム駆動部
210 フォーカス駆動部
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a radio communication apparatus and a control how.
[0002]
[Prior art]
2. Description of the Related Art In recent years, as a wireless communication technology with a remote place, a configuration has been proposed in which image information is transmitted and received at locations separated from each other using spread spectrum communication. Here, an example of transmission means using the spread spectrum system will be described.
[0003]
In general, in the spread spectrum method using the direct spread method, the transmission side uses a spread code sequence such as a pseudo-noise code (PN code) from the baseband signal of the digital signal that is normally transmitted, compared to the original data. Spread to baseband signal with wide bandwidth. Then, modulation such as PSK (phase shift keying), FSK (frequency shift keying), etc. is performed, converted into an RF (radio frequency) signal, and transmitted.
[0004]
On the receiving side, despreading that correlates with the received signal is performed using the same spreading code as that on the transmitting side, and the received signal is converted into a narrowband signal having a bandwidth corresponding to the original data. Subsequently, normal data demodulation is performed to reproduce the original data.
[0005]
FIG. 5 shows a schematic diagram of a system configuration of a conventional example when the spread spectrum communication is used as the wireless communication means. In FIG. 5, 501 is a camera unit of image input means, 502 is a modem unit to be described later, 503 and 504 are wireless units that transmit and receive using the above-described spread spectrum communication, and 505 is received spread spectrum reception data. The audio / video signal is restored from the image and output to the monitor, and various operation keys for operating the zoom of the camera unit 501 are provided, and the control signal corresponding to each control is converted into the data of the spread spectrum communication and transmitted. It is a monitor unit. Some of the monitor units 505 can record image and audio data on a recording medium such as a magnetic tape.
[0006]
FIG. 6 is a block diagram showing the internal configuration of the modem unit 502 described above. In FIG. 6, 61 is an image input unit for A / D converting an image signal, 62 is a digital image compression unit for compressing a digitized image signal, 63 is an audio input unit for A / D converting an audio signal, Reference numeral 64 denotes a digital audio compression unit that compresses a digitized audio signal. Reference numeral 65 denotes a packet data conversion unit that converts input image and audio signals into packet data for spread spectrum communication. Reference numeral 66 denotes a connector connected to an external spread spectrum radio unit.
[0007]
Reference numeral 67 denotes a received data restoration unit that restores the control data of the camera unit 501 from data received by spread spectrum communication, and reference numeral 68 denotes a control signal output unit that outputs the restored control data to the camera unit 501. A control unit 69 includes a wireless communication protocol control and a microcomputer for controlling these blocks.
[0008]
Next, a procedure for transmitting and receiving image data and control data wirelessly with the above configuration will be described:
Normally, CSMA / Carrier Sense Multiple Access with Collision Detection (CSMA / CD), which has been used in wired networks that have been conventionally known as a communication protocol for a network in which multiple devices transmit and receive wirelessly, adds wireless characteristics. There is a protocol called / CA (CSMA with Collision Avoidance).
[0009]
In CSMA / CA, a terminal attempting to transmit data observes the signal state of a transmission path (wireless channel) before transmission. As a result of observation, when a state in which no signal is confirmed on the transmission line continues for a predetermined time (gap time), data is transmitted on the assumption that no signal is detected on the transmission line. In addition, when a signal from another is confirmed on the transmission line within a predetermined time, the protocol is such that transmission is temporarily stopped. That is, once the connection between the transmission side and the reception side is ensured, the protocol is such that transmission and reception are continuously performed while maintaining the secured connection for a while.
[0010]
With the system configuration as described above, the audio / video data captured by the camera unit is wirelessly transmitted to the monitor unit 505 at a remote location via spread spectrum communication, and the camera unit 501 is watching the video on the monitor unit 505. A zoom control, a panning control signal, and the like are transmitted by bidirectional spread spectrum communication, and the remote control operation of the camera unit 501 can be performed.
[0011]
[Problems to be solved by the invention]
However, the conventional example has the following problems:
That is, since there is only one means for controlling the camera unit 501 wirelessly, when the person who is shooting and operating with the monitor unit 505 is away from the person who is shooting as the subject, the subject person is the camera unit. There was a problem that the operation 501 could not be performed.
[0012]
For example, when a golf form check or the like is performed alone using a conventional system, if the monitor unit 505 is in the immediate vicinity of the player, it will be in the way of play, so it will be placed some distance away. In such a case, when starting and stopping framing, recording, etc., it is necessary to go to the place where the monitor unit 505 is installed, which is inconvenient. In addition, when the camera unit 501 is used as a surveillance camera, the installation location of the camera 501 is often a place where it is difficult for human hands to reach, so the same inconvenience occurs when the monitor unit 505 is not at hand. There was.
[0013]
Furthermore, conventionally, there may be a configuration in which control by a plurality of control means by radio is possible, but there is a problem that mutual control signals compete at that time.
[0014]
Accordingly, the present invention is to enable control by radio of a plurality of control means, shall be the object thereof is to prevent conflicts of control signals from the control means.
[0015]
[Means for Solving the Problems]
One of the wireless communication apparatuses according to the present invention, for example, performs not only an operation according to a control signal received by a first wireless communication means capable of bidirectional communication but also a second communication capable of one-way communication. A wireless communication device that performs an operation according to a control signal received by the wireless communication device, wherein the first wireless communication device determines whether or not the first wireless communication device is connected to the wireless communication device. If it is determined that the first wireless communication unit is not connected to the wireless communication device, the control unit determines whether to perform an operation according to the control signal received by the second wireless communication unit. And determining that the first wireless communication means is connected to the wireless communication device, the control means receives the control signal received by the first wireless communication means and the first wireless communication means. 2 wireless communication means As the received control signal does not conflict, and characterized in that to allow priority than the received control signal by said first radio said received control signal by the communication means a second radio communication unit To do.
[0016]
One of the wireless communication apparatuses according to the present invention, for example, performs not only an operation according to a control signal received by a first wireless communication means capable of bidirectional communication but also a second communication capable of one-way communication. A wireless communication device that performs an operation according to a control signal received by the wireless communication device, wherein the first wireless communication device determines whether or not the first wireless communication device is connected to the wireless communication device. If it is determined that the first wireless communication unit is not connected to the wireless communication device, the control unit determines whether to perform an operation according to the control signal received by the second wireless communication unit. And determining that the first wireless communication means is connected to the wireless communication device, the control means responds to a control signal received by the first wireless communication means. Whether or not to perform And characterized by the allow before the determination of whether to perform an operation according to the received control signal by the second wireless communication means.
[0019]
One of the control methods according to the present invention is, for example, a second method that not only performs an operation according to a control signal received by a first wireless communication unit capable of bidirectional communication but also allows one-way communication. A method of controlling a wireless communication apparatus that performs an operation according to a control signal received by a wireless communication means, wherein it is determined whether or not the first wireless communication means is connected to the wireless communication apparatus, and the first When it is determined that one wireless communication unit is not connected to the wireless communication device, it is possible to determine whether to perform an operation according to the control signal received by the second wireless communication unit, When it is determined that the first wireless communication unit is connected to the wireless communication device, the control signal received by the first wireless communication unit and the control signal received by the second wireless communication unit Not to conflict with , Characterized in that to allow priority than the received control signal by said first radio said received control signal by the communication means a second radio communication means.
[0020]
One of the control methods according to the present invention is, for example, a second method that not only performs an operation according to a control signal received by a first wireless communication unit capable of bidirectional communication but also allows one-way communication. A method of controlling a wireless communication apparatus that performs an operation according to a control signal received by a wireless communication means, wherein it is determined whether or not the first wireless communication means is connected to the wireless communication apparatus, and the first When it is determined that one wireless communication unit is not connected to the wireless communication device, it is possible to determine whether to perform an operation according to the control signal received by the second wireless communication unit, When it is determined that the first wireless communication unit is connected to the wireless communication device, it is determined whether to perform an operation according to the control signal received by the first wireless communication unit. Received by second wireless communication means Characterized in that so as to perform before the determining whether or not performing an operation corresponding to the control signal.
[0023]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of the present invention will be described below in detail based on a plurality of examples with reference to the drawings.
[0024]
【Example】
(First embodiment)
FIG. 1 shows a schematic configuration diagram of an image transmission unit of the wireless communication apparatus according to the first embodiment (corresponding to FIG. 5). In the figure, 101 is a camera unit (camcorder), and 102 is the same as in the conventional example in FIG. 5, converts image and audio data into digital data, performs compression processing, converts it into data for spread spectrum communication, and transmits it. A modem unit that serves to restore camera unit control data from received spread spectrum received data, 103 is a wireless unit for spread spectrum communication, 104 is an infrared remote controller that can control zooming and recording operations of the camcorder 101, and 105 is an infrared ray An infrared light emitting unit 106 of the remote controller 104 is an infrared light receiving unit of the camcorder 101. Since the monitor unit that displays a wirelessly received image and can control the camera unit by spread spectrum communication is the same as that of the conventional example shown in FIG.
[0025]
FIG. 2 is a block diagram showing an example of the internal configuration of the camcorder 101 of FIG. In the figure, an optical image that has passed through the lens optical system 200 is converted into an electric signal by the image sensor 201, converted into an image signal by the image signal processing circuit 202, and output to a recording device 203 using a magnetic tape or the like. Reference numeral 204 denotes a microphone unit. An external audio signal is processed by the audio signal processing circuit 205 and output to the recording device 203. The image and audio signals are also output to an external terminal connected to the modem unit 102 in FIG.
[0026]
Reference numeral 206 denotes a key unit for performing various operations such as zooming, execution and stop of the recording operation of the camcorder 101, and reference numeral 207 denotes an infrared remote control light receiving unit for receiving a control signal from the infrared remote control 104. Outputs from the key unit 206 and the infrared remote control light receiving unit 207 are input to the control unit 208. The control unit 208 is mainly composed of a microcomputer or the like, and controls the zoom driving unit 209, the focus driving unit 210, and the recording device 203 based on each input information. A control signal received by spread spectrum communication from the modem unit 102 is also input to the control unit 208.
[0027]
By adopting a configuration that can be controlled by a plurality of wireless control means, such as spread spectrum communication and infrared remote control, such as when performing a golf form check alone, which has been a problem in the past, for example, a monitor Even when the unit is not in the immediate vicinity of the person to be photographed, it is possible to freely operate zooming, starting / stopping recording, etc. using the infrared remote controller 104.
[0028]
However, when such a configuration is possible in which control is performed by a plurality of wireless control means, there is a possibility that the control signals of these two wireless communications compete with each other. When such wireless control signal contention occurs, it is desirable to prioritize more efficient control signals.
[0029]
Features of this real施例as a control signal to be prioritized in the case where this type of control signal conflict occurs, is to select a control signal of the radio control unit that performs bi-directional communication. In wireless two-way communication, as described above, communication is performed while ensuring mutual connection using a wireless communication protocol and confirming reliable transmission and reception. On the other hand, one-way communication like the infrared remote controller 104 is not very efficient because it only transmits a control signal unilaterally regardless of the operation state of the camcorder 101 from the infrared remote controller 104.
[0030]
FIG. 3 is a flowchart showing an operation sequence of the control unit 208 (FIG. 2) in the camcorder 101 in view of this point, and shows processing corresponding to a competition between a plurality of control signals.
[0031]
First, in step S300, each part shown in FIG. 2 and the inside of the microcontroller of the control unit 208 are initialized. Next, in step S301, it is checked whether or not there is a key operation input on the camcorder main body 101. If a key operation is performed, the control unit 208 in FIG. 2 responds to the content of the key operation in step 302. Controls zoom control and recording start.
[0032]
If it is determined in step S301 that there is no key operation input, in step S303, it is checked whether there is reception control data from the spread spectrum communication unit for bidirectional communication, and some control data is spread spectrum communication. In the case of input via the unit, the control unit 208 performs an operation according to the content of the control data received in step S304.
[0033]
If it is determined in step S303 that there is no reception control data from the spread spectrum communication unit, it is checked in step S305 whether there is a reception command from the infrared remote controller 104, and any reception command from any infrared remote controller is determined. Is received, the control unit 208 performs an operation according to the command content received in step S306. Step S307 is processing of the other camcorder 101.
[0034]
When the control signal from the monitor unit capable of controlling the camera unit by spread spectrum communication competes with the control signal from the infrared remote controller 104 by operating the control unit 208 as described above, bidirectional communication is performed. The control signal from the spread spectrum communication unit that performs is prioritized and executed.
[0035]
In the first embodiment, spread spectrum communication is used as the bidirectional wireless communication means. However, the present invention is not particularly limited to spread spectrum communication, and any wireless communication means capable of bidirectional communication can be used. Of course it is good.
[0036]
(Second embodiment)
The second embodiment according to the present invention will be described below. Since the components of the present embodiment are the same as those of the first embodiment shown in FIGS. The feature of the second embodiment is the operation flow of the control unit 208 of FIG.
[0037]
FIG. 4 is a flowchart showing an operation sequence of the control unit 208 in the present embodiment. Compared with the first embodiment of FIG. 3, priority is given to wireless control signals for bidirectional communication more strongly. Is.
[0038]
First, in step S400, each part shown in FIG. 2 and the inside of the microcontroller of the control unit 208 are initialized. Next, in step S401, it is checked whether or not there is a key operation input on the camcorder main body 101. If a key operation is performed, the control unit 208 performs zoom control according to the content of the key operation in step S402. Control the start of recording.
[0039]
If it is determined in step S401 that there is no key operation input, in step S403, it is detected whether or not the modem unit 102 using the spread spectrum communication of FIG. 1 is connected to the camcorder 101. In this detection method, communication is performed with the modem unit 102, and a determination is made based on whether or not a response ACK signal is returned.
[0040]
If it is determined in step S403 that there is a spread spectrum communication modem unit 102, it is checked in step S404 whether there is reception control data from the spread spectrum communication unit that is performing bidirectional communication. When the control data is input via the spread spectrum communication, the control unit 208 in FIG. 2 performs an operation according to the content of the control data received by the spread spectrum communication in step S405. On the other hand, if it is determined in step S404 that there is no reception control data for spread spectrum communication, the process ends regardless of whether there is a reception command from the infrared remote controller 104.
[0041]
The signal of the infrared remote controller 104 is accepted only when it is determined in step S403 that there is no spread spectrum communication modem unit 102, and only in that case, whether or not there is a reception command from the infrared remote controller 104 in step S406. When any received command from the infrared remote controller 104 is received, the control unit 208 performs an operation according to the command content received in step S407. Step S408 is other camcorder processing.
[0042]
In this way, when wireless control means (spread spectrum communication in this embodiment) that performs two-way communication is connected, the control signal competes by not substantially accepting the control command of the infrared remote controller 104. In some cases, it is possible to prevent malfunction caused by light from the infrared remote controller of another system.
[0043]
In this embodiment, an infrared remote controller is used as the one-way wireless control means. However, the infrared remote controller is not particularly limited to infrared rays. Of course, a weak radio wave may be used for one-way communication. It is.
[0044]
【The invention's effect】
As described above, according to the present invention, it is possible to wirelessly control a plurality of control means and to prevent competition of control signals from the respective control means .
[Brief description of the drawings]
FIG. 1 is a schematic configuration diagram of an image transmission unit of a wireless communication apparatus according to a first embodiment. FIG. 2 is a block diagram of a configuration of a camcorder in FIG. 1. FIG. 3 is an operation sequence flowchart of a control unit in the camcorder of the first embodiment. 4 is an operation sequence flowchart of a control unit in a camcorder according to a second embodiment. FIG. 5 is a schematic diagram of a system configuration of a wireless communication apparatus using spread spectrum communication according to a conventional example. FIG. Configuration block diagram [Explanation of symbols]
101 Camera unit (camcorder)
102 modem unit 103 wireless unit 104 infrared remote control 105 infrared light emitting unit 106 infrared light receiving unit 200 lens optical system 202 video signal processing circuit 203 recording device 206 key unit 207 infrared remote control light receiving unit 208 control unit 209 zoom drive unit 210 focus drive unit

Claims (12)

双方向通信が可能な第1の無線通信手段により受信された制御信号に応じた動作を行うだけでなく、片方向通信が可能な第2の無線通信手段により受信された制御信号に応じた動作を行う無線通信装置であって、
前記第1の無線通信手段が前記無線通信装置に接続されているか否かを判定する制御手段を有し、
前記第1の無線通信手段が前記無線通信装置に接続されていないと判定した場合、前記制御手段は、前記第2の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定を行えるようにし、
前記第1の無線通信手段が前記無線通信装置に接続されていると判定した場合、前記制御手段は、前記第1の無線通信手段により受信された制御信号と前記第2の無線通信手段により受信された制御信号とが競合しないように、前記第1の無線通信手段により受信された制御信号を前記第2の無線通信手段により受信された制御信号よりも優先できるようにすることを特徴とする無線通信装置。
In addition to performing an operation according to the control signal received by the first wireless communication means capable of bidirectional communication, an operation according to the control signal received by the second wireless communication means capable of one-way communication A wireless communication device for performing
Control means for determining whether or not the first wireless communication means is connected to the wireless communication device;
If it is determined that the first wireless communication unit is not connected to the wireless communication device, the control unit determines whether to perform an operation according to the control signal received by the second wireless communication unit To be able to make decisions
When it is determined that the first wireless communication unit is connected to the wireless communication device, the control unit receives the control signal received by the first wireless communication unit and the second wireless communication unit. as the control signal and no conflicts are, characterized in that to allow priority than the received control signal by said first radio communication means and the second wireless communication means received control signals by Wireless communication device.
双方向通信が可能な第1の無線通信手段により受信された制御信号に応じた動作を行うだけでなく、片方向通信が可能な第2の無線通信手段により受信された制御信号に応じた動作を行う無線通信装置であって、
前記第1の無線通信手段が前記無線通信装置に接続されているか否かを判定する制御手段を有し、
前記第1の無線通信手段が前記無線通信装置に接続されていないと判定した場合、前記制御手段は、前記第2の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定を行えるようにし、
前記第1の無線通信手段が前記無線通信装置に接続されていると判定した場合、前記制御手段は、前記第1の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定を、前記第2の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定よりも先に行えるようにすることを特徴とする無線通信装置。
In addition to performing an operation according to the control signal received by the first wireless communication means capable of bidirectional communication, an operation according to the control signal received by the second wireless communication means capable of one-way communication A wireless communication device for performing
Control means for determining whether or not the first wireless communication means is connected to the wireless communication device;
If it is determined that the first wireless communication unit is not connected to the wireless communication device, the control unit determines whether to perform an operation according to the control signal received by the second wireless communication unit To be able to make decisions
If it is determined that the first wireless communication unit is connected to the wireless communication device, the control unit determines whether to perform an operation according to the control signal received by the first wireless communication unit A wireless communication apparatus characterized in that the determination can be performed prior to the determination as to whether or not to perform an operation in accordance with the control signal received by the second wireless communication means.
前記無線通信装置を操作するための操作手段をさらに有し、
前記操作手段に対して行われた操作に応じた動作を行うか否かの判定を、前記第1の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定よりも先に行えるようにしたことを特徴とする請求項1または2に記載の無線通信装置。
It further has an operation means for operating the wireless communication device,
The determination as to whether or not to perform an operation according to an operation performed on the operation means precedes the determination as to whether or not to perform an operation according to a control signal received by the first wireless communication means. the wireless communication apparatus according to claim 1 or 2, characterized in that so as to perform the.
前記第1の無線通信手段は、スペクトラム拡散を用いて通信を行う無線通信手段であることを特徴とする請求項1からいずれかに記載の無線通信装置。Said first wireless communication means, a radio communication apparatus according to either the claim 1, wherein 3 to be a radio communication means for performing communication using a spread spectrum. 前記第2の無線通信手段は、赤外線を用いて通信を行う無線通信手段であることを特徴とする請求項1からいずれかに記載の無線通信装置。It said second wireless communication means, a radio communication apparatus according to either the claim 1, wherein 4 to be a wireless communication means for performing communication using infrared rays. 像素子を用いて映像信号を生成する映像信号生成手段さらに有することを特徴とする請求項1からいずれかに記載の無線通信装置。The wireless communication apparatus according to either Re Izu of claims 1 to 5, characterized by further comprising a video signal generating means for generating a video signal using an imaging element. 双方向通信が可能な第1の無線通信手段により受信された制御信号に応じた動作を行うだけでなく、片方向通信が可能な第2の無線通信手段により受信された制御信号に応じた動作を行う無線通信装置の制御方法であって、
前記第1の無線通信手段が前記無線通信装置に接続されているか否かを判定し、
前記第1の無線通信手段が前記無線通信装置に接続されていないと判定した場合は、前記第2の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定を行えるようにし、
前記第1の無線通信手段が前記無線通信装置に接続されていると判定した場合は、前記第1の無線通信手段により受信された制御信号と前記第2の無線通信手段により受信された制御信号とが競合しないように、前記第1の無線通信手段により受信された制御信号を前記第2の無線通信手段により受信された制御信号よりも優先できるようにすることを特徴とする制御方法。
In addition to performing an operation according to the control signal received by the first wireless communication means capable of bidirectional communication, an operation according to the control signal received by the second wireless communication means capable of one-way communication A method of controlling a wireless communication device that performs
Determining whether the first wireless communication means is connected to the wireless communication device;
When it is determined that the first wireless communication unit is not connected to the wireless communication device, it can be determined whether or not to perform an operation according to the control signal received by the second wireless communication unit. West,
When it is determined that the first wireless communication unit is connected to the wireless communication device, the control signal received by the first wireless communication unit and the control signal received by the second wireless communication unit control method bets is to avoid conflicts, characterized in that to allow priority than the received control signal by said first radio said received control signal by the communication means a second radio communication means.
双方向通信が可能な第1の無線通信手段により受信された制御信号に応じた動作を行うだけでなく、片方向通信が可能な第2の無線通信手段により受信された制御信号に応じた動作を行う無線通信装置の制御方法であって、
前記第1の無線通信手段が前記無線通信装置に接続されているか否かを判定し、
前記第1の無線通信手段が前記無線通信装置に接続されていないと判定した場合は、前記第2の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定を行えるようにし、
前記第1の無線通信手段が前記無線通信装置に接続されていると判定した場合は、前記第1の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定を、前記第2の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定よりも先に行えるようにしたことを特徴とする制御方法。
In addition to performing an operation according to the control signal received by the first wireless communication means capable of bidirectional communication, an operation according to the control signal received by the second wireless communication means capable of one-way communication A method of controlling a wireless communication device that performs
Determining whether the first wireless communication means is connected to the wireless communication device;
When it is determined that the first wireless communication unit is not connected to the wireless communication device, it can be determined whether or not to perform an operation according to the control signal received by the second wireless communication unit. West,
When it is determined that the first wireless communication unit is connected to the wireless communication device, it is determined whether to perform an operation according to the control signal received by the first wireless communication unit. A control method characterized in that it can be performed prior to determining whether or not to perform an operation in accordance with a control signal received by the second wireless communication means.
前記無線通信装置を操作するための操作手段をさらに有し、
前記操作手段に対して行われた操作に応じた動作を行うか否かの判定を、前記第1の無線通信手段により受信された制御信号に応じた動作を行うか否かの判定よりも先に行えるようにしたことを特徴とする請求項7または8に記載の制御方法。
It further has an operation means for operating the wireless communication device,
The determination as to whether or not to perform an operation according to an operation performed on the operation means precedes the determination as to whether or not to perform an operation according to a control signal received by the first wireless communication means. The control method according to claim 7, wherein the control method can be performed as follows.
前記第1の無線通信手段は、スペクトラム拡散を用いて通信を行う無線通信手段であることを特徴とする請求項からいずれかに記載の制御方法。It said first wireless communication means, a control method according to Izu Re one of claims 7 9, characterized in that a wireless communication means for performing communication using a spread spectrum. 前記第2の無線通信手段は、赤外線を用いて通信を行う無線通信手段であることを特徴とする請求項から10いずれかに記載の制御方法。It said second wireless communication means, a control method according to claim 7 in Izu Re of 10, which is a wireless communication means for performing communication using infrared rays. 前記無線通信装置は、撮像素子を用いて映像信号を生成する映像信号生成手段さらに有することを特徴とする請求項から11いずれかに記載の制御方法。The wireless communications apparatus, control method according to Izu Re one of claims 7 to 11, further comprising a video signal generating means for generating a video signal by using an image sensor.
JP12224498A 1998-05-01 1998-05-01 Wireless communication apparatus and control method Expired - Fee Related JP3847952B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP12224498A JP3847952B2 (en) 1998-05-01 1998-05-01 Wireless communication apparatus and control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP12224498A JP3847952B2 (en) 1998-05-01 1998-05-01 Wireless communication apparatus and control method

Publications (3)

Publication Number Publication Date
JPH11317724A JPH11317724A (en) 1999-11-16
JPH11317724A5 JPH11317724A5 (en) 2005-09-29
JP3847952B2 true JP3847952B2 (en) 2006-11-22

Family

ID=14831168

Family Applications (1)

Application Number Title Priority Date Filing Date
JP12224498A Expired - Fee Related JP3847952B2 (en) 1998-05-01 1998-05-01 Wireless communication apparatus and control method

Country Status (1)

Country Link
JP (1) JP3847952B2 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8036244B2 (en) 2004-08-06 2011-10-11 Sharp Kabushiki Kaisha Transmitter, receiver, communication system, communication method, non-transitory computer readable medium
US8284684B2 (en) 2005-01-28 2012-10-09 Sharp Kabushiki Kaisha Communication device, communication system, communication method, and communication circuit
US8291273B2 (en) 2005-01-28 2012-10-16 Sharp Kabushiki Kaisha Communication device, non-transitory computer-readable medium storing a communication program
US7787391B2 (en) 2005-01-28 2010-08-31 Sharp Kabushiki Kaisha Communication device, communication system, communication method, communication program, and communication circuit
JP4219950B2 (en) 2006-10-16 2009-02-04 シャープ株式会社 COMMUNICATION DEVICE, COMMUNICATION METHOD, COMMUNICATION CIRCUIT, MOBILE PHONE, PROGRAM, AND COMPUTER-READABLE RECORDING MEDIUM CONTAINING THE PROGRAM
JP5997423B2 (en) * 2011-07-15 2016-09-28 キヤノン株式会社 Strobe system, imaging system, multi-lamp control method, wireless communication apparatus and control method thereof

Also Published As

Publication number Publication date
JPH11317724A (en) 1999-11-16

Similar Documents

Publication Publication Date Title
JP4293108B2 (en) REMOTE CONTROL SYSTEM, REMOTE CONTROL METHOD, REMOTE CONTROLLER, AND ELECTRONIC DEVICE
US7178157B1 (en) Information transmission system, information output apparatus, information input apparatus, and connection relationship identification method
WO2005034515A1 (en) Proximity detection using wireless connectivity in a communications system
JP2001268387A (en) Electronic equipment system
KR101226791B1 (en) Video camera apparatus and recording method
JP3847952B2 (en) Wireless communication apparatus and control method
KR100394834B1 (en) Remote Monitoring System Using Mobile Communication Device Capable of Receiving Image Data and Connecting to Internet, and Remote Monitoring Method Using the Same
US20080233870A1 (en) Adapter and Method for Wireless Transfer of Memory Card Contents
KR101261293B1 (en) Control system for video security device using smart phone
KR20120044821A (en) Method and network camera for controlling video from plural network camera
US7356353B2 (en) Wireless communication device, wireless communication method, and wireless communication system
JP4095171B2 (en) Wireless communication apparatus and control method thereof
JPH10145637A (en) Image communication apparatus and image communication method
JP2004007148A (en) Image transmission device
KR100368440B1 (en) Remote Monitoring System Using Mobile Communication Device Based on Voice Recognition Technology, and Remote Monitoring Method Using the Same
KR100785657B1 (en) Network camera for electronic device control
KR100744455B1 (en) Security surveillance system using network
JP2000036916A (en) Image processing apparatus and wireless control system thereof
JP4418128B2 (en) Recording system and recording method
JP3551929B2 (en) Digital equipment for network system and network system using it
JP4640298B2 (en) Image transfer device
US20040107448A1 (en) Device, apparatus and method for selecting a programme from a plurality of programmes within a network
JP2003069534A (en) Information wireless transmission system
JPH04188997A (en) Signal transmission device
JP2003111059A (en) Camera unit, image data communication system using the same, and electrical equipment control system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050422

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050422

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060620

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060725

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060815

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060824

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090901

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100901

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110901

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110901

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120901

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120901

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130901

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees