JP2021184652A - Video display device - Google Patents
Video display device Download PDFInfo
- Publication number
- JP2021184652A JP2021184652A JP2021142052A JP2021142052A JP2021184652A JP 2021184652 A JP2021184652 A JP 2021184652A JP 2021142052 A JP2021142052 A JP 2021142052A JP 2021142052 A JP2021142052 A JP 2021142052A JP 2021184652 A JP2021184652 A JP 2021184652A
- Authority
- JP
- Japan
- Prior art keywords
- remote control
- external device
- video display
- display device
- control terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004891 communication Methods 0.000 claims abstract description 94
- 238000001514 detection method Methods 0.000 claims abstract description 12
- 238000000034 method Methods 0.000 claims description 63
- 230000008569 process Effects 0.000 claims description 41
- 230000005540 biological transmission Effects 0.000 claims description 20
- 230000004913 activation Effects 0.000 claims description 12
- 230000003213 activating effect Effects 0.000 claims description 3
- 238000012545 processing Methods 0.000 description 47
- 238000010586 diagram Methods 0.000 description 16
- 238000009434 installation Methods 0.000 description 12
- 238000012546 transfer Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
本発明は、映像データを保持する外部機器、映像表示装置、および遠隔操作端末間の機器連携技術に関する。 The present invention relates to a device cooperation technique between an external device for holding video data, a video display device, and a remote control terminal.
本技術分野の背景技術として、特許文献１には、課題として「複数のモニタに接続されたＳＴＢ（セット・トップ・ボックス）に記憶された映像コンテンツをスマートフォンなどで操作可能な映像送信システムにおける操作性を向上させる制御部、送信装置、及び送信方法を提供する。」と記載されている。
As a background technology in this technical field,
この課題の解決手段として、「映像データ制御部（スマートフォン）は、表示装置（ベッドルームＴＶ）に対して特定情報を無線発信する状態にするよう指示する特定情報発信指示を送信可能に構成された特定情報発信指示送信部（近距離無線通信部、Ｗｉ−Ｆｉ通信部）と、特定情報の電波強度に基づいて最も近くの表示装置を特定可能に構成された表示装置特定部（制御部）と、映像データを無線で送信可能に構成された映像データ送信装置（サーバ）に対して、最も近くの表示装置に映像データを送信するよう指示する映像データ送信指示を送信可能に構成された映像データ送信指示送信部（Ｗｉ−Ｆｉ通信部）と、を備える。（要約抜粋）」と記載されている。 As a means for solving this problem, "the video data control unit (smartphone) is configured to be able to transmit a specific information transmission instruction instructing the display device (bedroom TV) to wirelessly transmit specific information. A specific information transmission instruction transmission unit (short-range wireless communication unit, Wi-Fi communication unit) and a display device identification unit (control unit) configured to be able to identify the nearest display device based on the radio field strength of specific information. , Video data configured to enable transmission of video data transmission instructions to instruct the nearest display device to transmit video data to the video data transmission device (server) configured to be able to transmit video data wirelessly. A transmission instruction transmission unit (Wi-Fi communication unit) is provided. (Summary excerpt) ”.
しかしながら、上記文献に記載の技術においては、映像データ制御部(スマホ)を所有するユーザが、主体的に、表示装置(テレビ)および映像データ送信装置(サーバ)に対して指示をすることにより、映像データ制御部(スマホ)と表示装置(テレビ)と映像データ送信装置(サーバ)との間の連携を確立する必要があり、使い勝手が悪かった。また、上記映像データ送信装置(サーバ)に代替する機器として、ビデオカメラやビデオレコーダ等の外部機器が考えられるが、上記表示装置(テレビ)と接続される外部機器が変更された際の連携動作についても考慮されていない。 However, in the technique described in the above document, the user who owns the video data control unit (smartphone) proactively gives an instruction to the display device (television) and the video data transmission device (server). It was necessary to establish the cooperation between the video data control unit (smartphone), the display device (television), and the video data transmission device (server), which was not easy to use. Further, as a device to replace the video data transmission device (server), an external device such as a video camera or a video recorder can be considered, but the cooperative operation when the external device connected to the display device (television) is changed. Is not taken into consideration either.
本発明は、上記事情に鑑みてなされたもので、多種多様な外部機器が映像表示装置に接続される可能性のある環境において、少ない負担で外部機器、映像表示装置および遠隔操作端末間の連携を確立するとともに、ユーザに高い操作性をもたらす機器間の連携動作を実現する技術を提供することを目的とする。 The present invention has been made in view of the above circumstances, and in an environment where a wide variety of external devices may be connected to a video display device, cooperation between the external device, the video display device, and the remote control terminal is performed with a small burden. The purpose is to provide a technology that realizes cooperative operation between devices that brings high operability to the user.
上記課題を解決するため、本発明は、例えば、外部機器と、当該外部機器を遠隔操作する遠隔操作端末とが接続可能な映像表示装置であって、前記外部機器が当該映像表示装置に接続されたことを検知する接続検知部と、前記接続検知部において前記外部機器が接続されたことを検知すると、当該外部機器に対する操作指示を受け付けるアプリケーションソフトウェアを前記遠隔操作端末に起動させるための起動信号を生成する連携確立部と、前記起動信号を前記遠隔操作端末に送信する通信インタフェースと、を備えることを特徴とする。 In order to solve the above problems, the present invention is, for example, a video display device capable of connecting an external device and a remote control terminal that remotely operates the external device, and the external device is connected to the video display device. When the connection detection unit that detects that the connection is detected and the connection detection unit detects that the external device is connected, an activation signal for activating the application software that receives an operation instruction for the external device to the remote operation terminal is transmitted. It is characterized by including a cooperation establishment unit to be generated and a communication interface for transmitting the activation signal to the remote control terminal.
本発明によれば、多種多様な外部機器が映像表示装置に接続される可能性のある環境において、少ない負担で外部機器、映像表示装置および遠隔操作端末間の連携を確立でき、ユーザに高い操作性をもたらす機器間の連携動作を実現できる。上記に記載した以外の目的、構成、効果は以下の説明で明らかにされる。 According to the present invention, in an environment where a wide variety of external devices may be connected to a video display device, it is possible to establish cooperation between the external device, the video display device and the remote control terminal with a small burden, and the operation is high for the user. It is possible to realize cooperative operation between devices that bring about sexuality. Objectives, configurations and effects other than those described above will be clarified in the following description.
＜第一の実施形態＞
以下、図面を用いて本発明の第一の実施形態を説明する。なお、以下に説明する実施形態は、本発明を実現するための一例であり、本発明が適用される装置の構成や各種条件によって、適宜修正または変更されるべきものであり、本発明は以下の実施形態に限定されるものではない。また、後述する各実施形態の一部を適宜組み合わせて構成しても良い。
<First embodiment>
Hereinafter, the first embodiment of the present invention will be described with reference to the drawings. The embodiments described below are examples for realizing the present invention, and should be appropriately modified or modified depending on the configuration of the apparatus to which the present invention is applied and various conditions, and the present invention is described below. Is not limited to the embodiment of the above. Further, a part of each embodiment described later may be appropriately combined and configured.
図１は、本実施形態の三者連携システムの構成図である。本図に示すように、本実施形態の三者連携システムは、映像表示装置１０と、遠隔操作端末２０と、外部機器３０と、を備える。映像表示装置１０と外部機器３０とは、例えば、ＨＤＭＩ（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ Ｉｎｔｅｒｆａｃｅ：高精細度マルチメディアインターフェース）（登録商標）ケーブル等により接続される。また、遠隔操作端末２０は、近距離無線通信（例えば、ＮＦＣ、ＩＲ通信、Ｂｌｕｅｔｏｏｔｈ（登録商標）等）又は無線ＬＡＮにより、映像表示装置１０に接続される。また、映像表示装置１０は、インターネットを経由して、サーバ９０に接続される。
FIG. 1 is a configuration diagram of a tripartite cooperation system of the present embodiment. As shown in this figure, the tripartite cooperation system of the present embodiment includes a
映像表示装置１０は、外部から映像データを取得し、自身が備える表示部に表示する。本実施形態の映像表示装置１０は、例えば、テレビ、ＴＶチューナを備えないモニタ等である。以後、テレビを例にあげて説明する。テレビ１０は、無線ＬＡＮのアクセスポイント機能をさらに備え、インターネットを経由して、サーバ９０に接続される。
The
遠隔操作端末２０は、リモコン機能を実現するアプリケーションソフトウェア（以下「リモコンアプリ」と略記する）を格納する。遠隔操作端末２０では、遠隔操作端末２０を構成するハードウェアがリモコンアプリを実行することにより、リモコン機能が実現される。本実施形態の遠隔操作端末２０は、例えば、スマートフォン、タブレット端末、携帯端末等の通信機能を有する情報処理端末である。以後、スマートフォンを例に挙げて説明する。
The
外部機器３０は、映像データを保持あるいは中継する。また、テレビ１０に接続され、保持あるいは中継する映像データをテレビ１０に送信する。本実施形態の外部機器３０は、例えば、ビデオカメラ、ビデオレコーダ、セットトップボックス（ＳＴＢ）等である。以後、ビデオカメラを例に挙げて説明する。
The
ビデオカメラ３０とテレビ１０とはＨＤＭＩケーブルで接続しているが、両者の接続は、これに限定されない。ビデオカメラ３０とテレビ１０とを１対１で接続するインタフェースであれば有線、無線を問わず可能である。また、ビデオカメラ３０に代えて、テレビ１０のＵＳＢ端子（図示しない）に接続可能なＵＳＢメモリ装置を用いても良い。この場合、前記ＵＳＢメモリ装置は、ＵＳＢケーブルを用いて、或いは直接テレビ１０と接続されて良い。また、本実施形態では、スマートフォン２０とテレビ１０とは、近距離通信でも接続されているが、この機能はなくてもよい。
The
［ハードウェア構成］
以下、本実施形態の三者連携システムにおけるテレビ１０、スマートフォン２０、ビデオカメラ３０それぞれについて、詳細な構成を説明する。
[Hardware configuration]
Hereinafter, detailed configurations of each of the
［テレビ］
図２（ａ）は、本実施形態のテレビ１０のブロック図である。テレビ１０は、制御部１１と、ＴＶチューナ１２と、表示部１３と、記憶部１４と、ＨＤＭＩ通信インタフェース（Ｉ／Ｆ）１５と、有線ＬＡＮ通信インタフェース（Ｉ／Ｆ）１６と、無線ＬＡＮ通信インタフェース（Ｉ／Ｆ）１７と、近距離通信インタフェース（Ｉ／Ｆ）１８と、を備える。
[TV set]
FIG. 2A is a block diagram of the
制御部１１は、所定のプログラムに従ってテレビ１０全体を制御するマイクロプロセッサユニットである。
The
記憶部１４は、プログラム領域と、一時記憶領域と、ストレージ記憶領域とを備える。プログラム領域は、基本動作プログラムおよびその他のアプリケーションプログラムを実行する際、これらのプログラムが展開される領域である。一時記憶領域は、各種アプリケーションプログラム実行時に必要に応じてデータを一時的に保持する。ストレージ記憶領域は、各種設定値、各種プログラム、動画像データ等を電源が供給されていない状態であっても記憶する。ストレージ記憶領域には、例えば、フラッシュＲＯＭ、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、ＨＤＤ（Ｈａｒｄ Ｄｉｓｃ Ｄｒｉｖｅ）等のデバイスが用いられる。
The
なお、本実施形態では、テレビ１０は、アプリケーションサーバから、インターネットを介して、新規アプリケーションプログラムをダウンロードすることにより、機能拡張が可能であるものとする。この際、ダウンロードした新規アプリケーションプログラムは、記憶部１４のストレージ記憶領域に記憶される。
In the present embodiment, it is assumed that the function of the
本実施形態のテレビ１０は、ストレージ記憶領域に記憶された新規アプリケーションプログラムを、制御部１１がプログラム領域に展開するとともに、展開した新規アプリケーションプログラムを実行することにより、多種の新規機能を実現する。
The
表示部１３は、例えば、液晶パネルまたは有機ＥＬディスプレイ等の表示デバイスである。本実施形態の表示部１３は、後述のＴＶチューナ１２が、アンテナで受信した放送電波を受け取り、映像処理した画像等を表示する。
The
ＴＶチューナ１２は、アンテナで受信した放送電波を映像信号として出力する。ＴＶチューナ１２は、地上デジタルチューナ、ＢＳ／ＣＳデジタルチューナ、ＯＦＤＭ復調部、ＭＰＥＧデコーダ等を備える。
The
ＨＤＭＩ通信Ｉ／Ｆ１５は、ＨＤＭＩ通信のインタフェース部である。ＨＤＭＩ通信Ｉ／Ｆ１５は、ＴＭＤＳ（Ｔｒａｎｓｉｔｉｏｎ Ｍｉｎｉｍｉｚｅｄ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌｉｎｇ）処理部、ＴＭＤＳ処理部で受信した暗号化された映像信号を復号する復号化部、ＣＥＣ（Ｃｏｎｓｕｍｅｒ Ｅｌｅｃｔｒｏｎｉｃｓ Ｃｏｎｔｒｏｌ）制御部等を備え、テレビ１０をビデオカメラ３０等と１対１に接続する。
The HDMI communication I / F15 is an interface unit for HDMI communication. The HDMI communication I / F15 includes a TMDS (Transition Minimized Differential Signaling) processing unit, a decoding unit that decodes an encrypted video signal received by the TMDS processing unit, a CEC (Consumer Electronics Control) control unit, and the like. Is connected one-to-one with a
無線ＬＡＮ通信Ｉ／Ｆ１７は、無線ＬＡＮのアクセスポイントとして機能し、スマートフォン２０等の無線ＬＡＮ通信Ｉ／Ｆを備える機器とデータの送受信を行う。
The wireless LAN communication I /
有線ＬＡＮ通信Ｉ／Ｆ１６は、ホームゲートウエイを通じてインターネットと接続し、サーバ９０との間でデータの送受信を行う。
The wired LAN communication I /
近距離通信Ｉ／Ｆ１８はスマートフォン２０等との間で近距離無線通信（ＮＦＣ、ＩＲ通信、Ｂｌｕｅｔｏｏｔｈ等）を行う。
The short-range communication I / F18 performs short-range wireless communication (NFC, IR communication, Bluetooth, etc.) with the
［スマートフォン］
図３（ａ）は、本実施形態のスマートフォン２０のブロック図である。スマートフォン２０は、制御部２１と、携帯網通信Ｉ／Ｆ２２と、タッチパネル２３と、記憶部２４と、無線ＬＡＮ通信Ｉ／Ｆ２７と、近距離通信Ｉ／Ｆ２８と、を備える。
[smartphone]
FIG. 3A is a block diagram of the
制御部２１は、所定のプログラムに従ってスマートフォン２０全体を制御するマイクロプロセッサユニットである。
The
記憶部２４は、プログラム領域と、一時記憶領域と、ストレージ記憶領域とを備える。プログラム領域は、基本動作プログラムおよびその他のアプリケーションプログラムを実行する際、これらのプログラムが展開される領域である。一時記憶領域は、各種アプリケーションプログラム実行時に必要に応じてデータを一時的に保持する。ストレージ記憶領域は、各種設定値、各種プログラム、動画像データ等を電源が供給されていない状態であっても記憶する。ストレージ記憶領域には、例えば、フラッシュＲＯＭ、ＳＳＤ、ＨＤＤ等のデバイスが用いられる。
The
本実施形態のスマートフォン２０は、アプリケーションサーバから、インターネットおよび無線ＬＡＮアクセスポイントを介して、上記リモコンアプリを含む新規アプリケーションプログラムをダウンロードすることにより、機能拡張可能とする。この際、ダウンロードした新規アプリケーションプログラムは、記憶部２４のストレージ記憶領域に記憶される。
The
本実施形態のスマートフォン２０は、制御部２１が、ストレージ記憶領域に記憶された新規アプリケーションプログラムを、プログラム領域に展開して実行することにより、多種の新規機能を実現可能であるものとする。
In the
タッチパネル２３は、例えば液晶パネルまたは有機ＥＬディスプレイ等の表示デバイスと、タッチパネル等の信号入力装置とを組み合わせた装置である。本実施形態のスマートフォン２０は、テレビ１０およびビデオカメラ３０のリモコンとして機能する。タッチパネル２３は、この際のリモコン画面等を表示する。また、画面上へのユーザの接触による操作を検出することにより操作入力の検出を行う。
The
携帯網通信Ｉ／Ｆ２２は、移動体電話通信網の基地局と無線通信を行い、電話通信（通話）およびデータの送受信を行う。
The mobile network communication I /
無線ＬＡＮ通信Ｉ／Ｆ２７は、無線ＬＡＮアクセスポイントを介してテレビ１０、ビデオカメラ３０、または、サーバ９０とデータの送受信を行う。
The wireless LAN communication I /
近距離通信Ｉ／Ｆ２８は、テレビ１０との間で近距離無線通信（ＮＦＣ、ＩＲ通信、Ｂｌｕｅｔｏｏｔｈ等）を行う。
The short-range communication I /
［ビデオカメラ］
図４（ａ）は、本実施形態のビデオカメラ３０のブロック図である。ビデオカメラ３０は、制御部３１と、映像入力処理部３２と、表示部３３と、記憶部３４と、ＨＤＭＩ通信Ｉ／Ｆ３５と、無線ＬＡＮ通信Ｉ／Ｆ３７と、近距離通信Ｉ／Ｆ３８と、を備える。
[Video camera]
FIG. 4A is a block diagram of the
制御部３１は、所定のプログラムに従ってビデオカメラ３０全体を制御するマイクロプロセッサユニットである。
The
記憶部３４は、プログラム領域と、一時記憶領域と、ストレージ記憶領域とを備える。プログラム領域は、基本動作プログラムおよびその他のアプリケーションプログラムを実行する際、これらのプログラムが展開される領域である。一時記憶領域は、各種アプリケーションプログラム実行時に必要に応じてデータを一時的に保持する。ストレージ記憶領域は、各種設定値、各種プログラム、動画像データ等を電源が供給されていない状態であっても記憶する。ストレージ記憶領域には、例えば、フラッシュＲＯＭ、ＳＳＤ、ＨＤＤ等のデバイスが用いられる。
The
表示部３３は、例えば液晶パネルまたは有機ＥＬディスプレイ等の表示デバイスである。例えば、後述の映像入力処理部３２で映像処理した映像データを表示する。
The
映像入力処理部３２は、撮像光学系と、撮像素子と、映像信号処理系とを備える。撮像光学系は、レンズ、絞り等を備える。映像信号処理系は、入力された映像信号に対し、デジタル信号処理を行う。
The video
ＨＤＭＩ通信Ｉ／Ｆ３５は、ＨＤＭＩ通信のＩ／Ｆ部である。ＨＤＭＩ通信Ｉ／Ｆ３５は、ＴＭＤＳ処理部、映像信号を暗号化する暗号化部、ＣＥＣ制御部を備え、テレビ１０等と１対１に接続される。
The HDMI communication I / F35 is an I / F unit of HDMI communication. The HDMI communication I / F35 includes a TMDS processing unit, an encryption unit for encrypting a video signal, and a CEC control unit, and is connected to a
無線ＬＡＮ通信Ｉ／Ｆ３７は、無線ＬＡＮアクセスポイントを介してテレビ１０またはスマートフォン２０とデータの送受信を行う。
The wireless LAN communication I /
近距離通信Ｉ／Ｆ３８は、無接点充電機（例えば、充電ドック）との間で近距離無線通信（ＮＦＣ、ＩＲ通信、Ｂｌｕｅｔｏｏｔｈ等）を行う。 The short-range communication I / F38 performs short-range wireless communication (NFC, IR communication, Bluetooth, etc.) with a non-contact charger (for example, a charging dock).
［機能構成］
次に、本実施形態のテレビ１０，スマートフォン２０およびビデオカメラ３０の、機能について説明する。
[Functional configuration]
Next, the functions of the
［テレビ］
本実施形態のテレビ１０は、映像データを保持するビデオカメラ３０がＨＤＭＩ通信Ｉ／Ｆ１５を介して接続されたことを検知すると、スマートフォン２０にリモコンアプリを起動させ、その後の連携動作を制御する。スマートフォン２０がスリープ状態にある場合には、スリープ状態を解除した後に、リモコンアプリを起動させるようにしても良い。なお、スマートフォン２０への各種の指示は、無線ＬＡＮ通信Ｉ／Ｆ１７または近距離通信Ｉ／Ｆ１８を介して行う。特に区別する必要がない場合は、通信Ｉ／Ｆと呼ぶ。
[TV set]
When the
これを実現するため、図２（ｂ）に示すように、本実施形態のテレビ１０は、テレビ１０、ビデオカメラ３０およびスマートフォン２０の三者間の連携を確立する第一連携確立部１２０と、三者間の連携確立後の連携動作を制御する中継部１３０と、接続検知部１４０と、を備える。また、第一連携確立部１２０は、ペアリング部１２１と、リモコン決定部１２２と、を備える。
In order to realize this, as shown in FIG. 2B, the
接続検知部１４０は、ビデオカメラ３０がＨＤＭＩ通信Ｉ／Ｆ１５を介して接続されたことを検知し、第一連携確立部１２０に通知する。本実施形態では、ビデオカメラ３０からＨＤＭＩ通信Ｉ／Ｆ１５を介して機器ＩＤが通知される。接続検知部１４０は、この機器ＩＤを得ることにより、接続を検知する。
The
ペアリング部１２１は、スマートフォン２０等の、三者連携システムでリモコンとなり得る各種の端末（候補スマートフォン）からの要求（ペアリング要求）に応じて候補ビデオカメラを対応づける。対応づける候補ビデオカメラは、その候補スマートフォンで操作可能なビデオカメラであって、接続する可能性のあるビデオカメラである。対応づけた結果は、中継テーブル５００として保持する。
The
本実施形態では、ペアリング部１２１は、ビデオカメラ３０が接続されたことを接続検知部１４０から通知されると、そのビデオカメラ３０から、機器情報を受け取り、蓄積する。従って、ペアリング部１２１は、現在接続されているビデオカメラ３０および過去に蓄積されたビデオカメラ３０の機器情報を蓄積する。
In the present embodiment, when the
なお、機器情報は、そのビデオカメラ３０を識別する情報（機器ＩＤ）と、中継アプリ情報とを含む。中継アプリ情報は、当該ビデオカメラ３０を、テレビ１０を介してスマートフォン２０から操作する際に必要とされるアプリケーションプログラム（中継アプリ）の名称（中継アプリ名）およびスマートフォン２０の対応ＯＳ情報を含む。
The device information includes information for identifying the video camera 30 (device ID) and relay application information. The relay application information includes the name (relay application name) of the application program (relay application) required when operating the
中継アプリは、テレビ１０がスマートフォン２０から通信Ｉ／Ｆを介して受信した操作指示を、ビデオカメラ３０との通信Ｉ／ＦであるＨＤＭＩ通信Ｉ／Ｆ１５を介してビデオカメラ３０に指示するアプリケーションプログラムである。
The relay application is an application program that instructs the
また、本実施形態のペアリング部１２１は、候補スマートフォンから、ペアリング要求を受け取ると、当該候補スマートフォンで操作可能な候補ビデオカメラを対応づけて、中継テーブル５００を生成する。候補スマートフォンから送信されるペアリング要求は、当該候補スマートフォンの識別情報（機器ＩＤ）と、当該候補スマートフォンのＯＳ情報とを含む。機器ＩＤは、例えば、候補スマートフォンのＩＰアドレス等であってもよい。また、ペアリング部１２１は、対応づけた候補ビデオカメラの機器ＩＤを、折り返し、要求元の候補スマートフォンに通知する。
Further, when the
ペアリング部１２１は、例えば、ペアリング要求に含まれるスマートフォンのＯＳ情報と、候補外部機器の対応ＯＳ情報とを用い、対応づけの可否を判別する。
The
ここで、ペアリング部１２１が作成する中継テーブル５００の例を図５に示す。本図に示すように、本実施形態の中継テーブル５００は、候補スマートフォンの機器ＩＤ５１０に対応づけて、操作可能な候補ビデオカメラ５２０が登録される。そして、候補ビデオカメラ５２０の情報として、機器ＩＤ５２１と、中継アプリ名５２２と、その中継アプリがインストールされているか否かを示す情報（インストール）５２３とが登録される。なお、図５には、インストール５２３として、中継アプリがインストールされている場合は「１」を、インストールされていない場合は「０」を登録する場合を例示する。
Here, an example of the relay table 500 created by the
なお、１つの候補ビデオカメラに複数の候補スマートフォンが対応づけられる場合、それらの間に、予め優先順位を付し、その情報を中継テーブル５００に登録してもよい。 When a plurality of candidate smartphones are associated with one candidate video camera, priorities may be given in advance between them and the information may be registered in the relay table 500.
リモコン決定部１２２は、ＨＤＭＩ通信Ｉ／Ｆ１５を介してビデオカメラ３０が接続されると、三者連携システムにおいてリモコンとして用いるスマートフォン２０を決定し、決定したスマートフォン２０にリモコンアプリを起動させる。スマートフォン２０は、ペアリング部１２１が作成した中継テーブル５００を参照し、接続されたビデオカメラ３０（候補ビデオカメラ）に対応づけて登録されている候補スマートフォンの中から決定する。
When the
例えば、中継テーブル５００に、候補スマートフォンの優先順位が付与されている場合、当該優先順位に従って決定する。一方、優先順位が付与されていない場合は、例えば、その時点でテレビ１０に最も近い候補スマートフォンを選択する。最も近い候補スマートフォンは、例えば、テレビ１０と各候補スマートフォンとの間で近距離無線通信（ＮＦＣ、ＩＲ通信、Ｂｌｕｅｔｏｏｔｈ等）または無線ＬＡＮによる通信を行い、最も電波強度の大きいものを選択する。
For example, when the relay table 500 is given a priority of candidate smartphones, the priority is determined according to the priority. On the other hand, when the priority is not given, for example, the candidate smartphone closest to the
なお、中継テーブル５００に登録されている複数の候補スマートフォンから、リモコンとして使用するスマートフォン２０を選択する手法は、これに限定されない。例えば、登録されている全ての候補スマートフォンに通知を行い、最も早く承諾の意思を送信してきた候補スマートフォンを選択するよう構成してもよい。
The method of selecting the
また、ここで選択したスマートフォン２０との間の通信が途切れた場合、リモコン決定部１２２は、再度、上記手法でリモコンとして用いるスマートフォン２０を決定する。
Further, when the communication with the
リモコン決定部１２２は、ビデオカメラ３０を操作するリモコンアプリを起動させるための起動信号を生成し、決定したスマートフォン２０に対し、通信Ｉ／Ｆを介して送信する。本実施形態では、起動信号は、テレビ１０およびビデオカメラ３０それぞれの機器ＩＤを含む。この起動信号を受信したスマートフォン２０側では、ビデオカメラ３０を操作するリモコンアプリを起動させる。
The remote
中継部１３０は、三者連携確立後、中継アプリに従って、中継処理を行う。具体的には、スマートフォン２０がリモコンアプリを介して受け付けた操作指示をスマートフォン２０から受信し、ビデオカメラ３０に中継する。また、その操作指示に応じてビデオカメラ３０から転送されたデータを処理する。
After establishing the tripartite cooperation, the
なお、操作指示は、ビデオカメラ３０を操作する指示である。本実施形態では、例えば、表示部１３にビデオカメラ３０の操作画面を表示させる指示、ビデオカメラ３０が保持する映像データを表示部１３に表示させる指示等が含まれる。
The operation instruction is an instruction to operate the
なお、テレビ１０が実現する各機能は、記憶部１４のストレージ領域に格納されるプログラムを、制御部１１のマイクロプロセッサが、プログラム領域に展開し、実行することにより実現される。また、中継テーブル５００は、ストレージ領域に格納される。テレビ１０が実現する各機能のうち、全部または一部の機能は、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（ｆｉｅｌｄ−ｐｒｏｇｒａｍｍａｂｌｅ ｇａｔｅ ａｒｒａｙ）などのハードウェアによって実現されてもよい。また、テレビ１０とビデオカメラ３０とがＨＤＭＩで接続される場合、テレビ１０とビデオカメラ３０との間の制御信号のやり取りは、ＣＥＣ機能により実現されてもよい。
Each function realized by the
［スマートフォン］
スマートフォン２０は、テレビ１０からの指示に従って、ビデオカメラ３０のリモコンとして機能する。これを実現するため、図３（ｂ）に示すように、本実施形態のスマートフォン２０は、テレビ１０、ビデオカメラ３０およびスマートフォン２０の三者間の連携を確立する第二連携確立部２１０と、リモコン処理部２２０とを備える。また、第二連携確立部２１０は、連携テーブル作成部２１１を備える。
[smartphone]
The
連携テーブル作成部２１１は、三者間の連携を実現するために、連携テーブル６００を作成する。本実施形態では、自身が操作可能なテレビ（候補テレビ）と候補ビデオカメラとの組み合わせ、および、操作に用いるアプリケーション（リモコンアプリ）を対応づけて連携テーブルとして作成する。
The linkage
具体的には、テレビ１０にペアリング要求を行った結果、テレビ１０から通知された候補ビデオカメラの機器ＩＤを、通知元のテレビ１０を候補テレビとして、当該候補テレビの機器ＩＤに対応づけて保持する。また、対応づけた候補ビデオカメラの機器ＩＤおよびテレビ１０の機器ＩＤに基づき、テレビ１０を介して当該候補ビデオカメラを操作するためのリモコンアプリを特定する。
Specifically, as a result of making a pairing request to the
なお、本実施形態では、上述のように、リモコンアプリは、テレビ１０を介してビデオカメラ３０を操作するリモコンとしてスマートフォン２０を機能させる。すなわち、リモコンアプリは、例えば、ビデオカメラ３０に保持される映像データを、テレビ１０の表示部１３に表示させる指示を受け付けるアプリケーションである。このリモコンアプリは、一般に、外部のサーバ９０に保持される。本実施形態のスマートフォン２０は、インターネットを介してサーバ９０にアクセスし、該当するアプリケーションを入手する。
In the present embodiment, as described above, the remote control application causes the
図６に、本実施形態の連携テーブル作成部２１１が作成する連携テーブル６００の例を示す。本図に示すように、本実施形態の連携テーブル６００は、候補テレビ毎に、当該候補テレビの機器ＩＤ６１０と、当該候補テレビを介して操作可能なビデオカメラである候補ビデオカメラの機器ＩＤ６２０と、当該候補テレビを介して当該候補ビデオカメラをそれぞれ制御するためのリモコンアプリを特定する情報（リモコンアプリ名）６３０と、を対応づけて登録する。また、そのリモコンアプリ名６３０を有するリモコンアプリの、インストールの有無を示す情報（インストール）６４０も合わせて登録する。なお、図６には、インストール６４０として、リモコンアプリがインストールされている場合は「１」を、インストールされていない場合は「０」を登録する場合を例示する。
FIG. 6 shows an example of the linkage table 600 created by the linkage
リモコン処理部２２０は、三者連携を実現するための処理を行う。具体的には、リモコンアプリを展開して実行する。
The remote
スマートフォン２０が実現する各機能は、記憶部２４のストレージ領域に格納されるプログラムを、制御部２１のマイクロプロセッサが、プログラム領域に展開し、実行することにより実現される。また、連携テーブル６００は、ストレージ領域に格納される。スマートフォン２０が実現する各機能のうち、全部または一部の機能は、ＡＳＩＣ、ＦＰＧＡなどのハードウェアによって実現されてもよい。
Each function realized by the
［ビデオカメラ］
本実施形態のビデオカメラ３０は、ＨＤＭＩ通信Ｉ／Ｆ３５を介して、テレビ１０に接続されると、接続相手のテレビ１０に、自身を制御するための情報を送信する。上述のように、本機能は、ＣＥＣ機能により実現されてもよい。
[Video camera]
When the
［三者連携処理の流れ］
以上の機能を有するテレビ１０、スマートフォン２０およびビデオカメラ３０による、三者連携処理の流れを説明する。図７は、本実施形態の三者連携処理の流れを説明するためのフローチャートである。なお、中継テーブル５００および連携テーブル６００は、予め作成されているものとする。
[Flow of tripartite cooperation processing]
The flow of the tripartite cooperation process by the
また、以下では、ビデオカメラ３０の記憶部３４に記録された動画像の中から、スマートフォン２０への操作により所望の動画像を選択してテレビ１０の表示部１３に表示する場合を例にあげて説明する。しかしながら、この例に限定されない。動画像を選択して表示する指示以外にも、例えば、ビデオカメラ３０が保持する動画像または静止画をテレビ１０の記憶部１４に記憶させるための指示等でも、この連携処理を同様に適用できる。
Further, in the following, an example will be given in which a desired moving image is selected from the moving images recorded in the
まず、ビデオカメラ３０をテレビ１０にＨＤＭＩで接続し、或いは、ＨＤＭＩでテレビ１０に接続済みのビデオカメラ３０の電源をＯＮにすると（ステップＳ３０１）、ビデオカメラ３０からテレビ１０に、ビデオカメラ３０の機器ＩＤを含むトリガが送信される。
First, when the
テレビ１０では、接続検知部１４０が機器ＩＤの通知を受け、リモコン決定部１２２に送信する。機器ＩＤを受信すると、テレビ１０のリモコン決定部１２２は、中継テーブル５００を参照し、中継アプリを取得する中継アプリ取得処理を行い（ステップＳ１０１）、中継アプリを取得する。また、リモコンとして用いるスマートフォンを決定するリモコン決定処理も行い（ステップＳ１０２）、スマートフォン２０を決定する。
In the
そして、リモコン決定部１２２は、決定したスマートフォン２０に対し、接続指示を通知する（ステップＳ１０３）。ここでは、スマートフォン２０に、テレビ１０の機器ＩＤ、ビデオカメラ３０の機器ＩＤを通知するとともに、リモコンアプリの起動を促すコマンドを送信する。
Then, the remote
ここで、ステップＳ１０１の中継アプリ取得処理の詳細を、図８を用いて説明する。 Here, the details of the relay application acquisition process in step S101 will be described with reference to FIG.
まず、リモコン決定部１２２は、中継テーブル５００を検索し（ステップＳ４１１）、受信した機器ＩＤが登録されているか否かを判別する（ステップＳ４１２）。ここで、登録されていない場合は、三者連携処理自体を終了する。
First, the remote
一方、登録されている場合は、リモコン決定部１２２は、当該機器ＩＤ５２１に対応づけて登録されている中継アプリが、インストール済みであるか否かを判別する（ステップＳ４１３）。インストール済みである場合、最新版であるか否かを判別する（ステップＳ４１４）。最新版であるか否かは、インターネット経由でサーバ９０にアクセスし、中継アプリ情報として登録されているバージョン情報と、提供されている最新版の情報とを比較し、判別する。
On the other hand, if it is registered, the remote
最新版の中継アプリがインストールされている場合は、処理を終了する。一方、中継アプリがインストールされていない場合、あるいは、インストールされていても最新版でない場合、リモコン決定部１２２は、インターネット経由でサーバ９０にアクセスし、最新版の中継アプリをダウンロードし（ステップＳ４１５）、インストールし（ステップＳ４１６）、中継アプリ取得処理を終了する。
If the latest version of the relay application is installed, the process ends. On the other hand, if the relay application is not installed, or if it is installed but not the latest version, the remote
なお、ビデオカメラ３０が中継アプリを保持し、テレビ１０がビデオカメラ３０から中継アプリを取得するようにしても良い。また、サーバ９０に記憶されている中継アプリとビデオカメラ３０に記憶されている中継アプリとのバージョンを比較し、適宜新しいものを取得するようにしても良い。
The
また、上記説明では、中継アプリがインストールされている場合でも、それが最新版であるか否かをインターネット経由でサーバ９０に確認し、あるいは、ビデオカメラ３０に問い合わせ、常に最新版をインストールするよう構成している。しかしながら、最新版であるか否かの確認は行わなくてもよい。
Also, in the above explanation, even if the relay application is installed, check with the
また、ビデオカメラ３０に古いバージョンの中継アプリが記憶されている状態で、インターネット経由でサーバ９０から最新版の中継アプリをダウンロードした場合、テレビ１０は、サーバ９０から取得した最新版の中継アプリを以て、ビデオカメラ３０に記憶された古いバージョンの中継アプリを更新するようにしても良い。
Further, when the latest version of the relay application is downloaded from the
次に、ステップＳ１０２のリモコン決定処理の詳細を、図９を用いて説明する。 Next, the details of the remote control determination process in step S102 will be described with reference to FIG.
リモコン決定部１２２は、まず、テレビ１０の無線ＬＡＮの同一サブネットワーク（サブＮＷ）内の、リモコンとなり得る機器を検索し（ステップＳ４２１）、抽出する。ここでは、例えば、同一サブＮＷ内の各種の機器のうち、スマートフォンを検索する。
First, the remote
そして、リモコン決定部１２２は、中継テーブル５００を検索し（ステップＳ４２２）、ステップＳ４２１で抽出したスマートフォンの中に、Ｓ１０１の処理で受信した機器ＩＤを持つビデオカメラ３０に対応づけて登録されている候補スマートフォンがあるか否かを判別する（ステップＳ４２３）。
Then, the remote
登録されていない場合、三者連携処理自体を終了する。なお、終了前に、ユーザにリモコンとして使用可能なスマートフォンの登録がないことを通知するよう構成してもよい。 If it is not registered, the tripartite cooperation process itself is terminated. In addition, before the end, it may be configured to notify the user that there is no registration of a smartphone that can be used as a remote controller.
一方、登録されている場合は、リモコン決定部１２２は、登録されている候補スマートフォンの台数を判別する（ステップＳ４２４）。
On the other hand, when registered, the remote
複数台登録されている場合、リモコン決定部１２２は、その中からリモコンとするスマートフォン２０を選択し（ステップＳ４２５）、それをリモコンとして用いるスマートフォン２０と決定する（ステップＳ４２６）。選択は、上述の手法により行う。
When a plurality of units are registered, the remote
上記ステップＳ４２４で、登録されている台数が１台であれば、その候補スマートフォンを、リモコンとして用いるスマートフォン２０と決定する（ステップＳ４２６）。リモコンとして用いるスマートフォン２０が決定すると、リモコン決定部１２２は、リモコン決定処理を終了する。
If the number of registered smartphones is one in step S424, the candidate smartphone is determined to be the
なお、このリモコン決定処理は、三者連携処理実行中に、何等かの事情でリモコンとして用いるスマートフォン２０との接続が途切れた場合も、実行される。
It should be noted that this remote control determination process is also executed even if the connection with the
図７に戻り、接続指示を受けたスマートフォン２０のリモコン処理部２２０は、リモコンアプリ取得処理を行う（ステップＳ２０１）。
Returning to FIG. 7, the remote
リモコンアプリ取得処理の詳細を、図１０に従って、説明する。 The details of the remote control application acquisition process will be described with reference to FIG.
リモコン処理部２２０は、通知されたテレビ１０の機器ＩＤおよびビデオカメラ３０の機器ＩＤを用い、連携テーブル６００を検索し（ステップＳ４３１）、両者に対応づけられたリモコンアプリがインストールされているか否かを判別する（ステップＳ４３２）。
The remote
リモコンアプリがインストールされている場合、リモコン処理部２２０は、そのアプリのバージョンが最新版であるか否かを判別する（ステップＳ４３３）。最新版であるか否かの判別は、インターネット経由でサーバ９０にアクセスし、リモコンアプリ情報として登録されているバージョン情報と、提供されている最新版の情報とを比較し、行う。
When the remote control application is installed, the remote
リモコンアプリがインストールされていない場合、あるいは、インストールされていても最新版でない場合、リモコン処理部２２０は、サーバ９０にアクセスし、最新版のリモコンアプリをダウンロードする（ステップＳ４３４）。そして、それをインストールし（ステップＳ４３５）、処理を終了する。
If the remote control application is not installed, or if it is installed but not the latest version, the remote
なお、上述の中継アプリ同様、最新版であるか否かの判別は、行わなくてもよい。さらに、ここでは、リモコンアプリは、サーバ９０からダウンロードするものとして説明したが、テレビ１０からダウンロードしてもよい。この場合、各種リモコンアプリをテレビ１０の記憶部１４のストレージ記憶領域に予め記憶させておく。また、サーバ９０に記憶されているリモコンアプリとテレビ１０に記憶されているリモコンアプリとのバージョンを比較し、新しい方を取得しても良い。また、インターネット経由でサーバ９０からダウンロードしたリモコンアプリをテレビ１０のストレージ記憶領域に記憶させても良い。
As with the above-mentioned relay application, it is not necessary to determine whether or not the version is the latest version. Further, although the remote control application has been described here as being downloaded from the
図７に戻り、リモコンアプリ取得処理を終えると、リモコン処理部２２０は、リモコンアプリを起動し、スマートフォン２０のタッチパネル２３に、リモコン画像を表示する（ステップＳ２０２）。ここで、表示されるリモコン画像は、スクロール可能な態様で表示され、テレビ１０またはビデオカメラ３０のどちらを操作するか選択可能な操作表示、チャネル操作表示、録画された動画の再生スタート、ストップの等の表示がなされる。
Returning to FIG. 7, when the remote control application acquisition process is completed, the remote
表示されるリモコン画像の一例を、図１１（ａ）および図１１（ｂ）に示す。本図に示すように、本実施形態のリモコン画像７００は、操作対象機器選択領域７１０と、リモコン操作受付領域７２０とを備える。
An example of the displayed remote control image is shown in FIGS. 11 (a) and 11 (b). As shown in this figure, the
操作対象機器選択領域７１０は、このリモコン画像７００を介して操作する対象の機器の選択を受け付ける。ここでは、テレビ１０およびビデオカメラ３０のいずれかを受け付ける。例えば、これらの図に示すように、選択を受け付けるためのボタンを備える。また、これらのボタンは、選択された機器が識別可能なように表示される。
The operation target
リモコン操作受付領域７２０には、操作対象機器選択領域７１０で選択された機器の操作画面が表示される。例えば、テレビ１０が選択された場合、チャンネル選択表示等がなされる。一方、ビデオカメラ３０が選択された場合、再生する動画の選択、再生スタート、再生ストップ等の指示を受け付ける画面表示がなされる。また、いずれを選択した場合でも、音量調整等は、共通に表示される。
In the remote control
なお、リモコン操作受付領域７２０は、スクロールにより、操作画面が変わるよう構成されていてもよい。この場合も、操作対象機器選択領域７１０に、操作画面で操作する対象の機器が識別可能な態様で表示されてもよい。
The remote control
なお、このリモコン画像７００はあくまでも１例であり、どのように表示させるかは、各機器が実装している機能により変わる。また、例えば、機器選択の表示を３以上に設定しても良い。また、機器毎のリモコン操作を統合したリモコン画像としてもよい。例えば、ビデオカメラ３０の動画を再生すると同時に、その画像をテレビ１０の記憶部１４に記録するように指示することを可能とする画像などである。
It should be noted that this
図７に戻り、リモコン画像がタッチパネル２３に表示されると、リモコン処理部２２０は、ビデオカメラ３０の動画選択画面の転送指示を行う（ステップＳ２０３）。この転送指示は、スマートフォン２０から、テレビ１０へ送信される。そして、それを受けたテレビ１０の中継部１３０が、当該指示を、中継先のビデオカメラ３０に送信する（ステップＳ１０４）。
Returning to FIG. 7, when the remote control image is displayed on the
転送指示を受信したビデオカメラ３０では、動画選択画面のデータをテレビ１０に転送する（ステップＳ３０２）。なお、動画選択画面は、例えば、ビデオカメラ３０に記憶されている動画像を選択する画面とする。選択する画面とは、例えば、動画像のサムネイル画像が表示されている画像等である。
The
動画選択画面のデータを受信したテレビ１０では、中継部１３０が、当該データに従って、ビデオカメラ３０の動画選択画面を、表示部１３に表示する（ステップＳ１０５）。そして、中継部１３０は、転送指示元のスマートフォン２０に、画面表示が終了したことを意味する画面表示終了通知を行う（ステップＳ１０６）。
In the
画面表示終了通知を受け付けると、スマートフォン２０では、リモコン処理部２２０が、自身をユーザからのリモコン操作の受け付けが可能な状態とする。これにより、ユーザは、テレビ１０の表示部１３に表示される動画選択画面を見ながらビデオカメラ３０への指示を行うことができる。
Upon receiving the screen display end notification, in the
リモコン処理部２２０は、ユーザからの操作による指示（操作指示）を受け付けると、当該操作指示をテレビ１０に送信する（ステップＳ２０４）。ここで受け付ける操作指示は、例えば、選択した動画の再生指示等である。動画の選択は、例えば、テレビ１０に動画選択画面として表示される動画像のサムネイル画像から選択する。
When the remote
スマートフォン２０から操作指示を受信すると、テレビ１０では、中継部１３０が、ビデオカメラ３０に当該操作指示を中継する（ステップＳ１０７）。
Upon receiving the operation instruction from the
指示を受け取ったビデオカメラ３０では、操作指示に従って、データをテレビ１０に転送する（ステップＳ３０３）。例えば、所定の動画の再生指示を受け取った場合、当該動画像データをテレビ１０に転送する。
Upon receiving the instruction, the
テレビ１０の中継部１３０は、転送されたデータを表示部１３に表示する（ステップＳ１０８）とともに、中継処理を終了したことを意味する処理終了通知を、スマートフォン２０に送信する（ステップＳ１０９）。例えば、動画像データを受信した場合、当該動画像の表示を開始する。
The
処理終了通知を受信したスマートフォン２０では、リモコン処理部２２０が、リモコン画像を更新する（ステップＳ２０５）。なお、ステップＳ１０３でテレビ１０から通知された接続指示を受信したスマートフォン２０は、リモコンアプリがインストール済みの場合、リモコンアプリの自動起動を促さず、代わりに、リモコンアプリのアイコンの色を変更することによりテレビ１０からの通知があった旨をユーザに知らせるようにしても良い。ユーザは、リモコンアプリの色が変わったことを確認してリモコンアプリを手動で起動するようにしても良い。
In the
以上説明したように、本実施形態によれば、例えば、ビデオカメラ３０をテレビ１０に接続することをトリガとして、ビデオカメラ３０とテレビ１０とスマートフォン２０との連携を確立する。そして、スマートフォン２０からのリモコン操作により、ビデオカメラ３０とテレビ１０とを連携制御できる。
As described above, according to the present embodiment, for example, by connecting the
このように、本実施形態によれば、特定の外部機器に限らず、多種多様な外部機器（ビデオカメラ）が映像表示装置（テレビ）に接続される可能性がある環境であっても、自動的に装置間の連携を確立することができる。このため、操作性および使い勝手のよい三者連携システムを、ユーザに過度な負担を与えることなく確立できる。 As described above, according to the present embodiment, not only a specific external device but also a wide variety of external devices (video cameras) are automatically connected to the video display device (television). It is possible to establish cooperation between devices. Therefore, a tripartite cooperation system with good operability and usability can be established without imposing an excessive burden on the user.
＜第二の実施形態＞
次に、本発明の第二の実施形態を説明する。第一の実施形態では、映像表示装置、外部機器、遠隔操作端末の三者連携処理を、映像表示装置が、中継装置として機能することにより、実現している。本実施形態では、遠隔操作端末が、主導し、連携を実現する。
<Second embodiment>
Next, a second embodiment of the present invention will be described. In the first embodiment, the three-way cooperation processing of the video display device, the external device, and the remote control terminal is realized by the video display device functioning as a relay device. In this embodiment, the remote control terminal takes the lead and realizes cooperation.
すなわち、第一の実施形態では、テレビ１０が中心に位置してシステム全体を制御する役割を果している。一方、第二の実施形態では、スマートフォン２０がシステム全体を制御する。
That is, in the first embodiment, the
本実施形態の三者連携システムの構成図を、図１２に示す。本図に示すように、本実施形態の三者連携システムは、映像表示装置（テレビ）１０と、遠隔操作端末（スマートフォン）２０と、外部機器（ビデオカメラ）３０と、アクセスポイント４０と、を備える。
The configuration diagram of the tripartite cooperation system of this embodiment is shown in FIG. As shown in this figure, the tripartite cooperation system of the present embodiment includes a video display device (television) 10, a remote control terminal (smartphone) 20, an external device (video camera) 30, and an
本実施形態のテレビ１０、スマートフォン２０、およびビデオカメラ３０の基本的な構成は、第一の実施形態と同様である。また、アクセスポイント４０は、テレビ１０、スマートフォン２０、ビデオカメラ３０等の無線ＬＡＮクライアント機器間を相互に接続し、また、これらの無線ＬＡＮクライアントを、他のネットワークに接続する。
The basic configuration of the
以下、本実施形態について、第一の実施形態と異なる構成に主眼をおいて説明する。以下、第一の実施形態と共通する部分には、特に断らない限り、同一の符号を付し、その詳細な説明は省略する。 Hereinafter, this embodiment will be described with a focus on a configuration different from that of the first embodiment. Hereinafter, unless otherwise specified, the same parts as those in the first embodiment are designated by the same reference numerals, and detailed description thereof will be omitted.
本実施形態では、テレビ１０と、スマートフォン２０と、ビデオカメラ３０とは、例えば、無線ＬＡＮ経由で、アクセスポイント４０を介して接続される。すなわち、これらは、ＨＤＭＩ接続を行わない。従って、テレビ１０およびビデオカメラ３０は、ＨＤＭＩ通信Ｉ／Ｆ１５およびＨＤＭＩ通信Ｉ／Ｆ３５を備えなくてもよい。
In the present embodiment, the
［機能構成］
［ビデオカメラ］
本実施形態のビデオカメラ３０は、図１３（ａ）に示すように、アクセスポイント４０を介して、無線ＬＡＮの同一サブネットワーク内の全ての機器に対し、接続要求を送信する接続要求送信部３１０を備える。本実施形態では、接続要求は、例えば、自身の機器ＩＤを含む。なお、接続要求の送信先の機器は、テレビ１０とスマートフォン２０とに限定してもよい。接続要求は、無線ＬＡＮ通信Ｉ／Ｆ３７を介して送信される。
[Functional configuration]
[Video camera]
As shown in FIG. 13A, the
ビデオカメラ３０が実現する上記機能は、記憶部３４のストレージ領域に格納されるプログラムを、制御部３１のマイクロプロセッサが、プログラム領域に展開し、実行することにより実現される。ビデオカメラ３０が実現する各機能のうち、全部または一部の機能は、ＡＳＩＣ、ＦＰＧＡなどのハードウェアによって実現されてもよい。
The above-mentioned function realized by the
［スマートフォン］
図１３（ｂ）に示すように、本実施形態のスマートフォン２０は、第二連携確立部２１０ａと、リモコン処理部２２０ａとを備える。
[smartphone]
As shown in FIG. 13B, the
第二連携確立部２１０ａは、ビデオカメラ３０から無線ＬＡＮ通信Ｉ／Ｆ２７を介して接続要求を受信すると、ビデオカメラ３０およびテレビ１０それぞれのリモコンアプリを起動する。このため、第二連携確立部２１０ａは、連携テーブル作成部２１１ａと、リモコン決定部２１２と、表示先決定部２１３と、を備える。
When the second cooperation establishment unit 210a receives the connection request from the
連携テーブル作成部２１１ａは、連携させる機器同士のペアリングを行い、連携テーブル８００を作成する。ペアリングは、例えば、近距離無線通信等を用いて行う。例えば、近接させた機器同士で相互に指定されたボタン操作を行う等の公知の手段を用いれば良く、特に制限は無い。また、例えば、スマートフォン２０が、アクセスポイント４０にアクセスし、得られる接続機器のリストから、テレビ１０およびビデオカメラ３０を選択するよう構成してもよい。これにより、機器の種別、および当該機器を識別する機器ＩＤを得ることができる。機器の種別は、映像表示装置、画像記憶装置、等を特定可能な情報であり、機器ＩＤは、例えば、ＩＰアドレスなどである。
The linkage
連携テーブル作成部２１１ａは、ペアリングにより得た、機器のリストに対し、機器ＩＤ（ＩＰアドレス）に基づき、サーバ９０等にアクセスし、当該機器のリモコンアプリの情報（例えば、リモコンアプリ名）を取得する。得られた情報を対応づけ、図１４に示すように、連携テーブル８００を作成する。
The linkage
なお、リモコンアプリの情報を取得する際、スマートフォン２０は、連携可能か否かも判別する。例えば、スマートフォン２０のＯＳ用のリモコンアプリが用意されていない場合もある。このようなリモコンアプリしか用意されていない機器は、連携不可能と判別し、連携テーブル８００に登録しない。
When acquiring the information of the remote control application, the
作成される連携テーブル８００には、機器ＩＤ８１０と、当該機器の種別を特定する情報（種別）８２０と、当該機器のリモコンアプリの情報（リモコンアプリ名）８３０と、リモコンアプリ名８３０で特定されるリモコンアプリがインストールされているか否かを示す情報（インストール）８４０とが対応づけて登録される。なお、図１４には、インストール８４０として、リモコンアプリがインストールされている場合は「１」を、インストールされていない場合は「０」を登録する場合を例示する。本実施形態の連携テーブル８００は、スマートフォン２０の、記憶部２４に登録される。
The created linkage table 800 is specified by the
リモコン決定部２１２は、ビデオカメラ３０からの接続要求を受け取ると、同一サブネットワークに接続される全スマートフォン間で、リモコンとするスマートフォン２０を決定するリモコン決定処理を行う。
Upon receiving the connection request from the
具体的には、接続要求に含まれる機器ＩＤが、自身が保持する連携テーブル８００に登録されているか否かを判別し、いなければ、処理を終了する。一方、登録されている場合、自身をリモコンとなり得る候補スマートフォンとする。そして、同一サブネットワーク内に、同様に候補スマートフォンとされた他のスマートフォンがあるか否かを判別する。 Specifically, it is determined whether or not the device ID included in the connection request is registered in the linkage table 800 held by itself, and if not, the process ends. On the other hand, if it is registered, it is a candidate smartphone that can be a remote controller. Then, it is determined whether or not there is another smartphone that is also a candidate smartphone in the same sub-network.
このとき、他に候補スマートフォンがなければ、自身を、リモコンとして用いるスマートフォン２０と決定する。一方、他に候補スマートフォンがある場合、当該候補スマートフォン間でやり取りを行い、いずれがリモコンとして用いるスマートフォン２０となるかを決定する。ここでは、例えば、分散アービトレーションの手法を用いて決定する。
At this time, if there is no other candidate smartphone, it is determined that the
なお、リモコンとして用いるスマートフォン２０の選択方法は、予めスマートフォン間の優先順位を決め、最も優先順位の高い候補スマートフォンを選択する方法、ビデオカメラ３０に最も近接した候補スマートフォンを選択する方法等が可能である。ビデオカメラ３０とスマートフォン２０との距離は、ビデオカメラ３０の設置場所を特定し、ＧＰＳまたは無線ＬＡＮの電波強度により、スマートフォン２０のアクセスポイント４０からの位置を推定することにより算出する。
As the selection method of the
なお、三者連携処理開始後、リモコンとして選択されたスマートフォン２０との間の通信が切れた場合には、ビデオカメラ３０は、再度、接続要求を行う。このとき、リモコン決定部２１２は、その接続要求を受け、リモコン決定処理を行い、リモコンとして用いるスマートフォン２０を決定することにより、再選択を行う。
If the communication with the
さらに、本実施形態のリモコン決定部２１２は、後述の表示先決定部２１３が映像を表示するテレビ１０を決定すると、連携テーブル８００に、三者連携に用いるビデオカメラ３０、テレビ１０それぞれのリモコンアプリがインストールされているか否かを判別する。判別後、必要に応じてリモコンアプリを取得し、インストールを行う。
Further, when the display
表示先決定部２１３は、自身がリモコンとして用いるスマートフォン２０と決定された場合、同一サブネットワーク内のテレビのうち、ビデオカメラ３０の画像の表示先（表示先装置）とするテレビ１０を決定する。
When the display
同一サブネットワーク内のテレビであって、連携テーブル８００に登録されたテレビ（候補テレビ）が複数ある場合は、その中の１つを表示先装置のテレビ１０として選択する。表示先装置とするテレビ１０の選択は、例えば、予め候補テレビ間の優先順位を決め、最も優先順位の高いテレビを選択する方法、スマートフォン２０に最も近い候補テレビを表示先装置のテレビ１０とする方法、ビデオカメラ３０に最も近い候補テレビを表示先装置のテレビ１０とする方法、或いは複数の候補テレビを一覧表示してユーザに選択させる方法、などにより行う。
When there are a plurality of televisions (candidate televisions) registered in the cooperation table 800 among the televisions in the same subnetwork, one of them is selected as the
なお、スマートフォン２０に最も近い候補テレビを選択する場合、例えば、各候補テレビとスマートフォン２０との間で近距離無線通信を行い、その際の電波強度が最も大きい候補テレビをスマートフォン２０に最も近接している候補テレビとする。ビデオカメラ３０に最も近い候補テレビを選択する場合、例えば、ビデオカメラ３０および各候補テレビについて、図示しないＧＰＳ機能等を用いてビデオカメラ３０および各候補テレビがそれぞれ位置情報を取得し、該取得した各位置情報からビデオカメラ３０と各候補テレビの距離を検出し、最も近接している候補テレビを決定する。
When selecting the candidate TV closest to the
リモコン処理部２２０ａは、自スマートフォン２０と、表示先装置とするテレビ１０と、ビデオカメラ３０との間で、三者連携処理を実行する。本実施形態では、表示先装置とするテレビ１０用のリモコンアプリと、ビデオカメラ３０用のリモコンアプリとを起動し、ユーザの指示に応じて両者をそれぞれ実行する。
The remote
両リモコンアプリが起動され、スマートフォン２０のタッチパネル２３に表示されるリモコン画像は、第一の実施形態の図１１（ａ）および図１１（ｂ）のリモコン画像と同様である。本実施形態では、操作対象機器選択領域７１０を介して、操作対象機器が選択されると、それに応じて、当該機器のリモコンアプリを動作させる。
The remote control images displayed on the
例えば、テレビ１０が選択されると、スマートフォン２０のタッチパネル２３に、テレビ１０用のリモコン画像（例えば、図１１（ａ））７００を表示する。そして、当該画面を介して受け付けた指示を、テレビ１０に向けて送出する。本実施形態では、例えば、テレビ１０のＩＰアドレスを宛先としたコマンドを、アクセスポイント４０に向けて送出する。
For example, when the
また、ビデオカメラ３０が選択されると、スマートフォン２０のタッチパネル２３に、ビデオカメラ３０用のリモコン画像（例えば、図１１（ｂ））を表示する。そして、当該リモコン画像を介して受け付けた指示を、ビデオカメラ３０に向けて送出する。本実施形態では、例えば、ビデオカメラ３０のＩＰアドレスを宛先としたコマンドを、アクセスポイント４０に向けて送出する。
When the
スマートフォン２０が実現する各機能は、記憶部２４のストレージ領域に格納されるプログラムを、制御部２１のマイクロプロセッサが、プログラム領域に展開し、実行することにより実現される。また、連携テーブル８００は、ストレージ領域に格納される。スマートフォン２０が実現する各機能のうち、全部または一部の機能は、ＡＳＩＣ、ＦＰＧＡなどのハードウェアによって実現されてもよい。
Each function realized by the
［テレビ］
本実施形態のテレビ１０は、三者連携のための中継を行わない。従って、図１３（ｃ）に示すように、第一連携確立部１２０および中継テーブル５００は、備えなくてもよい。また、中継部１３０の代わりに、中継部１３０ａを備える。
[TV set]
The
本実施形態の中継部１３０ａは、スマートフォン２０からデータの送信元を特定する機器ＩＤと、当該データに対する操作指示とを受信する。また、受信した機器ＩＤを有するビデオカメラ３０からデータを受信すると、受信した操作指示に従って当該データを処理する。受信する操作指示は、例えば、当該データを表示部１３に表示する、記憶部１４に格納するなどである。また、処理を終えると、スマートフォン２０にその旨を通知する。なお、機器ＩＤ、操作指示、データは、無線ＬＡＮ通信Ｉ／Ｆ１７を介して受信する。
The
［三者連携処理の流れ］
以上の機能を有するテレビ１０、スマートフォン２０およびビデオカメラ３０による、本実施形態の三者連携処理の流れを説明する。図１５は、本実施形態の三者連携処理の流れを説明するためのフローチャートである。なお、連携テーブル８００は、予め作成されているものとする。
[Flow of tripartite cooperation processing]
The flow of the tripartite cooperation processing of the present embodiment by the
ここでも、第一の実施形態同様、ビデオカメラ３０の記憶部３４に記録された動画像の中から、スマートフォン２０からの操作により所望の動画像を選択してテレビ１０の表示部１３に表示する場合を例にあげて説明する。なお、これ以外のリモコン操作、例えば、ビデオカメラ３０が保持する動画像または静止画をテレビ１０の記憶部１４に記憶する操作等、通常のビデオカメラ３０およびテレビ１０が有するリモコン操作であれば特にこの例に限定されない。
Here, as in the first embodiment, a desired moving image is selected from the moving images recorded in the
まず、ビデオカメラ３０の接続要求送信部３１０が、アクセスポイント４０を介して、接続要求を送信する（ステップＳ３２１）。接続要求は、同一サブネットワーク内の全スマートフォンに送信される。
First, the connection
同一サブネットワーク内の全スマートフォンのリモコン決定部２１２は、それぞれ、ビデオカメラ３０からの接続要求を受信すると、リモコン決定処理を行い、この三者連携処理において、リモコンとなるスマートフォン２０を決定する（ステップＳ２２１）。決定は、上述の手法にて行う。
Upon receiving the connection request from the
その後、ステップＳ２２１で決定したスマートフォン２０の表示先決定部２１３は、同一サブネットワーク内の全テレビの中から、表示先装置とするテレビ１０を決定する（ステップＳ２２２）。
After that, the display
そして、リモコン決定部２１２は、リモコンアプリを取得する（ステップＳ２２３）。リモコンアプリの取得処理の流れは、第一の実施形態の図１０で説明したリモコンアプリ取得処理と略同様である。ただし、本実施形態では、テレビ１０およびビデオカメラ３０それぞれについて本処理を実行する。
Then, the remote
すなわち、通知されたビデオカメラ３０の機器ＩＤおよび決定したテレビ１０の機器ＩＤを用い、連携テーブル８００を検索し、それぞれの機器ＩＤに対応づけてリモコンアプリがインストールされているか否かを判別する。そして、インストールされている場合、そのアプリのバージョンが最新版であるか否かを判別する。そして、リモコンアプリがインストールされていない場合、あるいは、インストールされていても最新版でない場合、対応サーバから最新版のリモコンアプリをダウンロードし、それをインストールする。
That is, using the notified device ID of the
リモコンアプリ取得処理を終えると、スマートフォン２０のリモコン処理部２２０ａは、各リモコンアプリを起動し、スマートフォン２０のタッチパネル２３に、リモコン画像を表示する（ステップＳ２２４）。
When the remote control application acquisition process is completed, the remote
その後、リモコン処理部２２０ａは、ビデオカメラ３０の動画選択画面の転送指示を行う（ステップＳ２２５）。この転送指示は、スマートフォン２０から、アクセスポイント４０を介して、テレビ１０およびビデオカメラ３０へ送信される。なお、転送指示は、テレビ１０、スマートフォン２０およびビデオカメラ３０それぞれの識別情報（例えば、ＩＰアドレス）を含む。
After that, the remote
そして、それを受けたビデオカメラ３０は、動画選択画面のデータを表示先装置であるテレビ１０に転送する（ステップＳ３２２）。なお、動画選択画面は、第一の実施形態同様、例えば、ビデオカメラ３０に記憶されている動画像を選択する画面とする。選択する画面とは、例えば、動画像のサムネイル画像が表示されている画像等である。
Then, the
動画選択画面のデータを受信したテレビ１０の中継部１３０ａは、当該データに従って、ビデオカメラ３０の動画選択画面を、表示部１３に表示する（ステップＳ１２１）。そして、送信元のスマートフォン２０に、画面表示が終了したことを意味する画面表示終了通知を行う（ステップＳ１２２）。
The
画面表示終了通知を受け付けると、スマートフォン２０のリモコン処理部２２０ａは、ユーザからのリモコン操作の受け付けが可能な状態とする。これにより、ユーザは、テレビ１０の表示部１３に表示される動画選択画面を見ながらビデオカメラ３０への指示を行うことができる。
Upon receiving the screen display end notification, the remote
リモコン処理部２２０ａは、ユーザからの操作指示を受け付けると、当該指示をテレビ１０およびビデオカメラ３０に送信する（ステップＳ２２６）。ここで受け付ける操作指示は、例えば、選択した動画の再生指示等である。動画の選択は、例えば、テレビ１０に動画選択画面として表示される動画像のサムネイル画像から選択する。
When the remote
指示を受け取ったビデオカメラ３０では、操作指示に従って、データをテレビ１０に転送する（ステップＳ３２３）。例えば、所定の動画の再生指示を受け取った場合、当該動画像データをテレビ１０に転送する。
Upon receiving the instruction, the
テレビ１０の中継部１３０ａは、転送されたデータを表示部１３に表示する（ステップＳ１２３）とともに、表示処理を終了したことを意味する処理終了通知を、スマートフォン２０に送信する（ステップＳ１２４）。例えば、動画像データを受信した場合、当該動画像の表示を開始する。
The
処理終了通知を受信したスマートフォン２０のリモコン処理部２２０ａは、リモコン画像を更新する（ステップＳ２２７）。
The remote
以上説明したように、本実施形態によれば、アクセスポイント４０を介して、ビデオカメラ３０が接続要求を行うことにより、自動的に表示先のテレビ１０およびリモコンとして用いるスマートフォン２０を決定し、それらの間で、三者連携処理が実行される。すなわち、ユーザは、スマートフォン２０の操作により、ビデオカメラ３０とテレビ１０との操作を行うことができ、ビデオカメラ３０に保持される映像データを、テレビ１０に表示させることができる。
As described above, according to the present embodiment, when the
このように、本実施形態によれば、第一の実施形態同様、操作性の良い、三者連携システムを、少ない負担で実現することができる。 As described above, according to the present embodiment, it is possible to realize a tripartite cooperation system having good operability as in the first embodiment with a small burden.
なお、上記第二の実施形態では、ビデオカメラ３０が、アクセスポイント４０を介して、同一サブネットワーク内のスマートフォン２０に接続要求を送信することをトリガとして、三者連携処理を開始するよう構成しているが、これに限定されない。
In the second embodiment, the
例えば、ビデオカメラ３０が充電ドックに設置されたことをトリガとして、三者連携処理を開始するよう構成してもよい。充電ドックは、例えば、無接点充電または電源コンセントからの充電が可能であり、設置されるビデオカメラ３０のサポート状況により、無接点充電または電源コンセントからの充電が選択される。さらに、充電ドックは近距離通信（ＮＦＣ、ＩＲ通信、Ｂｌｕｅｔｏｏｔｈ等）により、充電ドック機器ＩＤをビデオカメラ３０に通知可能に構成される。
For example, the tripartite cooperation process may be started by using the
この場合、ビデオカメラ３０が充電ドックの上に設置されると、例えば、無接点充電が開始され、かつ、ビデオカメラ３０は、ＮＦＣ通信により充電ドックのＩＤを受信する。そして、ビデオカメラ３０は、無線ＬＡＮの同一サブネットワーク内の全ての機器に、自身の機器ＩＤと充電ドックの機器ＩＤとを、トリガとして送信する。
In this case, when the
これにより、ビデオカメラ３０を充電ドックに設置するだけで、三者連携処理が実行される。すなわち、ユーザは、ビデオカメラ３０を充電ドックに設置するだけで、所定のスマートフォン２０により、ビデオカメラ３０とテレビ１０とを制御できる。
As a result, the tripartite cooperation process is executed only by installing the
また、第二の実施形態では、連携テーブル８００に、機器毎に、その種別およびリモコンアプリを登録しているが、これに限定されない。例えば、テレビとビデオカメラの組み合わせ毎のリモコンアプリが得られる場合、第一の実施形態と同様の構成を有する連携テーブルとしてもよい。 Further, in the second embodiment, the type and the remote control application are registered for each device in the cooperation table 800, but the present invention is not limited to this. For example, when a remote control application for each combination of a television and a video camera can be obtained, a linkage table having the same configuration as that of the first embodiment may be used.
すなわち、連携テーブル作成部２１１ａは、サーバ９０にアクセスし、候補テレビ毎に、当該候補テレビと連携操作可能なリモコンアプリを有するビデオカメラを抽出する。そして、得られたビデオカメラを、候補ビデオカメラとしてそのリモコンアプリの情報とともに登録する。
That is, the cooperation
この場合、リモコン処理部２２０ａは、第一の実施形態同様、ビデオカメラ３０と決定したテレビ１０とに対応づけて連携テーブルに保持されるリモコンアプリを展開し、リモコン処理を実行する。
In this case, the remote
また、上記各実施形態では、リモコンアプリがスマートフォン２０に無い場合、自動的にサーバからインターネットを介してダウンロードしてインストールしている。しかしながら、この手法に限定されない。例えば、スマートフォン２０のタッチパネル２３にリモコンアプリのダウンロード促すプロンプト表示を行い、ダウンロードおよびインストールは、ユーザの指示を受け付けてから行うよう構成してもよい。また、第一の実施形態のテレビ１０の中継アプリのダウンロードおよびインストールに関しても同様である。
Further, in each of the above embodiments, when the remote control application is not provided on the
以上、本発明の実施形態の例を説明した。言うまでもなく、本発明の技術を実現する構成は前記実施形態に限られるものではなく、様々な変形例が考えられる。また、文中や図中に現れる数値等もあくまでも一例であり、異なるものを用いても本発明の効果を損なうことはない。 The example of the embodiment of the present invention has been described above. Needless to say, the configuration for realizing the technique of the present invention is not limited to the above-described embodiment, and various modifications can be considered. In addition, the numerical values appearing in the text and figures are merely examples, and even if different values are used, the effect of the present invention is not impaired.
前述した本発明の機能等は、それらの一部または全部を、例えば集積回路で設計する等によりハードウェアで実現しても良い。また、マイクロプロセッサユニット等がそれぞれの機能等を実現するプログラムを解釈して実行することによりソフトウェアで実現しても良い。ハードウェアとソフトウェアを併用しても良い。 The above-mentioned functions and the like of the present invention may be realized by hardware, for example, by designing a part or all of them by an integrated circuit. Further, it may be realized by software by interpreting and executing a program in which a microprocessor unit or the like realizes each function or the like. Hardware and software may be used together.
また、図中に示した制御線や情報線は説明上必要と考えられるものを示しており、必ずしも製品上の全ての制御線や情報線を示しているとは限らない。 In addition, the control lines and information lines shown in the figure show what is considered necessary for explanation, and do not necessarily show all the control lines and information lines on the product.
１０：映像表示装置（テレビ）、１１：制御部、１２：ＴＶチューナ、１３：表示部、１４：記憶部、１５：ＨＤＭＩ通信Ｉ／Ｆ、１６：有線ＬＡＮ通信Ｉ／Ｆ、１７：無線ＬＡＮ通信Ｉ／Ｆ、１８：近距離通信Ｉ／Ｆ、
２０：遠隔操作端末（スマートフォン）、２１：制御部、２２：携帯網通信Ｉ／Ｆ、２３：タッチパネル、２４：記憶部、２７：無線ＬＡＮ通信Ｉ／Ｆ、２８：近距離通信Ｉ／Ｆ、
３０：外部機器（ビデオカメラ）、３１：制御部、３２：映像入力処理部、３３：表示部、３４：記憶部、３５：ＨＤＭＩ通信Ｉ／Ｆ、３７：無線ＬＡＮ通信Ｉ／Ｆ、３８：近距離通信Ｉ／Ｆ、
４０：アクセスポイント、９０：サーバ、
１２０：第一連携確立部、１２１：ペアリング部、１２２：リモコン決定部、１３０：中継部、１３０ａ：中継部、１４０：接続検知部、
２１０：第二連携確立部、２１０ａ：第二連携確立部、２１１：連携テーブル作成部、２１１ａ：連携テーブル作成部、２１２：リモコン決定部、２１３：表示先決定部、２２０：リモコン処理部、２２０ａ：リモコン処理部、
３１０：接続要求送信部、
５００：中継テーブル、５１０：候補スマートフォンの機器ＩＤ、５２０：候補ビデオカメラ、５２１：候補ビデオカメラの機器ＩＤ、５２２：中継アプリ名、５２３：インストールの有無、
６００：連携テーブル、６１０：候補テレビの機器ＩＤ、６２０：候補ビデオカメラの機器ＩＤ、６３０：リモコンアプリ名、６４０：インストールの有無、
７００：リモコン画像、７１０：操作対象機器選択領域、７２０：リモコン操作受付領域、
８００：連携テーブル、８１０：機器ＩＤ、８２０：種別、８３０：リモコンアプリ名、８４０：インストールの有無
10: Video display device (television), 11: Control unit, 12: TV tuner, 13: Display unit, 14: Storage unit, 15: HDMI communication I / F, 16: Wired LAN communication I / F, 17: Wireless LAN Communication I / F, 18: Short-range communication I / F,
20: Remote control terminal (smartphone), 21: Control unit, 22: Mobile network communication I / F, 23: Touch panel, 24: Storage unit, 27: Wireless LAN communication I / F, 28: Short-range communication I / F,
30: External device (video camera), 31: Control unit, 32: Video input processing unit, 33: Display unit, 34: Storage unit, 35: HDMI communication I / F, 37: Wireless LAN communication I / F, 38: Short-range communication I / F,
40: Access point, 90: Server,
120: First cooperation establishment unit, 121: Pairing unit, 122: Remote control determination unit, 130: Relay unit, 130a: Relay unit, 140: Connection detection unit,
210: Second cooperation establishment unit, 210a: Second cooperation establishment unit, 211: Cooperation table creation unit, 211a: Cooperation table creation unit, 212: Remote control determination unit, 213: Display destination determination unit, 220: Remote control processing unit, 220a : Remote control processing unit,
310: Connection request transmitter,
500: Relay table, 510: Candidate smartphone device ID, 520: Candidate video camera, 521: Candidate video camera device ID, 522: Relay application name, 523: With or without installation,
600: Linkage table, 610: Candidate TV device ID, 620: Candidate video camera device ID, 630: Remote control application name, 640: With or without installation,
700: Remote control image, 710: Operation target device selection area, 720: Remote control operation reception area,
800: Linkage table, 810: Device ID, 820: Type, 830: Remote control application name, 840: Presence / absence of installation
上記課題を解決するため、本発明は、映像表示装置であって、外部機器を接続し、当該外部機器と通信するインタフェース部と、前記外部機器を遠隔操作する遠隔操作端末とネットワークを介して通信する通信部と、映像を表示する表示部と、前記インタフェース部と前記通信部と前記表示部とを制御する制御部と、を備え、前記制御部は、前記インタフェース部に接続された前記外部機器から当該外部機器の機器情報を受信すると、前記遠隔操作端末を、予め作成された前記外部機器と当該外部機器を遠隔操作する可能性のある遠隔操作端末とを対応付けた中継テーブルを参照して決定するように制御するとともに、決定した前記遠隔操作端末に対して、前記外部機器を遠隔操作するためのアプリケーションソフトウェアを前記遠隔操作端末に起動させるための通信を前記通信部と前記遠隔操作端末との間で行うように制御することを特徴とする。 To solve the above problems, the present invention provides a Film image display device, connect the external device, and an interface unit for communicating with the external device via the remote control terminal and a network for remotely operating the external device A communication unit for communication, a display unit for displaying an image, and a control unit for controlling the interface unit, the communication unit, and the display unit are provided, and the control unit is connected to the interface unit. When the device information of the external device is received from the device, the remote control terminal refers to the relay table in which the external device created in advance and the remote control terminal that may remotely control the external device are associated with each other. The communication unit and the remote operation terminal communicate with the determined remote operation terminal to activate the application software for remotely operating the external device on the remote operation terminal. It is characterized in that it is controlled so as to be performed between and.
Claims (14)
前記外部機器が当該映像表示装置に接続されたことを検知する接続検知部と、
前記接続検知部において前記外部機器が接続されたことを検知すると、当該外部機器に対する操作指示を受け付けるアプリケーションソフトウェアを前記遠隔操作端末に起動させるための起動信号を生成する連携確立部と、
前記起動信号を前記遠隔操作端末に送信する通信インタフェースと、を備えること
を特徴とする映像表示装置。 A video display device that can connect an external device and a remote control terminal that remotely controls the external device.
A connection detection unit that detects that the external device is connected to the video display device, and
When the connection detection unit detects that the external device is connected, the cooperation establishment unit generates an activation signal for activating the application software that accepts an operation instruction for the external device to the remote control terminal.
A video display device including a communication interface for transmitting the activation signal to the remote control terminal.
表示部をさらに備え、
前記操作指示は、前記外部機器が保持する映像データを前記表示部に表示させる指示であること
を特徴とする映像表示装置。 The video display device according to claim 1.
With more display
The operation instruction is an instruction to display the image data held by the external device on the display unit.
前記連携確立部は、予め作成された中継テーブルを参照し、前記検知された外部機器に対応づけて登録される遠隔操作端末の候補の中から、前記遠隔操作端末を選択するリモコン決定部を備え、
前記中継テーブルは、各遠隔操作端末の候補からの要求に応じて作成され、当該遠隔操作端末の候補で操作可能な外部機器であって、当該映像表示装置に接続する可能性のある外部機器の候補が、要求元の当該遠隔操作端末の候補に対応づけて登録されるテーブルであること
を特徴とする映像表示装置。 The video display device according to claim 1.
The cooperation establishment unit includes a remote control determination unit that refers to a relay table created in advance and selects the remote control terminal from the candidates for the remote control terminal registered in association with the detected external device. ,
The relay table is created in response to a request from a candidate for each remote control terminal, and is an external device that can be operated by the candidate for the remote control terminal and is an external device that may be connected to the video display device. A video display device characterized in that the candidate is a table registered in association with the candidate of the remote control terminal of the request source.
前記連携確立部は、前記中継テーブルを作成するペアリング部をさらに備えること
を特徴とする映像表示装置。 The video display device according to claim 3.
The cooperation establishment unit is a video display device further comprising a pairing unit for creating the relay table.
中継部をさらに備え、
前記通信インタフェースは、前記遠隔操作端末から前記操作指示をさらに受信し、
前記中継部は、前記通信インタフェースを介して受信した当該操作指示を前記外部機器に中継すること
を特徴とする映像表示装置。 The video display device according to claim 1.
With more relays
The communication interface further receives the operation instruction from the remote control terminal and receives the operation instruction.
The relay unit is a video display device characterized by relaying the operation instruction received via the communication interface to the external device.
前記外部機器は有線接続されること
を特徴とする映像表示装置。 The video display device according to claim 1.
The external device is a video display device characterized by being connected by wire.
通信インタフェースと、
前記通信インタフェースを介して、前記外部機器から接続要求を受信すると、当該外部機器に対する操作指示を受け付けるアプリケーションを起動する連携確立部と、を備えること
を特徴とする遠隔操作端末。 A remote control terminal that remotely controls an external device and a video display device.
Communication interface and
A remote control terminal including a cooperation establishment unit that activates an application that receives an operation instruction for the external device when a connection request is received from the external device via the communication interface.
通信インタフェースと、
前記外部機器から前記通信インタフェースを介して受信した映像データに対し、前記遠隔操作端末から前記通信インタフェースを介して受信した操作指示に従って処理を行う中継部と、を備えること
を特徴とする映像表示装置。 A video display device that displays video data held by an external device according to instructions from a remote control terminal.
Communication interface and
A video display device including a relay unit that processes video data received from the external device via the communication interface according to an operation instruction received from the remote control terminal via the communication interface. ..
通信インタフェースと、
前記通信インタフェースから、同一のサブネットマスクに接続される装置であって、前記遠隔操作端末および前記映像表示装置を含む装置に対し、接続を要求する接続要求を送信する接続要求送信部と、を備えること
を特徴とする外部機器。 It is an external device that displays the video data it holds on an external video display device according to instructions from an external remote control terminal.
Communication interface and
A device connected to the same subnet mask from the communication interface, including a connection request transmission unit for transmitting a connection request requesting connection to the device including the remote control terminal and the video display device. An external device that features that.
前記外部機器は、無線接続されること
を特徴とする映像表示装置。 The video display device according to claim 8.
The external device is a video display device characterized by being wirelessly connected.
前記外部機器が接続されたことを検知し、
前記外部機器に対する操作指示を受け付けるアプリケーションソフトウェアを起動させるための起動信号を生成し、
前記起動信号を前記遠隔操作端末に送信し、
前記遠隔操作端末が前記アプリケーションソフトウェアを介して受け付けた前記操作指示を、前記外部機器に送信すること
を特徴とする映像表示装置における連携制御方法。 It is a cooperative control method in a video display device that can connect an external device and a remote control terminal that remotely controls the external device.
Detects that the external device is connected and
Generates a start signal to start the application software that accepts operation instructions for the external device.
The activation signal is transmitted to the remote control terminal, and the activation signal is transmitted to the remote control terminal.
A cooperative control method in a video display device, characterized in that the remote control terminal transmits the operation instruction received via the application software to the external device.
前記外部機器からの接続要求を受信し、
前記外部機器に対する操作指示を受け付けるアプリケーションソフトウェアを起動し、
前記アプリケーションソフトウェアを介して前記操作指示を受け付けると、前記映像表示装置を特定する情報とともに当該操作指示を実行するよう前記外部機器に送信するとともに、前記外部機器から当該外部機器が保持する映像データを受信するよう前記映像表示装置に指示を行うこと
を特徴とする遠隔操作端末における連携制御方法。 It is a cooperation control method in a remote control terminal that remotely controls an external device and a video display device.
Upon receiving the connection request from the external device,
Start the application software that accepts the operation instructions for the external device,
When the operation instruction is received via the application software, it is transmitted to the external device to execute the operation instruction together with the information specifying the video display device, and the video data held by the external device is transmitted from the external device. A cooperative control method in a remote control terminal, which comprises instructing the video display device to receive data.
前記映像表示装置は、前記外部機器が接続されたことを検知し、前記外部機器に対する操作指示を受け付けるアプリケーションソフトウェアを起動させるコマンドを前記遠隔操作端末に送信し、
前記遠隔操作端末は、前記コマンドを受信すると、前記アプリケーションソフトウェアの操作画面を当該遠隔操作端末の表示部に表示し、
前記遠隔操作端末は、前記操作画面を介して受け付けた前記操作指示を前記映像表示装置に送信し、
前記映像表示装置は、前記遠隔操作端末からの前記操作指示を前記外部機器に送信し、
前記外部機器は、前記操作指示に応じて自身が保持する映像データを、前記映像表示装置に送信すること
を特徴とする連携制御方法。 It is a cooperation control method in a device cooperation system including an external device, a video display device, and a remote control terminal that accepts operations from a user.
The video display device detects that the external device is connected, and sends a command to activate the application software that accepts an operation instruction to the external device to the remote control terminal.
Upon receiving the command, the remote control terminal displays the operation screen of the application software on the display unit of the remote control terminal.
The remote control terminal transmits the operation instruction received via the operation screen to the video display device, and the remote control terminal transmits the operation instruction to the video display device.
The video display device transmits the operation instruction from the remote control terminal to the external device.
The external device is a cooperative control method characterized in that the video data held by the external device in response to the operation instruction is transmitted to the video display device.
前記遠隔操作端末は、前記外部機器が前記映像表示装置に接続されると、当該外部機器に対する操作指示を受け付けるアプリケーションソフトウェアを起動して当該アプリケーションソフトウェアの操作画面を当該遠隔操作端末の表示部に表示し、
前記遠隔操作端末は、前記操作画面を介して受け付けた前記操作指示を前記外部機器および前記映像表示装置に送信し、
前記外部機器は、前記操作指示を前記遠隔操作端末から受信すると、当該操作指示に従って、自身が保持する映像データを前記映像表示装置に送信し、
前記映像表示装置は、前記外部機器から受信した前記映像データに対し、前記遠隔操作端末から受信した操作指示に従って処理を行うこと
を特徴とする連携制御方法。
It is a cooperation control method in a device cooperation system including an external device, a video display device, and a remote control terminal that accepts operations from a user.
When the external device is connected to the video display device, the remote control terminal activates application software that receives operation instructions for the external device and displays the operation screen of the application software on the display unit of the remote control terminal. death,
The remote control terminal transmits the operation instruction received via the operation screen to the external device and the video display device.
When the external device receives the operation instruction from the remote control terminal, the external device transmits the video data held by itself to the video display device in accordance with the operation instruction.
The video display device is a cooperative control method characterized in that the video data received from the external device is processed according to an operation instruction received from the remote control terminal.
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021142052A JP7119190B2 (en) | 2020-07-27 | 2021-09-01 | Video display device |
| JP2022123963A JP7350947B2 (en) | 2020-07-27 | 2022-08-03 | Video display device |
| JP2023148448A JP7592810B2 (en) | 2020-07-27 | 2023-09-13 | Video display device |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020126355A JP6938732B2 (en) | 2016-09-15 | 2020-07-27 | Video display device |
| JP2021142052A JP7119190B2 (en) | 2020-07-27 | 2021-09-01 | Video display device |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020126355A Division JP6938732B2 (en) | 2016-09-15 | 2020-07-27 | Video display device |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022123963A Division JP7350947B2 (en) | 2020-07-27 | 2022-08-03 | Video display device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2021184652A true JP2021184652A (en) | 2021-12-02 |
| JP7119190B2 JP7119190B2 (en) | 2022-08-16 |
Family
ID=73024850
Family Applications (4)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020126355A Active JP6938732B2 (en) | 2016-09-15 | 2020-07-27 | Video display device |
| JP2021142052A Active JP7119190B2 (en) | 2020-07-27 | 2021-09-01 | Video display device |
| JP2022123963A Active JP7350947B2 (en) | 2020-07-27 | 2022-08-03 | Video display device |
| JP2023148448A Active JP7592810B2 (en) | 2020-07-27 | 2023-09-13 | Video display device |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020126355A Active JP6938732B2 (en) | 2016-09-15 | 2020-07-27 | Video display device |
Family Applications After (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022123963A Active JP7350947B2 (en) | 2020-07-27 | 2022-08-03 | Video display device |
| JP2023148448A Active JP7592810B2 (en) | 2020-07-27 | 2023-09-13 | Video display device |
Country Status (1)
| Country | Link |
|---|---|
| JP (4) | JP6938732B2 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024063306A1 (en) * | 2022-09-21 | 2024-03-28 | 삼성전자주식회사 | Electronic device and method for controlling electronic device |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024080389A1 (en) * | 2022-10-11 | 2024-04-18 | 엘지전자 주식회사 | Display device and display system |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004356831A (en) * | 2003-05-28 | 2004-12-16 | Matsushita Electric Ind Co Ltd | Data transmitting/receiving system |
| JP2014017735A (en) * | 2012-07-10 | 2014-01-30 | Toshiba Corp | Information processing terminal and information processing method |
| JP2014235534A (en) * | 2013-05-31 | 2014-12-15 | 株式会社東芝 | Information processing apparatus and display control method |
| JP2015162790A (en) * | 2014-02-27 | 2015-09-07 | オンキヨー株式会社 | Controller, controller program, and network apparatus |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4971005B2 (en) | 2007-03-29 | 2012-07-11 | パイオニア株式会社 | Connection information recognition system for external device connected to electronic device and its recognition method |
| JP4469901B2 (en) | 2008-02-29 | 2010-06-02 | 株式会社東芝 | Electronic device and display control method |
| JP2009246487A (en) | 2008-03-28 | 2009-10-22 | Sharp Corp | Remote operation device, device to be operated, control method for remote operation device, control method for device to be operated, and remote operation system |
| EP2611198A3 (en) | 2011-12-30 | 2013-08-21 | Samsung Electronics Co., Ltd. | Display apparatus, input apparatus and method for controlling the display apparatus to provide a single-view or multi-view mode |
| JP5306489B2 (en) * | 2012-01-06 | 2013-10-02 | 株式会社東芝 | Terminal, program and device operation control method |
-
2020
- 2020-07-27 JP JP2020126355A patent/JP6938732B2/en active Active
-
2021
- 2021-09-01 JP JP2021142052A patent/JP7119190B2/en active Active
-
2022
- 2022-08-03 JP JP2022123963A patent/JP7350947B2/en active Active
-
2023
- 2023-09-13 JP JP2023148448A patent/JP7592810B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004356831A (en) * | 2003-05-28 | 2004-12-16 | Matsushita Electric Ind Co Ltd | Data transmitting/receiving system |
| JP2014017735A (en) * | 2012-07-10 | 2014-01-30 | Toshiba Corp | Information processing terminal and information processing method |
| JP2014235534A (en) * | 2013-05-31 | 2014-12-15 | 株式会社東芝 | Information processing apparatus and display control method |
| JP2015162790A (en) * | 2014-02-27 | 2015-09-07 | オンキヨー株式会社 | Controller, controller program, and network apparatus |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024063306A1 (en) * | 2022-09-21 | 2024-03-28 | 삼성전자주식회사 | Electronic device and method for controlling electronic device |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7592810B2 (en) | 2024-12-02 |
| JP7350947B2 (en) | 2023-09-26 |
| JP7119190B2 (en) | 2022-08-16 |
| JP2020182241A (en) | 2020-11-05 |
| JP2022140715A (en) | 2022-09-27 |
| JP6938732B2 (en) | 2021-09-22 |
| JP2023160984A (en) | 2023-11-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7592810B2 (en) | Video display device | |
| CN104270668B (en) | A kind of video content continuous playing method and system | |
| US12170804B2 (en) | Video display device and cooperative control method in video display device | |
| US8395706B2 (en) | Information processing system, display device, output device, information processing device, identification information acquisition method and identification information supply method | |
| US8854666B2 (en) | Mobile device, image forming apparatus, notification server and control methods thereof | |
| US9038122B2 (en) | Device and method to limit operations from an AV device or external terminal | |
| JP2009130876A (en) | Terminal linkage continuous viewing system, terminal, server, method | |
| JP2009065305A (en) | Terminal linkage continuous viewing system, terminal, server, method | |
| JP3972907B2 (en) | Bidirectional communication system, monitoring device | |
| CN113691790A (en) | Multimedia data processing method and device, electronic equipment and storage medium | |
| KR20120038116A (en) | Electronic device, control device, and control method thereof | |
| KR20160066148A (en) | Display device | |
| JP2014017642A (en) | Image communication apparatus and image communication system using the same | |
| US8913727B2 (en) | Presence transmission method, video display device, and video display system | |
| JP2013247539A (en) | Display device, display method, and display device control program | |
| JP2019102982A (en) | Information processing apparatus, control method for the same, and program | |
| JP2022109718A (en) | Video display device, video output device, and method for controlling video output device | |
| WO2015037129A1 (en) | Electronic device and connection method for electronic device | |
| JP6068744B2 (en) | Set-top box, display system, control method, program, and recording medium | |
| WO2014207931A1 (en) | Communication system and method | |
| JP2004357188A (en) | Control system, control apparatus, data output device, control method, recording medium and program | |
| JP2013157935A (en) | Television receiver, external device connected to television receiver, and television reception system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210901 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210901 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20211020 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220627 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220705 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220803 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7119190 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |