JP2019128707A - Display input device - Google Patents
Display input device Download PDFInfo
- Publication number
- JP2019128707A JP2019128707A JP2018008832A JP2018008832A JP2019128707A JP 2019128707 A JP2019128707 A JP 2019128707A JP 2018008832 A JP2018008832 A JP 2018008832A JP 2018008832 A JP2018008832 A JP 2018008832A JP 2019128707 A JP2019128707 A JP 2019128707A
- Authority
- JP
- Japan
- Prior art keywords
- display
- unit
- detection
- operation surface
- control unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 claims abstract description 89
- 238000000034 method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000005484 gravity Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 1
- 239000010408 film Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000036544 posture Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
Description
本発明は、表示入力装置に関する。 The present invention relates to a display input device.
従来、車載用電子機器において誤操作や誤動作を防止し、操作性の高いタッチパネル装置を提供する表示入力装置が開示されている(例えば、特許文献1参照)。 2. Description of the Related Art Conventionally, there has been disclosed a display input device that provides a touch panel device with high operability by preventing erroneous operations and malfunctions in in-vehicle electronic devices (see, for example, Patent Document 1).
この表示入力装置は、各々が表示マークによって表示された複数のタッチ領域が隣接配置されたタッチパネルと、前記タッチ領域の各々に付与される押圧力を個別に検知して検知信号を生成する検知手段と、前記検知信号に応じて入力指令を生成する指令生成手段と、前記表示マークの少なくとも1つの表示範囲とこれに対応するタッチ領域の1つの存在範囲との位置関係及び大小関係の少なくとも一方を条件設定に応じて調整する調整手段と、を含んで構成されている。 This display input device detects separately the touch force given to each of the touch area in which a plurality of touch areas each displayed by a display mark are adjacently arranged, and the detection means which generates a detection signal Command generation means for generating an input command in response to the detection signal, and at least one of a positional relationship and a size relationship between at least one display range of the display mark and one existing range of the touch area corresponding thereto. Adjusting means for adjusting according to the condition setting.
しかし、従来技術は、検知手段によりタッチ領域を検知し、これに基づいて、表示マークの位置関係、大小関係を条件設定に応じて調整するので、タッチ前の操作には対応できないという問題がある。特に、車両にこの表示入力装置を搭載する場合には、車両振動により確実なタッチ操作が難しいという問題があった。 However, the conventional technique detects the touch area by the detection means, and based on this, the positional relationship and the size relationship of the display marks are adjusted according to the condition setting, so that there is a problem that the operation before the touch cannot be handled. . In particular, when this display input device is mounted on a vehicle, there is a problem that a reliable touch operation is difficult due to vehicle vibration.
したがって、本発明の目的は、確実なタッチ操作を可能とする表示入力装置を提供することにある。 Accordingly, an object of the present invention is to provide a display input device that enables a reliable touch operation.
[1]上記目的を達成するため、操作面に対する検出対象物の操作状態を検出する第1検出部と、前記操作面に表示画像を表示する表示部とを備えたタッチパネルと、前記操作面に対する操作動作を検出する第2検出部と、前記第1検出部、及び前記表示部の動作を制御すると共に、前記第2検出部により検出された検出情報に基づいて、前記検出対象物が操作しようとする前記操作面上の領域を推定する推定部を備えた制御部と、を有し、前記制御部は、前記推定部の推定結果に基づいて、前記領域における前記表示画像を拡大表示する、表示入力装置を提供する。
[2]前記制御部は、前記操作面と前記検出対象物との距離に応じて前記拡大表示の拡大率を変化させる、上記[1]に記載の表示入力装置であってもよい。
[3]また、前記拡大率は、前記操作面と前記検出対象物との距離が小さいほど大きく設定される、上記[2]に記載の表示入力装置であってもよい。
[4]また、前記第1検出部は、静電容量式のタッチセンサであり、前記第2検出部は、カメラ装置である、上記[1]から[3]のいずれか1に記載の表示入力装置であってもよい。
[5]また、前記第1検出部、及び前記第2検出部は、静電容量式のタッチセンサである、上記[1]から[3]のいずれか1に記載の表示入力装置であってもよい。
[1] In order to achieve the above object, a touch panel including a first detection unit for detecting an operation state of an object to be detected on an operation surface, a display unit for displaying a display image on the operation surface, and the operation surface The control unit controls the operation of a second detection unit that detects an operation operation, the first detection unit, and the display unit, and operates the detection target based on detection information detected by the second detection unit. A control unit including an estimation unit that estimates the area on the operation surface, and the control unit enlarges and displays the display image in the region based on the estimation result of the estimation unit. A display input device is provided.
[2] The display input device according to [1], wherein the control unit changes an enlargement ratio of the enlarged display according to a distance between the operation surface and the detection target.
[3] The display input device according to [2], wherein the enlargement ratio is set to be larger as a distance between the operation surface and the detection object is smaller.
[4] The display according to any one of [1] to [3], wherein the first detection unit is a capacitive touch sensor, and the second detection unit is a camera device. It may be an input device.
[5] The display input device according to any one of [1] to [3], wherein the first detection unit and the second detection unit are capacitive touch sensors. Also good.
本発明の表示入力装置によれば、確実なタッチ操作を可能とすることができる。 According to the display input device of the present invention, a reliable touch operation can be performed.
(本発明の第1の実施の形態)
本発明の実施の形態に係る表示入力装置1は、図1に示すように、操作面25に対する検出対象物の操作状態を検出する第1検出部としてのタッチセンサ10と、操作面25に表示画像27を表示する表示部20とを備えたタッチパネル30と、操作面25に対する操作動作を検出する第2検出部としてのカメラ40と、タッチセンサ10、及び表示部20の動作を制御すると共に、カメラ40により検出された検出情報に基づいて、検出対象物が操作しようとする操作面25上の領域を推定する推定部を備えた制御部50と、を有する。制御部50は、推定部の推定結果に基づいて、タッチ前において、タッチ推定された領域における表示画像27を拡大表示する、ように構成されている。
(First embodiment of the present invention)
As shown in FIG. 1, the
第1の実施の形態は、第2検出部としてのカメラ装置であるカメラ40により検出対象物としての手指100を撮像し、この撮像された検出情報に基づいて、タッチ前の指先位置を検出して、手指100が操作しようとする操作面25上の領域を推定する。この推定結果に基づいて、操作しようとする操作面25上の領域における表示画像27を拡大表示、特に、操作しようとする領域の表示画像27の一部を拡大表示する。
In the first embodiment, the
また、第1の実施の形態に係る表示入力装置1は、図2に示すように、車両8に搭載されるものとし、第2検出部としてのカメラ40がルームミラー82に装着されて、タッチパネル30、及びその周辺を撮像するものとして構成されているものとする。
In addition, as shown in FIG. 2, the
(タッチセンサ10)
タッチセンサ10は、表示部20と対応した2次元座標が検出可能な、例えば、静電容量方式の2次元タッチセンサである。2次元タッチセンサを構成する交差して配置される駆動電極と検出電極の交差する点で生成される静電容量(相互容量)を読み出す。一例として、読み出した静電容量に対してアナログ・デジタル変換処理などを行った静電容量カウント値として静電容量信号Scを生成して制御部50に出力する。
(Touch sensor 10)
The
タッチセンサ10は、表示部20上に表示される表示画像27において、アイコン、ボタン、マーク等の選択対象を選択して検出できる程度の分解能があればよい。一例として、交差して設けられる駆動電極と検出電極の各交点の間隔が概略としてタッチセンサの分解能となる。
In the
また、タッチセンサ10は、静電容量方式の2次元タッチセンサには限定されず、例えば、抵抗膜センサ等の他の方式によるものであってもよい。
Further, the
(表示部20)
表示部20は、図1に示すように、アイコン28、メニュー表示、マーク等から構成される表示画像27が表示され、タッチセンサ10により操作されて、アイコン選択、メニュー選択、入力確定、入力処理等が表示される。表示部20が車両に装着される場合は、例えば、図2に示すように、車両8のインストルメントパネル81に装着される。表示部20は、例えば、TFT(Thin Film Transistor)型等の周知の液晶ディスプレイである。この表示部20は、制御部50に接続され、入力される表示信号SDに基づいて表示制御される。
(Display unit 20)
As shown in FIG. 1, the
(タッチパネル30)
タッチパネル30は、上記説明したタッチセンサ10と表示部20を備えて構成される。タッチセンサ10と表示部20が積層され、表示部20上に表示される表示画像27のアイコン28、ボタン、マーク等の選択対象をタッチセンサ10により検出可能とされている。
(Touch panel 30)
The
タッチパネル30は、例えば、車両8に搭載され、タッチ操作により種々の車載機器、例えば、カーナビゲーション装置を操作、制御するものとして使用される。
The
(カメラ40)
カメラ40は、少なくともタッチパネル30の操作面25を撮像領域とするように配置されている。第1の実施の形態では、カメラ40の撮像画像を基に検出対象物である手指100と操作面25との間の距離を求めるため、カメラ40としては、3次元カメラ(3Dカメラ)を用いる。カメラ40は、例えば、車両8のルームミラー82に装着され、操作面25、及びその周辺を撮像するように配置されている。
(Camera 40)
The
また、表示入力装置1が車両に搭載されるものである場合、カメラ40としては、夜間にも撮像が可能なものを用いることが好ましく、近赤外線を含む光の輝度に応じた画像を生成可能なものを用いるとよい。また、カメラ40の近傍に、近赤外線を照射する照明器を備えてもよい。
Moreover, when the
カメラ40が撮像したカメラ画像Skは、予め記憶させておいた背景画像との差分をとることにより、背景を除去した状態で検出可能である。カメラ画像Skにおいて、予め記憶部55に記憶された種々の手指等の画像データをテンプレートとして、テンプレートマッチングの手法により、指先の特定が可能である。また、上述のように、カメラ40として3次元カメラを用いることで、操作面25と手指100の指先との距離dzを算出可能である。
The camera image Sk captured by the
(制御部50)
制御部50は、第1検出制御部51、表示制御部52、第2検出制御部53、推定部54、記憶部55等を備えた例えばマイクロコンピュータで構成されている。制御部50は、記憶されたプログラムに従って、取得したデータに演算、加工などを行うCPU(Central Processing Unit)、半導体メモリであるRAM(Random Access Memory)及びROM(Read Only Memory)などから構成される。なお、制御部50は、図1に示すように、第1検出制御部51、表示制御部52、第2検出制御部53、推定部54、記憶部55が一体に構成されている必要はなく、例えば、表示制御部は外部の画像処理チップ、記憶部は外部メモリ等を用いる構成であってもよい。記憶部55には、テンプレートマッチング用の手指の形状データ、タッチ検出のためのタッチ閾値等が記憶されている。
(Control unit 50)
The
第1検出制御部51は、2次元タッチセンサを構成する1つの駆動電極(図示省略)に駆動信号が供給されている間に検出電極(図示省略)の接続を周期的に切り替え、交差して配置される駆動電極と検出電極の交差する点で生成される静電容量(相互容量)を読み出す。一例として、読み出した静電容量に対してアナログ・デジタル変換処理などを行った静電容量カウント値として静電容量信号Scを生成して制御部50に出力する。これにより、2次元タッチセンサの2次元位置における静電容量を検出することができ、タッチセンサ10への手指の接触(タッチ)や近接を検出することができる。タッチ閾値以上の領域の中心又は重心の座標をタッチ点とすることができる。
The first detection control unit 51 periodically switches the connection of the detection electrode (not shown) while the drive signal is supplied to one drive electrode (not shown) constituting the two-dimensional touch sensor, A capacitance (mutual capacitance) generated at a point where the drive electrode and the detection electrode that are arranged intersect is read out. As an example, a capacitance signal Sc is generated as a capacitance count value obtained by performing analog-to-digital conversion processing or the like on the read-out capacitance, and is output to the
表示制御部52は、マイクロコンピュータの処理、演算機能を使用して、表示画像27の表示、後述する手指100が操作しようとする操作面25上の推定された領域(表示画像27の一部)の拡大表示等を制御する。表示制御部52は、予め用意された各アイコン、及びその周辺の拡大画像を、後述する操作面25と手指100の指先との距離dzに応じて、拡大表示する。この拡大表示は、操作面25と手指100の指先101との距離dzに応じて、無段階、あるいは多段階で行なうことができる。例えば、図3(a)、(b)、(c)に示すように、3段階の拡大表示とすることができる。
The
第2検出制御部53は、カメラ画像Skにおいて、予め記憶部55に記憶された手指等の画像データをテンプレートとして、テンプレートマッチングの手法により、指先の特定を行なう。また、上述のように、カメラ40として3次元カメラを用いることで、操作面25と手指100の指先との距離dzを算出可能である。なお、カメラ40が撮像したカメラ画像Skは、予め記憶させておいた背景画像との差分をとることにより、背景を除去した状態で検出可能である。これらの処理により、第2検出制御部53は、操作面25と手指100の指先101との距離dzを算出、検出できる。距離dzは、例えば、指先101から操作面25に下した垂線の距離である。
The second
推定部54は、カメラ40の検出情報、すなわち、操作面25と指先101との距離dzに基づいて、手指100が操作しようとする操作面25上の領域を推定する。例えば、車両8が図2に示したような右ハンドルの場合は、運転者が左手で操作するものとして、距離dzに基づいて、図3(b)に示すように、手指100が操作しようとする操作面25上の領域200を推定することができる。また、第2検出制御部53により、テンプレートマッチングの手法により、指先101と手の甲102を検出し、指先101と手の甲の中心(重心)103との3次元座標に基づいて、手指100が操作しようとする操作面25上の領域200を算出することにより推定することもできる。
The
記憶部55は、図3(a)〜(c)に示すような、メニュー画像である表示画像27、アイコン28等の画像データを記憶している。また、アイコンの初期状態の画像データ、段階的に拡大された状態の画像データ201、202を記憶している。また、推定部54により推定された領域を拡大表示するために、各アイコンの領域、周辺領域を含む各アイコンの領域のそれぞれの拡大された状態の画像データを記憶している。これらの各画像データは、表示制御部52の要求により、随時参照可能とされている。
The
制御部50は、表示制御部52により、これらの推定結果に基づいて、操作しようとする操作面25上の領域200における表示画像27を、記憶部55に記憶された必要な画像データを読み込みながら、拡大表示、特に、操作しようとする領域200の表示画像27の一部を拡大表示することができる。
The
具体的には、記憶部55は、図3(a)〜(c)に示すように、図3(a)に示す初期状態の表示から、図3(b)に示す操作途中における推定された領域200の拡大表示(画像データ201)、図3(c)に示すアイコンをタッチした場合の領域200の拡大表示(画像データ202)のように、表示制御する。
Specifically, the
(表示入力装置1の動作)
図4は、本発明の第1の実施の形態に係る表示入力装置の動作を示すフローチャートである。第1の実施の形態に係る表示入力装置1は、手指100をカメラ40で撮像してカメラ画像Skに基づいて、第2検出制御部53が指先の検出、例えば、操作面25と手指100の指先との距離dzを算出する。推定部54は、これに基づいて、手指100が操作しようとする操作面25上の領域200を推定する。表示制御部52は、この領域200における表示画像27を無段階、あるいは多段階で拡大表示する。以下においては、アイコンの表示を段階的に行なうものとし、一例として、3段階に拡大表示を行なうものとして説明する。第1検出制御部51は、タッチ操作された位置(座標)を検出してこの位置(座標)にあるアイコンを検出する。制御部50は、このアイコンに割り当てられた処理を実行することができる。
(Operation of display input device 1)
FIG. 4 is a flowchart showing the operation of the display input device according to the first embodiment of the present invention. In the
(Step1)
カメラ40によりカメラ画像Skを取得する。予め記憶させておいた背景画像との差分をとることにより、背景を除去したカメラ画像Skを取得できる。これにより、次ステップにおける手指の検出、領域の推定精度が向上する。
(Step 1)
A camera image Sk is acquired by the
(Step2)
第2検出制御部53は、操作面25と手指100の指先との距離dzを算出する。カメラ画像Skにおいて、予め記憶部55に記憶された手指等の画像データをテンプレートとして、テンプレートマッチングの手法により、指先の特定を行なう。カメラ40として、3次元カメラ(3Dカメラ)を用いることにより、特定された指先の座標を検出することができ、これにより、上記の距離dzを算出することができる。
(Step 2)
The second
(Step3)
推定部54は、操作面25と指先101との距離dzに基づいて、手指100が操作しようとする操作面25上の領域を推定する。推定方法は種々のものが使用可能である。例えば、車両8が図2に示したような右ハンドルの場合は、運転者が左手で操作するものとして、距離dzに基づいて、図3(b)に示すように、手指100が操作しようとする操作面25上の領域200を推定することができる。また、第2検出制御部53により、テンプレートマッチングの手法により、指先101と手の甲102を検出し、指先101と手の甲の中心(重心)103との3次元座標に基づいて、手指100が操作しようとする操作面25上の領域200を算出することにより推定することもできる。なお、簡易な推定方法であっても、次ステップでの拡大表示領域を広く設定することにより、実用的には十分使用可能である。
(Step 3)
Based on the distance dz between the
(Step4)
表示制御部52は、前ステップでの推定結果に基づいて、操作しようとする操作面25上の領域200における表示画像27を、記憶部55に記憶された必要な画像データを読み込みながら、拡大表示する。特に、図3(b)に示すように、操作しようとする領域200の表示画像27の一部を拡大された状態の画像データ201で拡大表示する。例えば、操作面25と検出対象物である指先101との距離に応じて拡大表示の拡大率を変化させる。あるいは、拡大率を、操作面25と指先101との距離が小さいほど大きく設定する。
(Step 4)
The
(Step5)
第1検出制御部51は、静電容量信号Scを取得し、これに基づいてタッチ操作がされたかどうかを判断する。タッチ操作がされた場合はStep6へ進み(Step5:Yes)、タッチ操作がされない場合はStep1へ戻る(Step5:No)。第1検出制御部51は、2次元タッチセンサの2次元位置における静電容量である静電容量信号Scに基づいて、タッチセンサ10への手指の接触(タッチ)や近接を検出することができる。第1検出制御部51は、図3(c)に示すように、タッチ閾値以上の領域の中心又は重心の座標をタッチ点210とすることができ、そのタッチ点210、すなわち、タッチ点210が属するアイコンがタッチ操作されたと判断することができる。また、タッチ点210が属する領域の表示色を変更する等が可能である。
(Step 5)
The first detection control unit 51 acquires the capacitance signal Sc, and determines whether or not a touch operation has been performed based on the acquired capacitance signal Sc. When the touch operation is performed, the process proceeds to Step 6 (Step 5: Yes), and when the touch operation is not performed, the process returns to Step 1 (Step 5: No). The first detection control unit 51 can detect touch (touch) or proximity of a finger on the
(Step6)
制御部50は、タッチ操作されたアイコンに割り当てられた処理を実行することができる。これにより、例えば、数字、文字を入力したり、カーナビゲーション装置等の車載機器を操作したりすることができる。
(Step 6)
The
上記の動作は、必要に応じて繰り返して実行することができる。 The above operation can be repeatedly executed as necessary.
(本発明の第2の実施の形態)
第2の実施の形態は、第1検出部を第2検出部と兼用にして、第1検出部としてのタッチセンサ10により、タッチ前の指先位置を検出して、手指100が操作しようとする操作面25上の領域を推定する。この推定結果に基づいて、操作しようとする操作面25上の領域における表示画像27を拡大表示、特に、操作しようとする領域の表示画像27の一部を拡大表示する。
(Second embodiment of the present invention)
In the second embodiment, the first detection unit is also used as the second detection unit, and the finger position before the touch is detected by the
図5は、本発明の第2の実施の形態に係る表示入力装置の全体構成図である。第1の実施の形態で使用したカメラを省略し、タッチセンサ10でタッチ前の指先位置を検出する。以下、第1の実施の形態と異なる部分について説明する。
FIG. 5 is an overall configuration diagram of a display input device according to the second embodiment of the present invention. The camera used in the first embodiment is omitted, and the fingertip position before the touch is detected by the
図6(a)は、操作途中における手指とタッチセンサの位置関係を横軸X、縦軸Yで示す図であり、図6(b)は、図6(a)におけるタッチセンサの静電容量値の分布を示す図である。なお、図6(b)において、数値は前述した静電容量カウント値を例えば最大値(タッチ時)を100として規格化したものとし、数値の記載されてない区域は静電容量値がゼロとする。 FIG. 6A is a diagram showing the positional relationship between the finger and the touch sensor during the operation with the horizontal axis X and the vertical axis Y, and FIG. 6B is the capacitance of the touch sensor in FIG. It is a figure which shows distribution of a value. In FIG. 6B, numerical values are assumed to be the above-mentioned electrostatic capacitance count value normalized with, for example, the maximum value (at the time of touch) as 100, and the area where the numerical value is not described has electrostatic capacitance value of zero. To do.
タッチセンサ10は、表示部20と対応した2次元座標が検出可能な、例えば、静電容量方式の2次元タッチセンサである。2次元タッチセンサを構成する交差して配置される駆動電極と検出電極の交差する点で生成される静電容量(相互容量)を読み出す。一例として、読み出した静電容量に対してアナログ・デジタル変換処理などを行った静電容量カウント値として静電容量信号Scを生成して制御部50に出力する。
The
タッチセンサ10は、表示部20上に表示される表示画像27において、アイコン、ボタン、マーク等の選択対象を選択して検出できる分解能を備える。第2の実施の形態では、タッチセンサ10でタッチ前の指先位置を検出するので、図6(a)で示す手指100の形状、指先101等が検出できる程度の分解能を備えるように構成する。また、手指100が操作面25にタッチせずに近接した状態での静電容量を検出するために、検出感度を高く設定することが好ましい。タッチセンサ10は、自己容量型の2次元タッチセンサとすることにより、検出感度を高くすることもできるが、以下では、第1の実施の形態と同様に相互容量型の2次元タッチセンサとして説明する。
The
第1検出制御部51は、2次元タッチセンサを構成する1つの駆動電極(図示省略)に駆動信号が供給されている間に検出電極(図示省略)の接続を周期的に切り替え、交差して配置される駆動電極と検出電極の交差する点で生成される静電容量(相互容量)を読み出す。一例として、読み出した静電容量に対してアナログ・デジタル変換処理などを行った静電容量カウント値として静電容量信号Scを生成して制御部50に出力する。これにより、2次元タッチセンサの2次元位置における静電容量を検出することができ、タッチセンサ10への手指の接触(タッチ)や近接を検出することができる。タッチ閾値以上の領域の中心又は重心の座標をタッチ点とすることができる。
The first detection control unit 51 periodically switches the connection of the detection electrode (not shown) while the drive signal is supplied to one drive electrode (not shown) constituting the two-dimensional touch sensor, A capacitance (mutual capacitance) generated at a point where the drive electrode and the detection electrode that are arranged intersect is read out. As an example, a capacitance signal Sc is generated as a capacitance count value obtained by performing analog / digital conversion processing on the read capacitance, and is output to the
また、第1検出制御部51は、近接する手指100の形状を静電容量信号Scの分布から、タッチ前の指先101の位置を検出する。図6(b)に示すように、近接する手指100の形状に応じて静電容量が検出され、また、操作面25に近接する部位ほど静電容量が大きく検出される。図6(b)に示す場合は、図6(a)で示す手指100の位置に対応する座標において静電容量が大きく検出され、他の指、手の平部分の静電容量は小さく検出され、手指100が近接しない領域では静電容量がゼロとなっている。
In addition, the first detection control unit 51 detects the position of the
第1検出制御部51は、図6(b)に示す検出結果から、静電容量が最も大きい座標(Xa、Ya)を指先位置として検出する。また、図6(b)において、数値は前述した静電容量カウント値を例えば最大値(タッチ時)を100として規格化したものであるので、例えば、座標(Xa、Ya)における静電容量値(60)から、指先101と操作面25との距離dzは算出できる。なお、予め、指先101と操作面25との距離dzと静電容量値との関係を求めておく。以上から、第1検出制御部51は、タッチパネル30を使って、指先位置、及び、指先101と操作面25との距離dzを検出することができる。
The first detection control unit 51 detects coordinates (Xa, Ya) with the largest capacitance as the fingertip position from the detection result shown in FIG. 6B. Further, in FIG. 6B, since the numerical value is the capacitance count value described above normalized with, for example, the maximum value (at the time of touch) being 100, for example, the capacitance value at coordinates (Xa, Ya) From (60), the distance dz between the
推定部54は、上記のようにして求められた、指先位置と、操作面25と指先101との距離dzに基づいて、手指100が操作しようとする操作面25上の領域を推定することができる。第1の実施の形態と同様に、例えば、車両8が図2に示したような右ハンドルの場合は、運転者が左手で操作するものとして、距離dzに基づいて、図3(b)に示すように、手指100が操作しようとする操作面25上の領域200を推定することができる。
The
(実施の形態の効果)
本発明の実施の形態によれば、以下のような効果を有する。
(1)本発明の第1の実施の形態に係る表示入力装置1は、操作面25に対する検出対象物の操作状態を検出する第1検出部としてのタッチセンサ10と、操作面25に表示画像27を表示する表示部20とを備えたタッチパネル30と、操作面25に対する操作動作を検出する第2検出部としてのカメラ40と、タッチセンサ10、及び表示部20の動作を制御すると共に、カメラ40により検出された検出情報に基づいて、検出対象物が操作しようとする操作面25上の領域を推定する推定部を備えた制御部50と、を有し、制御部50は、推定部の推定結果に基づいて、領域における表示画像27を拡大表示する、ように構成されている。第2検出部としてのカメラ装置であるカメラ40により検出対象物としての手指100を撮像し、この撮像された検出情報に基づいて、タッチ前の指先位置を検出して、手指100が操作しようとする操作面25上の領域を推定する。この推定結果に基づいて、操作しようとする操作面25上の領域における表示画像27を拡大表示、特に、操作しようとする領域の表示画像27の一部を拡大表示する。これにより、タッチ前において操作しようとするアイコン等が見やすくなり、操作性を向上させることができる。
(2)第2の実施の形態では、第1検出部を第2検出部と兼用にして、第1検出部としてのタッチセンサ10により、タッチ前の指先位置を検出して、手指100が操作しようとする操作面25上の領域を推定する。これにより、カメラを使用せずに簡易な構成により、推定動作、拡大表示動作が可能となる。
(3)また、拡大表示を、無段階、あるいは多段階に段階的に行なうことができる。これにより、さらなる操作性の向上が期待できる。
(4)本実施の形態に係る表示入力装置1を車両に適用することにより、運転中の車両振動があるような環境下でも、ハンドル操作をしながら意図通りの確実なタッチパネル操作が可能となる。
(5)また、連続してタッチをしようと手をタッチパネルに近づけたままでいると、一部が拡大された表示になり図面全体の確認がしにくくなるため、連続した操作を実施しにくくし、長時間の操作や運転姿勢が崩れた状態になることを抑止できる。
(Effect of the embodiment)
The embodiment of the present invention has the following effects.
(1) The
(2) In the second embodiment, the first detection unit is also used as the second detection unit, the finger sensor position before the touch is detected by the
(3) Further, the enlarged display can be performed steplessly or steplessly in multiple steps. Thereby, further improvement in operability can be expected.
(4) By applying the
(5) Also, if you keep your hand close to the touch panel to make continuous touches, it will be partly enlarged and it will be difficult to check the entire drawing. It is possible to prevent long-time operations and driving postures from being broken.
以上、本発明のいくつかの実施の形態を説明したが、これらの実施の形態は、一例に過ぎず、特許請求の範囲に係る発明を限定するものではない。また、これら新規な実施の形態は、その他の様々な形態で実施されることが可能であり、本発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更等を行うことができる。また、これら実施の形態の中で説明した特徴の組合せの全てが発明の課題を解決するための手段に必須であるとは限らない。さらに、これら実施の形態は、発明の範囲及び要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。 Although some embodiments of the present invention have been described above, these embodiments are merely examples and do not limit the invention according to the claims. Moreover, these novel embodiments can be implemented in other various forms, and various omissions, replacements, changes, and the like can be made without departing from the scope of the present invention. In addition, not all the combinations of features described in these embodiments are essential to the means for solving the problems of the invention. Furthermore, these embodiments are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.
1…表示入力装置、8…車両、10…タッチセンサ、20…表示部、25…操作面、27…表示画像、28…アイコン、30…タッチパネル、40…カメラ、50…制御部、51…検出制御部、52…表示制御部、53…検出制御部、54…推定部、55…記憶部、81…インストルメントパネル、82…ルームミラー、100…手指、101…指先、102…手の甲、200 …領域、201、202…画像データ、210…タッチ点
DESCRIPTION OF
Claims (5)
前記操作面に対する操作動作を検出する第2検出部と、
前記第1検出部、及び前記表示部の動作を制御すると共に、前記第2検出部により検出された検出情報に基づいて、前記検出対象物が操作しようとする前記操作面上の領域を推定する推定部を備えた制御部と、を有し、
前記制御部は、前記推定部の推定結果に基づいて、前記領域における前記表示画像を拡大表示する、表示入力装置。 A touch panel including a first detection unit that detects an operation state of a detection object on the operation surface, and a display unit that displays a display image on the operation surface;
A second detection unit for detecting an operation operation on the operation surface;
The control unit controls an operation of the first detection unit and the display unit, and estimates an area on the operation surface on which the detection target tends to operate, based on detection information detected by the second detection unit. A control unit including an estimation unit,
The display input device, wherein the control unit enlarges and displays the display image in the area based on the estimation result of the estimation unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018008832A JP2019128707A (en) | 2018-01-23 | 2018-01-23 | Display input device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018008832A JP2019128707A (en) | 2018-01-23 | 2018-01-23 | Display input device |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2019128707A true JP2019128707A (en) | 2019-08-01 |
Family
ID=67471408
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018008832A Pending JP2019128707A (en) | 2018-01-23 | 2018-01-23 | Display input device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2019128707A (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7620844B2 (en) | 2021-02-03 | 2025-01-24 | 日本精機株式会社 | Operation recognition device |
-
2018
- 2018-01-23 JP JP2018008832A patent/JP2019128707A/en active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7620844B2 (en) | 2021-02-03 | 2025-01-24 | 日本精機株式会社 | Operation recognition device |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8730169B2 (en) | Hybrid pointing device | |
US20100328351A1 (en) | User interface | |
JP5640486B2 (en) | Information display device | |
JP6429886B2 (en) | Touch control system and touch control method | |
JP6004716B2 (en) | Information processing apparatus, control method therefor, and computer program | |
US9632690B2 (en) | Method for operating user interface and electronic device thereof | |
JP2010055510A (en) | Information processor and information processing method | |
CN102741794A (en) | Handling tactile inputs | |
CN107231814A (en) | The dynamic touch sensor scan detected for false edges touch input | |
WO2018025507A1 (en) | Operation input device | |
JP5679595B2 (en) | Electronic device and coordinate determination method | |
JP2018018205A (en) | Input system for determining position on screen of display means, detection device, control device, program, and method | |
JP2017058718A (en) | Operation detection device | |
JP2008257629A (en) | Touch type input device | |
JP2019128707A (en) | Display input device | |
JP5062898B2 (en) | User interface device | |
US20170083145A1 (en) | Electronic apparatus and control method thereof | |
JP2017215842A (en) | Electronic apparatus | |
US20140225865A1 (en) | Operating element | |
JP2019133544A (en) | Display input device | |
JP6505317B2 (en) | Display controller | |
JP2015011771A (en) | Handling device | |
EP3059664A1 (en) | A method for controlling a device by gestures and a system for controlling a device by gestures | |
JP2018032123A (en) | Operation input device | |
JP2019101876A (en) | Input device, input control device, operated device, and program |