JP2014102660A - 操作支援システム、操作支援方法及びコンピュータプログラム - Google Patents

Abstract

【課題】車両に搭載された各操作対象機器において設定されているパラメータの詳細な変更操作を操作面へのタッチ操作によって正確に行わせることを可能にした操作支援システム、操作支援方法及びコンピュータプログラムを提供する。
【解決手段】操作対象機器において設定されている複数のパラメータに対応付けた選択領域をタッチパッド１１の操作面に設定し、操作面に設定されたいずれかの選択領域を押下する選択操作を受け付けた場合に、選択された選択領域（対象選択領域）に対応するパラメータ（選択パラメータ）を変更する操作を行う為の操作領域をタッチパッド１１の操作面に新たに設定し、操作領域内でユーザがドラッグする操作を、選択パラメータを変更する操作として受け付け、受け付けたユーザの操作に基づいて選択パラメータを変更するように操作対象機器を制御するように構成する。
【選択図】図１４

Description

本発明は、タッチ操作による車両内の機器の操作を支援する操作支援システム、操作支援方法及びコンピュータプログラムに関する。

従来より、パーソナルコンピュータ、ＡＴＭ、券売機、ナビゲーション装置、スマートフォン等の機器に対してユーザが操作を行う際に、機器に対するユーザの操作を受け付ける手段として、様々なマンマシンインタフェースが用いられている。特に、近年、マンマシンインタフェースの一つとして、ユーザのタッチ操作を受け付ける操作面を設け、該操作面に対するユーザのタッチ操作（例えば、タッチオンする操作、タッチオフする操作、ドラッグ操作、フリック操作等）をユーザの操作として検出する操作機器が良く用いられる。このような操作機器としては、タッチパッド、タッチパネル、タブレット等（以下、タッチパッド等という）があり、ユーザに直感的で分かり易い操作を行わせることが可能となる。

ここで、上記タッチパッド等をユーザが操作する場合の操作態様として、ユーザがタッチパッド等を視認せずに操作を行う場合がある。具体的には、他の作業を行いながら、タッチパッド等の操作を行う場合であり、例えば、車両の運転操作をしながらタッチパッド等の操作を行う場合がある。例えば、米国特許出願公開第２０１０／０２６８４２６号公報には、車両のハンドルに対して２つのタッチパッドを設け、一方のタッチパッドに対する指のなぞり操作に基づいて、ディスプレイに表示される操作対象を切り換えた後で、他方のタッチパッドを押圧操作して操作対象に対応する機器（例えば、ナビゲーション装置、オーディオ等）を選択し、更に、他方のタッチパッドをなぞり操作することにより、選択された操作対象に対応する機器に設定されている項目の状態（例えばオーディオの音量）を変更する技術について記載されている。

米国特許出願公開第２０１０／０２６８４２６号公報（図７Ａ−図７Ｒ）

上記特許文献１に記載の技術によれば、車両のハンドルに対して設けられたタッチパッドに押圧操作したり、なぞり操作することによって、ナビゲーション装置やオーディオなどの車両に搭載された複数の操作対象機器において設定されている項目の状態を夫々操作することが可能となる。しかしながら、上記特許文献１に記載の技術では、上記項目の状態の変更操作を行う際に問題が生じていた。

例えば、エアコンの設定温度を上昇させる操作を行う場合においては、エアコンの設定温度を表示させた上でタッチパッドを押圧することで、エアコンの設定温度を操作対象として選択し、なぞり操作することで設定温度を変更し、再度タッチパッドを押圧することで設定温度を最終的に変更可能である。しかしながら、引用文献１に記載の技術では、項目の状態を変更する際に、項目と項目の状態が階層構造になっているので、タッチパッド上でなぞり操作と押圧操作を繰り返す必要がある。従って、引用文献１では、操作対象機器において設定されている項目の状態を変更する際に画面を視認する頻度と操作回数が増加することになった。

本発明は前記従来における問題点を解消するためになされたものであり、車両運転中に表示画面を視認する頻度を下げるとともに操作回数を減少することを可能にした操作支援システム、操作支援方法及びコンピュータプログラムを提供することを目的とする。

前記目的を達成するため本願の請求項１に係る操作支援システム（１）は、車両のハンドル（５）に設けられ、操作面（１１）を介してユーザの操作を受け付ける操作入力装置（２、３）と、前記操作入力装置により操作される操作対象を表示する表示画面（３７）と、前記車両に搭載され、前記操作対象となる操作対象機器（４８〜５０）と、を備えた操作支援システムにおいて、前記操作対象機器に設定されている複数の項目の状態を前記表示画面に表示する項目状態表示手段（３１）と、複数の前記項目の状態毎に対応付けた項目選択領域（５１〜５３）を前記操作面に設定する項目選択領域設定手段と、いずれかの前記項目選択領域に対して触れた状態で、該項目選択領域を押下する前記ユーザの操作が検出された場合に、該ユーザの操作が検出された前記項目選択領域に対応する前記項目の状態を操作する状態操作領域（５７）を前記操作面に設定する状態操作領域設定手段（３１）と、前記操作面に設定された前記状態操作領域内で前記ユーザがドラッグする操作を、前記項目の状態を変更する操作として受け付ける状態操作受付手段（３１）と、前記状態操作受付手段により受け付けた前記項目の状態を変更する操作に基づいて前記操作対象機器に設定されている項目の状態を変更する状態変更手段と、を有することを特徴とする。
尚、「項目の状態」は、例えば、操作対象機器がエアコンである場合には、風量、風向き、温度が相当する。
また、「項目の状態を変更する」とは、項目の状態が数値により特定されている場合には、その数値を変更する場合も含む。
また、「操作面に触れた」とは、実際にユーザが操作面に接触する場合に加えて、静電容量方式ではユーザが操作面に接触していなくても静電容量が変化した場合には触れたとみなす。

また、請求項２に係る操作支援システム（１）は、請求項１に記載の操作支援システムであって、前記項目選択領域設定手段（３１）は、前記表示画面（３７）に対する前記項目の状態の表示位置の関係と対応させて、前記項目選択領域（５１〜５３）を前記操作面（１１）に設定することを特徴とする。

また、請求項３に係る操作支援システム（１）は、請求項１又は請求項２に記載の操作支援システムであって、前記項目状態表示手段（３１）は、前記状態操作領域設定手段（３１）によって設定された前記状態操作領域（５７）によって操作対象となる前記項目の状態を他の前記項目の状態と識別可能に表示することを特徴とする。

また、請求項４に係る操作支援システム（１）は、請求項１乃至請求項３のいずれかに記載の操作支援システムであって、前記状態変更手段（３１）は、前記状態操作受付手段（３１）により受け付けた前記ユーザのドラッグする操作のドラッグ方向に応じた方向へと、前記項目の状態を変更することを特徴とする。
尚、「ドラッグ方向に応じた方向」とは、例えば項目の状態を特定する数値を減少させる方向や増加させる方向等がある。

また、請求項５に係る操作支援システム（１）は、請求項１乃至請求項４のいずれかに記載の操作支援システムであって、前記状態操作領域設定手段（３１）は、前記状態操作領域（５７）を前記操作面（１１）の全領域に設定することを特徴とする。

また、請求項６に係る操作支援システム（１）は、請求項１乃至請求項５のいずれかに記載の操作支援システムであって、前記状態変更手段（３１）は、前記状態操作受付手段（３１）により受け付けた前記項目の状態を変更する操作に基づく変更量に対応させて、前記操作対象機器（４８〜５０）に設定されている前記項目の状態を変更することを特徴とする。

また、請求項７に係る操作支援システム（１）は、請求項１乃至請求項６のいずれかに記載の操作支援システムであって、前記項目選択領域（５１〜５３）において前記ユーザの操作が検出された場合に、前記操作面（１１）を振動させる選択振動手段（３１）を有することを特徴とする。

また、請求項８に係る操作支援システム（１）は、請求項１乃至請求項７のいずれかに記載の操作支援システムであって、前記状態操作領域（５７）内で前記ユーザのドラッグする操作を受け付けた場合に、前記操作面（１１）を振動させるドラッグ振動手段（３１）を有することを特徴とする。

また、請求項９に係る操作支援システム（１）は、請求項１乃至請求項８のいずれかに記載の操作支援システムであって、前記状態操作領域設定手段（３１）によって前記状態操作領域（５７）が設定された後に、前記項目選択領域（５１〜５３）を押下する前記ユーザの操作が再度検出された場合に、前記状態操作領域の設定を解除する状態操作領域解除手段（３１）を有することを特徴とする。

また、請求項１０に係る操作支援システム（１）は、請求項１乃至請求項９のいずれかに記載の操作支援システムであって、前記操作面（１１）に設定されたいずれかの前記項目選択領域（５１〜５３）において前記ユーザの操作が検出された場合に、前記操作入力装置（２、３）と前記操作対象機器（４８〜５０）とを通信可能に接続し、前記操作入力装置で受け付けた前記ユーザの操作内容を前記操作入力装置から前記操作対象機器へと送信することにより、前記操作対象機器に設定されている項目の状態を変更することを特徴とする。

また、請求項１１に係る操作支援システム（１）は、請求項１乃至請求項９のいずれかに記載の操作支援システムであって、前記状態操作受付手段（３１）により前記ユーザの操作を受け付けた場合に、前記操作入力装置（２、３）と前記操作対象機器（４８〜５０）とを通信可能に接続し、前記操作入力装置で受け付けた前記ユーザの操作内容を前記操作入力装置から前記操作対象機器へと送信することにより、前記操作対象機器に設定されている項目の状態を変更することを特徴とする。

また、請求項１２に係る操作支援システム（１）は、請求項１乃至請求項１１のいずれかに記載の操作支援システムであって、前記項目選択領域設定手段（３１）によって設定された前記項目選択領域（５１〜５３）内において、前記操作面（１１）よりも手前側に突出部（２１）を突出させる突出手段（３１）を有することを特徴とする。

また、請求項１３に係る操作支援システム（１）は、請求項１乃至請求項１２のいずれかに記載の操作支援システムであって、前記表示画面（３７）は、前記車両のフロントガラス（３６）に設けることを特徴とする。

また、請求項１４に係る操作支援方法は、車両のハンドル（５）に設けられ、操作面（１１）を介してユーザの操作を受け付ける操作入力装置（２、３）と、前記操作入力装置により操作される操作対象を表示する表示画面（３７）と、前記車両に搭載され、前記操作対象となる操作対象機器（４８〜５０）と、を備えた操作支援システムによる操作支援方法において、前記操作対象機器に設定されている複数の項目の状態を前記表示画面に表示する項目状態表示ステップと、複数の前記項目の状態毎に対応付けた項目選択領域（５１〜５３）を前記操作面に設定する項目選択領域設定ステップと、いずれかの前記項目選択領域に対して触れた状態で、該項目選択領域を押下する前記ユーザの操作が検出された場合に、該ユーザの操作が検出された前記項目選択領域に対応する前記項目の状態を操作する状態操作領域（５７）を前記操作面に設定する状態操作領域設定ステップと、前記操作面に設定された前記状態操作領域内で前記ユーザがドラッグする操作を、前記項目の状態を変更する操作として受け付ける状態操作受付ステップと、前記状態操作受付ステップにより受け付けた前記項目の状態を変更する操作に基づいて前記操作対象機器に設定されている項目の状態を変更する状態変更ステップと、を有することを特徴とする。

更に、請求項１５に係るコンピュータプログラムは、車両のハンドル（５）に設けられ、操作面（１１）を介してユーザの操作を受け付ける操作入力装置（２、３）と、前記操作入力装置により操作される操作対象を表示する表示画面（３７）と、前記車両に搭載され、前記操作対象となる操作対象機器（４８〜５０）と、を備えた操作支援システムにおいて実行されるコンピュータプログラムにおいて、前記操作対象機器に設定されている複数の項目の状態を前記表示画面に表示する項目状態表示機能と、複数の前記項目の状態毎に対応付けた項目選択領域（５１〜５３）を前記操作面に設定する項目選択領域設定機能と、いずれかの前記項目選択領域に対して触れた状態で、該項目選択領域を押下する前記ユーザの操作が検出された場合に、該ユーザの操作が検出された前記項目選択領域に対応する前記項目の状態を操作する状態操作領域（５７）を前記操作面に設定する状態操作領域設定機能と、前記操作面に設定された前記状態操作領域内で前記ユーザがドラッグする操作を、前記項目の状態を変更する操作として受け付ける状態操作受付機能と、前記状態操作受付機能により受け付けた前記項目の状態を変更する操作に基づいて前記操作対象機器に設定されている項目の状態を変更する状態変更機能と、を実行させることを特徴とする。

前記構成を有する請求項１に記載の操作支援システムによれば、操作面に設定された項目選択領域の押下操作によって変更操作対象とする操作対象機器の項目の状態を選択し、その後に新たに設定された状態操作領域へのドラッグ操作によって選択された項目の状態の詳細な変更操作を行うので、複数の項目の状態が表示画面に表示されていたとしても項目の状態の変更操作をより少ない操作回数で行わせることが可能である。また、項目の状態が表示されたとしても、項目の状態が変更操作対象として選択されなければ状態操作領域が設定されない。即ち、ユーザが操作面に対して誤った操作を行ったとしても、選択されていない項目の状態は変更されることはないので、誤操作を防止することができる。従って、車両に搭載された各操作対象機器において設定されている項目の状態の詳細な変更操作を操作面への操作によって正確に行わせることが可能となる。

また、請求項２に記載の操作支援システムによれば、表示画面に対する項目の状態の表示位置の関係と対応させて、項目選択領域を操作面に設定するので、表示画面をユーザが視認することによって、項目選択領域と項目の状態との対応関係をユーザに容易に把握させることが可能となる。従って、変更操作対象とする項目の状態を操作面への操作によって適切に選択させることが可能となる。

また、請求項３に記載の操作支援システムによれば、変更操作対象となる項目の状態を他の項目の状態と識別可能に表示するので、表示画面をユーザが視認することによって、現在変更操作の対象となっている項目の状態を容易に識別することが可能となる。

また、請求項４に記載の操作支援システムによれば、ドラッグ操作のドラッグ方向に応じた方向へと、項目の状態を変更するので、項目の状態を複数の方向へと変更させる操作を操作面を用いて容易に行わせることが可能である。

また、請求項６に記載の操作支援システムによれば、状態操作領域を操作面の全領域に設定するので、操作面全体を用いたドラッグ操作によって項目の状態の変更操作をユーザに容易に行わせることが可能となる。従って、操作性を向上させることが可能となる。

また、請求項７に記載の操作支援システムによれば、項目選択領域においてユーザの操作が検出された場合に、操作面を振動させるので、実在するボタン等の操作対象物を操作するのと同等の触感をユーザに付与することが可能となる。

また、請求項８に記載の操作支援システムによれば、状態操作領域内でドラッグ操作が行われた場合に、操作面を振動させるので、実在するボタン等の操作対象物を操作するのと同等の触感をユーザに付与することが可能となる。

また、請求項９に記載の操作支援システムによれば、状態操作領域が設定された後に、項目選択領域が再度押下された場合に、状態操作領域の設定を解除するので、操作面へのタッチ操作によって変更操作対象となる項目の状態を容易に切り換えることが可能となる。

また、請求項１０に記載の操作支援システムによれば、操作面に設定されたいずれかの項目選択領域においてユーザの操作が検出された場合に、操作入力装置と操作対象機器とを通信可能に接続し、操作入力装置で受け付けたユーザの操作内容を操作入力装置から該当する操作対象機器へと送信することにより操作対象機器を制御するので、車両内に設置された様々な操作対象機器に対して、同一の操作入力装置を介して項目の状態の変更操作を行うことが可能となる。

また、請求項１１に記載の操作支援システムによれば、操作面において項目の状態を変更する操作を受け付けた場合に、操作入力装置と操作対象機器とを通信可能に接続し、操作入力装置で受け付けたユーザの操作内容を操作入力装置から該当する操作対象機器へと送信することにより操作対象機器を制御するので、車両内に設置された様々な操作対象機器に対して、同一の操作入力装置を介して項目の状態の変更操作を行うことが可能となる。

また、請求項１２に記載の操作支援システムによれば、項目選択領域内において、操作面よりも手前側に突出部を突出させるので、突出された突出部を基準としてユーザの項目の状態の選択操作を正確に行わせることが可能となる。

また、請求項１３に記載の操作支援システムによれば、表示画面は車両のフロントガラスに設けるので、車両を運転するユーザが視線方向を変更することなく、表示画面に表示された操作対象機器の各種項目の状態を把握することが可能となる。

また、請求項１４に記載の操作支援方法によれば、操作面に設定された項目選択領域の押下操作によって変更操作対象とする操作対象機器の項目の状態を選択し、その後に新たに設定された状態操作領域へのドラッグ操作によって選択された項目の状態の詳細な変更操作を行うので、複数の項目の状態が表示画面に表示されていたとしても項目の状態の変更操作をより少ない操作回数で行わせることが可能である。また、項目の状態が表示されたとしても、項目の状態が変更操作対象として選択されなければ状態操作領域が設定されない。即ち、ユーザが操作面に対して誤った操作を行ったとしても、選択されていない項目の状態は変更されることはないので、誤操作を防止することができる。従って、車両に搭載された各操作対象機器において設定されている項目の状態の詳細な変更操作を操作面への操作によって正確に行わせることが可能となる。

更に、請求項１５に記載のコンピュータプログラムによれば、操作面に設定された項目選択領域の押下操作によって変更操作対象とする操作対象機器の項目の状態を選択させ、その後に新たに設定された状態操作領域へのドラッグ操作によって選択された項目の状態の詳細な変更操作を行わせるので、複数の項目の状態が表示画面に表示されていたとしても項目の状態の変更操作をより少ない操作回数で行わせることが可能である。また、項目の状態が表示されたとしても、項目の状態が変更操作対象として選択されなければ状態操作領域が設定されない。即ち、ユーザが操作面に対して誤った操作を行ったとしても、選択されていない項目の状態は変更されることはないので、誤操作を防止することができる。従って、車両に搭載された各操作対象機器において設定されている項目の状態の詳細な変更操作を操作面への操作によって正確に行わせることが可能となる。

本実施形態に係る操作支援システムの概略構成を示したブロック図である。 操作入力装置及び表示画面の車両に対する配置態様を示した図である。 左操作入力装置を示した斜視図である。 図３の線Ｘ−Ｘで左操作入力装置を切断した矢視断面図である。 ピン駆動機構におけるピンの駆動態様を示した図である。 車両のフロントガラスに表示されるメイン画面を示した図である。 車両のフロントガラスに表示されるパラメータ設定画面を示した図である。 本実施形態に係る操作支援処理プログラムのフローチャートである。 本実施形態に係る操作支援処理プログラムのフローチャートである。 タッチパッドの操作面上に設定される選択領域を示した図である。 タッチパッドの操作面上に設定されたいずれかの選択領域をタッチした状態でのパラメータ設定画面を示した図である。 操作アイコンが表示された後におけるパラメータ設定画面を示した図である。 タッチパッドの操作面上に設定される操作領域を示した図である。 タッチパッドの操作面上に設定された操作領域をタッチする操作を受け付けた場合のパラメータ設定画面を示した図である。 タッチパッドの操作面上に設定された操作領域をタッチする操作を受け付けた場合のパラメータ設定画面を示した図である。

以下、本発明に係る操作支援システムについて具体化した一実施形態について図面を参照しつつ詳細に説明する。

先ず、本実施形態に係る操作支援システム１の概略構成について図１を用いて説明する。図１は本実施形態に係る操作支援システム１の概略構成を示したブロック図である。

図１に示すように本実施形態に係る操作支援システム１は、車両内に設置され、ユーザによる操作を受け付ける左操作入力装置２及び右操作入力装置３と、ダッシュボード上に設置され車両のフロントガラスに映像を投影するヘッドアップディスプレイ（ＨＵＤ）４と、左操作入力装置２及び右操作入力装置３とＣＡＮ等の車載ネットワークを介して接続された各種車載器（例えば、オーディオ、ナビゲーション装置）や車両機器（例えば、エアコン、パワーウィンドウ、ドアミラー）の制御装置等から構成されている。尚、上記車載器や車両機器が操作支援システム１において操作対象となる操作対象機器に該当する。

ここで、左操作入力装置２は、図２に示すように車両のハンドル５の左側スポーク部分に配置されている。また、右操作入力装置３は、車両のハンドル５の右側スポーク部分に配置されている。左操作入力装置２及び右操作入力装置３の前面には、後述のようにユーザのタッチ操作を受け付けるタッチパッド（操作面）が設けられており、ユーザはハンドル５を支持した状態で、後述のタッチ操作により左操作入力装置２や右操作入力装置３を操作可能に構成されている。そして、本実施形態に係る操作支援システム１では、ユーザは左操作入力装置２や右操作入力装置３を介して、特に車両に搭載された各種車載器や車両機器の操作を行うことが可能に構成されている。例えば、ナビゲーション装置の目的地設定操作や地図画像のスクロール操作、エアコンの電源切り替え操作や温度調整操作、オーディオのチャンネル操作や音量調整操作、ウィンドウの開閉、ドアのロック等を行うことが可能である。

以下に、左操作入力装置２及び右操作入力装置３の構成についてより詳細に説明する。尚、左操作入力装置２と右操作入力装置３は基本的に同一の構成を有しており、以下では特に左操作入力装置２を例に挙げて説明することとし、右操作入力装置３の説明は省略する。図３は左操作入力装置２を示した斜視図であり、図４は図３の線Ｘ−Ｘで左操作入力装置２を切断した矢視断面図である。
図３及び図４に示すように左操作入力装置２は、ユーザからのタッチ操作を検出するタッチパッド１１と、タッチパッド１１を振動させる為の圧電素子１２と、タッチパッド１１の下方において円柱形状のピンを上下動させる複数のピン駆動機構１３と、ピン駆動機構１３を所定の位置に固定する基部１４と、後述の操作支援ＥＣＵ１５が搭載される制御基板１６から基本的に構成される。尚、タッチ操作は、ユーザがタッチ面を触れることによって行う各種操作であり、例えばタッチパッド１１のいずれかの地点に触れる（タッチする）操作、上記触れた状態（タッチ状態）を解除する操作、ドラッグ操作、フリック操作等がある。

また、タッチパッド１１は、上面側から順にタッチパッド１１を保護するカバーシート１７と、静電容量の変化によってユーザのタッチ操作を検出する導電膜１８と、カバーシート１７や導電膜１８を前記基部１４に対して上方に支持する天板１９とから構成される。そして、操作支援ＥＣＵ１５は、後述のように所定の検出周期でユーザがタッチしたタッチ座標をタッチパッド１１の座標系で検出する。尚、タッチ座標は、ユーザがタッチパッド１１の操作面に触れた（静電容量方式では静電容量が変化したことを触れたとみなす）タッチ地点の位置の座標である。また、検出周期はタッチパッド１１の種類によって異なるが、例えば２００Ｈｚ〜２ｋＨｚとなる。尚、タッチパッド１１としては静電容量方式以外の検出方式（例えば抵抗膜方式）を用いても良い。

一方、天板１９の下面には圧電素子１２が取り付けられている。更に、タッチパッド１１と基部１４とは、四隅に配置された支持部２０によって両者間に所定の間隙を設けるように構成されている。その結果、圧電素子１２に信号電圧を加えることにより、圧電素子１２を歪ませると、その歪によってタッチパッド１１を上下方向に振動させることが可能となる。そして、本実施形態に係る操作支援システム１では、後述のようにタッチパッド１１内の所定の領域がタッチオンされた場合や、ユーザがタッチパッド１１の操作面を押下することによって操作面に所定量以上の変形（撓み）が生じた場合に、ピンが押下された場合にタッチパッド１１を振動させる。それによって、ユーザが実在するボタンを操作した触感を与えることが可能となる。また、操作支援ＥＣＵ１５は、電圧値を変更することによって振動方向や振動の振幅を任意に設定することが可能である。振動周期は、圧電素子１２の種類や設置態様によって異なるが、例えば２５０Ｈｚ〜２ｋＨｚとなる。尚、圧電素子１２はタッチパッド１１に直接接触して配置される必要はなく、タッチパッド１１に振動を伝達できるのであれば、他の部材に対して配置されていても良い。また、タッチパッド１１に振動を生じさせる手段としては、圧電素子１２の代わりに小型の振動モータ等を用いても良い。

また、圧電素子１２は、タッチパッド１１の操作面に生じた変形（撓み）を検出するセンサとしても機能する。即ち、天板１９の下面に取り付けられた圧電素子１２は、タッチパッド１１の操作面が変形するとそれに伴って変形する。従って、操作支援ＥＣＵ１５は圧電素子１２からの信号によってタッチパッド１１の操作面に変形（撓み）が生じたことを検出することが可能となる。

また、ピン駆動機構１３は、基部１４に対して３×３の計９箇所に所定の配置間隔（例えば縦横１ｃｍ間隔）で、ピン２１の先端部がタッチパッド１１に対向するように配置される。また、ピン２１は図４の矢印Ｚ方向に沿って上下動可能に支持されている。更に、ピン２１の底面には挿入孔２２が形成されており、挿入孔２２には支持部材２３が挿入されている。また、支持部材２３の底面には圧電素子２４が接続されている。そして、操作支援ＥＣＵ１５は、挿入孔２２と支持部材２３との間に生じる摩擦力を利用し、圧電素子２４に信号電圧を加えて振動させることによってピン２１を上方向及び下方向のいずれか一方の任意の方向に移動させることが可能となる。尚、ピン２１の駆動機構の詳細については公知であるので省略する。

また、タッチパッド１１を構成する導電膜１８及び天板１９は、ピン２１と対応する計９箇所の位置に貫通孔２５が形成されており、ピン２１が上方向に移動される場合には、タッチパッド１１の上面よりも上側にピン２１の先端が位置可能に構成されている。そして、操作支援ＥＣＵ１５は、各ピン駆動機構１３を駆動させることによって、計９個のピン駆動機構１３を図５に示すようなピン２１の先端がタッチパッド１１の操作面よりも下方にある“非突出状態”とピン２１の先端がタッチパッド１１の操作面よりも上方にある“突出状態”との間で選択的に切り換えることが可能となる。尚、カバーシート１７は図５に示すようにタッチパッド１１に対して突出された状態にあるピン２１を保護する為に、伸縮性のある材料（例えばシリコン樹脂）等を用いて形成することが望ましい。

また、左操作入力装置２及び右操作入力装置３の内、特に左操作入力装置２の操作面上には、図３に示すようにハードウェアの操作部である操作ボタン２７が設けられている。ここで、操作ボタン２７としては例えばホームボタンやショートカットボタンがある。そして、後述のようにアプリケーションの操作を行っている状態でホームボタンが押下されると、該アプリケーションを一旦終了し、ＨＵＤ４によって表示される表示画面も初期画面へと復帰される。また、ショートカットボタンが押下されると、予めショートカットボタンに対応付けられた機能（例えば、地図の縮尺変更操作、エアコンの設定温度変更操作等）が実行される。尚、操作ボタン２７は右操作入力装置３の操作面上にも設ける構成としても良い。また、操作ボタン２７をハードウェアの操作部であるハードキーではなく仮想的に操作面上に配置されるキーとしても良い。その場合には、操作支援ＥＣＵ１５は、タッチ座標が予め操作ボタン２７に対応付けられた座標範囲にある場合に、操作ボタン２７が押下されたと判定する。

また、制御基板１６に搭載される操作支援ＥＣＵ（エレクトロニック・コントロール・ユニット）１５は、左操作入力装置２の全体の制御を行う電子制御ユニットであり、演算装置及び制御装置としてのＣＰＵ３１、並びにＣＰＵ３１が各種の演算処理を行うにあたってワーキングメモリとして使用されるＲＡＭ３２、制御用のプログラムのほか、後述の操作支援処理プログラム（図８、図９参照）等が記録されたＲＯＭ３３、ＲＯＭ３３から読み出したプログラムやタッチ座標の履歴を記憶するフラッシュメモリ３４等の内部記憶装置を備えている。尚、操作支援ＥＣＵ１５は、処理アルゴリズムとしての各種手段を構成する。例えば、項目状態表示手段は、操作対象機器において設定されている複数のパラメータ（項目の状態）をＨＵＤ４によりフロントガラスに表示する。項目選択領域設定手段は、フロントガラスに表示された複数のパラメータ毎に、パラメータに対応付けた選択領域をタッチパッド１１の操作面に設定する。突出手段は、設定された各選択領域内において、タッチパッド１１の操作面よりも手前側にピン２１を突出させる。状態操作領域設定手段は、ユーザがタッチパッド１１の操作面に設定されたいずれかの選択領域に対してタッチした状態で、該選択領域内を押下した場合に、押下されたピン２１のある選択領域（対象選択領域）に対応するパラメータ（選択パラメータ）を変更する操作を行う為の状態操作領域をタッチパッド１１の操作面に新たに設定する。状態操作受付手段は、タッチパッド１１の操作面に新たに設定された状態操作領域内でユーザがドラッグする操作を、選択パラメータを変更する操作として受け付ける。状態変更手段は、操作受付手段により受け付けたユーザの操作に基づいて選択パラメータを変更するように操作対象機器を制御する。項目選択振動手段は、選択領域が押下された場合に、タッチパッド１１の操作面を振動させる。ドラッグ振動手段は、操作領域内でドラッグする操作を受け付けた場合に、タッチパッド１１の操作面を振動させる。操作領域解除手段は、操作領域が設定された後に、対象選択領域が再度押下された場合に、操作領域の設定を解除する。

また、ＨＵＤ４は、図２に示すようにダッシュボード３５上に設置されており、映像の投射方向が運転席の前方のフロントガラス３６の下縁付近となるように設定されている。そして、フロントガラス３６の表示対象領域３７に対して各種画像を表示する。

ここで、図６及び図７はＨＵＤ４によってフロントガラス３６の表示対象領域３７に表示される画像の一例を示した図である。
先ず、ＡＣＣがオンされた直後の状態では表示対象領域３７において図６に示すメイン画面４０が表示される。メイン画面４０には、操作支援システム１において操作対象となる操作対象機器（ナビゲーション装置、オーディオ、エアコン、パワーウィンドウ、ドア等）に対応する複数のメニューアイコン４１が表示される。そして、メイン画面４０においていずれかのメニューアイコン４１が選択されると、図７に示すように選択されたメニューアイコン４１（図７に示す例では『エアコン』のメニューアイコン４１）に対応したパラメータ設定画面４２が表示される。パラメータ設定画面４２では、操作対象機器の現在のパラメータ（項目の状態）がパラメータアイコン４３〜４５内にそれぞれ表示され、更にそのパラメータの変更操作が可能となる。

また、メイン画面４０において表示されるメニューアイコン４１は、操作対象機器によって複数のグループに区分されており、例えば、図６に示す例ではナビゲーション装置に関するメニューアイコン４１のグループと、オーディオに関するメニューアイコン４１のグループと、その他の車両機器に関するメニューアイコン４１のグループとに区分されている。ここで、本実施形態に係る操作支援システム１では、操作面の面積が狭いタッチパッド１１を用いてメニューアイコン４１の選択を行うので、右操作入力装置３によって直接的に選択対象（以下、選択対象候補）とすることが可能なメニューアイコン４１の数に限界がある。例えば、本実施形態では右操作入力装置３が備えるピン２１の数である９つのアイコンまで、選択対象候補とすることが可能である。従って、メニューアイコン４１が多数ある場合には、選択対象候補とするメニューアイコン４１を切り替える必要があり、本実施形態に係る操作支援システム１では、上記グループ単位で選択対象候補となるメニューアイコン４１を切り換えることとしている。そして、特に現在選択対象候補となるメニューアイコン４１のグループは、図６に示すように他のメニューアイコン４１のグループよりもアイコンのサイズが大きくなるように表示する。更に、選択対象候補となるメニューアイコン４１は、タッチパッド１１に配置されるピン２１の配置態様と対応する配置態様で表示する。即ち、３×３の等間隔の配置間隔で配置される。また、ユーザは左操作入力装置２において左右へのフリック操作やドラッグ操作を行うことによって、選択対象候補となるメニューアイコン４１のグループを順次変更することが可能である。

また、ユーザは右操作入力装置３を操作することによって現在選択対象候補となっているメニューアイコン４１のグループの内から任意のメニューアイコン４１を選択することが可能となる。具体的には、選択を希望するメニューアイコン４１の位置に対応するタッチパッド１１の位置（例えば、『エアコン』のメニューアイコン４１を選択する場合には左上のピン２１周辺）を右操作入力装置３においてタッチオンすることによってメニューアイコン４１が選択される。尚、メニューアイコン４１の位置に対応するピン２１を押下することや操作面に一定量以上の撓みを生じさせることを選択の条件としても良い。そして、いずれかのメニューアイコン４１が選択されると、図７に示すパラメータ設定画面４２が表示される。
尚、メイン画面４０やパラメータ設定画面４２を表示する表示手段としては、ＨＵＤ４の代わりに、車両内に設置された液晶ディスプレイや有機ＥＬディスプレイ、車両の運転者の頭部に装着可能に構成されるヘッドマウントディスプレイ（ＨＭＤ）等を用いても良い。また、ナビゲーション装置のディスプレイを用いても良い。

一方、左操作入力装置２や右操作入力装置３が有するＣＡＮ（コントローラエリアネットワーク）インターフェース４７は、車両内に設置された各種車載器や車両機器の制御装置間で多重通信を行う車載ネットワーク規格であるＣＡＮに対して、データの入出力を行うインターフェースである。そして、操作支援ＥＣＵ１５は、ＣＡＮを介して、各種車載器や車両機器の制御装置（例えば、ナビゲーション装置４８、ＡＶ装置４９、エアコン制御ＥＣＵ５０等）と相互通信可能に接続される。そして、操作支援ＥＣＵ１５は、左操作入力装置２や右操作入力装置３においてユーザの操作を受け付けた場合に、操作信号を各種車載器や車両機器の制御装置へと送信することによって、左操作入力装置２や右操作入力装置３を介した各種車載器や車両機器の操作を行う。

続いて、前記構成を有する操作支援システム１において操作支援ＥＣＵ１５が実行する操作支援処理プログラムについて図８及び図９に基づき説明する。図８及び図９は本実施形態に係る操作支援処理プログラムのフローチャートである。ここで、操作支援処理プログラムはメイン画面４０（図６）においていずれかのメニューアイコン４１が選択された後に実行され、左操作入力装置２や右操作入力装置３を介して操作対象機器の各種パラメータを変更する操作を行うプログラムである。尚、以下の図８及び図９にフローチャートで示されるプログラムは、操作支援システム１が備えているＲＡＭ３２やＲＯＭ３３に記憶されており、ＣＰＵ３１により実行される。

先ず、操作支援処理プログラムではステップ（以下、Ｓと略記する）１において、ＣＰＵ３１は、選択されたメニューアイコン４１に対応したパラメータ設定画面４２をＨＵＤ４によりフロントガラス３６の表示対象領域３７に表示する（図２参照）。ここで、パラメータ設定画面４２は、図７に示すように操作対象機器（図７に示す例ではエアコン）の現在のパラメータが、パラメータアイコン４３〜４５内にそれぞれ表示される。ここで、図７に示す例では、『風向』、『風量』、『設定温度』の３つのエアコンのパラメータが表示されており、ユーザはパラメータ設定画面４２を視認することによって、エアコンの風向が“水平”、風量が“４（５段階設定）”、設定温度が“２６℃”に設定されていることを把握できる。尚、パラメータ設定画面４２において表示対象となるパラメータの数は３つに限られることなく、１つや２つでも良い。但し、４つ以上のパラメータを表示すると操作性が低下する要因となることから、操作対象機器において設定されているパラメータが４以上ある場合であっても、パラメータ設定画面４２において表示し、変更操作の対象とするパラメータの数は最大３個とすることが望ましい。

次に、Ｓ２においてＣＰＵ３１は、フロントガラス３６の表示対象領域３７に表示されたパラメータ毎に、パラメータに対応付けた選択領域を右操作入力装置３のタッチパッド１１の操作面に設定する。具体的には、表示画面に対するパラメータの表示位置の関係と対応させて、選択領域を右操作入力装置３のタッチパッド１１の操作面に設定する。例えば、表示画面において図７に示すように３つのパラメータが左右方向に並んで表示されている場合には、図１０に示すように３つの選択領域５１〜５３を左右方向に並べて右操作入力装置３のタッチパッド１１の操作面に対して設定する。また、選択領域は、各選択領域内にピン２１を突出させる貫通孔２５を少なくとも一以上含むように設定する。ここで、選択領域５１は『風向』のパラメータに対応付けられた選択領域であり、中央の段の左側に位置するピン２１の貫通孔２５Ａを含む領域に設定される。また、選択領域５２は『風量』のパラメータに対応付けられた選択領域であり、中央の段の真ん中に位置するピン２１の貫通孔２５Ｂを含む領域に設定される。また、選択領域５３は『設定温度』のパラメータに対応付けられた選択領域であり、中央の段の右側に位置するピン２１の貫通孔２５Ｃを含む領域に設定される。

続いて、Ｓ３においてＣＰＵ３１は、ピン駆動機構１３を駆動させ、前記Ｓ２で設定された選択領域内に含まれる右操作入力装置３のピン２１（突出部）をタッチパッド１１の操作面よりも上方に移動させた“突出状態”とする（図５参照）。尚、通常時（即ちＳ１の開始時点）において左操作入力装置２及び右操作入力装置３に含まれる全てのピン２１は“非突出状態”となっており、前記Ｓ３では選択領域内に含まれないピン２１については“非突出状態”を維持する。

次に、Ｓ４においてＣＰＵ３１は、タッチパッド１１から送信される検出信号に基づいて、ユーザのタッチ操作を検出するタッチ操作検出処理を実行する。例えば、タッチパッド１１が抵抗膜方式や静電容量方式である場合には、所定値以上の圧力を検出した場合や所定値以上の静電容量の変化を検出した場合に、ユーザがタッチパッド１１をタッチした状態にあると判定する。

その後、Ｓ５においてＣＰＵ３１は、前記Ｓ４のタッチ操作の検出結果に基づいて、右操作入力装置３のタッチパッド１１の操作面において、ユーザが少なくとも１点以上をタッチしている状態（以下、タッチ状態という）にあるか否かを判定する。

そして、右操作入力装置３のタッチパッド１１の操作面をタッチしたタッチ状態にあると判定された場合（Ｓ５：ＹＥＳ）には、Ｓ７へと移行する。それに対して、右操作入力装置３のタッチパッド１１の操作面をタッチした状態にないと判定された場合（Ｓ５：ＮＯ）には、Ｓ６へと移行する。

Ｓ６においてＣＰＵ３１は、パラメータ設定画面４２に表示された操作対象機器のパラメータの変更操作を終了するか否か判定する。例えば、左操作入力装置２の操作面上に設けられたホームボタンが操作された場合等に、パラメータの変更操作を終了すると判定する。

そして、パラメータ設定画面４２に表示された操作対象機器のパラメータの変更操作を継続すると判定された場合（Ｓ６：ＮＯ）には、Ｓ４へと戻る。一方、パラメータ設定画面４２に表示された操作対象機器のパラメータの変更操作を終了すると判定された場合（Ｓ６：ＹＥＳ）には、当該操作支援処理プログラムを終了する。その後、全てのピン２１は非突出状態となり、フロントガラス３６にはメイン画面４０（図６）が表示される。

一方、Ｓ７においてＣＰＵ３１は、タッチパッド１１から送信される検出信号に基づいて、ユーザがタッチする地点の座標であるタッチ座標をタッチパッド１１の操作面の座標系で検出する。例えば、タッチパッド１１が抵抗膜方式や静電容量方式である場合には、圧力変化のあった地点や静電容量の変化に基づいて流れた電流の位置を検出することによって、タッチ座標を検出する。

次に、Ｓ８においてＣＰＵ３１は、前記Ｓ２で設定されたいずれかの選択領域内にタッチ座標が検出されたか否か、即ち選択領域の選択操作が行われたか否かを判定する。

そして、前記Ｓ２で設定されたいずれかの選択領域内にタッチ座標が検出されたと判定された場合（Ｓ８：ＹＥＳ）、即ち、ユーザがいずれかの選択領域を選択したと判定された場合には、Ｓ９へと移行する。それに対して、前記Ｓ２で設定された選択領域外にタッチ座標が検出されたと判定された場合（Ｓ８：ＮＯ）、即ち、ユーザがいずれの選択領域も選択していないと判定された場合には、Ｓ４へと戻る。

Ｓ９においてＣＰＵ３１は、前記Ｓ８でユーザによって選択されたと判定された選択領域（以下、対象選択領域という）に対応するパラメータを、ユーザによる変更操作対象となるパラメータ（以下、選択パラメータという）として仮に特定する。そして、フロントガラス３６に表示されたパラメータ設定画面４２において選択パラメータを他のパラメータよりも強調（他のパラメータと識別）して表示する。例えば、図７に示すパラメータ設定画面４２がフロントガラス３６に表示されており、図１０に示す選択領域５１〜５３が右操作入力装置３のタッチパッド１１の操作面に設定されている場合には、選択領域５１がユーザによってタッチされると、エアコンの『風向』が選択パラメータとして特定される。また、選択領域５２がユーザによってタッチされると、エアコンの『風量』が選択パラメータとして特定される。また、選択領域５３がユーザによってタッチされると、エアコンの『設定温度』が選択パラメータとして特定される。

尚、前記Ｓ９で仮に特定された選択パラメータは、その後に選択領域がユーザによって押下されることによって確定する。即ち、選択領域内をユーザがタッチしたとしても、その後に該選択領域が押下されない場合には、選択パラメータに対する変更操作を行うことはできない。

また、図１１は選択領域５１〜５３の内、特にエアコンの『風量』に対応する選択領域５２が選択された場合のパラメータ設定画面４２の表示例を示した図である。図１１に示す例では、『風量』のパラメータを示すパラメータアイコン４４が他のパラメータアイコン４３、４５よりも大きいサイズで表示され、ユーザは『風量』のパラメータが現在変更対象として仮に選択されていることを容易に把握することが可能となる。尚、選択パラメータを強調して表示する手段としては、拡大して表示する以外に、表示色を変えたり、線の太さを太くしても良い。

次に、Ｓ１０においてＣＰＵ３１は、予め設定された振動波形に対応する信号電圧を圧電素子１２に加えることにより、圧電素子１２を歪ませ、タッチパッド１１を振動させる。そして、振動を生じさせることによって、タッチパッド１１の選択領域をタッチするユーザに対して実在するボタンを押下するかのような触覚を与える。尚、振動波形はユーザによりタッチされた選択領域の形状や、選択領域に対応するパラメータの種類によって変更しても良い。

続いて、Ｓ１１においてＣＰＵ３１は、ユーザが選択領域に対してタッチした状態で、該選択領域を押下する操作を行ったか否かを判定する。具体的には、圧電素子１２からの信号に基づいてタッチパッド１１の操作面に変形（撓み）が生じているか否か判定し、タッチパッド１１の操作面に変形（撓み）が生じている場合には、選択領域を押下する操作が行われていると判定する。前記したようにタッチパッド１１と基部１４とは、四隅に配置された支持部２０によって両者間に所定の間隙を設けるように構成されているので（図４参照）、タッチパッド１１の操作面をユーザが強く押下すれば、操作面は下側に撓むこととなる。また、前記Ｓ１１の判定は、タッチパッド１１の操作面に対するユーザの接触面積によって判定しても良い。その場合には、接触面積が所定値以上であればユーザが選択領域を押下していると判定するように構成する。

そして、ユーザが選択領域に対してタッチした状態で、該選択領域を押下する操作を行ったと判定された場合（Ｓ１１：ＹＥＳ）には、前記Ｓ９で仮に特定された選択パラメータを、ユーザによる変更操作対象となる選択パラメータとして確定し、Ｓ１３へと移行する。それに対して、選択領域を押下する操作を行っていないと判定された場合（Ｓ１１：ＮＯ）には、Ｓ１２へと移行する。

Ｓ１２においてＣＰＵ３１は、前記Ｓ８でタッチ座標が位置すると判定された対象選択領域内にタッチ座標が継続して位置するか否かを判定する。

そして、対象選択領域内にタッチ座標が継続して位置すると判定された場合（Ｓ１２：ＹＥＳ）には、Ｓ１１へと戻る。それに対して、対象選択領域外にタッチ座標が移動したと判定された場合（Ｓ１２：ＮＯ）には、前記Ｓ９で仮に特定された選択パラメータの選択を解除してＳ１へと戻る。

続いて、Ｓ１３においてＣＰＵ３１は、前記Ｓ２でタッチパッド１１の操作面上に設定された選択領域を解除する。

その後、Ｓ１４においてＣＰＵ３１は、フロントガラス３６に表示されたパラメータ設定画面４２において、選択パラメータの周辺に操作アイコンを更に表示する。ここで、操作アイコンは、ユーザの操作とパラメータの変更態様とを対応づけたアイコンであり、ユーザが可能なパラメータ値の変更操作を視覚で示すものである。例えば、図１２に示す例では、『風量』のパラメータを示すパラメータアイコン４４の上側に『風量』のパラメータ値を上げることを示す操作アイコン５５が表示され、パラメータアイコン４４の下側に『風量』のパラメータ値を下げることを示す操作アイコン５６がそれぞれ表示される。従って、ユーザは今後のタッチパッド１１のタッチ操作によって、『風量』のパラメータを上げる又は下げる操作が可能であることを把握できる。尚、選択パラメータのパラメータ値が最小値又は最大値である場合には、変更操作可能な方向に対応する操作アイコンのみ（例えば『風量』が１である場合には操作アイコン５５のみ）を表示する。

次に、Ｓ１５においてＣＰＵ３１は、選択パラメータを変更する操作を行う為の操作領域を右操作入力装置３のタッチパッド１１の操作面に設定する。具体的には、右操作入力装置３のタッチパッド１１の操作面の全領域を操作領域に設定する。例えば、図１２に示すように『風量』のパラメータアイコン４４の上下方向にそれぞれ操作アイコン５５、５６が表示される場合には、図１３に示すように解除前の対象選択領域（図１３に示す例では選択領域５２）を含む全領域に操作領域５７を設定する。

続いて、Ｓ１６においてＣＰＵ３１は、ピン駆動機構１３を駆動させ、解除前の対象選択領域に含まれるピン２１を除いた右操作入力装置３のピン２１をタッチパッド１１の操作面よりも下方に移動させた“非突出状態”とする（図５参照）。

次に、Ｓ１７においてＣＰＵ３１は、タッチパッド１１から送信される検出信号に基づいて、ユーザのタッチ操作を検出するタッチ操作検出処理を実行する。詳細についてはＳ４と同様であるので省略する。

その後、Ｓ１８においてＣＰＵ３１は、前記Ｓ１７のタッチ操作の検出結果に基づいて、右操作入力装置３のタッチパッド１１の操作面において、ユーザが少なくとも１点以上をタッチしているタッチ状態にあるか否かを判定する。

そして、右操作入力装置３のタッチパッド１１の操作面をタッチしたタッチ状態にあると判定された場合（Ｓ１８：ＹＥＳ）には、Ｓ２１へと移行する。それに対して、右操作入力装置３のタッチパッド１１の操作面をタッチした状態にないと判定された場合（Ｓ１８：ＮＯ）には、Ｓ１９へと移行する。

Ｓ１９においてＣＰＵ３１は、右操作入力装置３のタッチパッド１１の操作面において最後にタッチ座標が検出されてから所定時間（例えば１０ｓｅｃ）経過したか否か判定する。

そして、右操作入力装置３のタッチパッド１１の操作面において最後にタッチ座標が検出されてから所定時間経過した判定された場合（Ｓ１９：ＹＥＳ）には、Ｓ２０へと移行する。それに対して、右操作入力装置３のタッチパッド１１の操作面において最後にタッチ座標が検出されてから所定時間経過していないと判定された場合（Ｓ１９：ＮＯ）には、Ｓ１７へと戻る。

続いて、Ｓ２０においてＣＰＵ３１は、前記Ｓ１５でタッチパッド１１の操作面上に設定された操作領域を解除する。即ち、選択領域へのタッチ操作によって選択されたパラメータの選択状態が解除される。その後、Ｓ１へと戻り初期状態（いずれのパラメータも選択されていない状態）のパラメータ設定画面４２がフロントガラス３６に表示される。

一方、Ｓ２１においてＣＰＵ３１は、解除前の対象選択領域を押下する操作を行ったか否かを判定する。具体的には、対象選択領域内にタッチ座標があって、タッチパッド１１の操作面に変形（撓み）が生じている場合に、対象選択領域を押下する操作が行われていると判定する。また、前記Ｓ２１の判定は、タッチパッド１１の操作面に対するユーザの接触面積によって判定しても良い。その場合には、接触面積が所定値以上であればユーザが対象選択領域を押下していると判定するように構成する。

そして、対象選択領域を押下する操作を行ったと判定された場合（Ｓ２１：ＹＥＳ）には、Ｓ２０へと移行する。その後、上述したようにパラメータの選択状態が解除され、Ｓ１へと戻る。それに対して、対象選択領域を押下する操作を行っていないと判定された場合（Ｓ２１：ＮＯ）には、Ｓ２２へと移行する。

Ｓ２２においてＣＰＵ３１は、タッチパッド１１から送信される検出信号に基づいて、ユーザがタッチする地点の座標であるタッチ座標をタッチパッド１１の操作面の座標系で検出する。詳細についてはＳ７と同様であるので省略する。

次に、Ｓ２３においてＣＰＵ３１は、前記Ｓ１５で設定されたいずれかの操作領域内にタッチ座標が検出されたか否か判定する。尚、本実施形態ではタッチパッド１１の操作面の全領域に対して操作領域を設定するので、前記Ｓ２３の処理は省略しても良い。

そして、前記Ｓ１５で設定されたいずれかの操作領域内にタッチ座標が検出されたと判定された場合（Ｓ２３：ＹＥＳ）には、Ｓ２４へと移行する。それに対して、前記Ｓ１５で設定された操作領域外にタッチ座標が検出されたと判定された場合（Ｓ２３：ＮＯ）には、Ｓ１７へと戻る。

Ｓ２４においてＣＰＵ３１は、前記Ｓ２２で検出されたタッチ座標の検出履歴をＲＡＭ３２等から読み出し、操作領域内でドラッグ操作が行われたか否かを判定する。尚、ドラッグ操作は、操作面に対するタッチ状態を維持してタッチ座標を移動させる操作をいう。

そして、操作領域内でドラッグ操作が行われたと判定された場合（Ｓ２４：ＹＥＳ）には、該操作を選択パラメータを変更する操作として受け付け、Ｓ２５へと移行する。それに対して、操作領域内でドラッグ操作が行われていないと判定された場合（Ｓ２４：ＮＯ）には、Ｓ１７へと戻る。

Ｓ２５においてＣＰＵ３１は、前記Ｓ２４で受け付けたと判定されたドラッグ操作（より具体的にはドラッグ方向）に対応する操作アイコン（以下、対応操作アイコンという）を特定する。そして、フロントガラス３６に表示されたパラメータ設定画面４２において対応操作アイコンを他の操作アイコンよりも強調（他のパラメータと識別）して表示する。

例えば、図１２に示すパラメータ設定画面４２がフロントガラス３６に表示されている場合において、操作領域５７内でユーザが上方向にドラッグ操作を行うと、エアコンの『風量』のパラメータ値を上昇させる操作アイコン５５が対応操作アイコンとして特定される。その結果、図１４に示すように操作アイコン５５が操作アイコン５６よりも大きいサイズで表示される。また、パラメータアイコン４４内に表示されるパラメータ値も変更後の値（図１４では「４」から「５」に変更）に更新される。
一方、操作領域５７内でユーザが下方向にドラッグ操作を行うと、エアコンの『風量』のパラメータ値を下げる操作アイコン５６が対応操作アイコンとして特定される。その結果、図１５に示すように操作アイコン５６が操作アイコン５５よりも大きいサイズで表示される。また、パラメータアイコン４４内に表示されるパラメータ値も変更後の値（図１５では「４」から「３」に変更）に更新される。その結果、ユーザは『風量』のパラメータをどのように変更する操作を行うのかを容易に把握することが可能となる。尚、対応操作アイコンを強調して表示する手段としては、拡大して表示する以外に、表示色を変えたり、線の太さを太くしても良い。

次に、Ｓ２６においてＣＰＵ３１は、予め設定された振動波形に対応する信号電圧を圧電素子１２に加えることにより、圧電素子１２を歪ませ、タッチパッド１１を振動させる。そして、振動を生じさせることによって、タッチパッド１１の操作領域をタッチするユーザに対して実在するボタンを押下するかのような触覚を与える。尚、振動波形はユーザによりタッチされた操作領域の形状や、ドラッグ操作の移動速度、操作領域に対応するパラメータ値の変更操作内容によって変更しても良い。

その後、Ｓ２７においてＣＰＵ３１は、前記Ｓ１７〜Ｓ２４で受け付けた操作領域へのタッチ操作に対応するパラメータ値の変更操作内容（選択パラメータをどのように変更させるか）を特定し、ＣＡＮを介して、パラメータを変更させる操作対象載器に対して変更操作内容を送信する。そして、変更操作内容を受信した操作対象機器は、受信した変更操作内容に沿って選択パラメータを変更するように制御され、その結果、左操作入力装置２及び右操作入力装置３を介した操作対象機器の操作が行われることとなる。尚、操作対象機器におけるパラメータ値の変更量については、前記Ｓ１７〜Ｓ２４で受け付けた操作領域へのタッチ操作に基づく変更量となる。例えば、パラメータ値を１のみ上昇させる操作を受け付けていれば、パラメータ値を１のみ上昇させる。また、パラメータ値を５上昇させる操作を受け付けていれば、パラメータ値を５上昇させる。尚、パラメータの変更量は、ドラッグした回数以外にドラッグ速度によって変更しても良い。その後、Ｓ１７へと戻る。

尚、右操作入力装置３とパラメータを変更させる操作対象機器とは、前記Ｓ２で設定されたいずれかの選択領域をユーザが選択するタッチ操作を受け付けた時点で、通信可能に接続しても良いし、前記Ｓ１５で設定された操作領域へのタッチ操作を受け付けた場合に、通信可能に接続しても良い。また、ＡＣＣがオンされた状態で、右操作入力装置３と全ての操作対象機器とを常に通信可能な状態に接続しても良い。そして、前記Ｓ２７では、右操作入力装置３から通信可能となった操作対象機器に対して、右操作入力装置３で受け付けたユーザの操作内容（具体的にはパラメータ値の変更操作内容）が送信される。

以上詳細に説明した通り、本実施形態に係る操作支援システム１、操作支援システム１による操作支援方法及び操作支援システム１で実行されるコンピュータプログラムによれば、操作対象機器において設定されている複数のパラメータをフロントガラス３６に表示し（Ｓ１）、表示された複数のパラメータ毎に、パラメータに対応付けた選択領域をタッチパッド１１の操作面に設定し（Ｓ２）、操作面に設定されたいずれかの選択領域をユーザがタッチした状態で、該選択領域内のピン２１を押下する選択操作を受け付けた場合に、選択された選択領域（対象選択領域）に対応するパラメータ（選択パラメータ）を変更する操作を行う為の操作領域をタッチパッド１１の操作面に新たに設定し（Ｓ１５）、操作領域内でユーザがドラッグする操作を、選択パラメータを変更する操作として受け付け（Ｓ１７〜Ｓ２４）、受け付けたユーザの操作に基づいて選択パラメータを変更するように操作対象機器を制御するので、複数のパラメータが表示画面に表示されていたとしてもパラメータの変更操作をより少ない操作回数で行わせることが可能である。また、パラメータが表示されたとしても、パラメータが変更操作対象として選択されなければ操作領域が設定されない。即ち、ユーザがタッチパッド１１の操作面に対して誤った操作を行ったとしても、選択されていないパラメータは変更されることはないので、誤操作を防止することができる。従って、車両に搭載された各操作対象機器において設定されているパラメータの詳細な変更操作を操作面へのタッチ操作によって正確に行わせることが可能となる。
また、選択パラメータを他のパラメータと識別可能に表示するので、表示画面をユーザが視認することによって、現在変更操作の対象となっているパラメータを容易に識別することが可能となる。
また、ドラッグ操作のドラッグ方向に応じた方向へと、選択パラメータを変更するので、パラメータを複数の方向へと変更させる操作をタッチパッド１１の操作面を用いて容易に行わせることが可能である。
また、選択領域内のピン２１が押下された場合や、操作領域内でドラッグ操作が行われた場合に、タッチパッド１１の操作面を振動させるので、実在するボタン等の操作対象物を操作するのと同等の触感をユーザに付与することが可能となる。
また、操作領域をタッチパッド１１の操作面の全領域に設定するので、操作面全体を用いたドラッグ操作によってユーザの選択パラメータの変更操作を容易に行わせることが可能となる。
また、表示画面は車両のフロントガラス３６に設けるので、車両を運転するユーザが視線方向を変更することなく、表示画面に表示された操作対象機器の各種パラメータを把握することが可能となる。
また、操作領域が設定された後に、対象選択領域が再度押下された場合に、操作領域の設定を解除するので、操作面へのタッチ操作によって変更操作対象となるパラメータを容易に切り換えることが可能となる。
また、タッチパッド１１の操作面に設定されたいずれかの選択領域をユーザがタッチした状態で、該選択領域が押下された場合、又はタッチパッド１１の操作面において選択パラメータを変更する操作を受け付けた場合に、左操作入力装置２及び右操作入力装置３と操作対象機器とを通信可能に接続し、左操作入力装置２及び右操作入力装置３で受け付けたユーザの操作内容を左操作入力装置２及び右操作入力装置３から該当する操作対象機器へと送信することにより操作対象機器を制御するので、車両内に設置された様々な操作対象機器に対して、同一の操作入力装置を介してパラメータの変更操作を行うことが可能となる。
また、選択領域内において、操作面よりも手前側にピン２１を突出させるので、突出されたピン２１を基準としてユーザのパラメータの選択操作を正確に行わせることが可能となる。
また、受け付けたパラメータを変更する操作に基づく変更量に対応させて、操作対象機器に設定されているパラメータを変更するので、パラメータを変更する際の変更量についても操作面への操作によって任意に調整することが可能となる。従って、パラメータを変更する操作の操作性について向上させることが可能となる。

尚、本発明は前記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の改良、変形が可能であることは勿論である。
例えば、本実施形態ではタッチパッドによるタッチ操作を行う場合について説明しているが、タッチ操作を受け付ける手段としてはタッチパッド以外のタッチパネル、タブレット等を用いても良い。また、タッチパネルを用いる場合には、メニューアイコン４１やパラメータアイコン４３〜４５を表示するディスプレイを、タッチパネルに重畳して配置する。

また、本実施形態では、左操作入力装置２と右操作入力装置３の両方にピン駆動機構１３を設けることとしているが、右操作入力装置３のみに設けることとしても良い。また、ピンを駆動させる処理を省略すれば右操作入力装置３にもピン駆動機構１３を設けない構成とすることも可能である。

また、本実施形態では、左操作入力装置２及び右操作入力装置３において、ピン２１は３×３の計９個配置する構成としているが、例えば２×２の計４個や４×４の計１６個配置する構成としても良い。また、ピン２１の配置態様に応じて左操作入力装置２及び右操作入力装置３によって操作対象となるアイコンやパラメータの数及び配置を定義変更する必要がある。

また、本実施形態では、選択領域をタッチした状態で該選択領域を押下する操作をパラメータの選択操作として受け付けているが、ピン２１が押下されたことを検出する検出手段を新たに設け、選択領域をタッチした状態で該選択領域内のピン２１を押下する操作をパラメータの選択操作として受け付けるように構成しても良い。

また、上述した操作支援ＥＣＵ１５が実行する処理の一部又は全部をナビゲーション装置のＥＣＵが実行する構成としても良い。また、パラメータやアイコンを表示する表示画面はナビゲーション装置のディスプレイにおいて表示する構成としても良い。

１ 操作支援システム
２ 左操作入力装置
３ 右操作入力装置
４ ＨＵＤ
１１ タッチパッド
１２ 圧電素子
１３ ピン駆動機構
１５ 操作支援ＥＣＵ
２１ ピン
３１ ＣＰＵ
３２ ＲＡＭ
３３ ＲＯＭ
３４ フラッシュメモリ
５１〜５３ 選択領域
５７ 操作領域

Claims (15)

1. 車両のハンドルに設けられ、操作面を介してユーザの操作を受け付ける操作入力装置と、前記操作入力装置により操作される操作対象を表示する表示画面と、前記車両に搭載され、前記操作対象となる操作対象機器と、を備えた操作支援システムにおいて、
   前記操作対象機器に設定されている複数の項目の状態を前記表示画面に表示する項目状態表示手段と、
   複数の前記項目の状態毎に対応付けた項目選択領域を前記操作面に設定する項目選択領域設定手段と、
   いずれかの前記項目選択領域に対して触れた状態で、該項目選択領域を押下する前記ユーザの操作が検出された場合に、該ユーザの操作が検出された前記項目選択領域に対応する前記項目の状態を操作する状態操作領域を前記操作面に設定する状態操作領域設定手段と、
   前記操作面に設定された前記状態操作領域内で前記ユーザがドラッグする操作を、前記項目の状態を変更する操作として受け付ける状態操作受付手段と、
   前記状態操作受付手段により受け付けた前記項目の状態を変更する操作に基づいて前記操作対象機器に設定されている項目の状態を変更する状態変更手段と、を有することを特徴とする操作支援システム。
2. 前記項目選択領域設定手段は、前記表示画面に対する前記項目の状態の表示位置の関係と対応させて、前記項目選択領域を前記操作面に設定することを特徴とする請求項１に記載の操作支援システム。
3. 前記項目状態表示手段は、前記状態操作領域設定手段によって設定された前記状態操作領域によって操作対象となる前記項目の状態を他の前記項目の状態と識別可能に表示することを特徴とする請求項１又は請求項２に記載の操作支援システム。
4. 前記状態変更手段は、前記状態操作受付手段により受け付けた前記ユーザのドラッグする操作のドラッグ方向に応じた方向へと、前記項目の状態を変更することを特徴とする請求項１乃至請求項３のいずれかに記載の操作支援システム。
5. 前記状態操作領域設定手段は、前記状態操作領域を前記操作面の全領域に設定することを特徴とする請求項１乃至請求項４のいずれかに記載の操作支援システム。
6. 前記状態変更手段は、前記状態操作受付手段により受け付けた前記項目の状態を変更する操作に基づく変更量に対応させて、前記操作対象機器に設定されている前記項目の状態を変更することを特徴とする請求項１乃至請求項５のいずれかに記載の操作支援システム。
7. 前記項目選択領域において前記ユーザの操作が検出された場合に、前記操作面を振動させる選択振動手段を有することを特徴とする請求項１乃至請求項６のいずれかに記載の操作支援システム。
8. 前記状態操作領域内で前記ユーザのドラッグする操作を受け付けた場合に、前記操作面を振動させるドラッグ振動手段を有することを特徴とする請求項１乃至請求項７のいずれかに記載の操作支援システム。
9. 前記状態操作領域設定手段によって前記状態操作領域が設定された後に、前記項目選択領域を押下する前記ユーザの操作が再度検出された場合に、前記状態操作領域の設定を解除する状態操作領域解除手段を有することを特徴とする請求項１乃至請求項８のいずれかに記載の操作支援システム。
10. 前記操作面に設定されたいずれかの前記項目選択領域において前記ユーザの操作が検出された場合に、前記操作入力装置と前記操作対象機器とを通信可能に接続し、
    前記操作入力装置で受け付けた前記ユーザの操作内容を前記操作入力装置から前記操作対象機器へと送信することにより、前記操作対象機器に設定されている項目の状態を変更することを特徴とする請求項１乃至請求項９のいずれかに記載の操作支援システム。
11. 前記状態操作受付手段により前記ユーザの操作を受け付けた場合に、前記操作入力装置と前記操作対象機器とを通信可能に接続し、
    前記操作入力装置で受け付けた前記ユーザの操作内容を前記操作入力装置から前記操作対象機器へと送信することにより、前記操作対象機器に設定されている項目の状態を変更することを特徴とする請求項１乃至請求項９のいずれかに記載の操作支援システム。
12. 前記項目選択領域設定手段によって設定された前記項目選択領域内において、前記操作面よりも手前側に突出部を突出させる突出手段を有することを特徴とする請求項１乃至請求項１１のいずれかに記載の操作支援システム。
13. 前記表示画面は、前記車両のフロントガラスに設けることを特徴とする請求項１乃至請求項１２のいずれかに記載の操作支援システム。
14. 車両のハンドルに設けられ、操作面を介してユーザの操作を受け付ける操作入力装置と、前記操作入力装置により操作される操作対象を表示する表示画面と、前記車両に搭載され、前記操作対象となる操作対象機器と、を備えた操作支援システムによる操作支援方法において、
    前記操作対象機器に設定されている複数の項目の状態を前記表示画面に表示する項目状態表示ステップと、
    複数の前記項目の状態毎に対応付けた項目選択領域を前記操作面に設定する項目選択領域設定ステップと、
    いずれかの前記項目選択領域に対して触れた状態で、該項目選択領域を押下する前記ユーザの操作が検出された場合に、該ユーザの操作が検出された前記項目選択領域に対応する前記項目の状態を操作する状態操作領域を前記操作面に設定する状態操作領域設定ステップと、
    前記操作面に設定された前記状態操作領域内で前記ユーザがドラッグする操作を、前記項目の状態を変更する操作として受け付ける状態操作受付ステップと、
    前記状態操作受付ステップにより受け付けた前記項目の状態を変更する操作に基づいて前記操作対象機器に設定されている項目の状態を変更する状態変更ステップと、を有することを特徴とする操作支援方法。
15. 車両のハンドルに設けられ、操作面を介してユーザの操作を受け付ける操作入力装置と、前記操作入力装置により操作される操作対象を表示する表示画面と、前記車両に搭載され、前記操作対象となる操作対象機器と、を備えた操作支援システムにおいて実行されるコンピュータプログラムにおいて、
    前記操作対象機器に設定されている複数の項目の状態を前記表示画面に表示する項目状態表示機能と、
    複数の前記項目の状態毎に対応付けた項目選択領域を前記操作面に設定する項目選択領域設定機能と、
    いずれかの前記項目選択領域に対して触れた状態で、該項目選択領域を押下する前記ユーザの操作が検出された場合に、該ユーザの操作が検出された前記項目選択領域に対応する前記項目の状態を操作する状態操作領域を前記操作面に設定する状態操作領域設定機能と、
    前記操作面に設定された前記状態操作領域内で前記ユーザがドラッグする操作を、前記項目の状態を変更する操作として受け付ける状態操作受付機能と、
    前記状態操作受付機能により受け付けた前記項目の状態を変更する操作に基づいて前記操作対象機器に設定されている項目の状態を変更する状態変更機能と、
    を実行させることを特徴とするコンピュータプログラム。

Images