[go: up one dir, main page]

JPWO2013057882A1 - 表示制御装置、集積回路、表示制御方法およびプログラム - Google Patents

表示制御装置、集積回路、表示制御方法およびプログラム Download PDF

Info

Publication number
JPWO2013057882A1
JPWO2013057882A1 JP2013510156A JP2013510156A JPWO2013057882A1 JP WO2013057882 A1 JPWO2013057882 A1 JP WO2013057882A1 JP 2013510156 A JP2013510156 A JP 2013510156A JP 2013510156 A JP2013510156 A JP 2013510156A JP WO2013057882 A1 JPWO2013057882 A1 JP WO2013057882A1
Authority
JP
Japan
Prior art keywords
category
display
attention level
selection probability
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013510156A
Other languages
English (en)
Other versions
JP5869558B2 (ja
Inventor
幸太郎 坂田
幸太郎 坂田
前田 茂則
茂則 前田
山内 真樹
真樹 山内
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Panasonic Intellectual Property Corp of America
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Corp of America filed Critical Panasonic Intellectual Property Corp of America
Priority to JP2013510156A priority Critical patent/JP5869558B2/ja
Publication of JPWO2013057882A1 publication Critical patent/JPWO2013057882A1/ja
Application granted granted Critical
Publication of JP5869558B2 publication Critical patent/JP5869558B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44222Analytics of user selections, e.g. selection of programs or purchase activity
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4532Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4756End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for rating content, e.g. scoring a recommended movie
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4882Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233Character input methods
    • G06F3/0237Character input methods using prediction or retrieval techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Ophthalmology & Optometry (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

複数のプッシュ情報管理部(101)と、ユーザの画面注目度を判定する画面注目度判定部(103)と、各カテゴリが選択された選択操作履歴情報を収集する選択操作履歴収集部(104)と、画面注目度および選択操作履歴情報に基づいて、各カテゴリについてユーザの選択確率を算出する選択確率算出部(108)と、選択確率が高いカテゴリ程、該カテゴリのプッシュ情報を選択容易な表示形態で表示部に表示させる表示形態決定部(109)とを備え、複数のカテゴリは、画面のコンテンツに関連するプッシュ情報からなる関連カテゴリを含み、選択確率算出部(108)は、画面注目度が第1注目度の関連カテゴリの選択確率を、第1注目度より低い第2注目度の関連カテゴリの選択確率より高く算出し、各カテゴリについて、選択操作履歴情報を用いて、選択された回数が第1回数の選択確率を、第1回数より少ない第2回数の選択確率より高く算出する。

Description

本発明は、表示部の画面への表示を制御する表示制御装置に関する。
従来、視聴履歴に基づいて、番組関連情報の表示方法を制御したり、画面構成等の視聴形態を選択するものがある(特許文献1を参照)。また、ユーザの過去の視聴履歴に基づき、入力ソースの視聴形態を決定するものが知られている(特許文献2を参照)。
特許第3747541号公報 特許第4046994号公報
しかしながら、前記従来の構成では、ネットワークに接続する機器が増大するにつれ、情報を提示するテレビやタブレット端末、スマートフォンなどの表示装置に対し、プッシュすべき情報(プッシュ情報)が多種多様になる。そのため、ユーザが選択を望むカテゴリのプッシュ情報を、容易に選択することが難しくなるという課題がある。
本発明は、このような課題を解決するためになされたものであり、ユーザによって選択される可能性が高い項目を表示できる表示制御装置等を提供することを目的とする。
上記目的を達成するために、本発明の一態様に係る表示制御装置は、画面を有する表示部の表示を制御する表示制御装置であって、複数のカテゴリのいずれかに属する複数の項目を管理する管理部と、前記表示部の画面に対するユーザの注目度である画面注目度を判定する画面注目度判定部と、前記複数のカテゴリの各々が選択された履歴を示す選択操作履歴情報を収集する選択操作履歴収集部と、前記画面注目度および前記選択操作履歴情報に基づいて、前記複数のカテゴリの各々に対し、前記ユーザが選択する確率である選択確率を算出する選択確率算出部と、前記複数のカテゴリのうち選択確率が高いカテゴリ程、該カテゴリの項目を選択容易な表示形態に決定し、決定した前記表示形態で前記表示部に表示させる表示形態決定部とを備え、前記複数のカテゴリは、前記画面に表示されているコンテンツに関連する項目からなるカテゴリである関連カテゴリを含み、前記選択確率算出部は、前記画面注目度が第1注目度の場合における前記関連カテゴリの選択確率を、前記画面注目度が前記第1注目度より低い第2注目度の場合における前記関連カテゴリの選択確率より高く算出し、前記複数のカテゴリのそれぞれについて、前記選択操作履歴情報を用いて、選択された回数が第1回数の場合における選択確率を、前記選択された回数が前記第1回数より少ない第2回数の場合における選択確率より高く算出する。
なお、これらの包括的または具体的な態様は、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なCD−ROMなどの記録媒体で実現されてもよく、方法、集積回路、コンピュータプログラムおよび記録媒体の任意な組み合わせで実現されてもよい。
本発明の表示制御装置は、複数の項目に対応する複数のカテゴリのうち、ユーザによって選択される確率が高い項目を表示できる。
図1Aは、実施の形態における表示制御装置の機能構成を示すブロック図である。 図1Bは、表示部の構成を示す図である。 図2は、表示制御処理の流れを示すフローチャートである。 図3は、表示制御装置の機能構成をさらに詳細に示すブロック図である。 図4は、表示制御処理の流れを詳細に示すフローチャートである。 図5は、各カテゴリの選択確率を算出する処理の詳細な流れを示すフローチャートである。 図6Aは、撮像装置の配置の一例を説明するための図である。 図6Bは、撮像装置の配置の他の一例を説明するための図である。 図6Cは、撮像装置の配置のさらに他の一例を説明するための図である。 図7は、視線方向検出処理の流れを示すフローチャートである。 図8は、視線方向検出処理において顔向きを検出する処理を説明するための図である。 図9は、視線方向基準面の算出について説明するための図である。 図10は、黒目中心の検出について説明するための図である。 図11は、黒目中心の検出について説明するための図である。 図12Aは、入力装置の一例を説明する図である。 図12Bは、入力装置の他の一例を説明する図である。 図12Cは、入力装置のさらに他の一例を説明する図である。 図13Aは、関連情報の選択確率が最も高い場合のプッシュ情報の表示の一例を説明する図である。 図13Bは、トレンド情報の選択確率が最も高い場合のプッシュ情報の表示の一例を説明する図である。 図13Cは、通知情報の選択確率が最も高い場合のプッシュ情報の表示の一例を説明する図である。 図14Aは、関連情報の選択確率が最も高い場合のプッシュ情報の表示の他の一例を説明する図である。 図14Bは、トレンド情報の選択確率が最も高い場合のプッシュ情報の表示の他の一例を説明する図である。 図14Cは、通知情報の選択確率が最も高い場合のプッシュ情報の表示の他の一例を説明する図である。 図15Aは、関連情報の選択確率が最も高い場合のプッシュ情報の表示のさらに他の一例を説明する図である。 図15Bは、トレンド情報の選択確率が最も高い場合のプッシュ情報の表示のさらに他の一例を説明する図である。 図15Cは、通知情報の選択確率が最も高い場合のプッシュ情報の表示のさらに他の一例を説明する図である。 図16Aは、関連情報の選択確率が最も高い場合のプッシュ情報の表示のさらに他の一例を説明する図である。 図16Bは、トレンド情報の選択確率が最も高い場合のプッシュ情報の表示のさらに他の一例を説明する図である。 図16Cは、通知情報の選択確率が最も高い場合のプッシュ情報の表示のさらに他の一例を説明する図である。 図17Aは、関連情報の選択確率が最も高い場合のプッシュ情報の表示のさらに他の一例を説明する図である。 図17Bは、トレンド情報の選択確率が最も高い場合のプッシュ情報の表示のさらに他の一例を説明する図である。 図17Cは、通知情報の選択確率が最も高い場合のプッシュ情報の表示のさらに他の一例を説明する図である。 図18Aは、関連情報の選択確率が最も高い場合のプッシュ情報の表示のさらに他の一例を説明する図である。 図18Bは、トレンド情報の選択確率が最も高い場合のプッシュ情報の表示のさらに他の一例を説明する図である。 図18Cは、通知情報の選択確率が最も高い場合のプッシュ情報の表示のさらに他の一例を説明する図である。 図19は、変形例1に係る表示制御装置の詳細な機能構成を示すブロック図である。 図20は、変形例2に係る表示制御装置の詳細な機能構成を示すブロック図である。
(本発明の基礎となった知見)
本発明者らは、「背景技術」の欄において記載した表示制御装置に関し、以下の問題が生じることを見いだした。
放送と通信の融合の進展により、テレビは単に放送コンテンツを視聴するために利用されるだけでなく、ウェブ情報などさまざまな情報を閲覧するディスプレイへと発展している。また、テレビの新しい機能の一つとして、生活に関連したさまざまな情報を適切なタイミングで通知する機能も提案されている。
近年では、電気機器のネットワーク機能が普及し、BD(Blu−ray Disc)レコーダーや、ネットワークカメラなどをテレビと連携させ、一つのリモコンで複数の機器を操作することや、テレビの画面でネットワークカメラの映像を確認するといったことも可能である。
また、これらの機器に加えて、洗濯機、冷蔵庫、電子レンジといった家電機器をテレビと連携させることで、各機器の稼働状態など、各機器に関する情報をテレビで確認することも可能である。すなわち、テレビのような表示装置と他の複数の機器とを、ネットワークを通じて連携させ、表示装置に各機器からの情報を表示させることで、ユーザは各機器の近くに行かなくとも、表示装置から、各機器の情報を参照できる。
特許文献1の技術では、データ伝送手段を介してデータ受信側へ放送される各番組に関連する番組関連情報を伝送するデータ配信側における番組関連情報伝送制御装置において以下の処理が行われる。
番組関連情報伝送制御装置は、データ受信側から、その視聴操作に応じて得られる視聴履歴情報を収集する。そして、番組関連情報伝送制御装置は、前記視聴履歴情報に基づいて、各番組の番組関連情報の送出条件を制御する。
特許文献2の情報処理装置は、ユーザの過去の視聴パターンを履歴情報として記憶する。そして、当該情報処理装置は、複数のメディアから提供される入力ソースの映像または音声を同時に出力する際、上記履歴情報に基づいて自動的にユーザの嗜好に合った入力ソースの視聴形態を決定する。
しかしながら、前記特許文献1及び2の構成では、ネットワークに接続する機器が増大するにつれ、情報を提示するテレビやタブレット端末、スマートフォンなどの表示装置に対し、プッシュすべき情報(プッシュ情報)が多種多様になる。そのため、ユーザが選択を望むカテゴリのプッシュ情報を、容易に選択することが難しくなるという問題がある。
このような問題を解決するために、本発明の一態様に係る表示制御装置は、画面を有する表示部の表示を制御する表示制御装置であって、複数のカテゴリのいずれかに属する複数の項目を管理する管理部と、前記表示部の画面に対するユーザの注目度である画面注目度を判定する画面注目度判定部と、前記複数のカテゴリの各々が選択された履歴を示す選択操作履歴情報を収集する選択操作履歴収集部と、前記画面注目度および前記選択操作履歴情報に基づいて、前記複数のカテゴリの各々に対し、前記ユーザが選択する確率である選択確率を算出する選択確率算出部と、前記複数のカテゴリのうち選択確率が高いカテゴリ程、該カテゴリの項目を選択容易な表示形態に決定し、決定した前記表示形態で前記表示部に表示させる表示形態決定部とを備え、前記複数のカテゴリは、前記画面に表示されているコンテンツに関連する項目からなるカテゴリである関連カテゴリを含み、前記選択確率算出部は、前記画面注目度が第1注目度の場合における前記関連カテゴリの選択確率を、前記画面注目度が前記第1注目度より低い第2注目度の場合における前記関連カテゴリの選択確率より高く算出し、前記複数のカテゴリのそれぞれについて、前記選択操作履歴情報を用いて、選択された回数が第1回数の場合における選択確率を、前記選択された回数が前記第1回数より少ない第2回数の場合における選択確率より高く算出する。
すなわち、表示形態決定部は、複数のカテゴリのうち選択確率が高いカテゴリ程、該カテゴリの項目を選択容易な表示形態に設定する。
この構成により、複数の項目に対応する複数のカテゴリのうち、ユーザが選択する確率が高いカテゴリの項目を容易に選択することができる。すなわち、多種多様なカテゴリの項目からユーザが選択する確率が高いカテゴリの項目にアクセスしやすい表示制御を実現する表示制御装置を提供することができる。
つまり、本発明の一態様に係る表示制御装置は、ユーザによって選択される可能性が高い項目を表示できる。
また、例えば、前記表示制御装置は、少なくとも1台の電気機器と通信し、前記複数のカテゴリは、前記電気機器から通知された項目からなるカテゴリである通知カテゴリを含み、前記表示制御装置は、さらに、前記ユーザにより前記電気機器が操作された履歴を示す機器操作履歴情報を収集する機器操作履歴収集部を備え、前記選択確率算出部は、さらに、前記機器操作履歴情報を用いて、前記電気機器が操作された回数が第3回数の場合における前記通知カテゴリの選択確率を、前記電気機器が操作された回数が前記第3回数より少ない第4回数の場合における前記通知カテゴリの選択確率より高く算出してもよい。
これにより、ユーザの過去の操作履歴に基づいて通知カテゴリの項目を選択容易な表示形態で表示できる。
また、例えば、前記通知カテゴリの各項目は、前記ユーザに対する当該項目の通知の重要度を示すアナウンス強度と対応付けられ、前記選択確率算出部は、前記アナウンス強度が第1強度の場合における通知カテゴリの選択確率を、前記アナウンス強度が第1強度より低い第2強度の場合における通知カテゴリの選択確率より高く算出してもよい。
これにより、ユーザにより電気機器の速やかな操作が必要な場合に、通知カテゴリの項目を選択容易な表示形態で表示部に表示させることができる。その結果、ユーザによって通知カテゴリの項目が選択される可能性が高くなる。
また、例えば、前記項目は、前記表示制御装置と通信する外部機器から送信されたプッシュ情報であってもよい。
また、例えば、前記表示部は、コンテンツを表示し、前記表示形態決定部は、前記複数の項目を、決定した前記表示形態で前記コンテンツに重畳して表示させてもよい。
これにより、ユーザはコンテンツの視聴を妨げられることなく、画面に表示された項目に気付くことができる。
また、例えば、前記表示形態決定部は、前記複数のカテゴリのうち、前記選択確率が最大のカテゴリの表示ラベルの表示形態を、該選択確率が最大のカテゴリ以外のカテゴリの表示ラベルの表示形態より具体的にしてもよい。
これにより、ユーザは選択確率が最大のカテゴリに属する項目を容易に選択できる。また、選択確率が最大のカテゴリ以外のカテゴリは、選択確率が最大のカテゴリと比較して抽象的に表示されるので、画面上の見た目の煩わしさが軽減する。
また、例えば、前記表示形態決定部は、前記選択確率が最大のカテゴリの表示ラベルを、当該カテゴリ及び当該カテゴリに属する各項目に対応させ、前記選択確率が最大のカテゴリ以外のカテゴリの表示ラベルを、当該カテゴリのみに対応させてもよい。
これにより、ユーザは選択確率が最大のカテゴリに属する項目を容易に確認できる。
また、例えば、前記表示形態決定部は、前記複数のカテゴリのうち、前記選択確率が最大のカテゴリの項目の表示領域を、該選択確率が最大のカテゴリ以外のカテゴリの項目の表示領域より大きくしてもよい。
これにより、ユーザは選択確率が最大のカテゴリに属する項目を容易に選択にできる。
また、例えば、前記表示形態決定部は、前記複数のカテゴリのうち、前記選択確率が最大のカテゴリの項目の表示数を、該選択確率が最大のカテゴリ以外のカテゴリの項目の表示数より多くしてもよい。
これにより、ユーザは、選択確率が最大のカテゴリに属する項目に容易にアクセスできる。
また、例えば、前記表示形態決定部は、前記選択確率が最大のカテゴリの項目の表示ラベルを並べて配置し、前記選択確率が最大のカテゴリ以外の項目の表示ラベルをカテゴリ毎に重畳してもよい。
また、例えば、前記表示形態決定部は、前記複数の項目からなる列を決定し、前記選択確率が最大のカテゴリの項目をフォーカス位置として当該フォーカス位置が前記画面上になるように、前記列をなす前記複数の項目を列方向に移動してもよい。
また、例えば、前記画面注目度判定部は、前記ユーザの視線方向を検出する視線検出部を含み、前記画面注目度判定部は、前記視線検出部により検出された前記視線方向に基づいて前記画面注目度を判定してもよい。
これにより、例えば、ユーザの視線方向が、当該ユーザから画面への方向である場合に、画面注目度が高いと判定することができる。
また、例えば、前記表示部は、コンテンツを表示し、前記画面注目度判定部は、前記表示部に表示されているコンテンツのジャンルに基づいて前記画面注目度を判定してもよい。
これにより、コンテンツのジャンルに基づいて、ユーザによって選択される可能性が高い項目を表示できる。例えば、コンテンツのジャンルがドラマの場合、ユーザはドラマのストーリーを理解するために、画面を注目していることが多い。つまり、画面注目度が高い。したがって、この場合、ドラマに関連する項目が選択容易な表示形態で表示されるので、ドラマのストーリーを理解するために画面に注目しているユーザによって当該項目が選択される可能性が高い。これに対して、例えば、コンテンツのジャンルがバラエティの場合、ユーザが画面を見る以外に別のことをしながら画面を見る状態、いわゆる「ながら見」であることが多い。つまり、画面注目度が低い。したがって、この場合、バラエティに関連する項目ではない項目が選択容易な表示形態で表示されるので、ながら見のユーザによって当該項目が選択される可能性が高い。
また、例えば、前記表示部は、コンテンツを表示し、前記画面注目度判定部は、前記表示部に表示されているコンテンツの視聴完了率に基づいて前記画面注目度を判定してもよい。
これにより、例えば、視聴完了率が高い場合に、関連カテゴリの項目を選択容易な表示形態で表示させることができる。
また、例えば、前記表示制御装置は、該表示制御装置を操作するための入力装置により操作され、前記画面注目度判定部は、前記入力装置に対するユーザの操作に基づいて前記画面注目度を判定してもよい。
これにより、例えば、入力装置に対するユーザの操作の頻度が高い場合に、ユーザによって選択される可能性が高い関連カテゴリの項目を選択容易な表示形態で表示させることができる。
また、例えば、前記入力装置はリモコンであってもよい。
また、例えば、前記入力装置は、スマートフォンまたはタブレット端末であってもよい。
また、例えば、前記画面注目度判定部は、さらに、前記ユーザの表情を判定する表情判定部を含み、前記画面注目度判定部は、前記表情判定部により判定された前記ユーザの表情に基づいて前記画面注目度を判定してもよい。
これにより、例えば、表情判定部により判定されたユーザの表情が笑顔である場合に、ユーザによって選択される可能性が高い関連カテゴリの項目を選択容易な表示形態で表示させることができる。
また、例えば、前記画面注目度判定部は、さらに、音声を取得する音声取得部を含み、前記画面注目度判定部は、前記音声取得部により音声として取得された、前記ユーザの会話の内容に基づいて前記画面注目度を判定してもよい。
これにより、例えば、会話の内容に笑い声が含まれている場合に、ユーザによって選択される可能性が高い関連カテゴリの項目を選択容易な表示形態で表示させることができる。
また、例えば、前記画面注目度判定部は、さらに、音声を取得する音声取得部を含み、前記画面注目度判定部は、前記音声取得部により音声として取得された、前記ユーザの会話の盛り上がり度に基づいて前記画面注目度を判定してもよい。
これにより、例えば、会話の音量が所定値より大きい状態が所定時間以上継続した場合に、会話の盛り上がり度が高いと判定し、さらに、会話の盛り上がり度が高い場合に、ユーザによって選択される可能性が高い関連カテゴリの項目を選択容易な表示形態で表示させることができる。
また、例えば、前記表示制御装置は、さらに、前記表示部の画面の前方に位置するユーザを識別するユーザ識別部を備え、前記画面注目度判定部は、さらに、前記ユーザの友人のリスト及び当該友人が視聴したコンテンツを示すコンテンツ視聴情報を取得する友人情報取得部を含み、前記画面注目度判定部は、前記表示部に表示されているコンテンツと同じコンテンツを視聴している友人の人数が多い程、画面注目度が高いと判定してもよい。
これにより、表示部に表示されているコンテンツと同じコンテンツを視聴している友人の人数が多いほど、すなわち、当該コンテンツが友人の間で盛り上がっているほど、関連カテゴリの項目が選択容易な表示形態で表示される。ユーザの友人の間で盛り上がっているコンテンツは、当該ユーザの関心も高いことが推定されるので、関連カテゴリの項目が選択される可能性は高い。つまり、同じコンテンツを視聴している友人の人数が多い場合に、ユーザによって選択される可能性が高い項目を選択容易な表示形態で表示できる。
また、例えば、前記画面注目度判定部は、さらに、前記表示部に表示されているコンテンツの推薦者を示す情報を取得する推薦者取得部を含み、前記画面注目度判定部は、前記表示部に表示されているコンテンツの推薦者の序列が高い程、画面注目度が高いと判定してもよい。
これにより、表示部に表示されているコンテンツの推薦者の序列が高いほど、関連カテゴリの項目が選択容易な表示形態で表示される。序列の高い推薦者により推薦されたコンテンツは、ユーザにとって有益であることが推定されるので、関連カテゴリの項目が選択される可能性は高い。つまり、序列の高い推薦者によって推薦されたコンテンツに関連する項目を選択容易な表示形態で表示できる。
また、例えば、前記推薦者の序列は、所定の範囲内の視聴者による投票総数が多いほど高くてもよい。
これにより、予め定められた範囲内の視聴者による投票総数が多い推薦者が推薦する項目ほど、選択容易な表示形態で表示できる。例えば、ユーザと嗜好の類似する視聴者を予め定められた範囲とする場合、当該ユーザの嗜好に合う項目ほど、選択容易な表示形態で表示できる。
なお、これらの包括的または具体的な態様は、方法、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能なCD−ROMなどの記録媒体記録媒体で実現されてもよく、方法、集積回路、コンピュータプログラムまたは記録媒体の任意な組み合わせで実現されてもよい。
以下、実施の形態について、図面を参照しながら具体的に説明する。
なお、以下で説明する実施の形態は、いずれも包括的または具体的な例を示すものである。以下の実施の形態で示される数値、形状、構成要素、構成要素の配置位置、ステップ、ステップの順序などは、一例であり、本発明を限定する主旨ではない。また、以下の実施の形態における構成要素のうち、最上位概念を示す独立請求項に記載されていない構成要素については、任意の構成要素として説明される。
また、以下の説明では、同一の構成要素には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明を省略する場合がある。
[構成]
図1Aは、本実施の形態における表示制御装置1000の機能構成を示すブロック図である。図1Aでは、表示制御装置1000における主な構成要素を示す。
表示制御装置1000は、テレビである。なお、表示制御装置1000は、テレビに限定されず、映像を表示可能な装置であれば他の装置であってもよい。例えば、表示制御装置1000は、タブレット端末やスマートフォンであってもよい。本明細書において、コンテンツとは、映像コンテンツであるとする。
図1Aに示すように、表示制御装置1000は、表示部100と、プッシュ情報管理部101と、関与度判定部110と、選択確率算出部108と、表示形態決定部109とを備える。
表示部100は、例えばLCD(Liquid Crystal Display)であり、コンテンツ(映像)を表示する。
図1Bは、表示部100の構成を示す図である。表示部100は、画面100aを有する。画面100aには、コンテンツ(映像)等が表示される。
なお、表示部100は、LCDに限定されず、PDP(Plasma Display Panel)や有機ELディスプレイ(OLED:Organic Light Emitting Display)であってもよい。また、表示部100は、プロジェクターによって壁などの面に投影する構成により実現されてもよい。
プッシュ情報管理部101は、詳細は後述するが、プッシュ情報を取得する。プッシュ情報とは、公知なプッシュ型技術により配信される情報である。プッシュ情報は、複数のカテゴリのいずれかに属する。当該複数のカテゴリは、例えば、トレンド情報、関連情報、通知情報等の情報のカテゴリである。なお、以下、トレンド情報が属するカテゴリをトレンドカテゴリ、関連情報が属するカテゴリを関連カテゴリ、通知情報が属するカテゴリを通知カテゴリと記載する場合がある。
トレンド情報は、例えば、社会、地域等で話題になっている情報である。関連情報は、表示部100が表示しているコンテンツ(映像コンテンツ)に関連する情報である。通知情報は、詳細は後述するが、後述する電気機器から送信される情報である。
プッシュ情報管理部101は、例えば、図示しないプッシュ情報提供装置が、ネットワーク網、放送網等を介して、配信するプッシュ情報を取得する。当該プッシュ情報提供装置は、例えば、サーバである。また、プッシュ情報管理部101は、後述する電気機器301が送信するプッシュ情報を取得する。
なお、プッシュ情報管理部101は、表示制御装置1000が、外部から取得したコンテンツに含まれるプッシュ情報を取得してもよい。
また、プッシュ情報管理部101は、複数のカテゴリのいずれかに属する、取得した複数のプッシュ情報を管理する。
関与度判定部110は、ユーザと各カテゴリに属するプッシュ情報との間の関与度を算出する。
選択確率算出部108は、詳細は後述するが、複数のプッシュ情報に対応する複数のカテゴリの各々に対し、ユーザが選択する確率である選択確率を算出する。
表示形態決定部109は、詳細は後述するが、複数のプッシュ情報に対応する前記複数のカテゴリのうち選択確率が高いカテゴリ程、該カテゴリのプッシュ情報を選択容易な(アクセス容易な)表示形態に設定する。
次に、図1Aに示す表示制御装置1000における各種動作について簡単に説明する。
図2は、本実施の形態における表示制御処理の流れを示すフローチャートである。
まず、プッシュ情報管理部101は、複数のプッシュ情報を取得する(S101)。そして、関与度判定部110は、ユーザと各カテゴリに属するプッシュ情報との間の関与度を算出する(S102)。次に、関与度判定部110は、算出した関与度に基づいて、複数のプッシュ情報に対応する、各カテゴリの選択確率を算出する(S103)。表示形態決定部109は、算出された選択確率に基づいて、各カテゴリに属するプッシュ情報の表示形態を決定する(S104)。
図3は、本実施の形態における表示制御装置1000の機能構成をさらに詳細に示すブロック図である。
表示制御装置1000は、無線通信等により、入力装置10により操作される。入力装置10は、該表示制御装置1000を操作するための装置である。前記入力装置10はリモコンである。なお、入力装置10は、リモコンに限定されず、例えば、スマートフォンまたはタブレット端末等のモバイル端末であってもよい。なお、図3では、表示制御装置1000と入力装置10は別々の装置として記載しているが、勿論、表示制御装置1000が入力装置10の機能を備えてもよい。例えば、タブレット端末またはスマートフォンが表示制御装置1000である場合、該タブレット端末またはスマートフォンは入力装置10の機能も備えてよい。
表示制御装置1000は、少なくとも1台の電気機器301と通信する。具体的には、図3に示すように、表示制御装置1000は、ネットワークにより、一台または複数台の電気機器301と接続される。当該ネットワークは、LANケーブル等を用いた有線ネットワーク、または、無線LANを用いた無線ネットワークである。
電気機器301は、例えば、洗濯機、冷蔵庫、エアコン、空気清浄機、電子レンジ、BDレコーダー等のネットワーク家電である。
電気機器301は、当該電気機器301に対するユーザの操作の履歴を示す機器操作履歴情報を、表示制御装置1000へ送信する。
また、電気機器301は、カテゴリが通知情報であるプッシュ情報を、プッシュ情報管理部101へ送信する。すなわち、電気機器301は、通知情報を送信するソース機器である。この場合、当該プッシュ情報は、例えば、電気機器301の稼動状態等を示す情報である。
ここで、電気機器301は、例えば、洗濯機であるとする。この場合、プッシュ情報は、例えば、洗濯が終了したことを報知するための情報である。
表示制御装置1000は、さらに、ユーザ識別部102と、画面注目度判定部103とを備える。
ユーザ識別部102は、撮像装置(カメラ)200が撮像した被写体を示す画像を、撮像装置200から取得する。以下においては、撮像装置200が撮像することにより得られた画像を撮像画像ともいう。
ユーザ識別部102は、詳細は後述するが、撮像画像を用いて、表示部100の画面100aの前方にいるユーザを識別する。なお、ユーザの識別は、ユーザ個々人が所有しているモバイル端末を用いて行ってもよい。
画面注目度判定部103は、詳細は後述するが、表示部100の画面100aに対する前記識別されたユーザの注目度である画面注目度を判定する。
関与度判定部110は、選択操作履歴収集部104と、機器操作履歴収集部105と、操作履歴格納部106とを含む。
選択操作履歴収集部104は、複数のプッシュ情報に対応する複数のカテゴリのうち、入力装置10等を用いてユーザにより選択されたカテゴリの履歴を示す選択操作履歴情報を収集する。例えば、選択操作履歴情報は、複数のプッシュ情報に対応する複数のカテゴリのうち、通知情報というカテゴリが選択された履歴を示す。そして、選択操作履歴収集部104は、収集した選択操作履歴情報を、操作履歴格納部106に格納する。
機器操作履歴収集部105は、各電気機器301から、前述した機器操作履歴情報を収集する。そして、機器操作履歴収集部105は、収集した機器操作履歴情報を、操作履歴格納部106に格納する。
操作履歴格納部106は、選択操作履歴情報および機器操作履歴情報を記憶(格納)する。
[動作]
次に、図3のように構成された表示制御装置1000における各種動作について説明する。
図4は、本実施の形態における表示制御処理の流れを詳細に示すフローチャートである。ここで、表示部100の画面100aの前方には、ユーザが存在するとする。この場合、撮像画像はユーザを示す。
まず、プッシュ情報管理部101は、複数のプッシュ情報を取得する(S201)。そして、ユーザ識別部102は、撮像装置200から、ユーザを示す撮像画像を取得する。ユーザ識別部102は、公知な顔認識処理によって、例えば、取得した撮像画像が示すユーザの顔と、あらかじめデータベースに登録された顔の情報とのマッチングにより、ユーザを識別する。すなわち、ユーザ識別部102は、表示部100の画面100aの前方に存在するユーザを識別する(S202)。
続いて、選択確率算出部108は、操作履歴格納部106に格納されている、識別されたユーザに対応する前述の選択操作履歴情報を取得する(S203)。また、選択確率算出部108は、操作履歴格納部106に格納されている、識別されたユーザに対応する前述の機器操作履歴情報を取得する(S204)。
続いて、画面注目度判定部103は、詳細は後述するが、画面注目度を判定する(S205)。画面注目度判定部103は、判定した画面注目度を、選択確率算出部108へ送信する。これにより、選択確率算出部108は、画面注目度を取得する。
そして、選択確率算出部108は、複数のプッシュ情報に対応する、取得した画面注目度および選択操作履歴情報に基づいて各カテゴリの選択確率を判定する(S206)。具体的には、選択確率算出部108は、選択操作履歴情報を取得する処理(S203)で取得された選択履歴情報、機器操作履歴情報を取得する処理(S204)で取得された機器操作履歴情報、及び、画面注目度を判定する処理(S205)で判定された前記画面注目度に基づいて、各カテゴリの選択確率を算出する。
この各カテゴリの選択確率を算出する処理(S206)での詳細な処理については後述するが、例えば、選択確率算出部108は、画面注目度が小さく、選択操作履歴情報が、通知情報というカテゴリを選択した回数が所定回数以上であることを示す場合、通知情報というカテゴリの選択確率を高く算出する。
なお、前記選択確率算出部108は、取得した画面注目度、機器操作履歴情報および選択操作履歴情報に基づいて選択確率を算出してもよい。
ここで、取得された画面注目度が、所定の値以下であるとする。また、取得された機器操作履歴情報が、当該機器操作履歴情報に対応する電気機器301が所定の日数以上操作されていないことを示すとする。この場合、選択確率算出部108は、例えば、複数のプッシュ情報に対応する複数のカテゴリのうち、トレンドというカテゴリの選択確率を最も高く算出する。
次に、選択確率算出部108は、算出した選択確率を、表示形態決定部109へ送信する。これにより、表示形態決定部109は、選択確率を取得する。表示形態決定部109は、取得した選択確率に基づいて、各カテゴリに属するプッシュ情報の表示形態を決定する(S207)。言い換えると、選択確率の高いカテゴリ程、そのカテゴリに属するプッシュ情報を選択容易な表示形態に決定し、決定した表示形態で表示部100に表示させる。
そして、表示形態決定部109は、プッシュ情報を、決定した表示形態で表示部100が表示するように、表示部100を制御する。これにより、表示部100は、決定された表示形態のプッシュ情報を表示する。
例えば、表示形態を決定する処理(ステップS207)により決定された表示形態に従って、前記表示形態決定部109は、複数のプッシュ情報に対応する前記複数のカテゴリのうち、選択確率が最大のカテゴリのプッシュ情報の表示領域を、該選択確率が最大のカテゴリ以外のカテゴリのプッシュ情報の表示領域より大きく表示するよう前記表示部100を制御する。
以上のように、本実施の形態に係る表示制御装置1000は、画面を有する表示部100の表示を制御する表示制御装置であって、複数のカテゴリのいずれかに属する複数のプッシュ情報を管理するプッシュ情報管理部101と、表示部100の画面に対するユーザの注目度である画面注目度を判定する画面注目度判定部103と、複数のカテゴリの各々が選択された履歴を示す選択操作履歴情報を収集する選択操作履歴収集部104と、画面注目度および選択操作履歴情報に基づいて、複数のカテゴリの各々に対し、ユーザが選択する確率である選択確率を算出する選択確率算出部108と、複数のカテゴリのうち選択確率が高いカテゴリ程、該カテゴリのプッシュ情報を選択容易な表示形態に決定し、決定した表示形態で表示部100に表示させる表示形態決定部109とを備え、複数のカテゴリは、画面に表示されているコンテンツに関連するプッシュ情報からなるカテゴリである関連情報を含み、選択確率算出部108は、画面注目度が第1注目度の場合における関連カテゴリの選択確率を、画面注目度が第1注目度より低い第2注目度の場合における関連カテゴリの選択確率より高く算出し、複数のカテゴリのそれぞれについて、選択操作履歴情報を用いて、選択された回数が第1回数の場合における選択確率を、前記選択された回数が前記第1回数より少ない第2回数の場合における選択確率より高く算出する。
これにより、本実施の形態に係る表示制御装置1000は、複数のプッシュ情報に対応する複数のカテゴリのうち、ユーザが選択する確率が高いカテゴリのプッシュ情報を容易に選択することができる。すなわち、本実施の形態に係る表示制御装置1000は、多種多様なカテゴリのプッシュ情報からユーザが選択する確率が高いカテゴリのプッシュ情報にアクセスしやすい表示制御を実現する。つまり、表示制御装置1000はユーザによって選択される可能性が高いプッシュ情報を表示できる。
[画面注目度の判定処理]
次に、上述した表示制御装置1000の詳細な動作を説明する。
まず、図4の表示制御処理に含まれる処理のうち、画面注目度を判定する処理(ステップS205)について、詳細に説明する。
画面注目度判定部103は、後述の視線検出部111により検出された、ユーザの視線方向に基づいて画面注目度を判定する。当該ユーザは、ユーザを識別する処理(ステップS202)において、ユーザ識別部102により識別されたユーザである。
具体的には、画面注目度判定部103は、例えば、画面注目状態が継続する時間が長い程、画面注目度が高い(大きい)と判定する。画面注目状態とは、後述の処理(S509)により検出されるユーザの視線方向が、当該ユーザから表示部100の画面100aへの方向である状態である。つまり、画面注目状態とは、ユーザが画面100aのいずれかの領域を見ている状態である。
[選択確率の算出処理]
次に、図4の表示制御処理に含まれる処理のうち、各カテゴリの選択確率を算出する処理(S206)について、詳細に説明する。
図5は、各カテゴリの選択確率を算出する処理(S206)における詳細な処理の流れを示すフローチャートである。
まず、選択確率算出部108は、画面注目度を判定する処理(S205)で判定された画面注目度が高いか否かを判定する(S301)。ここで、「画面注目度が高い」とは、例えば、単位時間当たりの画面注目状態が80%以上の場合を示す。
画面注目度が高いと判定した場合(S301でYes)、選択確率算出部108は、関連情報の選択確率を高くする(S302)。つまり、ユーザが画面100aを集中して見ている場合、すなわち、ユーザが画面100aに表示されているコンテンツに興味がある場合、当該コンテンツに関連するプッシュ情報からなるカテゴリである関連情報の選択確率を高くする。
次に、関連情報の選択確率を高くする処理(S302)の後、及び、画面注目度が高くないと判定された場合(S301でNo)、選択確率算出部108は、操作履歴格納部106に格納された選択操作履歴情報から、カテゴリ毎に、選択された回数が多いか否かを判定する(S303)。ここで、「選択された回数が多い」とは、選択された回数が予め定められた閾値(例えば10回)を超えることである。
選択された回数が多いと判定した場合(S303でYes)、選択確率算出部108は、選択された回数が多いと判定されたカテゴリの選択確率を高くする(S304)。なお、選択確率算出部108は、選択操作履歴情報を用いて、単位時間当たり(例えば直前の3日間)に選択された回数が予め定められた回数(例えば5回)を超える場合に、当該カテゴリの選択確率を高くしてもよい。また、選択された頻度が高いカテゴリ程、当該カテゴリの選択確率を高くしてもよい。
次に、選択された回数が多いカテゴリの選択確率を高くする処理(S304)の後、及び、各カテゴリの選択された回数が多くないと判定された場合(S304でNo)、選択確率算出部108は、操作履歴格納部106に格納された機器操作履歴情報から、各電気機器301が操作された回数が多いか否かを判定する(S305)。ここで、「操作された回数が多い」とは、各電気機器301が操作された回数が予め定められた閾値(例えば10回)を超えることである。
操作された回数が多いと判定した場合(S305でYes)、選択確率算出部108は、通知情報の選択確率を高くする(S306)。なお、選択確率算出部108は、操作履歴情報を用いて、単位時間当たり(例えば直前の1日間)に選択された回数が予め定められた回数(例えば1回)を超える場合に、通知情報の選択確率を高くしてもよい。また、操作された頻度が高い電気機器301がある場合、通知情報の選択確率を高くしてもよいし、頻度が高い程、通知情報の選択確率を高くしてもよい。
以上の処理が、各カテゴリの選択確率を算出する処理(S206)の詳細な処理である。 このように、選択確率算出部108は、画面注目度が高い場合における関連情報の選択確率を、画面注目度が低い場合における関連情報の選択確率より高く算出し、選択操作履歴情報により示される各カテゴリが選択された回数が多い場合における各カテゴリの選択確率を、選択された回数が少ない場合における各カテゴリの選択確率より高く算出する。なお、「画面注目度が高い場合」とは本発明における「画面注目度が第1注目度の場合」の一例であり、「画面注目度が低い場合」とは本発明における画面注目度が「第2注目度の場合」の一例である。また、「選択された回数が多い場合」とは本発明における「選択回数が第1回数の場合」の一例であり、「選択された回数が少ない場合」とは本発明における選択回数が「第2回数の場合」の一例である。
また、表示制御装置1000は、少なくとも1台の電気機器301と通信し、複数のカテゴリは、電気機器301から通知された項目からなるカテゴリである通知カテゴリを含み、表示制御装置1000は、さらに、ユーザにより電気機器301が操作された履歴を示す機器操作履歴情報を収集する機器操作履歴収集部105を備え、選択確率算出部108は、さらに、機器操作履歴情報により示される電気機器301が操作された回数が多い場合における通知カテゴリの選択確率を、画面注目度が少ない場合における通知カテゴリの選択確率より高く算出する。なお、「操作された回数が多い」とは本発明における「操作された回数が第3回数の場合」の一例であり、「操作された回数が少ない場合」とは、本発明における、操作された回数が「第4回数の場合」の一例である。
これにより、選択確率算出部108は、画面注目度が高い場合に、画面100aに表示されているコンテンツに関連するプッシュ情報からなるカテゴリである関連情報の選択確率を高くし、選択された回数が多いカテゴリがある場合に、当該カテゴリ(例えば、トレンド情報)の選択確率を高くし、機器操作回数が多い場合に、電気機器301から送信されたプッシュ情報からなる通知カテゴリの選択確率を高くできる。したがって、本実施の形態に係る表示制御装置1000は、以降の表示形態を決定する処理(S207)において、選択確率が高いカテゴリ程、当該カテゴリの複数のプッシュ情報を選択容易な表示形態に表示部100に表示させることにより、ユーザに選択される可能性が高いプッシュ情報を表示できる。
なお、上記では、単位時間当たりの画面注目状態が80%以上の場合を画面注目度が高いとしたが、画面注目度が高いと判断する状態はこれに限らず、単位時間当たりの画面注目状態が50%以上の場合であってもよいし、単位時間当たりの画面注目状態が90パーセント以上の場合であってもよい。
また、選択確率算出部108は、画面注目度が高い程、関連情報の選択確率を高く算出してもよい。例えば、画面注目度が、単位時間当たりの画面注目状態の割合と正比例している場合、画面注目状態が高い程、関連情報の選択確率を高く算出してもよい。
また、選択確率算出部108は、選択操作履歴情報により示される選択された回数が多いカテゴリ程、選択確率を高く算出してもよい。例えば、トレンド情報の選択された回数が3回、関連情報の選択された回数が15回、通知情報の選択された回数が10回の場合、選択確率算出部108は、関連情報、通知情報及びトレンド情報の順に、選択確率を高く算出してもよい。同様に、機器操作履歴情報により示される操作された回数が多い程、通知カテゴリの選択確率を高く算出してもよい。
また、選択確率算出部108は、選択操作履歴情報により示される選択された回数から、単位時間当たりに選択された回数を算出し、算出した単位時間当たりの選択された回数が多いカテゴリ程、選択確率を高く算出してもよい。つまり、選択された頻度が高いカテゴリ程、選択確率を高く算出してもよい。同様に、機器操作履歴情報により示される操作された回数から、単位時間当たりに操作された回数を算出し、算出した単位時間当たりの操作された回数が多い程、通知カテゴリの選択確率を高くしてもよい。
また、選択確率算出部108は、機器操作履歴情報により示される各電気機器301が操作された回数を用いて、操作された回数が多い電気機器301から送信されたプッシュ情報ほど、選択確率を高く算出してもよい。
また、通知カテゴリに属する各プッシュ情報は、当該プッシュ情報のアナウンス強度に対応付けられ、選択確率算出部108は、プッシュ情報管理部101が取得したプッシュ情報のアナウンス強度が第1強度の場合における通知カテゴリの選択確率を、プッシュ情報のアナウンス強度が第1強度より低い第2強度の場合における通知カテゴリの選択確率より高く算出してもよい。ここで、プッシュ情報のアナウンス強度とは、例えば、ユーザに応答を要求する度合いに相当する。例えば、電気機器301が電子レンジであって、当該電子レンジのプッシュ情報が加熱終了である場合のアナウンス強度は、電気機器301が空気清浄機であって、当該空気清浄機のプッシュ情報が運転終了である場合のアナウンス強度より、高くなっている。また、例えば、第1強度とは予め定められた閾値以上の強度であって、第2強度とは当該閾値未満の強度であってもよい。また、また、選択確率算出部108は、プッシュ情報のアナウンス強度が高い程、通知カテゴリの選択確率を高く算出してもよい。
これにより、ユーザにより電気機器301の速やかな操作が必要な場合に、通知情報のプッシュ情報を選択容易な表示形態で画面100aに表示させることができるので、ユーザによって通知情報のプッシュ情報が選択される可能性が高くなる。
また、選択確率算出部108は、画面注目度に基づいて算出する関連情報の選択確率と、選択操作履歴情報に基づいて算出する各カテゴリの選択確率と、機器操作履歴情報に基づいて算出する通知カテゴリの選択確率とのそれぞれに重み付けをして得られる、各カテゴリの選択確率を算出してもよい。つまり、例えば、画面注目度に基づいて算出する関連情報の選択確率に最も大きい重みをつけて、選択操作履歴情報に基づいて算出する各カテゴリの選択確率に最も小さい重みをつけてもよい。この場合、画面注目度が高い、機器操作履歴情報により示される操作された回数が多い、かつ、選択履歴情報により示される選択された回数が多いカテゴリがトレンド情報のみのときには、選択確率算出部108が最終的に算出する選択確率は、関連情報、通知情報、トレンド情報の順に、小さくなる。
また、上記重み付けをせずに、単純な足し合わせにより、各カテゴリの最終的な選択確率を算出してもよい。
[ユーザの視線方向の検出処理]
次に、ユーザの視線方向を検出するための処理について詳細に説明する。
画面注目度判定部103は、ユーザ識別部102により識別されたユーザの視線方向を検出する視線検出部111を有する。視線検出部111の視線方向を検出する視線方向検出処理の詳細は以下のとおりである。
視線方向は、ユーザの顔の向き(以下、「顔向き」と記載)と、ユーザの顔向きに対する目の中の黒目部分の方向(以下、「黒目方向」と記載)との組み合わせを基に計算される。そこで、視線検出部111は、まず人物の三次元の顔向きを推定する。次に、視線検出部111は、黒目方向の推定を行う。最後に、視線検出部111は、顔向き及び黒目方向の2つを統合して視線方向を計算する。
なお、視線検出部111は、必ずしも、顔向きと黒目方向との組み合わせを基に視線方向を計算しなくてもよい。例えば、視線検出部111は、眼球中心と虹彩(黒目)中心とに基づいて視線方向を計算してもよい。つまり、視線検出部111は、眼球中心の三次元位置と虹彩(黒目)中心の三次元位置とを結ぶ三次元ベクトルを視線方向として計算してもよい。
図6A、図6B及び図6Cは、本実施の形態における視線方向検出処理において取得される画像を撮像する撮像装置200の配置を示す図である。図6A又は図6B、図6Cに示すように、撮像装置200は、表示部100の画面100aに対向するユーザを撮像可能なように、画面100aの近傍に設置される。例えば、撮像装置200は、図6Aのように、表示部100の上部に配置される。また、図6Bまたは図6Cに示すように、撮像装置200は、表示部100から離れた位置に配置されてもよい。
図7は、本実施の形態における視線方向検出処理の流れを示すフローチャートである。
まず、視線検出部111は、撮像装置200が画面100aの画面100aの前方に存在する(画面100aに対向する)ユーザを撮像した画像を、撮像装置200から取得する(S501)。続いて、視線検出部111は、取得された画像から顔領域の検出を行う(S502)。次に、視線検出部111は、検出した顔領域に対し、各基準顔向きに対応した顔部品特徴点の領域を当てはめ、各顔部品特徴点の領域画像を切り出す(S503)。
そして、視線検出部111は、切り出された領域画像と、あらかじめ保持されたテンプレート画像との相関度を計算する(S504)。続いて、視線検出部111は、各基準顔向きが示す角度を、計算された相関度の比に応じて重み付けして加算した重み付け和から求め、これを検出した顔領域に対応するユーザの顔向きとして検出する(S505)。
図8は、本実施の形態における視線方向検出処理において顔向きを検出する処理(S505)を詳細に説明するための図である。
視線検出部111は、図8の(a)に示すように、各基準顔向きに対応した顔部品特徴点の領域を記憶している顔部品領域DB(データベース)112から、顔部品特徴点の領域を読み出す。続いて、視線検出部111は、図8の(b)に示すように、撮影された画像の顔領域に対し顔部品特徴点の領域を基準顔向きごとに当てはめ、顔部品特徴点の領域画像を基準顔向きごとに切り出す。
そして、視線検出部111は、図8の(c)に示すように、切り出された領域画像と、顔部品領域テンプレートDB(データベース)113に保持されたテンプレート画像との相関度を基準顔向きごとに計算する。また、視線検出部111は、このように計算された相関度が示す相関度合いの高さに応じて、基準顔向きごとの重みを算出する。例えば、視線検出部111は、基準顔向きの相関度の総和に対する各基準顔向きの相関度の比を重みとして算出する。
続いて、視線検出部111は、図8の(d)に示すように、基準顔向きが示す角度に、算出された重みを乗算した値の総和を計算し、計算結果をユーザの顔向きとして検出する。
図8の(d)の例では、基準顔向き+20度に対する重みが「0.85」、正面向きに対する重みが「0.14」、−20度に対する重みが「0.01」であるので、視線検出部111は、顔向きを16.8度(=20×0.85+0×0.14+(−20)×0.01)と検出する。
なお、本実施の形態では、視線検出部111は、顔部品特徴点の領域画像を対象として相関度を計算したが、これには限らない。例えば、視線検出部111は、顔領域全体の画像を対象として相関度を計算してもよい。
また、顔向きを検出するその他の方法としては、顔画像から目・鼻・口などの顔部品特徴点を検出し、顔部品特徴点の位置関係から顔向きを計算する方法であってもよい。
上記顔部品特徴点の位置関係から顔向きを計算する方法としては、1つのカメラから得られた顔部品特徴点に最も一致するように、あらかじめ用意した顔部品特徴点の三次元モデルを回転・拡大縮小してマッチングし、得られた三次元モデルの回転量から顔向きを計算する方法があり、この方法を用いてもよい。
また、顔部品特徴点の位置関係から顔向きを計算する他の方法としては、2台のカメラにより撮影された画像を基にステレオ視の原理を用いて、左右のカメラにおける顔部品特徴点位置の画像上のずれから各顔部品特徴点の三次元位置を計算し、得られた顔部品特徴点の位置関係から顔向きを計算する方法がある。具体的には、例えば、両目及び口の三次元座標点で張られる平面の法線方向を顔向きとして検出する方法などがある。顔向きを検出する方法として、このような方法を用いてよい。
ここで、図7のフローチャートの説明に戻る。
視線検出部111は、撮像装置200によって撮像されたステレオ画像を用いて、ユーザの左右の目頭の三次元位置を検出し、検出した左右の目頭の三次元位置を用いて視線方向基準面を算出する(S506)。続いて、視線検出部111は、撮像装置200によって撮像されたステレオ画像を用いて、ユーザの左右の黒目中心の三次元位置を検出する(S507)。そして、視線検出部111は、視線方向基準面と左右の黒目中心の三次元位置とを用いて、黒目方向を検出する(S508)。
そして、視線検出部111は、検出されたユーザの顔向きと黒目方向とを用いて、ユーザの視線方向を検出する(S509)。
次に、黒目方向を検出する方法の詳細について、図9〜図11を用いて説明する。
本実施の形態では、視線検出部111は、まず、視線方向基準面を算出する。続いて、視線検出部111は、黒目中心の三次元位置を検出する。そして、最後に、視線検出部111は、黒目方向を検出する。
まず、視線方向基準面の算出について説明する。
図9は、本実施の形態における視線方向基準面の算出について説明するための図である。
視線方向基準面とは、黒目方向を検出する際に基準となる面のことであり、図9に示すように顔の左右対称面と同一である。なお、目頭の位置は、目尻、口角、又は眉など他の顔部品に比べて、表情による変動が少なく、また誤検出が少ない。そこで、視線検出部111は、顔の左右対称面である視線方向基準面を目頭の三次元位置を用いて算出する。
具体的には、視線検出部111は、撮像装置200であるステレオカメラで撮像した2枚の画像(ステレオ画像)のそれぞれにおいて、顔検出モジュールと顔部品検出モジュールとを用いて、左右の目頭領域を検出する。そして、視線検出部111は、検出した目頭領域の画像間の位置のずれ(視差)を利用して、左右の目頭それぞれの三次元位置を計測する。さらに、視線検出部111は、図9に示すように、検出した左右の目頭の三次元位置を端点とする線分の垂直二等分面を視線方向基準面として算出する。
次に、黒目中心の検出に関して説明する。
図10及び図11は、本実施の形態における黒目中心の検出について説明するための図である。
対象物からの光が瞳孔を通って網膜に届き電気信号に変換され、その電気信号が脳に伝達されることにより、人は対象物を視覚的に認識する。したがって、瞳孔の位置を用いれば、視線方向を検出することができる。しかし、日本人の虹彩は、黒又は茶色であるので、画像処理によって瞳孔と虹彩とを判別することが難しい。そこで、本実施の形態では、瞳孔の中心と黒目(瞳孔及び虹彩の両方を含む)の中心とがほぼ一致することから、視線検出部111は、黒目方向を検出する際に、黒目中心の検出を行う。
視線検出部111は、まず、撮影された画像から目尻と目頭との位置を検出する。そして、視線検出部111は、図10のような、目尻と目頭とを含む領域R11から輝度が小さい領域R12を、黒目領域として検出する。具体的には、視線検出部111は、例えば、輝度が所定閾値以下なる領域であって、所定の大きさよりも大きい領域を黒目領域として検出する。
次に、視線検出部111は、図11のような、第1領域と第2領域とからなる黒目検出フィルタを黒目領域の任意の位置に設定する。そして、視線検出部111は、第1領域内の画素の輝度と第2領域内の画素の輝度との領域間分散が最大となるような黒目検出フィルタの位置を探索し、探索結果が示す位置を黒目中心として検出する。最後に、視線検出部111は、上記と同様に、ステレオ画像における黒目中心の位置のずれを利用して、黒目中心の三次元位置を検出する。
さらに、黒目方向の検出について説明する。
視線検出部111は、算出した視線方向基準面と、検出した黒目中心の三次元位置とを用いて、黒目方向を検出する。成人の眼球直径は、ほとんど個人差がないことが知られており、例えば日本人の場合約24mmである。したがって、ユーザが基準となる方向(例えば正面)を向いたときの黒目中心の位置が分かっていれば、そこから現在の黒目中心の位置までの変位を求めることで黒目方向に変換算出することができる。
ユーザが正面を向いたときは、左右の黒目中心の中点が顔の中心、すなわち視線方向基準面上に存在することを利用して、視線検出部111は、左右の黒目中心の中点と視線方向基準面との距離を算出することにより、黒目方向を検出する。
具体的には、視線検出部111は、眼球半径Rと左右の黒目中心を結んだ線分の中点と視線方向基準面との距離dとを用いて、式1に示すように、顔向きに対する左右方向の回転角θを黒目方向として検出する。
Figure 2013057882
以上のように、視線検出部111は、視線方向基準面と黒目中心の三次元位置とを用いて、黒目方向を検出する。そして、視線検出部111は、検出された顔向きと黒目方向とを用いて、実空間におけるユーザの視線方向を検出する。
このように、本実施の形態における画面注目度判定部103は、ユーザの視線方向を検出する視線検出部111を含み、画面注目度判定部103は、視線検出部111により検出された視線方向に基づいて画面注目度を判定する。これにより、例えば、ユーザの視線方向が、当該ユーザから画面への方向である場合に、画面注目度が高いと判定することができる。
なお、視線方向の検出方法は、角膜反射法、EOG(Electrooculography)法、サーチコイル法及び強膜反射法など多種多様な方法がある。したがって、視線検出部111は、必ずしも上述した方法によって視線方向を検出する必要はない。例えば、視線検出部111は、角膜反射法を用いて、視線方向を検出してもよい。
角膜反射法は、点光源照明を角膜に照射した際に明るく現れる角膜反射像(プルキニエ像)の位置をもとに、眼球運動を計測する手法である。眼球回転中心と角膜の凸面の中心とが一致しないため、角膜を凸面鏡とし光源の反射点を凸レンズなどで集光すると、この集光点は眼球の回転にともなって移動する。この点を撮像装置で撮影することで、眼球運動を計測するものである。
[画面注目度の判定処理の他の例]
また、上記では、画面注目度判定部103は、画面注目度を判定する処理(S205)において、実空間におけるユーザの視線方向に基づいて画面注目度を判定するとしたが、画面注目度を判定する方法はこれに限らない。
例えば、画面注目度判定部103は、ユーザの表情を判定する表情判定部を含んでもよい。この場合、画面注目度判定部103は、前記表情判定部により判定された前記ユーザの表情に基づいて、画面注目度を判定する。ユーザの表情は、例えば、笑顔、無表情な顔等である。画面注目度判定部103は、例えば、判定されたユーザの表情が笑顔であれば、画面注目度が高いと判定する。これにより、ユーザによって選択される可能性が高い関連カテゴリのプッシュ情報を選択容易な表示形態で表示させることができる。なお、画面注目度判定部103は、ユーザの表情が予め定められた表情の場合に、画面注目度が高いと判定してもよい。また、画面注目度判定部103は、ユーザの表情が予め定められた表情である期間が長いほど、画面注目度が高いと判定してもよい。
表情の認識(判定)の方法については、非常に多くの手法が提案されている。例えば、オプティカルフローに基づく動的な特徴量を抽出し、テンプレートマッチングや主成分分析(PCA:Principal Component Analysis)、判別分析、サポートベクターマシン(SVM:Support Vector Machine)などのパターン認識手法を適用する方法がある。また、隠れマルコフモデル(HMM:Hidden Markov Model)などの時系列パターン認識手法を用いる方法も数多く提案されている。表情判定部は、これらの手法を適宜利用し、表情を判定する。
また、画面注目度判定部103は、音声を収集する音声収集部を含んでもよい。この場合、画面注目度判定部103は、ユーザの会話の内容またはユーザの会話の盛り上がり度に基づいて画面注目度を判定する。当該会話は、前記音声取得部により音声として取得される。
まず、会話の内容に基づく画面注目度の判定について説明する。当該会話の内容は、例えば、公知な音声認識処理により認識される。例えば、認識された会話の内容に、笑い声等が含まれていれば、画面注目度判定部103は、画面注目度が高いと判定する。これにより、ユーザによって選択される可能性が高い関連カテゴリのプッシュ情報を選択容易な表示形態で表示させることができる。なお、画面注目度判定部103は、会話の内容が予め定められた内容となった場合に、画面注目度が高いと判定してもよい。また、会話の内容が予め定められた状態となった期間が長いほど、画面注目度が高いと判定してもよい。
次に、会話の盛り上がり度に基づく画面注目度の判定について説明する。当該会話の盛り上がり度は、例えば、会話の音量が所定値より大きい状態が所定時間以上継続した場合、画面注目度判定部103は、会話の盛り上がり度が高いと判定する。画面注目度判定部103は、例えば、会話の盛り上がり度が高い場合、画面注目度が高いと判定する。なお、画面注目度判定部103は、会話の音量が所定値より大きい状態が長いほど、画面注目度が高いと判定してもよい。
なお、画面注目度判定部103は、表示制御装置1000を操作するための入力装置10に対するユーザの操作に基づいて画面注目度を判定してもよい。例えば、画面注目度判定部103は、入力装置に対するユーザの操作が予め定められた操作の場合に、画面注目度が高いと判定し、当該操作以外の場合に、画面注目度が低いと判定してもよい。例えば、入力装置10に対するユーザの操作の回数が、予め定められた回数(例えば、5回)以上の場合に、画面注目度が高いと判定し、当該回数未満の場合に、画面注目度が低いと判定してもよい。また、例えば、ユーザの操作の回数が多いほど、画面注目度が高いと判定してもよい。また、例えば、入力装置10に対するユーザの操作の頻度が、予め定められた頻度(例えば、10分当たり1回)以上の場合に、画面注目度が高いと判定し、当該頻度未満の場合に、画面注目度が低いと判定してもよい。また、例えば、操作の頻度が高いほど画面注目度が高いと判定してもよい。
図12A〜11Cは、本実施の形態における入力装置10の例を説明する図である。
前述したように、入力装置10は、例えば、リモコン、スマートフォンまたはタブレット端末等である。
図12Aは、リモコンの一例を示す外観図である。図12Bは、スマートフォンの一例を示す外観図である。図12Cは、タブレット端末の一例を示す外観図である。
各入力装置10には、「いいね」ボタンが、物理的またはソフト的に設けられている。「いいね」ボタンとは、文字列「いいね」が記載されているボタンである。「いいね」ボタンは、ユーザが、視聴中のコンテンツに対して面白いと感じたり、気に入ったりした場合に、ユーザが押すためのボタンである。
画面注目度判定部103は、例えば、「いいね」ボタンがユーザにより押された場合、画面注目度が高いと判定する。
[表示例]
図13A〜図18Cは、本実施の形態におけるプッシュ情報の表示例を説明する図である。図13A〜図18Cにおいて、表示部100は、画面100a全体にコンテンツAを表示しているとする。なお、図13A〜図18Cにおいて、画面100aに表示される複数のプッシュ情報は、入力装置10に対するユーザの操作により、選択することができる。
図13A、図14A、図15A、図16A、図17Aおよび図18Aは、ステップS206の処理において、選択確率算出部108により算出された各カテゴリの選択確率のうち、関連情報の選択確率が最も高い場合におけるプッシュ情報の表示例である。当該関連情報は、コンテンツAに関連するプッシュ情報である。
図13B、図14B、図15B、図16B、図17Bおよび図18Bは、ステップS206の処理において、選択確率算出部108により算出された各カテゴリの選択確率のうち、トレンド情報の選択確率が最も高い場合におけるプッシュ情報の表示例である。
図13C、図14C、図15C、図16C、図17Cおよび図18Cは、ステップS206の処理において、選択確率算出部108により算出された各カテゴリの選択確率のうち、通知情報の選択確率が最も高い場合におけるプッシュ情報の表示例である。
画面注目度が、例えば、所定の閾値以上である場合、ユーザは視聴中のコンテンツAに興味があると推定できる。そのため、コンテンツAの関連情報の選択確率が最も高いと判定できる。一方で、画面注目度が、例えば、所定の値よりも小さく、通知情報を送信する電気機器301に対する、ユーザによる操作回数が所定の回数未満である場合は、通知情報の選択確率よりもトレンド情報の選択確率が大きい(高い)。
また、画面注目度が、例えば、所定の閾値よりも小さく、通知情報を送信する電気機器301に対する、ユーザによる操作回数が所定の回数以上である場合は、トレンド情報の選択確率よりも通知情報の選択確率が大きい(高い)。
図13A〜図13Cは、プッシュ情報の表示領域の大きさを、カテゴリ毎に変化させた状態を示す図である。図13A〜図13Cに示すように、画面100aに表示領域R11、R12、R13が配置される。
表示領域R11は、カテゴリがトレンド情報であるプッシュ情報が表示される領域である。表示領域R12は、カテゴリが関連情報であるプッシュ情報が表示される領域である。表示領域R13は、カテゴリが通知情報であるプッシュ情報が表示される領域である。
また、図13A〜図13Cにおいて、「トレンド」とは、トレンド情報のカテゴリ名である。「関連」とは、関連情報のカテゴリ名である。「通知」とは、通知情報のカテゴリ名である。
ここで、ステップS207により決定された表示形態に従って、前記表示形態決定部109は、前記複数のカテゴリのうち、選択確率が最大のカテゴリのプッシュ情報の表示領域を、該選択確率が最大のカテゴリ以外のカテゴリのプッシュ情報の表示領域より大きく表示するよう前記表示部100を制御したとする。
すなわち、図13A〜図13Cのように、複数のカテゴリのうち、選択確率が最大のカテゴリのプッシュ情報の表示領域を、該選択確率が最大のカテゴリ以外のカテゴリのプッシュ情報の表示領域より大きくする。
これにより、ユーザは、入力装置10を操作することにより、選択確率が最大のカテゴリのプッシュ情報にアクセスしやすくなる。すなわち、複数のプッシュ情報に対応する複数のカテゴリのうち、ユーザが選択する確率が高いカテゴリのプッシュ情報を表示制御装置1000が容易に選択することができる。このように、選択確率が最大のカテゴリのプッシュ情報の表示領域を最大にするとよい。
また、図14A〜図14Cのように、選択確率が最大のカテゴリに属するプッシュ情報のみ表示し、その他のカテゴリのプッシュ情報は非表示にしてもよい。図14A〜図14Cにおいて、kwAとは、カテゴリが関連情報であるプッシュ情報を示す。kwとは、カテゴリがトレンド情報であるプッシュ情報を示す。ntXとは、カテゴリが通知情報であるプッシュ情報を示す。
なお、図13A〜図13Cおよび図14A〜図14Cでは、画面100aの右端において、縦方向に沿ってプッシュ情報を表示しているが、これに限られるものではない。例えば、図15A〜図15Cのように画面100aの下側において、横方向に沿ってプッシュ情報を並べて表示してもよい。
図13A〜図15Cでは、プッシュ情報は、コンテンツAに重畳して表示される。つまり、表示形態決定部109は、複数のプッシュ情報を、決定した表示形態でコンテンツAに重畳して表示させる。これにより、ユーザはコンテンツAの視聴を妨げられることなく、画面に表示されたプッシュ情報に気付くことができる。
また、図16A〜図16Cは、プッシュ情報をコンテンツAに重畳して表示するのではなく、スマートフォンやタブレット端末などのいわゆるセカンドディスプレイ(入力装置10)に、プッシュ情報を表示した状態を示す図である。
なお、ステップS207の処理において、前記表示形態決定部109は、前記複数のカテゴリのうち、前記選択確率が最大のカテゴリの表示ラベルの表示形態を、該選択確率が最大のカテゴリ以外のカテゴリの表示ラベルの表示形態より具体的にしてもよい。
そして、表示形態決定部109は、プッシュ情報を、決定した表示形態で入力装置10が表示するように、決定した表示形態のプッシュ情報を、入力装置10へ送信する。これにより、入力装置10は、決定された表示形態のプッシュ情報を表示する。
その結果、図16A〜図16Cに示すように、選択確率が最大のカテゴリのみ具体的なキーワード(プッシュ情報)が表示され、その他のカテゴリは、「トレンド」、「関連」、「通知」といったカテゴリ名(表示ラベル)のみが表示されており、抽象的な表示になっている。言い換えると、表示形態決定部109は、選択確率が最大のカテゴリの表示ラベルを、当該カテゴリ及び当該カテゴリに属する各プッシュ情報に対応させ、選択確率が最大のカテゴリ以外のカテゴリの表示ラベルを、当該カテゴリのみに対応させる。これにより、ユーザは選択確率が最大のカテゴリに属するプッシュ情報を容易に確認できる。
このように、選択確率が最大のカテゴリの表示ラベルの表示形態を当該カテゴリ以外のカテゴリの表示ラベルの表示形態より具体的にすることで、ユーザは、入力装置10を操作することにより、当該カテゴリのプッシュ情報にアクセスしやすくなる。すなわち、複数のプッシュ情報に対応する複数のカテゴリのうち、ユーザが選択する確率が高いカテゴリのプッシュ情報を表示制御装置1000が容易に選択することができる。また、選択確率が最大のカテゴリ以外のカテゴリは、選択確率が最大のカテゴリと比較して抽象的に表示されるので、画面上の見た目の煩わしさが軽減する。
なお、ステップS207により決定された表示形態に従って、前記表示形態決定部109は、前記複数のカテゴリのうち、前記選択確率が最大のカテゴリのプッシュ情報の表示数を、該選択確率が最大のカテゴリ以外のカテゴリのプッシュ情報の表示数より多くするよう前記表示部を制御してもよい。これにより、ユーザは選択確率が最大のカテゴリに属するプッシュ情報を容易に選択できる。
この場合、図17A〜図17Cのように、選択確率が最大のカテゴリのプッシュ情報の表示数が、最大になる。すなわち、前記複数のカテゴリのうち、前記選択確率が最大のカテゴリのプッシュ情報の表示数を、該選択確率が最大のカテゴリ以外のカテゴリのプッシュ情報の表示数より多くする。つまり、表示形態決定部109は、選択確率が最大のカテゴリのプッシュ情報の表示ラベルを並べて配置し、選択確率が最大のカテゴリ以外のプッシュ情報の表示ラベルをカテゴリ毎に重畳する。
このように、選択確率が最大のカテゴリのデータの表示数を最大にすることで、ユーザは、入力装置10を操作することにより、当該カテゴリのプッシュ情報にアクセスしやすくなる。すなわち、複数のプッシュ情報に対応する複数のカテゴリのうち、ユーザが選択する確率が高いカテゴリのプッシュ情報を表示制御装置1000が容易に選択することができる。
図18A〜図18Cでは、選択確率が最大のカテゴリのプッシュ情報にフォーカスをあてている状態を示す図である。このように、選択確率が最大のカテゴリのプッシュ情報にフォーカスをあて、当該カテゴリのプッシュ情報の表示数を最大にしてもよい。つまり、表示形態決定部109は、複数のプッシュ情報からなる列を決定し、選択確率が最大のカテゴリのプッシュ情報をフォーカス位置として当該フォーカス位置が画面上になるように、列をなす複数のプッシュ情報を列方向に移動させてもよい。
なお、画面注目度は、ユーザの視線方向以外の要素に基づいて判定されてもよい。例えば、前記画面注目度判定部103は、前記表示部100に表示されているコンテンツのジャンルに基づいて前記画面注目度を判定してもよい。つまり、各コンテンツは、当該コンテンツのジャンルに対応する予め定められた注目度に対応し、画面注目度判定部103は、画面に表示されているコンテンツのジャンルから注目度を判定してもよい。
これにより、コンテンツのジャンルに基づいて、ユーザによって選択される可能性が高いプッシュ情報を表示できる。例えば、コンテンツのジャンルがドラマの場合、ユーザはドラマのストーリーを理解するために、画面を注目していることが多い。つまり、画面注目度が高い。したがって、この場合、コンテンツに関連するプッシュ情報が選択容易な表示形態で表示されるので、ドラマのストーリーを理解するために画面に注目しているユーザによって当該プッシュ情報が選択される可能性が高い。これに対して、例えば、コンテンツのジャンルがバラエティの場合、ユーザが画面を見る以外に別のことをしながら画面を見る状態、いわゆる「ながら見」であることが多い。つまり、画面注目度が低い。したがって、この場合、コンテンツに関連するプッシュ情報ではないプッシュ情報が選択容易な表示形態で表示されるので、ながら見のユーザによって当該プッシュ情報が選択される可能性が高い。
また、前記画面注目度判定部103は、表示部100に表示されているコンテンツの視聴完了率に基づいて前記画面注目度を判定してもよい。つまり、各コンテンツは、当該コンテンツの視聴完了率と対応付けられ、画面注目度判定部103は、画面に表示されているコンテンツの視聴完了率が予め定められた閾値(例えば、70パーセント)以上の場合に、画面注目度が高いと判定し、当該閾値未満の場合、画面注目度が低いと判定してもよい。これにより、視聴完了率が高い(例えば、70パーセント以上)場合に、関連カテゴリのプッシュ情報を選択容易な表示形態で表示させることができる。なお、画面注目度判定部103は、画面に表示されているコンテンツの視聴完了率が高いほど、画面注目度が高いと判定してもよい。
なお、図13A〜図13C、図14A〜図14C、図15A〜図15C、図17A〜図17Cに表示されるプッシュ情報は、例えば、ユーザが、入力装置10を持ったと判定されたときに表示される。
(変形例1)
本変形例に係る表示制御装置は、上記実施の形態に係る表示制御装置1000と比較してほぼ同じであるが、画面注目度判定部の構成が異なる。以下、実施の形態に係る表示制御装置1000と異なる点を中心に述べる。
図19は、本変形例に係る表示制御装置2000の詳細な機能構成を示すブロック図である。
同図に示す表示制御装置2000は、図3に示す実施の形態に係る表示制御装置1000と比較して、画面注目度判定部103に代わり画面注目度判定部203を備え、当該画面注目度判定部203は、画面注目度判定部103と比較して、さらに、ユーザの友人のリスト及び当該友人が視聴したコンテンツを示すコンテンツ視聴情報を取得する友人情報取得部211を含み、画面注目度判定部203は、表示部100に表示されているコンテンツと同じコンテンツを視聴している友人の人数が多い程、画面注目度が高いと判定する。
具体的には、友人情報取得部211は、ユーザに対応づけられた友人を示す情報が格納された友人リストを有し、さらに、表示制御装置1000が受信したコンテンツと対応づけられた視聴者を示す情報が格納された視聴者リストを取得する。画面注目度判定部203は、友人リストと視聴者リストとを比較することで、ユーザに対応づけられた友人のうち、表示部100に表示しているコンテンツを視聴している友人の人数が多い程、画面注目度が高いと判定する。
これにより、表示部100に表示されているコンテンツと同じコンテンツを視聴している友人の人数が多いほど、すなわち、当該コンテンツが友人の間で盛り上がっているほど、関連カテゴリのプッシュ情報が選択容易な表示形態で表示される。ユーザの友人の間で盛り上がっているコンテンツは、当該ユーザの関心も高いことが推定されるので、関連カテゴリのプッシュ情報が選択される可能性は高い。つまり、同じコンテンツを視聴している友人の人数が多い場合に、ユーザによって選択される可能性が高いプッシュ情報を選択容易な表示形態で表示できる。
(変形例2)
本変形例に係る表示制御装置は、上記実施の形態に係る表示制御装置1000と比較してほぼ同じであるが、画面注目度判定部の構成が異なる。以下、実施の形態に係る表示制御装置1000と異なる点を中心に述べる。
図20は、本変形例に係る表示制御装置3000の詳細な機能構成を示すブロック図である。
同図に示す表示制御装置3000は、図3に示す実施の形態に係る表示制御装置1000と比較して、画面注目度判定部103に代わり画面注目度判定部303を備え、当該画面注目度判定部303は、画面注目度判定部103と比較して、さらに、表示部100に表示されているコンテンツの推薦者(キュレーター)を示す情報を取得する推薦者取得部を含み、画面注目度判定部103は、前記表示部に表示されているコンテンツの推薦者の序列が高い程、画面注目度が高いと判定する。
具体的には、推薦者取得部311は、ユーザに対応付けられた推薦者及び各推薦者の序列を示す情報が格納された推薦者序列リストを有し、さらに、表示制御装置1000が受信したコンテンツと対応づけられた推薦者を示す情報が格納された推薦者リストを取得する。
このコンテンツと対応づけられた推薦者とは、表示部100に表示されているコンテンツと同じコンテンツを視聴している視聴者のうち、例えば、図12A〜図12Cに示す「いいね」ボタンを押した視聴者である。つまり、コンテンツの視聴中に視聴者によって「いいね」ボタンが押された場合、当該視聴者を当該コンテンツの推薦者としている。
また、推薦者序列リストは、ユーザに対応づけられた推薦者と、各推薦者の序列を示す情報が格納され、この推薦者の序列は、所定の範囲内の視聴者による投票総数が多い程高くなる。
画面注目度判定部303は、推薦者序列リストと推薦者リストとを比較することで、表示部100に表示されているコンテンツの推薦者が、推薦者序列リストに含まれているか否かを判定し、含まれている場合、当該推薦者の序列が高い程、画面注目度が高いと判定する。
以上のように、本変形例における画面注目度判定部303は、表示部100に表示されているコンテンツの推薦者(キュレーター)を示す情報を取得する推薦者取得部を含み、画面注目度判定部103は、前記表示部に表示されているコンテンツの推薦者の序列が高い程、画面注目度が高いと判定する。
これにより、表示部100に表示されているコンテンツの推薦者の序列が高いほど、関連カテゴリのプッシュ情報が選択容易な表示形態で表示される。序列の高い推薦者により推薦されたコンテンツは、ユーザにとって有益であることが推定されるので、関連カテゴリのプッシュ情報が選択される可能性は高い。つまり、序列の高い推薦者によって推薦されたコンテンツに関連するプッシュ情報を選択容易な表示形態で表示できる。
なお、推薦者の序列は、所定の範囲内の視聴者による投票総数が多い程高くてもよい。具体的には、推薦者によって推薦されたコンテンツを視聴した所定の範囲内の視聴者により図12A〜図12Cに示す「いいね」ボタンが押された場合、当該推薦者に投票されたとする。
これにより、予め定められた範囲内の視聴者による投票総数が多い推薦者が推薦するプッシュ情報ほど、選択容易な表示形態で表示できる。例えば、ユーザと嗜好の類似する視聴者を予め定められた範囲とする場合、当該ユーザの嗜好に合うプッシュ情報ほど、選択容易な表示形態で表示できる。
また、推薦者の序列は、ユーザに対応して、予め定められた序列であってもよい。つまり、推薦者の序列は更新されなくてもよい。
また、上記実施の形態及び各変形例において、表示制御装置1000、2000、3000は、表示部100及びユーザ識別部102を備えなくてもよい。
また、上記実施の形態及び各変形例において、各構成要素は、専用のハードウェアで構成されるか、各構成要素に適したソフトウェアプログラムを実行することによって実現されてもよい。各構成要素は、CPUまたはプロセッサなどのプログラム実行部が、ハードディスクまたは半導体メモリなどの記録媒体に記録されたソフトウェアプログラムを読み出して実行することによって実現されてもよい。ここで、上記各実施の形態の表示制御装置などを実現するソフトウェアは、次のようなプログラムである。
すなわち、このプログラムは、コンピュータに、画面を有する表示部の表示を制御する表示制御方法であって、複数のカテゴリのいずれかに属する複数の項目を取得する取得ステップと、前記表示部の画面に対するユーザの注目度である画面注目度を判定する画面注目度判定ステップと、前記複数のカテゴリの各々が選択された履歴を示す選択操作履歴情報を収集する選択操作履歴収集ステップと、前記画面注目度および前記選択操作履歴情報に基づいて、前記複数のカテゴリの各々に対し、前記ユーザが選択する確率である選択確率を算出する選択確率算出ステップと、前記複数のカテゴリのうち選択確率が高いカテゴリ程、該カテゴリの項目を選択容易な表示形態に決定し、決定した前記表示形態で前記表示部に表示させる表示形態決定ステップとを含み、前記複数のカテゴリは、前記画面に表示されているコンテンツに関連する項目からなるカテゴリである関連カテゴリを含み、前記選択確率算出ステップでは、前記画面注目度が第1注目度の場合における前記関連カテゴリの選択確率を、前記画面注目度が前記第1注目度より低い第2注目度の場合における前記関連カテゴリの選択確率より高く算出し、前記複数のカテゴリのそれぞれについて、前記選択操作履歴情報を用いて、選択された回数が第1回数の場合における選択確率を、前記選択された回数が前記第1回数より少ない第2回数の場合における選択確率より高く算出する表示制御方法を実行させる。
以上、一つまたは複数の態様に係る表示制御装置について、実施の形態及びその変形例に基づいて説明したが、本発明は、これらの実施の形態又はその変形例に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を本実施の形態又はその変形例に施したもの、あるいは異なる実施の形態又はその変形例における構成要素を組み合わせて構築される形態も、一つまたは複数の態様の範囲内に含まれる。
さらに、本発明は、以下のように変形することもできる。
(1)上記の表示制御装置は、具体的には、マイクロプロセッサ、ROM、RAM、ハードディスクユニット、ディスプレイユニット、キーボード、マウスなどから構成されるコンピュータシステムであってもよい。前記ROM又は前記ハードディスクユニットには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムに従って動作することにより、表示制御装置は、その機能を達成する。
ここで、コンピュータプログラムは、所定の機能を達成するために、コンピュータに対する指令を示す命令コードが複数個組み合わされて構成されたものである。なお、各装置は、マイクロプロセッサ、ROM、RAM、ハードディスクユニット、ディスプレイユニット、キーボード、マウスなどの全てを含むコンピュータシステムに限らず、これらの一部から構成されているコンピュータシステムであってもよい。
(2)上記の表示制御装置を構成する構成要素の一部又は全部は、1個のシステムLSI(Large Scale Integration:大規模集積回路)から構成されているとしてもよい。システムLSIは、複数の構成部を1個のチップ上に集積して製造された超多機能LSIであり、具体的には、マイクロプロセッサ、ROM、RAMなどを含んで構成されるコンピュータシステムで実現できる。前記ROMには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムに従って動作することにより、システムLSIは、その機能を達成する。
なお、ここでは、システムLSIとしたが、集積度の違いにより、IC、LSI、スーパーLSI、ウルトラLSIと呼称されることもある。また、集積回路化の手法はLSIに限るものではなく、専用回路又は汎用プロセッサで実現してもよい。LSI製造後に、プログラムすることが可能なFPGA(Field Programmable Gate Array)や、LSI内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用してもよい。
さらには、半導体技術の進歩又は派生する別技術によりLSIに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適用等が可能性としてありえる。
(3)上記の表示制御装置を構成する構成要素の一部又は全部は、表示制御装置に脱着可能なICカード又は単体のモジュールから構成されているとしてもよい。前記ICカード又は前記モジュールは、マイクロプロセッサ、ROM、RAM、などから構成されるコンピュータシステムである。前記ICカード又は前記モジュールは、上記の超多機能LSIを含むとしてもよい。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、前記ICカード又は前記モジュールは、その機能を達成する。このICカード又はこのモジュールは、耐タンパ性を有するとしてもよい。
(4)本発明は、上記に示す表示制御装置が備える特徴的な構成部の動作をステップとする方法であってもよい。また、これらの方法をコンピュータにより実現するコンピュータプログラムであってもよいし、前記コンピュータプログラムからなるデジタル信号であってもよい。
また、本発明は、前記コンピュータプログラム又は前記デジタル信号をコンピュータ読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、CD―ROM、MO、DVD、DVD−ROM、DVD−RAM、BD(Blu−ray Disc(登録商標))、半導体メモリなど、に記録したもので実現してもよい。また、これらの記録媒体に記録されている前記コンピュータプログラム又は前記デジタル信号で本発明を実現してもよい。
また、本発明は、前記コンピュータプログラム又は前記デジタル信号を、電気通信回線、無線又は有線通信回線、インターネットを代表とするネットワーク、データ放送等を経由して伝送するものとしてもよい。
また、本発明は、マイクロプロセッサとメモリとを備えたコンピュータシステムであって、前記メモリは、上記コンピュータプログラムを記憶しており、前記マイクロプロセッサは、前記コンピュータプログラムに従って動作するとしてもよい。
また、前記プログラム又は前記デジタル信号を前記記録媒体に記録して移送することにより、又は前記プログラム又は前記デジタル信号を前記ネットワーク等を経由して移送することにより、独立した他のコンピュータシステムにより実施するとしてもよい。
(5)上記実施の形態及び上記変形例をそれぞれ組み合わせるとしてもよい。
(6)また、上記の表示制御装置は、スマートテレビや、20インチの4k2k解像度の動画を再生可能なタブレットや、クレードル等に内蔵される。本発明に係る表示制御装置が内蔵されることにより、ユーザにより選択される可能性が高い情報を表示可能なスマートテレビ、タブレット及びクレードルが実現される。
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて請求の範囲によって示され、請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
本発明の一態様に係る表示制御装置は、多種多様なカテゴリの情報からユーザが選択する確率が高いカテゴリにアクセスしやすいように表示制御する装置等として有用である。
100 表示部
101 プッシュ情報管理部
102 ユーザ識別部
103、203、303 画面注目度判定部
104 選択操作履歴収集部
105 機器操作履歴収集部
106 操作履歴格納部
108 選択確率算出部
109 表示形態決定部
110 関与度判定部
111 視線検出部
200 撮像装置
211 友人情報取得部
311 推薦者取得部
1000、2000、3000 表示制御装置

Claims (26)

  1. 画面を有する表示部の表示を制御する表示制御装置であって、
    複数のカテゴリのいずれかに属する複数の項目を管理する管理部と、
    前記表示部の画面に対するユーザの注目度である画面注目度を判定する画面注目度判定部と、
    前記複数のカテゴリの各々が選択された履歴を示す選択操作履歴情報を収集する選択操作履歴収集部と、
    前記画面注目度および前記選択操作履歴情報に基づいて、前記複数のカテゴリの各々に対し、前記ユーザが選択する確率である選択確率を算出する選択確率算出部と、
    前記複数のカテゴリのうち選択確率が高いカテゴリ程、該カテゴリの項目を選択容易な表示形態に決定し、決定した前記表示形態で前記表示部に表示させる表示形態決定部とを備え、
    前記複数のカテゴリは、前記画面に表示されているコンテンツに関連する項目からなるカテゴリである関連カテゴリを含み、
    前記選択確率算出部は、
    前記画面注目度が第1注目度の場合における前記関連カテゴリの選択確率を、前記画面注目度が前記第1注目度より低い第2注目度の場合における前記関連カテゴリの選択確率より高く算出し、
    前記複数のカテゴリのそれぞれについて、前記選択操作履歴情報を用いて、選択された回数が第1回数の場合における選択確率を、前記選択された回数が前記第1回数より少ない第2回数の場合における選択確率より高く算出する
    表示制御装置。
  2. 前記表示制御装置は、少なくとも1台の電気機器と通信し、
    前記複数のカテゴリは、前記電気機器から通知された項目からなるカテゴリである通知カテゴリを含み、
    前記表示制御装置は、さらに、前記ユーザにより前記電気機器が操作された履歴を示す機器操作履歴情報を収集する機器操作履歴収集部を備え、
    前記選択確率算出部は、さらに、
    前記機器操作履歴情報を用いて、前記電気機器が操作された回数が第3回数の場合における前記通知カテゴリの選択確率を、前記電気機器が操作された回数が前記第3回数より少ない第4回数の場合における前記通知カテゴリの選択確率より高く算出する
    請求項1に記載の表示制御装置。
  3. 前記通知カテゴリの各項目は、前記ユーザに対する当該項目の通知の重要度を示すアナウンス強度と対応付けられ、
    前記選択確率算出部は、前記アナウンス強度が第1強度の場合における通知カテゴリの選択確率を、前記アナウンス強度が第1強度より低い第2強度の場合における通知カテゴリの選択確率より高く算出する
    請求項2に記載の表示制御装置。
  4. 前記項目は、前記表示制御装置と通信する外部機器から送信されたプッシュ情報である
    請求項1〜3のいずれか1項に記載の表示制御装置。
  5. 前記表示部は、コンテンツを表示し、
    前記表示形態決定部は、前記複数の項目を、決定した前記表示形態で前記コンテンツに重畳して表示させる
    請求項1〜4のいずれか1項に記載の表示制御装置。
  6. 前記表示形態決定部は、前記複数のカテゴリのうち、前記選択確率が最大のカテゴリの表示ラベルの表示形態を、該選択確率が最大のカテゴリ以外のカテゴリの表示ラベルの表示形態より具体的にする
    請求項1〜5のいずれか1項に記載の表示制御装置。
  7. 前記表示形態決定部は、前記選択確率が最大のカテゴリの表示ラベルを、当該カテゴリ及び当該カテゴリに属する各項目に対応させ、前記選択確率が最大のカテゴリ以外のカテゴリの表示ラベルを、当該カテゴリのみに対応させる
    請求項6に記載の表示制御装置。
  8. 前記表示形態決定部は、前記複数のカテゴリのうち、前記選択確率が最大のカテゴリの項目の表示領域を、該選択確率が最大のカテゴリ以外のカテゴリの項目の表示領域より大きくする
    請求項1〜5のいずれか1項に記載の表示制御装置。
  9. 前記表示形態決定部は、前記複数のカテゴリのうち、前記選択確率が最大のカテゴリの項目の表示数を、該選択確率が最大のカテゴリ以外のカテゴリの項目の表示数より多くする
    請求項1〜5のいずれか1項に記載の表示制御装置。
  10. 前記表示形態決定部は、前記選択確率が最大のカテゴリの項目の表示ラベルを並べて配置し、前記選択確率が最大のカテゴリ以外の項目の表示ラベルをカテゴリ毎に重畳する
    請求項9に記載の表示制御装置。
  11. 前記表示形態決定部は、前記複数の項目からなる列を決定し、前記選択確率が最大のカテゴリの項目をフォーカス位置として当該フォーカス位置が前記画面上になるように、前記列をなす前記複数の項目を列方向に移動させる
    請求項9に記載の表示制御装置。
  12. 前記画面注目度判定部は、前記ユーザの視線方向を検出する視線検出部を含み、
    前記画面注目度判定部は、前記視線検出部により検出された前記視線方向に基づいて前記画面注目度を判定する
    請求項1〜11のいずれか1項に記載の表示制御装置。
  13. 前記表示部は、コンテンツを表示し、
    前記画面注目度判定部は、前記表示部に表示されているコンテンツのジャンルに基づいて前記画面注目度を判定する
    請求項1〜11のいずれか1項に記載の表示制御装置。
  14. 前記表示部は、コンテンツを表示し、
    前記画面注目度判定部は、前記表示部に表示されているコンテンツの視聴完了率に基づいて前記画面注目度を判定する
    請求項1〜11のいずれか1項に記載の表示制御装置。
  15. 前記表示制御装置は、該表示制御装置を操作するための入力装置により操作され、
    前記画面注目度判定部は、前記入力装置に対するユーザの操作に基づいて前記画面注目度を判定する
    請求項1〜11のいずれか1項に記載の表示制御装置。
  16. 前記入力装置はリモコンである
    請求項15に記載の表示制御装置。
  17. 前記入力装置は、スマートフォンまたはタブレット端末である
    請求項15に記載の表示制御装置。
  18. 前記画面注目度判定部は、さらに、前記ユーザの表情を判定する表情判定部を含み、
    前記画面注目度判定部は、前記表情判定部により判定された前記ユーザの表情に基づいて前記画面注目度を判定する
    請求項1〜11のいずれか1項に記載の表示制御装置。
  19. 前記画面注目度判定部は、さらに、音声を取得する音声取得部を含み、
    前記画面注目度判定部は、前記音声取得部により音声として取得された、前記ユーザの会話の内容に基づいて前記画面注目度を判定する
    請求項1〜11のいずれか1項に記載の表示制御装置。
  20. 前記画面注目度判定部は、さらに、音声を取得する音声取得部を含み、
    前記画面注目度判定部は、前記音声取得部により音声として取得された、前記ユーザの会話の盛り上がり度に基づいて前記画面注目度を判定する
    請求項1〜11のいずれか1項に記載の表示制御装置。
  21. 前記表示制御装置は、さらに、前記表示部の画面の前方に位置するユーザを識別するユーザ識別部を備え、
    前記画面注目度判定部は、さらに、前記ユーザの友人のリスト及び当該友人が視聴したコンテンツを示すコンテンツ視聴情報を取得する友人情報取得部を含み、
    前記画面注目度判定部は、前記表示部に表示されているコンテンツと同じコンテンツを視聴している友人の人数が多い程、画面注目度が高いと判定する
    請求項1〜11のいずれか1項に記載の表示制御装置。
  22. 前記画面注目度判定部は、さらに、前記表示部に表示されているコンテンツの推薦者を示す情報を取得する推薦者取得部を含み、
    前記画面注目度判定部は、前記表示部に表示されているコンテンツの推薦者の序列が高い程、画面注目度が高いと判定する
    請求項1〜11のいずれか1項に記載の表示制御装置。
  23. 前記推薦者の序列は、所定の範囲内の視聴者による投票総数が多いほど高い
    請求項22に記載の表示制御装置。
  24. 画面を有する表示部の表示を制御する集積回路であって、
    複数のカテゴリのいずれかに属する複数の項目を管理する管理部と、
    前記表示部の画面に対するユーザの注目度である画面注目度を判定する画面注目度判定部と、
    前記複数のカテゴリの各々が選択された履歴を示す選択操作履歴情報を収集する選択操作履歴収集部と、
    前記画面注目度および前記選択操作履歴情報に基づいて、前記複数のカテゴリの各々に対し、前記ユーザが選択する確率である選択確率を算出する選択確率算出部と、
    前記複数のカテゴリのうち選択確率が高いカテゴリ程、該カテゴリの項目を選択容易な表示形態に決定し、決定した前記表示形態で前記表示部に表示させる表示形態決定部とを備え、
    前記複数のカテゴリは、前記画面に表示されているコンテンツに関連する項目からなるカテゴリである関連カテゴリを含み、
    前記選択確率算出部は、
    前記画面注目度が第1注目度の場合における前記関連カテゴリの選択確率を、前記画面注目度が前記第1注目度より低い第2注目度の場合における前記関連カテゴリの選択確率より高く算出し、
    前記複数のカテゴリのそれぞれについて、前記選択操作履歴情報を用いて、選択された回数が第1回数の場合における選択確率を、前記選択された回数が前記第1回数より少ない第2回数の場合における選択確率より高く算出する
    集積回路。
  25. 画面を有する表示部の表示を制御する表示制御方法であって、
    複数のカテゴリのいずれかに属する複数の項目を取得する取得ステップと、
    前記表示部の画面に対するユーザの注目度である画面注目度を判定する画面注目度判定ステップと、
    前記複数のカテゴリの各々が選択された履歴を示す選択操作履歴情報を収集する選択操作履歴収集ステップと、
    前記画面注目度および前記選択操作履歴情報に基づいて、前記複数のカテゴリの各々に対し、前記ユーザが選択する確率である選択確率を算出する選択確率算出ステップと、
    前記複数のカテゴリのうち選択確率が高いカテゴリ程、該カテゴリの項目を選択容易な表示形態に決定し、決定した前記表示形態で前記表示部に表示させる表示形態決定ステップとを含み、
    前記複数のカテゴリは、前記画面に表示されているコンテンツに関連する項目からなるカテゴリである関連カテゴリを含み、
    前記選択確率算出ステップでは、
    前記画面注目度が第1注目度の場合における前記関連カテゴリの選択確率を、前記画面注目度が前記第1注目度より低い第2注目度の場合における前記関連カテゴリの選択確率より高く算出し、
    前記複数のカテゴリのそれぞれについて、前記選択操作履歴情報を用いて、選択された回数が第1回数の場合における選択確率を、前記選択された回数が前記第1回数より少ない第2回数の場合における選択確率より高く算出する
    表示制御方法。
  26. 請求項25に記載の表示制御方法をコンピュータに実行させるためのプログラム。
JP2013510156A 2011-10-19 2012-09-27 表示制御装置、集積回路、表示制御方法およびプログラム Active JP5869558B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013510156A JP5869558B2 (ja) 2011-10-19 2012-09-27 表示制御装置、集積回路、表示制御方法およびプログラム

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2011229825 2011-10-19
JP2011229825 2011-10-19
PCT/JP2012/006187 WO2013057882A1 (ja) 2011-10-19 2012-09-27 表示制御装置、集積回路、表示制御方法およびプログラム
JP2013510156A JP5869558B2 (ja) 2011-10-19 2012-09-27 表示制御装置、集積回路、表示制御方法およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2013057882A1 true JPWO2013057882A1 (ja) 2015-04-02
JP5869558B2 JP5869558B2 (ja) 2016-02-24

Family

ID=48140552

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013510156A Active JP5869558B2 (ja) 2011-10-19 2012-09-27 表示制御装置、集積回路、表示制御方法およびプログラム

Country Status (4)

Country Link
US (1) US9021395B2 (ja)
JP (1) JP5869558B2 (ja)
CN (1) CN103229174B (ja)
WO (1) WO2013057882A1 (ja)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9100614B2 (en) * 2008-10-31 2015-08-04 Echostar Technologies L.L.C. Graphical interface navigation based on image element proximity
JP5863423B2 (ja) 2011-11-30 2016-02-16 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US20150113399A1 (en) * 2013-10-22 2015-04-23 Google Inc. Landing Page for Presenting Media Items
DE102013021834B4 (de) * 2013-12-21 2021-05-27 Audi Ag Vorrichtung und Verfahren zum Navigieren innerhalb eines Menüs zur Fahrzeugsteuerung sowie Auswählen eines Menüeintrags aus dem Menü
KR102209743B1 (ko) 2014-06-11 2021-02-01 삼성디스플레이 주식회사 표시 장치 및 이의 구동 방법
US10628758B2 (en) * 2014-10-28 2020-04-21 Fujitsu Limited Transportation service reservation method, transportation service reservation apparatus, and computer-readable storage medium
CN104484044B (zh) * 2014-12-23 2018-07-31 上海斐讯数据通信技术有限公司 一种广告推送方法和系统
CN106331778B (zh) * 2015-07-06 2020-08-14 腾讯科技(深圳)有限公司 视频推荐方法和装置
JP6536324B2 (ja) * 2015-09-30 2019-07-03 富士通株式会社 視線検出システム、視線検出方法および視線検出プログラム
US10212464B2 (en) 2016-04-15 2019-02-19 Hulu, LLC Generation, ranking, and delivery of actions for entities in a video delivery system
JP6966443B2 (ja) * 2016-07-19 2021-11-17 富士フイルム株式会社 画像表示システム、並びにヘッドマウントディスプレイの制御装置とその作動方法および作動プログラム
CN106534879B (zh) * 2016-11-08 2020-02-07 天脉聚源(北京)传媒科技有限公司 一种基于关注度的直播切换方法及系统
JP6532900B2 (ja) * 2017-01-05 2019-06-19 株式会社東芝 ジョブ実行制御装置、ジョブ実行制御方法およびプログラム
JP7135295B2 (ja) 2017-10-26 2022-09-13 富士フイルムビジネスイノベーション株式会社 装置
KR20190065746A (ko) * 2017-12-04 2019-06-12 삼성전자주식회사 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체
JP7254032B2 (ja) * 2018-01-11 2023-04-07 パナソニックホールディングス株式会社 決定装置及び決定方法
JP6983731B2 (ja) * 2018-07-19 2021-12-17 ヤフー株式会社 情報処理プログラム、情報処理方法、端末装置及び解析装置
JP7267714B2 (ja) * 2018-11-06 2023-05-02 株式会社東芝 知識情報作成支援装置
CN110675185A (zh) * 2019-09-04 2020-01-10 平安科技(深圳)有限公司 智能调节推送屏幕的方法、装置、计算机设备及存储介质
CN113472834A (zh) * 2020-04-27 2021-10-01 海信集团有限公司 一种对象推送方法及设备
CN112766158B (zh) * 2021-01-20 2022-06-03 重庆邮电大学 基于多任务级联式人脸遮挡表情识别方法
CN117499477B (zh) * 2023-11-16 2024-06-07 北京易华录信息技术股份有限公司 一种基于大模型训练的信息推送方法以及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH117453A (ja) * 1997-04-22 1999-01-12 Mitsubishi Electric Corp メディア情報推薦装置
JPH11272705A (ja) * 1998-03-24 1999-10-08 Oki Electric Ind Co Ltd Kioskシステムにおける情報提供方法
JP2006033776A (ja) * 2004-07-22 2006-02-02 Sony Corp 電子機器、電子機器における表示制御方法およびグラフィカル・ユーザ・インターフェース
JP2007179249A (ja) * 2005-12-27 2007-07-12 Kenwood Corp 情報検索装置及びプログラム
JP2010140307A (ja) * 2008-12-12 2010-06-24 Victor Co Of Japan Ltd 検索システム及びコンテンツサーバ

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0520016A (ja) 1991-07-16 1993-01-29 Casio Comput Co Ltd アイコンメニユー表示装置
US7242988B1 (en) * 1991-12-23 2007-07-10 Linda Irene Hoffberg Adaptive pattern recognition based controller apparatus and method and human-factored interface therefore
TW355774B (en) * 1995-10-12 1999-04-11 Konami Co Ltd TV game device, its loading support method and control method
US6389593B1 (en) 1995-12-12 2002-05-14 Sony Corporation Method of and apparatus for controlling transmission of information on programs
JP3747541B2 (ja) 1995-12-12 2006-02-22 ソニー株式会社 番組関連情報伝送制御方法、番組関連情報伝送制御装置及び番組関連情報伝送制御システム
JP4046994B2 (ja) 2001-12-06 2008-02-13 キヤノン株式会社 情報処理装置及び情報処理方法
US6943845B2 (en) 2000-12-15 2005-09-13 Canon Kabushiki Kaisha Apparatus and method for data processing, and storage medium
KR20050042399A (ko) * 2003-11-03 2005-05-09 삼성전자주식회사 게이즈 디텍션을 이용한 비디오 데이터 처리 장치 및 방법
US8255421B2 (en) * 2008-04-02 2012-08-28 Panasonic Corporation Communication assistance device, communication assistance method, and communication assistance program
JP5260643B2 (ja) * 2008-09-29 2013-08-14 パナソニック株式会社 ユーザインターフェース装置、ユーザインターフェース方法、及び記録媒体
US8195430B2 (en) * 2009-03-31 2012-06-05 Microsoft Corporation Cognitive agent
US8627230B2 (en) * 2009-11-24 2014-01-07 International Business Machines Corporation Intelligent command prediction
US9158432B2 (en) * 2010-06-03 2015-10-13 Nec Corporation Region recommendation device, region recommendation method and recording medium
US20130007662A1 (en) * 2011-06-29 2013-01-03 International Business Machines Corporation Prioritization of urgent tasks on mobile devices

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH117453A (ja) * 1997-04-22 1999-01-12 Mitsubishi Electric Corp メディア情報推薦装置
JPH11272705A (ja) * 1998-03-24 1999-10-08 Oki Electric Ind Co Ltd Kioskシステムにおける情報提供方法
JP2006033776A (ja) * 2004-07-22 2006-02-02 Sony Corp 電子機器、電子機器における表示制御方法およびグラフィカル・ユーザ・インターフェース
JP2007179249A (ja) * 2005-12-27 2007-07-12 Kenwood Corp 情報検索装置及びプログラム
JP2010140307A (ja) * 2008-12-12 2010-06-24 Victor Co Of Japan Ltd 検索システム及びコンテンツサーバ

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JPN6015044597; 吉本 一夫: 'インターテキスト方式の双方向テレビシステムのユーザインタフェースとサービス' 東芝レビュー 第51巻第10号, 19961001, 31-34ページ, 株式会社東芝 *

Also Published As

Publication number Publication date
WO2013057882A1 (ja) 2013-04-25
CN103229174A (zh) 2013-07-31
US20140053105A1 (en) 2014-02-20
US9021395B2 (en) 2015-04-28
CN103229174B (zh) 2016-12-14
JP5869558B2 (ja) 2016-02-24

Similar Documents

Publication Publication Date Title
JP5869558B2 (ja) 表示制御装置、集積回路、表示制御方法およびプログラム
EP2395420B1 (en) Information display device and information display method
CN103181180B (zh) 提示控制装置以及提示控制方法
US11081137B2 (en) Method and device for processing multimedia information
CN106576184B (zh) 信息处理装置、显示装置、信息处理方法、程序和信息处理系统
US9900498B2 (en) Glass-type terminal and method for controlling the same
US8510156B2 (en) Viewing terminal apparatus, viewing statistics-gathering apparatus, viewing statistics-processing system, and viewing statistics-processing method
JP5602155B2 (ja) ユーザインタフェース装置および入力方法
CN103324729B (zh) 一种推荐多媒体资源的方法和装置
CN104699958B (zh) 一种根据用户身体状况推荐菜谱的方法及装置
KR102092931B1 (ko) 시선 추적 방법 및 이를 수행하기 위한 사용자 단말
WO2010035477A1 (ja) ユーザインターフェース装置、ユーザインターフェース方法、及び記録媒体
KR101895846B1 (ko) 소셜 네트워킹 툴들과의 텔레비전 기반 상호작용의 용이화
KR20210047373A (ko) 이미지를 분석하기 위한 웨어러블기기 및 방법
TWI544336B (zh) 眼鏡、電子裝置與其配對的方法以及順暢內容播放的方法
KR20160052309A (ko) 전자 장치 및 전자 장치에서 얼굴 정보를 분석하는 방법
EP2798853A1 (en) Interactive media systems
CN112399239B (zh) 视频播放方法及装置
JP2010176510A (ja) 情報表示装置
US20180366089A1 (en) Head mounted display cooperative display system, system including dispay apparatus and head mounted display, and display apparatus thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150326

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151110

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151125

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151222

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160107

R150 Certificate of patent or registration of utility model

Ref document number: 5869558

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150