[go: up one dir, main page]

JPWO2018207519A1 - Action goal achievement support system, information processing method and program - Google Patents

Action goal achievement support system, information processing method and program Download PDF

Info

Publication number
JPWO2018207519A1
JPWO2018207519A1 JP2019517504A JP2019517504A JPWO2018207519A1 JP WO2018207519 A1 JPWO2018207519 A1 JP WO2018207519A1 JP 2019517504 A JP2019517504 A JP 2019517504A JP 2019517504 A JP2019517504 A JP 2019517504A JP WO2018207519 A1 JPWO2018207519 A1 JP WO2018207519A1
Authority
JP
Japan
Prior art keywords
action
achievement
user
goal
predetermined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019517504A
Other languages
Japanese (ja)
Other versions
JP6807565B2 (en
Inventor
佑香 山本
佑香 山本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of JPWO2018207519A1 publication Critical patent/JPWO2018207519A1/en
Application granted granted Critical
Publication of JP6807565B2 publication Critical patent/JP6807565B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Toys (AREA)

Abstract

行動目標の達成を支援する行動目標達成支援システム(10)は、ユーザの行動に関連したセンシングの結果に基づいて、行動目標の達成レベルを逐次決定する評価部(110)と、評価部(110)により決定された達成レベルに応じて行動目標の達成の支援のための支援処理を行う処理部(120)と、ユーザの移動を検知する検知部(130)と、評価部(110)により決定された達成レベルの一定時間の変化量が所定閾値以下である場合に、検知部(130)の検知結果が所定条件を満たすか否かに応じて所定処理(飽き対応処理)が実行されるべきか否かを判定する判定部(140)とを備える。  The behavior goal achievement support system (10) that supports achievement of the behavior goal is based on the sensing result related to the user's behavior, and the evaluation unit (110) that sequentially determines the achievement level of the behavior goal, and the assessment unit (110). ) Determined by the processing unit (120) that performs support processing for supporting the achievement of the behavioral goal according to the achievement level determined by (1), the detection unit (130) that detects the movement of the user, and the evaluation unit (110). When the amount of change in the achieved level for a certain period of time is equal to or less than a predetermined threshold value, a predetermined process (satisfaction response process) should be executed depending on whether or not the detection result of the detection unit (130) satisfies the predetermined condition And a determination unit (140) for determining whether or not.

Description

本発明は、行動目標の達成を支援する行動目標達成支援システム、並びに、この行動目標達成支援システムで用いられる情報処理方法及びプログラムに関する。   The present invention relates to an action goal achievement support system that supports achievement of an action goal, and an information processing method and program used in the action goal achievement support system.

従来、幼児或いは犬に特定の行動を習得させるために機器を制御する技術が知られている。例えば、特許文献1には、幼児による監視領域への侵入行動を監視しその行動に応じて、柵を上昇させる制御を行う、又は、しつけ情報を出力する技術が、記載されている。また、特許文献2には、犬のしつけを効率的に行うためにオペラント条件付け理論に基づいて、一定時間犬の吠え声を感知しなければ給餌機を制御して餌を出す技術が、記載されている。   2. Description of the Related Art Conventionally, a technique for controlling a device to make an infant or a dog learn a specific action is known. For example, Patent Document 1 describes a technique for monitoring an invasion action of an infant into a monitoring area and performing control for raising a fence according to the action or outputting discipline information. Patent Document 2 describes a technique for controlling a feeder and feeding food if a dog bark is not detected for a certain period of time based on the operant conditioning theory in order to efficiently train the dog. ing.

特開2004−78304号公報JP 2004-78304 A 特開2007−82488号公報JP 2007-82488 A

しかし、従来の技術は、特定の行動を習得中の幼児等が、特定の行動に飽きた状況に対処できない。   However, the conventional technology cannot cope with a situation in which an infant or the like who is learning a specific behavior gets tired of the specific behavior.

そこで、本発明は、幼児等のユーザの行動目標の達成を支援すべく、ユーザが行動目標の達成のための行動に飽きた状況に対処するために有用な行動目標達成支援システムを提供することを目的とする。また、本発明は、この行動目標達成支援システムで用いられる情報処理方法、及び、プログラムを提供することを目的とする。   Therefore, the present invention provides an action target achievement support system useful for dealing with a situation in which a user is bored with actions for achieving the action goal in order to support the achievement of the action goal of the user such as an infant. With the goal. It is another object of the present invention to provide an information processing method and program used in this action goal achievement support system.

上記目的を達成するために本発明の一態様に係る行動目標達成支援システムは、行動目標の達成を支援する行動目標達成支援システムであって、ユーザの行動に関連したセンシングの結果に基づいて、行動目標の達成レベルを逐次決定する評価部と、前記評価部により決定された前記達成レベルに応じて行動目標の達成の支援のための支援処理を行う処理部と、前記ユーザの移動を検知する検知部と、前記評価部により決定された前記達成レベルの一定時間の変化量が所定閾値以下である場合に、前記検知部の検知結果が所定条件を満たすか否かに応じて所定処理が実行されるべきか否かを判定する判定部とを備える。   In order to achieve the above object, an action goal achievement support system according to an aspect of the present invention is an action goal achievement support system that supports achievement of an action goal, based on a sensing result related to a user's action, An evaluation unit that sequentially determines an achievement level of an action target, a processing unit that performs support processing for assisting the achievement of the action target according to the achievement level determined by the evaluation unit, and detects the movement of the user When the amount of change in the achievement level determined by the detection unit and the evaluation unit for a certain period of time is equal to or less than a predetermined threshold, predetermined processing is executed depending on whether the detection result of the detection unit satisfies a predetermined condition A determination unit for determining whether or not to be performed.

また、上記目的を達成するために本発明の一態様に係る情報処理方法は、行動目標の達成を支援する行動目標達成支援システムで用いられる情報処理方法であって、ユーザの行動に関連したセンシングの結果に基づいて、行動目標の達成レベルを逐次決定する評価ステップと、前記評価ステップで決定された前記達成レベルに応じて行動目標の達成の支援のための支援処理を行う処理ステップと、前記ユーザの移動を検知する検知ステップと、前記評価ステップで決定された前記達成レベルの一定時間の変化量が所定閾値以下である場合に、前記検知ステップでの検知結果が所定条件を満たすか否かに応じて前記ユーザが行動目標の達成のための行動に飽きているか否かを判定する判定ステップとを含む。   In order to achieve the above object, an information processing method according to an aspect of the present invention is an information processing method used in a behavior goal achievement support system that supports achievement of a behavior goal, and includes sensing related to user behavior. An evaluation step for sequentially determining the achievement level of the behavioral goal based on the results of the above, a processing step for performing support processing for supporting the achievement of the behavioral goal according to the achievement level determined in the assessment step, Whether or not the detection result in the detection step satisfies a predetermined condition when a change amount of the achievement level determined in the evaluation step determined in the evaluation step and a certain amount of time is less than or equal to a predetermined threshold value And determining whether or not the user is bored with the action for achieving the action goal.

また、上記目的を達成するために本発明の一態様に係るプログラムは、行動目標の達成を支援する行動目標達成支援システムを構成するコンピュータに情報処理を実行させるためのプログラムであって、前記情報処理は、ユーザの行動に関連したセンシングの結果に基づいて、行動目標の達成レベルを逐次決定する評価ステップと、前記評価ステップで決定された前記達成レベルに応じて行動目標の達成の支援のための支援処理を行う処理ステップと、前記ユーザの移動を検知する検知ステップと、前記評価ステップで決定された前記達成レベルの一定時間の変化量が所定閾値以下である場合に、前記検知ステップでの検知結果が所定条件を満たすか否かに応じて所定処理が実行されるべきか否かを判定する判定ステップとを含む。   In order to achieve the above object, a program according to one aspect of the present invention is a program for causing a computer constituting an action goal achievement support system for supporting achievement of an action goal to execute information processing, The processing includes an evaluation step for sequentially determining the achievement level of the behavioral goal based on the sensing result related to the user's behavior, and for supporting the achievement of the behavioral goal according to the achievement level determined in the assessment step. When the amount of change over a certain period of time in the achievement level determined in the evaluation step is less than or equal to a predetermined threshold, A determination step of determining whether or not the predetermined process should be executed depending on whether or not the detection result satisfies a predetermined condition.

本発明の一態様に係る行動目標達成支援システム等によれば、ユーザが行動目標の達成のための行動に飽きたと推定される状況か否かが判定される。これにより、飽きた状況であることを踏まえた対処が可能となる。   According to the action goal achievement support system and the like according to one aspect of the present invention, it is determined whether or not the situation is estimated that the user is tired of the action for achieving the action goal. This makes it possible to take measures based on the fact that you are tired.

図1は、実施の形態1に係る行動目標達成支援システムの概略構成図である。FIG. 1 is a schematic configuration diagram of an action goal achievement support system according to the first embodiment. 図2は、行動目標達成支援システムで用いられる達成レベル評価テーブルの一例を示す図である。FIG. 2 is a diagram illustrating an example of an achievement level evaluation table used in the action goal achievement support system. 図3は、行動目標達成支援システムで用いられる達成レベル評価テーブルの別の一例を示す図である。FIG. 3 is a diagram illustrating another example of the achievement level evaluation table used in the action goal achievement support system. 図4は、行動目標達成支援システムの提示部での提示に用いられる動画の一例を示す図である。FIG. 4 is a diagram illustrating an example of a moving image used for presentation by the presentation unit of the action goal achievement support system. 図5は、行動目標達成支援システムの提示部での提示に用いられる動画の別の一例を示す図である。FIG. 5 is a diagram illustrating another example of a moving image used for presentation by the presentation unit of the action goal achievement support system. 図6は、行動目標達成支援システムの提示部での提示に用いられる画像の一例を示す図である。FIG. 6 is a diagram illustrating an example of an image used for presentation by the presentation unit of the action goal achievement support system. 図7は、行動目標達成支援システムにより情報端末に表示される画面の一例を示す図である。FIG. 7 is a diagram illustrating an example of a screen displayed on the information terminal by the action goal achievement support system. 図8は、行動目標達成支援システムにより情報端末に表示される画面の別の一例を示す図である。FIG. 8 is a diagram illustrating another example of a screen displayed on the information terminal by the action goal achievement support system. 図9は、実施の形態1に係る行動目標達成支援システムの動作の一例を示すフローチャートである。FIG. 9 is a flowchart illustrating an example of the operation of the action goal achievement support system according to the first embodiment. 図10は、実施の形態2に係る行動目標達成支援システムの動作の一例を示すフローチャートである。FIG. 10 is a flowchart illustrating an example of the operation of the action goal achievement support system according to the second embodiment.

(実施の形態1)
以下、実施の形態について、図面を参照しながら説明する。ここで示す実施の形態は、いずれも本発明の一具体例を示すものである。従って、以下の実施の形態で示される数値、形状、材料、構成要素、構成要素の配置及び接続形態、並びに、ステップ(工程)及びステップの順序等は、一例であって本発明を限定するものではない。以下の実施の形態における構成要素のうち、独立請求項に記載されていない構成要素については、任意に付加可能な構成要素である。また、各図は、模式図であり、必ずしも厳密に図示されたものではない。
(Embodiment 1)
Hereinafter, embodiments will be described with reference to the drawings. Each of the embodiments shown here shows a specific example of the present invention. Accordingly, the numerical values, shapes, materials, components, component arrangement and connection forms, steps (steps) and order of steps, and the like shown in the following embodiments are examples and limit the present invention. is not. Among the constituent elements in the following embodiments, constituent elements that are not described in the independent claims can be arbitrarily added. Each figure is a mimetic diagram and is not necessarily illustrated strictly.

以下、本発明の一実施形態に係る行動目標達成支援システムについて説明する。   Hereinafter, an action goal achievement support system concerning one embodiment of the present invention is explained.

幼児、児童等のしつけとして、特定の行動(例えば遊び終わったら玩具を片付ける整理収納行動)を習得させる場合に、親等といった保護者は、幼児等の特定の行動を褒めて、行動を習慣付けさせる。しかし、保護者は、家事等を行っている際には、適切なタイミングで幼児等を褒めることができない。そこで、しつけの育児負担を軽減するシステムが必要とされる。このような必要性に対応し、本実施の形態に係る行動目標達成支援システムは、幼児、児童等といったユーザに特定の行動目標を達成するための行動を習得させるために情報の提示に係る制御を行う。ところで、幼児、児童等は、行動目標を達成するための行動(例えば玩具を片付ける整理収納行動)の途中において、飽きてしまい、行動目標を達成しないことがある。そこで、本実施の形態に係る行動目標達成支援システムは、幼児、児童等が行動目標を達成するための行動の途中で飽きた状況に対処可能な構成を備える。   Parents such as parents praise specific behaviors such as infants and make behaviors habits when learning specific behaviors (for example, organizing and storing to put away toys after play) as discipline for infants and children . However, the guardian cannot give up the infant or the like at an appropriate timing when performing housework. Therefore, a system that reduces the burden of disciplined childcare is needed. In response to such a need, the action goal achievement support system according to the present embodiment is a control related to the presentation of information in order to allow a user such as an infant or a child to learn an action for achieving a specific action goal. I do. By the way, an infant, a child, etc. may get tired in the middle of an action for achieving an action target (for example, an organized storage action for putting away toys) and may not achieve the action target. Therefore, the action goal achievement support system according to the present embodiment has a configuration that can cope with a situation in which an infant, a child, or the like gets tired during the action for achieving the action goal.

(構成)
図1は、本実施の形態に係る行動目標達成支援システム10の概略構成を示す図である。ここでは、ユーザとしての幼児に整理収納行動を習得させるために、主に住宅内に設置される装置類で構成され、情報の提示に係る制御を行う行動目標達成支援システム10について説明する。幼児の保護者(親等)は、幼児に、玩具で遊んだ後に適切に整理収納行動を習得させるべく行動目標達成支援システム10を活用し得る。整理収納行動は、例えば複数の物品を利用した後における複数の物品の収納に係る行動であり、具体例としては、複数の玩具で遊んだ後に、それら複数全ての玩具を片付ける行動である。即ち、行動目標達成支援システム10は、具体例としては、幼児に、玩具を片付けるという行動目標を達成させることを支援するシステムであり、その支援のための情報処理方法を用いる。
(Constitution)
FIG. 1 is a diagram showing a schematic configuration of an action goal achievement support system 10 according to the present embodiment. Here, an action goal achievement support system 10 that is configured mainly by devices installed in a house and performs control related to presentation of information in order to allow an infant as a user to learn organizing and storing actions will be described. An infant guardian (such as a parent) can use the action goal achievement support system 10 to allow an infant to properly learn organizing and storing behavior after playing with a toy. The organizing and storing action is an action related to storing a plurality of articles after using a plurality of articles, for example, and as a specific example, after playing with a plurality of toys, the action of clearing all the toys. That is, the action goal achievement support system 10 is a system that assists an infant to achieve the action goal of putting away toys, and uses an information processing method for the support.

行動目標達成支援システム10は、図1に示すように、情報処理装置100と、イメージセンサ21と、重量センサ内蔵の玩具箱22と、情報端末30とを含んで構成される。ここでは、一例として、情報処理装置100及びイメージセンサ21は、住宅等の施設内への据え置き型の装置であり、情報端末30は、幼児の保護者に利用されるスマートフォン、タブレット等の携帯性を有する装置であるものとして説明する。なお、ここで示す例では、ユーザである幼児の行動目標は、所定の複数の玩具の全てを玩具箱22に収納することである。   As shown in FIG. 1, the action goal achievement support system 10 includes an information processing apparatus 100, an image sensor 21, a toy box 22 with a built-in weight sensor, and an information terminal 30. Here, as an example, the information processing device 100 and the image sensor 21 are stationary devices in a facility such as a house, and the information terminal 30 is a portability of a smartphone, a tablet, or the like used by an infant guardian. It is assumed that the device has In the example shown here, the action goal of the infant who is the user is to store all of a plurality of predetermined toys in the toy box 22.

イメージセンサ21は、情報処理装置100と通信可能な撮像装置であり、住宅内の幼児が遊ぶ部屋等である所定空間を対象として撮像することにより、その所定空間に関しての画像データつまり幼児を撮像した画像データを生成して、その画像データを情報処理装置100へと送信する機能を有する。   The image sensor 21 is an imaging device that can communicate with the information processing apparatus 100, and captures an image of a predetermined space such as a room where an infant in a house plays, and thus images image data relating to the predetermined space, that is, an infant. It has a function of generating image data and transmitting the image data to the information processing apparatus 100.

重量センサ内蔵の玩具箱22は、重量センサ及び通信回路を内蔵し、玩具を収納するための箱である。玩具箱22の重量センサは、箱に収納された玩具の重量を測定して測定結果を示す重量データを情報処理装置100へと送信する機能を有する。   The toy box 22 with a built-in weight sensor is a box for storing a toy with a built-in weight sensor and a communication circuit. The weight sensor of the toy box 22 has a function of measuring the weight of the toy stored in the box and transmitting weight data indicating the measurement result to the information processing apparatus 100.

情報端末30は、幼児の保護者(親等)が携帯するスマートフォン、タブレット等であり、情報処理装置100から送信される通知情報等の情報を受信することにより、その情報をユーザに提示する機能を有する。情報端末30は、例えば、ディスプレイを有し、通知情報等をディスプレイに表示し得る。   The information terminal 30 is a smartphone, tablet, or the like carried by an infant guardian (parent), and has a function of presenting information to the user by receiving information such as notification information transmitted from the information processing apparatus 100. Have. The information terminal 30 has a display, for example, and can display notification information and the like on the display.

情報処理装置100は、例えば、幼児に整理収納行動を習得させるために、幼児の行動の評価、評価に基づく行動目標の達成の支援のための支援処理、幼児が整理収納行動に飽きた状況に対処する所定処理(飽き対応処理とも称する)等を行うコンピュータである。情報処理装置100は、玩具箱22の重量センサにより逐次送信される重量データと、イメージセンサ21により逐次送信される画像データとに基づき、幼児の行動の評価、支援処理、飽き対応処理等を行う。支援処理は、例えば、幼児に情報を提示する処理であり、具体的には、支援用画像として予め定められている画像(例えば幼児による目標達成のための行動について褒める情報を表した画像である褒美画像)をディスプレイに表示する処理である。幼児が目標達成のための行動を行った後に褒美画像を提示することは、オペラント条件付け理論によれば、幼児に目標行動としての整理収納行動を自発的に実行する頻度を増加させる影響を与えることになる。褒美画像等の支援用画像の提示は、報酬(つまり幼児の目標行動の自発頻度を高める刺激)として作用する。なお、ここでは、支援処理による情報の提示を、支援用画像の表示によって実現する例を示すが、情報の提示として、文字、音声、静止画、動画等を、人間の知覚(例えば視覚、聴覚等)に作用するいかなる機器(例えばスピーカ等)で出力してもよい。支援処理により提示される情報の内容は、例えば、オペラント条件付け理論に従って、幼児に目標行動を自発的に実行する頻度を増加させる影響を与えることを意図して定められたものである。   For example, the information processing apparatus 100 evaluates the behavior of the infant, supports processing for supporting the achievement of the action goal based on the evaluation, and makes the infant tired of the organized storage behavior in order to allow the infant to learn the organized storage behavior. It is a computer that performs predetermined processing (also referred to as bored response processing) to deal with. The information processing apparatus 100 performs infant behavior evaluation, support processing, tiredness processing, and the like based on weight data sequentially transmitted by the weight sensor of the toy box 22 and image data sequentially transmitted by the image sensor 21. . The support process is, for example, a process of presenting information to an infant. Specifically, the support process is an image that is predetermined as an image for support (for example, an image that represents information that gives up on the action of the infant for achieving the goal). This is a process for displaying (images) on the display. According to the operant conditioning theory, presenting a reward image after an infant has taken action to achieve the goal has the effect of increasing the frequency with which the organizing and storing action as the target action is voluntarily executed. become. Presentation of support images such as reward images acts as a reward (that is, a stimulus that increases the spontaneous frequency of the infant's target behavior). Here, an example is shown in which the presentation of information by support processing is realized by displaying a support image. As information presentation, characters, voices, still images, moving images, and the like are perceived by human perception (eg, visual, auditory, etc.). Etc.) may be output by any device (for example, a speaker or the like) that acts on the device. The content of the information presented by the support process is determined with the intention of increasing the frequency of voluntarily executing the target action on the infant according to the operant conditioning theory, for example.

情報処理装置100は、通信インタフェース(I/F)、メモリ及びプロセッサ(マイクロプロセッサ)等を含んで構成される。通信I/Fは、無線通信或いは有線通信のための通信回路等である。通信I/Fにより、情報処理装置100は、例えばイメージセンサ21、玩具箱22の重量センサ、及び、情報端末30と通信可能である。メモリは、プログラム及びデータを予め保持しているROM、プログラムの実行に際してデータ等の記憶に利用するためのRAM等であり、例えば不揮発性メモリを含んでいてもよい。なお、情報処理装置100は、メモリの他にハードディスク等の記憶媒体を含んでもよい。プロセッサは、メモリに格納されたプログラムを実行することにより通信I/F等を制御して情報処理を行う。情報処理装置100は、例えば、幼児の保護者等による操作(例えば起動操作、停止操作等)を受け付けるためのユーザインタフェースとしての入力装置(キーボード、タッチパネル、或いは、音声入力装置等)及びディスプレイを有する。なお、情報処理装置100は、プロジェクタ、テレビジョン受信機、音声再生装置等に情報を出力してもよい。   The information processing apparatus 100 includes a communication interface (I / F), a memory, a processor (microprocessor), and the like. The communication I / F is a communication circuit for wireless communication or wired communication. Through the communication I / F, the information processing apparatus 100 can communicate with, for example, the image sensor 21, the weight sensor of the toy box 22, and the information terminal 30. The memory is a ROM that stores a program and data in advance, a RAM that is used to store data or the like when the program is executed, and may include, for example, a nonvolatile memory. Note that the information processing apparatus 100 may include a storage medium such as a hard disk in addition to the memory. The processor performs information processing by controlling the communication I / F and the like by executing a program stored in the memory. The information processing apparatus 100 includes, for example, an input device (keyboard, touch panel, voice input device, etc.) and a display as a user interface for receiving an operation (for example, a start operation, a stop operation, etc.) by an infant guardian or the like. . Note that the information processing apparatus 100 may output information to a projector, a television receiver, an audio reproduction apparatus, or the like.

情報処理装置100は、重量データ及び画像データに基づき、幼児の行動の評価、支援処理、飽き対応処理を行う機能を実現するために、機能面では、図1に示すように評価部110、処理部120、検知部130、判定部140及び記憶部150を備える。   As shown in FIG. 1, the information processing apparatus 100 has functions such as an evaluation process for an infant's behavior, a support process, and a tiredness response process based on weight data and image data. Unit 120, detection unit 130, determination unit 140, and storage unit 150.

記憶部150は、達成レベル評価テーブル、支援用画像としての複数の褒美画像、応援画像等を記憶するメモリ等の記憶媒体の一領域である。情報処理装置100の記憶部150を不揮発性メモリ、ハードディスクその他の記憶媒体で構成することは有用である。図2は、玩具箱22の重量から達成レベルを決定するために用いられる達成レベル評価テーブルの一例を示す。   The storage unit 150 is an area of a storage medium such as a memory that stores an achievement level evaluation table, a plurality of reward images as support images, a support image, and the like. It is useful to configure the storage unit 150 of the information processing apparatus 100 with a nonvolatile memory, a hard disk, or other storage medium. FIG. 2 shows an example of the achievement level evaluation table used for determining the achievement level from the weight of the toy box 22.

評価部110は、例えば情報処理装置100の通信I/F、及び、プログラムを実行するプロセッサ等により実現される。評価部110は、幼児の行動に関連したセンシングの結果に基づいて、行動目標の達成レベルを逐次決定する。具体的には、評価部110は、玩具箱22の重量センサから受信される重量データと、記憶部150に記憶されている達成レベル評価テーブルとに基づいて、幼児の整理収納行動について、行動目標の達成の度合いを示す達成レベルを逐次決定することで、評価を行う。評価部110は、達成レベルの決定を、例えば、数秒間隔等で繰り返し行う。このために評価部110が玩具箱22の重量センサに測定結果に係る重量データを数秒間隔等で繰り返し要求することとしてもよいし、重量センサが自ら数秒間隔等の周期で重量を測定して重量データを送信することとしてもよい。なお、評価部110が、達成レベルを決定する方法は、いかなる方法であってもよい。達成レベルの段階数は0〜10に限られることはない。例えば、評価部110は、重量データが示す重量の値そのものを、達成レベルとして決定してもよい。また、例えば、評価部110は、幼児を撮像可能なイメージセンサ21のセンシングの結果である画像データに基づく画像認識処理により、玩具を認識し、玩具箱22に収納された玩具の個数を検出して、玩具の個数に応じて達成レベルを決定してもよい。この場合には玩具箱22の重量センサは不要となる。この場合に評価部110は、例えば、図3に例示する達成レベル評価テーブルを利用して、達成レベルを決定してもよいし、検出された玩具の個数そのものを、達成レベルとして決定してもよい。評価部110は、決定した達成レベルを処理部120及び判定部140に伝える。   The evaluation unit 110 is realized by, for example, a communication I / F of the information processing apparatus 100 and a processor that executes a program. The evaluation unit 110 sequentially determines the achievement level of the action target based on the sensing result related to the action of the infant. Specifically, the evaluation unit 110 determines the action target for the organized storage behavior of the infant based on the weight data received from the weight sensor of the toy box 22 and the achievement level evaluation table stored in the storage unit 150. Evaluation is performed by sequentially determining the achievement level indicating the degree of achievement. The evaluation unit 110 repeatedly determines the achievement level, for example, at intervals of several seconds. For this purpose, the evaluation unit 110 may repeatedly request the weight data related to the measurement result from the weight sensor of the toy box 22 at intervals of several seconds, or the weight sensor itself measures the weight at intervals of several seconds, etc. Data may be transmitted. Note that the evaluation unit 110 may use any method for determining the achievement level. The number of steps of the achievement level is not limited to 0-10. For example, the evaluation unit 110 may determine the weight value itself indicated by the weight data as the achievement level. In addition, for example, the evaluation unit 110 recognizes a toy and detects the number of toys stored in the toy box 22 by an image recognition process based on image data that is a sensing result of the image sensor 21 that can image an infant. The achievement level may be determined according to the number of toys. In this case, the weight sensor of the toy box 22 becomes unnecessary. In this case, the evaluation unit 110 may determine the achievement level using, for example, the achievement level evaluation table illustrated in FIG. 3, or may determine the number of detected toys themselves as the achievement level. Good. The evaluation unit 110 notifies the processing unit 120 and the determination unit 140 of the determined achievement level.

処理部120は、例えば情報処理装置100のディスプレイ、及び、プログラムを実行するプロセッサ等により実現される。処理部120は、評価部110により決定された達成レベルに応じて行動目標の達成の支援のための支援処理を行う。また、処理部120は、判定部140の判定結果に応じて所定処理(飽き対応処理)を実行する。具体的には、処理部120は、評価部110により決定された達成レベルが所定基準を満たす場合に支援用画像として定められている画像の表示を支援処理として行う。また、処理部120は、飽き対応処理が実行されるべきと判定部140で判定された場合に、支援処理によって既に表示された画像とは異なる画像を支援用画像として定める処理を飽き対応処理として行う。所定基準は、任意に定められ、例えば達成レベルが前回の達成レベルより1つ上昇したこと、例えば達成レベルが1、3、5、7等の所定数になったこと等である。また、処理部120は、飽き対応処理として更に、幼児が行動目標の達成のための行動に飽きていることを示す通知情報を出力する通知処理を行う。なお、通知情報は、保護者に対して幼児が行動目標の達成のための行動を行うことを支援する何らかの行動を指示する情報を含んでもよい。通知処理は、例えば、情報端末30等の所定端末への通知情報の送信である。通知処理として、音声再生装置等からの通知情報の音声出力、ディスプレイ等での通知情報の表示等を行ってもよい。また、処理部120は更に、飽き対応処理が実行されるべきでないと判定部140が判定した場合に、幼児に行動目標の達成のための行動を行うことを促す応援画像の表示、及び、情報端末30への情報の送信を行ってもよい。   The processing unit 120 is realized by, for example, a display of the information processing apparatus 100 and a processor that executes a program. The processing unit 120 performs a support process for supporting the achievement of the action target according to the achievement level determined by the evaluation unit 110. In addition, the processing unit 120 executes a predetermined process (a tiredness handling process) according to the determination result of the determination unit 140. Specifically, the processing unit 120 performs display of an image defined as a support image as the support process when the achievement level determined by the evaluation unit 110 satisfies a predetermined criterion. In addition, when the determination unit 140 determines that the tiredness handling process should be executed, the processing unit 120 sets a process that defines an image different from the image already displayed by the assistance process as the assistance image as the tiredness handling process. Do. The predetermined standard is arbitrarily determined. For example, the achievement level has increased by one from the previous achievement level, for example, the achievement level has reached a predetermined number of 1, 3, 5, 7, and the like. In addition, the processing unit 120 performs notification processing for outputting notification information indicating that the infant is bored with the action for achieving the action target as the bored response process. Note that the notification information may include information instructing a parent to perform some action that supports an infant to perform an action for achieving an action target. The notification process is, for example, transmission of notification information to a predetermined terminal such as the information terminal 30. As notification processing, voice output of notification information from a voice reproduction device or the like, display of notification information on a display, or the like may be performed. Further, the processing unit 120 further displays a support image that prompts the infant to perform an action for achieving the action target and information when the determination unit 140 determines that the bored response process should not be executed. Information may be transmitted to the terminal 30.

図1では、処理部120が、支援用画像等を表示するディスプレイ等の表示部121と、通知情報を情報端末30へ送信する通信I/F等の送信部122とを含む例を示している。図4は、表示部121に表示される支援用画像の一例としての褒美画像である動画Aを示し、図5は、表示部121に表示される支援用画像の一例としての褒美画像である動画Bを示し、図6は、表示部121に表示される応援画像の一例を示す。動画A及び動画Bは、達成レベルが所定基準を満たす場合に、キャラクターが幼児の行動を褒める内容を有する褒美画像である。褒美画像として、褒めるために予め定められたキーワード(例えば「やったね」、「すごい」、「よくできました」等)を含むものが有用である。記憶部150には動画A及び動画Bを含む複数の褒美画像が記憶されている。なお、褒美画像は、静止画でも動画でもよく、キャラクターが褒める音声が付されていてもよい。なお、動画Aと動画Bとはキャラクター、キーワード等とが互いに異なる褒美画像である。幼児が整理収納行動に飽きた状況において幼児に提示する褒美画像の内容を変化させることは、整理収納行動への幼児の意欲を高め、幼児に整理収納行動を継続させるために有用である。また、図7は、送信部122により送信された通知情報を受信して表示した情報端末30を示す。また、図8は、飽き対応処理が実行されるべきでないと判定部140が判定した場合に送信部122により送信された情報を受信して表示した情報端末30を示す。幼児の保護者等は、家事等の作業中であっても、図7或いは図8に示す情報を情報端末30で確認できるので、幼児の状況を踏まえて、必要に応じて幼児のしつけのための行動等を行うことが可能となる。   FIG. 1 shows an example in which the processing unit 120 includes a display unit 121 such as a display that displays a support image and the like, and a transmission unit 122 such as a communication I / F that transmits notification information to the information terminal 30. . FIG. 4 shows a video A that is a reward image as an example of a support image displayed on the display unit 121, and FIG. 5 shows a video that is a reward image as an example of a support image displayed on the display unit 121. FIG. 6 shows an example of a support image displayed on the display unit 121. The moving image A and the moving image B are reward images having content that the character gives up the action of the infant when the achievement level satisfies a predetermined standard. As the reward image, an image including a predetermined keyword (for example, “I did it”, “Wow”, “I did it well”) for giving up is useful. The storage unit 150 stores a plurality of reward images including a moving image A and a moving image B. The reward image may be a still image or a moving image, and may be accompanied by a voice that the character praises. Note that the moving image A and the moving image B are reward images with different characters, keywords, and the like. Changing the content of the reward image presented to the infant in a situation where the infant is tired of the organizing and storing behavior is useful for increasing the child's willingness to organize and storing the behavior and allowing the infant to continue the organizing and storing behavior. FIG. 7 shows the information terminal 30 that has received and displayed the notification information transmitted by the transmission unit 122. FIG. 8 shows the information terminal 30 that receives and displays the information transmitted by the transmission unit 122 when the determination unit 140 determines that the bored response process should not be executed. Parents of infants can check the information shown in FIG. 7 or FIG. 8 on the information terminal 30 even during housework, etc. It becomes possible to perform such actions.

検知部130は、例えば通信I/F、及び、プログラムを実行するプロセッサ等により実現される。検知部130は、イメージセンサ21によるセンシングの結果としての画像データを逐次取得してその画像データに基づく画像認識処理により、幼児の移動の検知を行う。検知部130による検知結果は、幼児が移動している状態か否かを示す。幼児は、玩具で遊んでいる場合等といった、集中して何かの作業を行っている場合において、殆ど移動しなくなり、何かに飽きている場合に、行き先を定めない徘徊等といった移動を行う。そこで、情報処理装置100は、検知部130によって幼児の移動を検知することで、幼児が整理収納行動に飽きた状況か、整理収納行動の途中で玩具での遊び等といった作業を行っている状況かを推定的に区別し得る。具体的には、検知部130は、逐次撮像により得られた各画像データから画像認識処理で幼児の位置を認識しその位置の変動があることをもって移動を検知する。この例の他、幼児の移動を検知する方法として、いかなる方法を用いてもよい。例えば、検知部130は、幼児の位置を測定するいかなるセンサを用いて移動を検知してもよいし、例えば幼児に装着させた加速度センサ等を用いて加速度の変動から移動を検知してもよい。   The detection unit 130 is realized by, for example, a communication I / F and a processor that executes a program. The detection unit 130 sequentially acquires image data as a result of sensing by the image sensor 21 and detects the movement of the infant through image recognition processing based on the image data. The detection result by the detection unit 130 indicates whether or not the infant is moving. When an infant is playing something with a toy, etc., it is almost impossible to move, and when it gets tired of something, it moves such as a trap that does not specify the destination. . Therefore, the information processing apparatus 100 detects the movement of the infant by the detection unit 130, or the situation where the infant is tired of the organized storage behavior or is performing work such as playing with a toy during the organized storage behavior. Can be distinguished putatively. Specifically, the detection unit 130 recognizes the position of the infant from the image data obtained by sequential imaging by image recognition processing, and detects movement when there is a change in the position. In addition to this example, any method may be used as a method of detecting the movement of the infant. For example, the detection unit 130 may detect the movement using any sensor that measures the position of the infant, or may detect the movement from the fluctuation of the acceleration using, for example, an acceleration sensor attached to the infant. .

判定部140は、例えば、メモリ、プログラムを実行するプロセッサ等により実現される。判定部140は、評価部110に伝えられた達成レベルに時刻を付してメモリ等に記録する。また、判定部140は、評価部110により決定された達成レベルの一定時間(例えば数十秒等)の変化量が所定閾値以下である場合に、検知部130の検知結果が所定条件を満たすか否かに応じて所定処理(飽き対応処理)が実行されるべきか否かを判定する。判定部140は、例えば、達成レベルが変化しないことを、所定閾値を用いて判定する。このため、所定閾値として、例えばゼロ(0)を定めておく、或いは、達成レベルの評価に係る測定誤差等を踏まえてゼロにある程度近い値等を定めておくことが有用である。所定条件は、例えば検知部130の検知結果が、幼児が移動している状態を示す場合に満たされ、その検知結果が、幼児が移動していない状態を示す場合に満たされない。判定部140による判定は、例えば、その判定の結果が情報処理装置100のメモリ等の記憶媒体の内容或いは情報処理装置100の状態として現れるように行われる。例えば判定部140が、検知部130の検知結果が所定条件を満たすと判定した場合と満たさないと判定した場合では、記憶媒体の内容或いは情報処理装置100の状態が異なるものとなる。なお、判定部140は、判定結果を示す情報を記憶部150に蓄積することとしてもよい。そして、判定部140は、検知部130の検知結果が所定条件を満たすと判定した場合に飽き対応処理が実行されるべきと判定する。判定部140により飽き対応処理が実行されるべきと判定された場合には、処理部120により飽き対応処理が実行され、飽き対応処理が実行されるべきでないと判定された場合には、飽き対応処理が実行されない。   The determination unit 140 is realized by, for example, a memory, a processor that executes a program, and the like. The determination unit 140 adds the time to the achievement level transmitted to the evaluation unit 110 and records it in a memory or the like. In addition, the determination unit 140 determines whether the detection result of the detection unit 130 satisfies the predetermined condition when the amount of change of the achievement level determined by the evaluation unit 110 for a certain time (for example, several tens of seconds) is equal to or less than a predetermined threshold. It is determined whether or not a predetermined process (satisfaction handling process) should be executed depending on whether or not. For example, the determination unit 140 determines that the achievement level does not change using a predetermined threshold. For this reason, for example, it is useful to set, for example, zero (0) as the predetermined threshold value, or to set a value close to zero to some extent based on a measurement error related to the achievement level evaluation. The predetermined condition is satisfied, for example, when the detection result of the detection unit 130 indicates a state where the infant is moving, and is not satisfied when the detection result indicates a state where the infant is not moving. The determination by the determination unit 140 is performed, for example, such that the determination result appears as the content of a storage medium such as a memory of the information processing apparatus 100 or the state of the information processing apparatus 100. For example, when the determination unit 140 determines that the detection result of the detection unit 130 satisfies the predetermined condition and when it does not satisfy the predetermined condition, the content of the storage medium or the state of the information processing apparatus 100 is different. Note that the determination unit 140 may accumulate information indicating the determination result in the storage unit 150. Then, the determination unit 140 determines that the bored response process should be executed when it is determined that the detection result of the detection unit 130 satisfies the predetermined condition. When the determination unit 140 determines that the bored response process should be executed, the processing unit 120 executes the bored response process, and when it is determined that the bored response process should not be executed, the bored response process Processing is not executed.

(動作)
以下、上述の構成を備える行動目標達成支援システム10の動作例について説明する。
(Operation)
Hereinafter, an operation example of the action goal achievement support system 10 having the above-described configuration will be described.

図9は、行動目標達成支援システム10の動作の一例を示すフローチャートである。以下、図9に即して行動目標達成支援システム10の動作を説明する。ここでは、説明の便宜上、幼児の保護者が幼児に玩具で遊んだ後に玩具を片付けるという整理収納行動を習得させるために行動目標達成支援システム10を活用することとする。図9の動作は、例えば、幼児が玩具で遊んだ後に玩具を片付ける整理収納行動を開始する際に、保護者等の起動操作によって開始される。図9では省略しているが、例えば、保護者等の停止操作により、行動目標達成支援システム10の動作は終了してもよいし、達成レベルが最高レベルに到達した時点で動作を終了することとしてもよい。   FIG. 9 is a flowchart illustrating an example of the operation of the action goal achievement support system 10. Hereinafter, the operation of the action goal achievement support system 10 will be described with reference to FIG. Here, for the convenience of explanation, it is assumed that the action goal achievement support system 10 is used in order for an infant guardian to learn an organized storage action in which an infant guards a toy after playing with the toy. The operation of FIG. 9 is started, for example, by an activation operation by a guardian or the like when starting an organizing and storing action for cleaning up a toy after an infant has played with the toy. Although omitted in FIG. 9, for example, the operation of the action goal achievement support system 10 may be ended by a stop operation by a guardian or the like, or the operation is ended when the achievement level reaches the highest level. It is good.

まず、情報処理装置100は、支援用画像としての褒美画像を1つ設定する(ステップS11)。具体的には、図4に示す動画Aを支援用画像として初期設定する。   First, the information processing apparatus 100 sets one reward image as a support image (step S11). Specifically, the moving image A shown in FIG. 4 is initially set as a support image.

情報処理装置100は評価部110により、玩具箱22の重量センサによる測定結果を示す重量データに基づいて達成レベルの評価を行う(ステップS12)。例えば、評価部110は、達成レベル評価テーブルを用いて重量データに基づいて達成レベルを決定し、達成レベルを判定部140に伝える。   The information processing apparatus 100 uses the evaluation unit 110 to evaluate the achievement level based on the weight data indicating the measurement result of the weight sensor of the toy box 22 (step S12). For example, the evaluation unit 110 determines the achievement level based on the weight data using the achievement level evaluation table, and notifies the determination unit 140 of the achievement level.

続いて、判定部140は、一定時間の達成レベルの変化量がゼロ(0)であるか否かを判定する(ステップS13)。   Subsequently, the determination unit 140 determines whether or not the amount of change in the achievement level for a certain time is zero (0) (step S13).

ステップS13で判定部140が達成レベルの変化量がゼロでないと判定した場合に、処理部120は、達成レベルが、前回の達成レベルより1つ上昇した等といった所定基準を満たすか否かを判定する(ステップS14)。そして、所定基準を満たす場合に限って、処理部120は、設定されている支援用画像としての褒美画像を表示する(ステップS15)。例えば初回のステップS15では、支援用画像として動画Aが表示される。   When the determination unit 140 determines in step S13 that the amount of change in the achievement level is not zero, the processing unit 120 determines whether or not the achievement level satisfies a predetermined criterion such as one increase from the previous achievement level. (Step S14). And only when satisfy | filling a predetermined standard, the process part 120 displays the reward image as a set image for assistance (step S15). For example, in the first step S15, the moving image A is displayed as the support image.

ステップS13で達成レベルの変化量がゼロであると判定した場合において、判定部140は、検知部130の検知結果が、幼児が移動している状態を示すか否かを判定する(ステップS16)。判定部140は、検知結果が、幼児が移動している状態を示す場合は、幼児が整理収納行動(つまり玩具の片付け)に飽きていると判定し(ステップS17)、この場合に処理部120の送信部122は、幼児が飽きていることを示す通知情報を保護者の情報端末30に送信する(ステップS18)。この結果として、情報端末30には、図7に示すような通知情報が表示される。これにより、保護者は、飽きた状況の幼児が整理収納行動を継続できるように、幼児に話しかける等の行動をとることが可能となる。   When it is determined in step S13 that the amount of change in the achievement level is zero, the determination unit 140 determines whether or not the detection result of the detection unit 130 indicates a state where the infant is moving (step S16). . If the detection result indicates a state where the infant is moving, the determination unit 140 determines that the infant is bored with the organizing and storing action (that is, cleaning up the toy) (step S17), and in this case, the processing unit 120. The transmitting unit 122 transmits notification information indicating that the infant is bored to the guardian's information terminal 30 (step S18). As a result, notification information as shown in FIG. 7 is displayed on the information terminal 30. Thereby, the guardian can take actions such as talking to the infant so that the infant who is tired can continue the organizing and storing action.

また、ステップS18に続いて、処理部120は、設定している支援用画像の新たな画像への変更を行う(ステップS19)。例えば、処理部120は、支援用画像として図4に示す動画Aが設定されていた場合において新たに図5に示す動画Bを支援用画像として設定する。この場合に、次回のステップS15では、支援用画像として動画Bが表示されるようになる。例えば、情報処理装置100の記憶部150等に、幼児が飽きた状況になった毎に支援用画像として設定した画像等を示す履歴情報を蓄積することとし、ステップS19では、処理部120で過去に支援用画像として設定された画像以外の画像へ設定を変更してもよい。これにより、例えば幼児が1日1回ある時間帯に整理収納行動を行うこととした場合に、飽きた状況になった日毎に、ステップS15で表示されるべき支援用画像が変更される。   Further, following step S18, the processing unit 120 changes the set support image to a new image (step S19). For example, when the moving image A illustrated in FIG. 4 is set as the support image, the processing unit 120 newly sets the moving image B illustrated in FIG. 5 as the support image. In this case, in the next step S15, the moving image B is displayed as the support image. For example, history information indicating an image or the like set as a support image every time the infant becomes tired is stored in the storage unit 150 or the like of the information processing apparatus 100. In step S19, the processing unit 120 stores the past information. The setting may be changed to an image other than the image set as the support image. Thereby, for example, when an infant decides to organize and store once a day, the support image to be displayed in step S15 is changed every day when the user gets tired.

ステップS16において、検知結果が、幼児が移動していない状態を示す場合は、判定部140は、幼児が整理収納行動に飽きているのではなく玩具で遊んでいる等により整理収納行動が中断していると判定する(ステップS20)。そして、処理部120は、幼児が目標達成のための行動を中断し幼児が遊んでいることを示す情報を保護者の情報端末30に送信する(ステップS21)。この結果として、情報端末30には、図8に示すような情報が表示される。これにより、保護者は、即座に或いは適当なタイミングで、幼児が整理収納行動を再開できるように、幼児に話しかける等の行動をとることが可能となる。   In step S16, when the detection result indicates that the infant is not moving, the determination unit 140 interrupts the organizing and storing action because the infant is not tired of the organizing and storing action but is playing with a toy. (Step S20). And the process part 120 transmits the information which shows that the infant interrupts action for goal achievement, and the infant is playing to the guardian's information terminal 30 (step S21). As a result, information as shown in FIG. 8 is displayed on the information terminal 30. Thereby, the guardian can take actions such as talking to the infant so that the infant can resume the organizing and storing action immediately or at an appropriate timing.

また、ステップS21に続いて、処理部120は、応援画像を表示部121に表示する(ステップS22)。これにより、幼児が応援画像を見て、整理収納行動を再開することが期待できる。   Further, following step S21, the processing unit 120 displays a support image on the display unit 121 (step S22). Thereby, it can be expected that the infant sees the support image and resumes the organizing and storing action.

情報処理装置100は、ステップS19、S22、S15の後、或いは、ステップS14で達成レベルが所定基準を満たさないと判定された場合には、ステップS12に戻って次回の達成レベルの評価を行う。   The information processing apparatus 100 returns to step S12 and evaluates the next achievement level after steps S19, S22, and S15 or when it is determined in step S14 that the achievement level does not satisfy the predetermined standard.

以上説明したように行動目標達成支援システム10は、行動目標の達成のための幼児の行動の評価結果としての達成レベルの変化、及び、幼児の移動の検知結果に応じて、幼児がその行動に飽きているか否かを判定する。そして、飽きている場合に、行動目標達成支援システム10は、保護者への通知、達成レベルに応じて表示する支援用画像の内容を変更する等といった所定処理(飽き対応処理)を実行する。これにより、幼児が飽きた状況に適切に対応でき、幼児による行動目標の達成の行動の習得が適切に支援される。   As described above, the action goal achievement support system 10 allows the infant to take action according to the change in the achievement level as an evaluation result of the action of the infant and the detection result of the movement of the infant. Determine if you are bored. When the user is bored, the action goal achievement support system 10 performs a predetermined process (boreness handling process) such as notification to the guardian, changing the content of the support image to be displayed according to the achievement level. Accordingly, it is possible to appropriately cope with a situation in which the infant is tired, and the infant can appropriately support the acquisition of the action to achieve the action target.

(実施の形態2)
以下、上述した行動目標達成支援システム10における検知部130及び判定部140を部分的に変形した実施の形態について説明する。本実施の形態に係る行動目標達成支援システム10では、幼児が整理収納行動に飽きた状況を、幼児の移動のみならず、整理収納行動における収納対象となる物品である玩具を幼児が保持しているか否かを踏まえて判定するようにしている。
(Embodiment 2)
Hereinafter, an embodiment in which the detection unit 130 and the determination unit 140 in the behavior goal achievement support system 10 described above are partially modified will be described. In the action goal attainment support system 10 according to the present embodiment, when an infant is tired of organizing and storing behavior, the infant holds not only the infant but also a toy that is an object to be stored in the organizing and storing behavior. Judgment is made based on whether or not there is.

(構成)
本実施の形態に係る行動目標達成支援システムは、実施の形態1で示した構成(図1参照)と概ね同様であるため、ここでは、実施の形態1と同じ符号を用いて、実施の形態1と異なる点を中心に説明する。ここで特に説明しない点については、実施の形態1と同様である。
(Constitution)
Since the action goal achievement support system according to the present embodiment is substantially the same as the configuration shown in the first embodiment (see FIG. 1), the same reference numerals as those in the first embodiment are used here. The description will focus on the points different from 1. The points not particularly described here are the same as those in the first embodiment.

検知部130は、幼児の移動の検知を行うことに加えて、イメージセンサ21から取得した画像データに基づく画像認識処理により、幼児が整理収納行動での収納対象となる1つ以上の玩具を保持しているか否かの検知を行う。幼児は、集中して作業を行っている場合に移動しなくなり、整理収納行動に飽きている場合に、徘徊等の移動を行い得るが、玩具を持って移動しているときには整理収納行動に飽きていないことがある。そこで、情報処理装置100は、検知部130によって幼児の移動に加えて玩具を保持しているか否かを検知することで、幼児が整理収納行動に飽きた状況か、整理収納行動をゆっくり継続している状況か、或いは、整理収納行動の途中で玩具での遊び等といった作業を行っている状況かを推定的に区別し得る。   In addition to detecting movement of the infant, the detection unit 130 holds one or more toys that are to be stored in the organized storage behavior by the image recognition processing based on the image data acquired from the image sensor 21. It is detected whether or not. Infants stop moving when they are working intensively, and when they are tired of organizing and storing behavior, they can move a bag etc., but when they are moving with a toy, they get tired of organizing and storing behavior. There may not be. Therefore, the information processing apparatus 100 detects whether or not the infant is bored with the organized storage behavior by detecting whether or not the toy is held in addition to the movement of the infant by the detection unit 130, and continues the organized storage behavior slowly. It is possible to preferentially discriminate whether the situation is a situation in which a task such as playing with a toy or the like is being performed during the organizing and storing action.

判定部140は、評価部110により決定された達成レベルの一定時間の変化量が所定閾値以下である場合に、検知部130の検知結果が所定条件を満たすか否かに応じて所定処理(飽き対応処理)が実行されるべきか否かを判定する。この所定条件は、例えば検知部130の検知結果が、幼児が移動している状態を示し、かつ、幼児が収納対象となる玩具を保持していない状態を示す場合に満たされ、その検知結果が、幼児が移動していない状態を示す又は幼児が収納対象となる玩具を保持している状態を示す場合に満たされない。そして、判定部140は、検知部130の検知結果が所定条件を満たすと判定した場合に飽き対応処理が実行されるべきと判定する。判定部140により飽き対応処理が実行されるべきと判定された場合には、処理部120により飽き対応処理が実行され、飽き対応処理が実行されるべきでないと判定された場合には、飽き対応処理が実行されない。   When the amount of change in the achievement level determined by the evaluation unit 110 for a certain period of time is equal to or less than a predetermined threshold, the determination unit 140 performs predetermined processing (satisfaction) depending on whether the detection result of the detection unit 130 satisfies the predetermined condition. It is determined whether or not a corresponding process is to be executed. This predetermined condition is satisfied, for example, when the detection result of the detection unit 130 indicates a state in which the infant is moving and indicates a state in which the infant does not hold the toy that is to be stored. It is not satisfied when the infant shows a state of not moving or the infant shows a state of holding a toy to be stored. Then, the determination unit 140 determines that the bored response process should be executed when it is determined that the detection result of the detection unit 130 satisfies the predetermined condition. When the determination unit 140 determines that the bored response process should be executed, the processing unit 120 executes the bored response process, and when it is determined that the bored response process should not be executed, the bored response process Processing is not executed.

(動作)
図10は、本実施の形態に係る行動目標達成支援システム10の動作の一例を示すフローチャートである。以下、図10に即して本実施の形態に係る行動目標達成支援システム10の動作を説明する。なお、実施の形態1に係る図9の処理ステップと同様の処理ステップには、同じ符号を付しており、これらについては、説明を適宜省略する。
(Operation)
FIG. 10 is a flowchart showing an example of the operation of the action goal achievement support system 10 according to the present embodiment. The operation of the action goal achievement support system 10 according to the present embodiment will be described below with reference to FIG. In addition, the same code | symbol is attached | subjected to the process step similar to the process step of FIG. 9 which concerns on Embodiment 1, About this, description is abbreviate | omitted suitably.

まず、情報処理装置100は、支援用画像としての褒美画像の初期設定を行い(ステップS11)、重量データに基づいて達成レベルの評価を行い(ステップS12)、一定時間の達成レベルの変化量がゼロであるか否かを判定する(ステップS13)。達成レベルの変化量がゼロでない場合において、情報処理装置100は、達成レベルが所定基準を満たす場合に(ステップS14)、設定されている支援用画像としての褒美画像を表示する(ステップS15)。   First, the information processing apparatus 100 performs initial setting of the reward image as the support image (step S11), evaluates the achievement level based on the weight data (step S12), and the amount of change in the achievement level for a certain time is changed. It is determined whether or not it is zero (step S13). When the amount of change in the achievement level is not zero, the information processing apparatus 100 displays a reward image as the set support image when the achievement level satisfies a predetermined criterion (step S14) (step S15).

ステップS13で達成レベルの変化量がゼロであると判定した場合において、情報処理装置100は判定部140により、検知部130の検知結果が、幼児が移動している状態を示すか否かを判定する(ステップS16)。判定部140は、検知部130の検知結果が、幼児が移動している状態を示す場合は、更に検知部130の検知結果が、幼児が玩具を保持している状態を示すか否かを判定する(ステップS16a)。   When it is determined in step S13 that the amount of change in the achievement level is zero, the information processing apparatus 100 determines whether the detection result of the detection unit 130 indicates a state where the infant is moving, by the determination unit 140. (Step S16). When the detection result of the detection unit 130 indicates that the infant is moving, the determination unit 140 further determines whether or not the detection result of the detection unit 130 indicates that the infant is holding a toy. (Step S16a).

ステップS16aで検知結果が、幼児が玩具を保持していない状態を示すと判定した場合には、判定部140は、幼児が整理収納行動(つまり玩具の片付け)に飽きていると判定する(ステップS17)。ステップS17に続いて、処理部120は、幼児が飽きていることを示す通知情報を保護者の情報端末30に送信し(ステップS18)、設定している支援用画像の新たな画像への変更を行う(ステップS19)。   If it is determined in step S16a that the detection result indicates that the infant does not hold the toy, the determination unit 140 determines that the infant is bored with the organizing and storing action (that is, cleaning up the toy) (step S16a). S17). Subsequent to step S17, the processing unit 120 transmits notification information indicating that the infant is bored to the guardian's information terminal 30 (step S18), and changes the set support image to a new image. Is performed (step S19).

ステップS16aで検知結果が、幼児が玩具を保持している状態を示すと判定した場合には、判定部140は、幼児が整理収納行動に飽きているのではなく、ゆっくり片付けを続けていると判定し(ステップS16b)、情報処理装置100は、ステップS12に戻って次回の達成レベルの評価を行う。   If it is determined in step S16a that the detection result indicates that the infant is holding a toy, the determination unit 140 does not get tired of the organizing and storing action, but continues to clean up slowly. The information processing apparatus 100 returns to step S12 and evaluates the next achievement level (step S16b).

ステップS16において、検知結果が、幼児が移動していない状態を示す場合は、判定部140は、幼児が整理収納行動に飽きているのではなく玩具で遊んでいる等により整理収納行動が中断していると判定する(ステップS20)。ステップS20に続いて、処理部120は、幼児が遊んでいることを示す情報を保護者の情報端末30に送信し(ステップS21)、応援画像を表示部121に表示する(ステップS22)。   In step S16, when the detection result indicates that the infant is not moving, the determination unit 140 interrupts the organizing and storing action because the infant is not tired of the organizing and storing action but is playing with a toy. (Step S20). Subsequent to step S20, the processing unit 120 transmits information indicating that the infant is playing to the guardian's information terminal 30 (step S21), and displays a support image on the display unit 121 (step S22).

以上説明したように行動目標達成支援システム10は、行動目標の達成のための幼児の行動の評価結果としての達成レベルの変化、並びに、幼児の移動及び物品の保持の検知結果に応じて、幼児がその行動に飽きているか否かを判定する。そして、飽きている場合に、行動目標達成支援システム10は、保護者への通知、達成レベルに応じて表示する支援用画像の内容を変更する等といった所定処理(飽き対応処理)を実行する。これにより、幼児が飽きた状況に適切に対応でき、幼児による行動目標の達成の行動の習得が適切に支援される。   As described above, the behavior goal achievement support system 10 is based on a change in the achievement level as an evaluation result of the behavior of the infant for achievement of the behavior goal, and the detection result of the movement of the infant and the holding of the article. Determine if is bored with the action. When the user is bored, the action goal achievement support system 10 performs a predetermined process (boreness handling process) such as notification to the guardian, changing the content of the support image to be displayed according to the achievement level. Accordingly, it is possible to appropriately cope with a situation in which the infant is tired, and the infant can appropriately support the acquisition of the action to achieve the action target.

(他の実施の形態等)
以上、実施の形態1、2により行動目標達成支援システム10について説明したが、上述した実施の形態は一例に過ぎず、各種の変更、付加、省略等が可能であることは言うまでもない。
(Other embodiments, etc.)
As mentioned above, although the action target achievement support system 10 was demonstrated by Embodiment 1, 2, it is needless to say that embodiment mentioned above is only an example and various changes, addition, omission, etc. are possible.

上述の実施の形態では、行動目標達成支援システム10が、幼児のユーザが玩具を全て片付けるという行動目標を達成するための整理収納行動を習得することを支援する例を示した。しかし、行動目標達成支援システム10のユーザは必ずしも幼児に限られず、例えば児童、或いは成人等であってもよい。また、整理収納行動は、行動目標を達成するための特定の行動の一例に過ぎず、特定の行動は、例えば動植物の世話、掃除、体操等、いかなる行動でもよく、行動目標をどのように定めてもよい。   In the above-described embodiment, an example has been shown in which the behavior goal achievement support system 10 assists an infant user to learn the organizing and storing behavior for achieving the behavior goal of clearing all toys. However, the user of the behavior goal achievement support system 10 is not necessarily limited to an infant, and may be, for example, a child or an adult. In addition, the organizing and storing action is only an example of a specific action for achieving the action target, and the specific action may be any action such as caring for animals and plants, cleaning, gymnastics, etc. May be.

また、上述の実施の形態では、行動目標達成支援システム10が、主に住宅内に設置された装置類で構成される例を示した。しかし、行動目標達成支援システム10は、住宅内に設置された装置類を含んでも含まなくてもよく、住宅外に設置された装置類を含んで構成されてもよいし、また、可搬性を有する装置類を含んで構成されてもよい。また、情報端末30は、住宅内に設置された装置であってもよい。また、実施の形態で示した住宅を、保育施設、病院その他の施設に置き換えてもよい。なお、行動目標達成支援システム10において情報端末30を含まないようにしてもよく、情報処理装置100がディスプレイ等を用いて、幼児の保護者等といったユーザの支援者への情報の提示を行ってもよい。また、情報処理装置100は、スマートフォン等の携帯端末であってもよい。   Moreover, in the above-mentioned embodiment, the action target achievement support system 10 showed the example comprised by the apparatuses mainly installed in the house. However, the action goal achievement support system 10 may or may not include devices installed in the house, may be configured to include devices installed outside the house, and is portable. You may comprise including the apparatus which has. The information terminal 30 may be a device installed in a house. In addition, the house shown in the embodiment may be replaced with a childcare facility, a hospital, or other facilities. Note that the action goal achievement support system 10 may not include the information terminal 30, and the information processing apparatus 100 uses a display or the like to present information to a user supporter such as an infant guardian. Also good. The information processing apparatus 100 may be a mobile terminal such as a smartphone.

また、上述の実施の形態1では情報処理装置100が、一定時間達成レベルの変化がない場合においてユーザが移動している状態を飽きている状況と判定して、この状況で飽き対応処理が実行される例を示した。また、実施の形態2では、飽きていると判定するための条件として、ユーザが移動している状態という条件に、更にユーザが玩具を保持していない状態という条件を追加した例を示した。実施の形態1又は2における飽きていると判定するための条件に、更に、移動経路が玩具箱22と離れていること、移動方向が玩具箱22と異なる方向であること等といった、飽きている者が行ない得る行動についての知見に基づいて特定した別の条件を付加してもよい。   In Embodiment 1 described above, the information processing apparatus 100 determines that the user is getting bored when there is no change in the achievement level for a certain period of time, and the bored response process is executed in this situation. An example to be shown. In the second embodiment, as an example of the condition for determining that the user is bored, the condition that the user is not holding the toy is added to the condition that the user is moving. The conditions for determining that the user is bored in the first or second embodiment are further bored such that the moving path is away from the toy box 22, the moving direction is different from the toy box 22, and the like. Another condition specified based on the knowledge about the action that the person can perform may be added.

また、上述の実施の形態で示した行動目標達成支援システム10における情報処理装置100の機能の一部を他の装置が分担してもよい。他の装置は、住宅の外部のサーバ等といった、情報処理装置100に対して遠隔地に設置されたコンピュータであってもよい。例えば、上述の実施の形態で示した情報処理装置100の各構成要素(評価部110、処理部120、検知部130、判定部140等)は、1つの装置の筐体内に実装されてもよいし、相互に通信可能な複数の離間した装置に分散して実装されてもよい。   In addition, another device may share a part of the function of the information processing device 100 in the action goal achievement support system 10 described in the above embodiment. The other device may be a computer installed remotely from the information processing device 100, such as a server outside the house. For example, each component (evaluation unit 110, processing unit 120, detection unit 130, determination unit 140, etc.) of the information processing apparatus 100 shown in the above-described embodiment may be mounted in a casing of one apparatus. However, it may be distributed and implemented in a plurality of spaced apart devices that can communicate with each other.

また、上述の行動目標達成支援システム10の動作手順(図9、図10参照)の実行順序は、必ずしも、上述した通りの順序に制限されるものではなく、発明の要旨を逸脱しない範囲で、実行順序を入れ替えたり、その一部を省略したり、その一部を並列に実行したりすることができる。また、図9、図10に示された手順の全部又は一部を含む情報処理は、情報処理装置100或いは他の装置の電子回路等のハードウェアによりソフトウェアを用いずに実現されても、ソフトウェアを用いて実現されてもよい。なお、ソフトウェアによる処理は、情報処理装置100或いは他の装置に含まれるプロセッサがメモリに記憶されたプログラムを実行することにより実現されるものである。また、そのプログラムを記録媒体に記録して頒布や流通させてもよい。例えば、頒布されたプログラムを装置にインストールして、装置のプロセッサに実行させることで、装置に情報処理装置100の機能を実行させることが可能となる。   Moreover, the execution order of the operation procedure (see FIGS. 9 and 10) of the action goal achievement support system 10 described above is not necessarily limited to the order as described above, and is within the scope not departing from the gist of the invention. The execution order can be changed, a part thereof can be omitted, or a part thereof can be executed in parallel. Information processing including all or part of the procedures shown in FIGS. 9 and 10 may be realized without using software by hardware such as an electronic circuit of the information processing apparatus 100 or another apparatus. It may be realized using. Note that the processing by software is realized by a processor included in the information processing apparatus 100 or another apparatus executing a program stored in the memory. Further, the program may be recorded on a recording medium and distributed or distributed. For example, it is possible to cause the apparatus to execute the functions of the information processing apparatus 100 by installing a distributed program in the apparatus and causing the processor of the apparatus to execute the program.

また、上述した実施の形態及び変形例等で示した構成要素及び機能を任意に組み合わせることで実現される形態も本発明の範囲に含まれる。   In addition, embodiments realized by arbitrarily combining the constituent elements and functions shown in the above-described embodiments and modifications are also included in the scope of the present invention.

なお、本発明の包括的又は具体的な各種態様には、装置、システム、方法、集積回路、コンピュータプログラム、コンピュータで読み取り可能な記録媒体等の1つ又は複数の組み合わせが含まれる。本開示におけるシステム又は方法の主体は、例えばコンピュータを備えている。このコンピュータがプログラムを実行することによって、本開示における装置、システム又は方法の主体の機能が実現され得る。コンピュータは、プログラムに従って動作するプロセッサを主なハードウェア構成として備える。プロセッサは、プログラムを実行することによって機能を実現することができれば、その種類は問わない。プロセッサは、半導体集積回路(IC)又はLSI(Large Scale Integration)を含む一つ又は複数の電子回路で構成される。複数の電子回路は、一つのチップに集積されてもよいし、複数のチップに設けられてもよい。複数のチップは一つの装置に集約されていてもよいし、複数の装置に備えられていてもよい。プログラムは、コンピュータが読み取り可能なROM、光ディスク、ハードディスク等の非一時的記録媒体に記録され得る。プログラムは、記録媒体に予め格納されていてもよいし、インターネット等を含む広域通信網を介して記録媒体に供給されてもよい。   Note that various general or specific aspects of the present invention include one or a plurality of combinations of an apparatus, a system, a method, an integrated circuit, a computer program, a computer-readable recording medium, and the like. The subject of the system or method in the present disclosure includes, for example, a computer. By executing the program by the computer, the main function of the apparatus, system, or method according to the present disclosure can be realized. The computer includes a processor that operates according to a program as a main hardware configuration. The processor may be of any type as long as the function can be realized by executing the program. The processor includes one or more electronic circuits including a semiconductor integrated circuit (IC) or an LSI (Large Scale Integration). The plurality of electronic circuits may be integrated on one chip or provided on a plurality of chips. The plurality of chips may be integrated into one device, or may be provided in a plurality of devices. The program can be recorded on a non-temporary recording medium such as a computer-readable ROM, an optical disk, or a hard disk. The program may be stored in advance in a recording medium, or may be supplied to the recording medium via a wide area communication network including the Internet.

以下、本発明の一態様に係る行動目標達成支援システム、並びに、この行動目標達成支援システムで用いられる情報処理方法及びプログラムの構成、変形態様、効果等について示す。   Hereinafter, the action goal achievement support system according to an aspect of the present invention, and the information processing method and program configuration used in the action goal achievement support system, a modification, an effect, and the like will be described.

(1)本発明の一態様に係る行動目標達成支援システムは、行動目標の達成を支援する行動目標達成支援システム10であって、ユーザの行動に関連したセンシングの結果に基づいて、行動目標の達成レベルを逐次決定する評価部110と、評価部110により決定された達成レベルに応じて行動目標の達成の支援のための支援処理を行う処理部120と、ユーザの移動を検知する検知部130と、評価部110により決定された達成レベルの一定時間の変化量が所定閾値以下である場合に、検知部130の検知結果が所定条件を満たすか否かに応じて所定処理(飽き対応処理)が実行されるべきか否かを判定する判定部140とを備える。ユーザの行動に関連したセンシングの結果は、例えば、ユーザの整理収納行動の収納対象となる玩具を収納する玩具箱22に内蔵された重量センサにより得られた重量データ、ユーザを撮像するイメージセンサ21により得られた画像データ等である。検知部130では、例えば、イメージセンサ21により逐次得られた各画像データについての画像認識処理によりユーザの位置を捉えて移動の有無を検知してもよいし、加速度センサその他のセンサによる測定結果に基づいてユーザの移動の有無を検知してもよい。支援処理としては、例えば達成レベルの表示、褒美画像等の表示、ユーザの支援者への達成レベルの報知(例えば情報端末30への情報の送信)等があり得る。所定処理として、ユーザが行動目標の達成のための行動に飽きたと推定される状況である場合にユーザに対して行動の支援を行う処理等が想定される。   (1) An action goal achievement support system according to an aspect of the present invention is an action goal achievement support system 10 that supports achievement of an action goal, and is based on a sensing result related to a user's action. An evaluation unit 110 that sequentially determines an achievement level, a processing unit 120 that performs support processing for supporting achievement of an action target according to the achievement level determined by the evaluation unit 110, and a detection unit 130 that detects the movement of a user. And when the amount of change in the achievement level determined by the evaluation unit 110 for a certain time is equal to or less than a predetermined threshold value, the predetermined process is performed depending on whether or not the detection result of the detection unit 130 satisfies the predetermined condition. And a determination unit 140 that determines whether or not should be executed. The sensing result related to the user's behavior includes, for example, weight data obtained by a weight sensor built in a toy box 22 that stores a toy that is to be stored by the user's organizing and storing behavior, an image sensor 21 that captures the user. The image data obtained by the above. For example, the detection unit 130 may detect the presence or absence of movement by capturing the position of the user by image recognition processing for each image data sequentially obtained by the image sensor 21, or may use the acceleration sensor or other sensor as a measurement result. Based on this, the presence or absence of the user's movement may be detected. Examples of the support processing include display of an achievement level, display of a reward image, notification of the achievement level to a user supporter (for example, transmission of information to the information terminal 30), and the like. As the predetermined process, a process for assisting the user in the action when the user is presumed to be tired of the action for achieving the action target is assumed.

この構成により、ユーザが行動目標の達成のための行動に飽きたと推定される状況において所定処理が実行されるべきと判定されるようになり得る。これは、飽きている者が徘徊等の移動を行うという知見に基づく。これにより、飽きた状況であることを踏まえた対処が可能となる。そして、この行動目標達成支援システムによれば、ユーザが幼児、児童等である場合にユーザの保護者等にとってユーザのしつけに係る育児負担の軽減が可能となり、ユーザが行動目標を達成するための行動を効率的に習得可能となり得る。   With this configuration, it may be determined that the predetermined process should be executed in a situation where the user is estimated to be tired of the action for achieving the action target. This is based on the knowledge that a person who is bored moves such as a bag. This makes it possible to take measures based on the fact that you are tired. And according to this action goal achievement support system, when a user is an infant, a child, etc., it becomes possible to reduce the childcare burden concerning the user's discipline for the user's guardian and the like, and the user achieves the action goal. It may become possible to learn actions efficiently.

(2)例えば、検知部130の検知結果に係る前記所定条件は、検知部130の検知結果が、ユーザが移動している状態を示す場合に満たされ、前記検知結果が、ユーザが移動していない状態を示す場合に満たされず、判定部140は、前記検知結果が前記所定条件を満たすと判定した場合に前記所定処理が実行されるべきと判定し、処理部120は更に、前記所定処理が実行されるべきと判定部140が判定した場合に前記所定処理を実行することとしてもよい。これにより、行動目標達成支援システム10は、ユーザが行動目標の達成のための行動に飽きている状況に対処し得る。   (2) For example, the predetermined condition related to the detection result of the detection unit 130 is satisfied when the detection result of the detection unit 130 indicates a state where the user is moving, and the detection result is that the user is moving. The determination unit 140 determines that the predetermined process should be executed when it is determined that the detection result satisfies the predetermined condition, and the processing unit 120 further performs the predetermined process. The predetermined process may be executed when the determination unit 140 determines that it should be executed. Thereby, the action goal achievement support system 10 can cope with a situation where the user is bored with the action for achieving the action goal.

(3)例えば、前記行動目標は、所定の複数物品(例えば玩具)の全てを収納することであり、検知部130は更にユーザが前記複数物品のうちの1つ以上の物品を保持しているか否かを検知し、前記所定条件は、前記検知結果が、ユーザが移動している状態を示し、かつ、ユーザが前記物品を保持していない状態を示す場合に満たされ、前記検知結果が、前記ユーザが移動していない状態を示す又はユーザが前記物品を保持している状態を示す場合に満たされず、判定部140は、前記検知結果が前記所定条件を満たすと判定した場合に前記所定処理が実行されるべきと判定し、処理部120は更に、前記所定処理が実行されるべきと判定部140が判定した場合に前記所定処理を実行することとしてもよい。これにより、ユーザが整理収納行動の途中で玩具を保持する徘徊する等の状況となった場合に、ユーザの飽きている状況に適切に対処する飽き対応処理が実行され得る。   (3) For example, the action goal is to store all of a predetermined plurality of articles (for example, toys), and the detection unit 130 further holds whether the user holds one or more of the plurality of articles. The predetermined condition is satisfied when the detection result indicates a state where the user is moving and a state where the user does not hold the article, and the detection result is The predetermined processing is not satisfied when the user indicates a state where the user is not moving or when the user indicates a state where the article is held, and the determination unit 140 determines that the detection result satisfies the predetermined condition. The processing unit 120 may further execute the predetermined process when the determination unit 140 determines that the predetermined process is to be executed. As a result, when the user becomes in a situation such as hesitating to hold a toy in the middle of the organizing and storing action, the bored response process for appropriately dealing with the situation in which the user is bored can be executed.

(4)例えば、前記所定処理は、ユーザが行動目標の達成のための行動に飽きていることを示す通知情報を出力する通知処理を含むこととしてもよい。通知情報の出力は、例えば、表示部121による通知情報の表示、送信部122による通知情報の送信、音声再生装置による通知情報に係る音声の再生等で実現され得る。これにより、ユーザの支援者(例えばユーザが幼児の場合における親等の保護者或いは監督者)が、ユーザが飽きていることを知ることができる。このため、ユーザが行動目標の達成のための行動に飽きた状況に、ユーザの支援者が適切に対処することが期待できる。   (4) For example, the said predetermined process is good also as including the notification process which outputs the notification information which shows that the user is tired of the action for achievement of an action target. The output of the notification information can be realized by, for example, display of the notification information by the display unit 121, transmission of the notification information by the transmission unit 122, reproduction of sound related to the notification information by the audio reproduction device, and the like. Thereby, a user's supporter (for example, a guardian or supervisor such as a parent when the user is an infant) can know that the user is bored. For this reason, it can be expected that the user's supporter appropriately copes with the situation in which the user gets tired of the action for achieving the action goal.

(5)例えば、前記通知処理は、情報端末30等といった所定端末への前記通知情報の送信の処理であることとしてもよい。例えば、ユーザの支援者が携帯する端末を所定端末とするように運用することで、ユーザの支援者は、ユーザから離れた場所に所在してもユーザが行動目標の達成のための行動に飽きていることを知ることができる。ユーザが飽きていることを示す通知情報を知った支援者は、例えば、ユーザの行動目標の達成を支援すべく、話しかける等の行動をとることが可能となる。   (5) For example, the notification process may be a process of transmitting the notification information to a predetermined terminal such as the information terminal 30 or the like. For example, by operating the terminal carried by the user's supporter as the predetermined terminal, the user's supporter gets bored with the action for achieving the action target even if the user's supporter is located at a location away from the user. I can know that. For example, a supporter who knows the notification information indicating that the user is bored can take actions such as talking to support the achievement of the user's action goal.

(6)例えば、処理部120は、前記達成レベルが所定基準を満たす場合に、支援用画像として定められている画像の表示を前記支援処理として行い、前記所定処理は、前記支援処理によって既に表示された画像とは異なる画像を前記支援用画像として定める処理を含むこととしてもよい。所定基準は、例えば、前回から達成レベルが1つ以上変化したこと等といった基準であり、いかなる基準であってもよい。これにより、支援用画像が変化することで、ユーザが行動目標の達成のための行動に飽きている状況が改善され得る。   (6) For example, when the achievement level satisfies a predetermined criterion, the processing unit 120 displays an image defined as a support image as the support process, and the predetermined process is already displayed by the support process. It is good also as the process which determines the image different from the image made into the said image for assistance. The predetermined standard is, for example, a standard such that one or more achievement levels have changed from the previous time, and any standard may be used. Thereby, the situation where the user is bored with the action for achieving the action goal can be improved by changing the support image.

(7)例えば、前記支援用画像として定められる画像は、ユーザの行動を褒める情報を表した画像(つまり褒美画像)であることとしてもよい。これにより、目標行動の自発頻度を高める刺激となる報酬としての褒美画像が、ユーザが飽きている際に変化するので、ユーザが飽きている状況が改善され得る。   (7) For example, the image defined as the support image may be an image representing information that gives up the user's action (that is, a reward image). Thereby, since the reward image that serves as a stimulus that increases the spontaneous frequency of the target action changes when the user is bored, the situation where the user is bored can be improved.

(8)例えば、処理部120は更に、前記所定処理が実行されるべきでないと判定部140が判定した場合に、ユーザに行動目標の達成のための行動を行うことを促す画像の表示を行うこととしてもよい。これにより、ユーザが、中断している行動目標の達成のための行動を、再開するようになる可能性が高まる。   (8) For example, when the determination unit 140 determines that the predetermined process should not be executed, the processing unit 120 further displays an image that prompts the user to perform an action for achieving the action target. It is good as well. This increases the possibility that the user will resume the action for achieving the interrupted action target.

(9)例えば、処理部120は更に、前記所定処理が実行されるべきでないと判定部140が判定した場合に、ユーザが行動目標の達成のための行動を中断していることを示す情報を所定端末へ送信することとしてもよい。例えば、ユーザの支援者が携帯する端末を所定端末とするように運用することで、ユーザの支援者は、ユーザが行動目標の達成のための行動を中断していることを知ることができ、目標行動の継続を促す等、適切に対処することが可能となり得る。   (9) For example, when the determination unit 140 determines that the predetermined process should not be executed, the processing unit 120 further includes information indicating that the user has suspended the action for achieving the action target. It may be transmitted to a predetermined terminal. For example, by operating the terminal carried by the user's supporter as a predetermined terminal, the user's supporter can know that the user has suspended the action for achieving the action goal, It may be possible to appropriately deal with such as promoting the continuation of the target action.

(10)例えば、評価部110は、ユーザを撮像可能なイメージセンサ21によるセンシングの結果に基づいて達成レベルを決定し、検知部130は、イメージセンサ21によるセンシングの結果に基づいてユーザの移動の検知を行うこととしてもよい。これにより、行動目標達成支援システム10を、ユーザの行動の観測を行うセンサとしてイメージセンサ21を用いるだけで、機能させることが可能となる。   (10) For example, the evaluation unit 110 determines an achievement level based on the result of sensing by the image sensor 21 that can image the user, and the detection unit 130 determines the movement of the user based on the result of sensing by the image sensor 21. It is good also as detecting. Thereby, it becomes possible to make the action target achievement support system 10 function only by using the image sensor 21 as a sensor for observing the action of the user.

(11)本発明の一態様に係る情報処理方法は、行動目標の達成を支援する行動目標達成支援システム10で用いられる情報処理方法であって、ユーザの行動に関連したセンシングの結果に基づいて、行動目標の達成レベルを逐次決定する評価ステップ(例えばステップS12)と、評価ステップで決定された達成レベルに応じて行動目標の達成の支援のための支援処理を行う処理ステップ(例えばステップS14、S15)と、ユーザの移動を検知する検知ステップ(例えばステップS16)と、評価ステップで決定された達成レベルの一定時間の変化量が所定閾値以下である場合に、検知ステップでの検知結果が所定条件を満たすか否かに応じてユーザが行動目標の達成のための行動に飽きているか否かを判定する判定ステップ(例えばステップS17、S20)とを含む。これにより、ユーザが行動目標の達成のための行動に飽きているか否かが判定されるので、飽きた状況であることを踏まえた対処が可能となる。   (11) An information processing method according to an aspect of the present invention is an information processing method used in the behavior goal achievement support system 10 that supports achievement of a behavior goal, based on a sensing result related to a user's behavior. An evaluation step (for example, step S12) that sequentially determines the achievement level of the action target, and a processing step (for example, step S14) that performs support processing for supporting the achievement of the action target according to the achievement level determined in the evaluation step. S15), a detection step for detecting the movement of the user (for example, step S16), and a change amount of the achievement level determined in the evaluation step for a predetermined time is equal to or smaller than a predetermined threshold, the detection result in the detection step is predetermined. A determination step (for example, determining whether the user is bored with the action for achieving the action goal according to whether the condition is satisfied or not) Step S17, S20) and a. As a result, it is determined whether or not the user is bored with the action for achieving the action goal, so that it is possible to cope with the fact that the user is bored.

(12)本発明の一態様に係るプログラムは、行動目標の達成を支援する行動目標達成支援システム10を構成するコンピュータ(例えば情報処理装置100)に情報処理を実行させるためのプログラムであって、前記情報処理は、ユーザの行動に関連したセンシングの結果に基づいて、行動目標の達成レベルを逐次決定する評価ステップ(例えばステップS12)と、評価ステップで決定された達成レベルに応じて行動目標の達成の支援のための支援処理を行う処理ステップ(例えばステップS14、S15)と、ユーザの移動を検知する検知ステップ(例えばステップS16)と、評価ステップで決定された達成レベルの一定時間の変化量が所定閾値以下である場合に、検知ステップでの検知結果が所定条件を満たすか否かに応じて所定処理が実行されるべきか否かを判定する判定ステップ(例えばステップS16a)とを含む。このプログラムをコンピュータにインストールして実行させることにより、ユーザが行動目標の達成のための行動に飽きたと推定される状況において所定処理が実行されるべきと判定されるようになり得る。この判定結果に基づいて、飽きた状況であることを踏まえた対処が可能となる。   (12) A program according to an aspect of the present invention is a program for causing a computer (for example, the information processing apparatus 100) included in the behavior goal achievement support system 10 that supports achievement of the behavior goal to execute information processing. The information processing includes an evaluation step (for example, step S12) for sequentially determining the achievement level of the action target based on the sensing result related to the user's action, and the action target according to the achievement level determined in the evaluation step. Processing steps (for example, steps S14 and S15) for performing support processing for achievement support, detection steps (for example, step S16) for detecting the movement of the user, and amount of change of the achievement level determined in the evaluation step over a certain period of time Is determined depending on whether the detection result in the detection step satisfies a predetermined condition or not. Management includes a determination step of determining whether or not to be performed (e.g., step S16a). By installing and executing this program on a computer, it may be determined that the predetermined process should be executed in a situation where the user is presumed to be tired of the action for achieving the action target. Based on this determination result, it is possible to take measures based on the fact that the situation is tired.

10 行動目標達成支援システム
21 イメージセンサ
110 評価部
120 処理部
130 検知部
140 判定部
DESCRIPTION OF SYMBOLS 10 Action target achievement support system 21 Image sensor 110 Evaluation part 120 Processing part 130 Detection part 140 Determination part

Claims (12)

行動目標の達成を支援する行動目標達成支援システムであって、
ユーザの行動に関連したセンシングの結果に基づいて、行動目標の達成レベルを逐次決定する評価部と、
前記評価部により決定された前記達成レベルに応じて行動目標の達成の支援のための支援処理を行う処理部と、
前記ユーザの移動を検知する検知部と、
前記評価部により決定された前記達成レベルの一定時間の変化量が所定閾値以下である場合に、前記検知部の検知結果が所定条件を満たすか否かに応じて所定処理が実行されるべきか否かを判定する判定部とを備える
行動目標達成支援システム。
An action goal achievement support system for supporting achievement of an action goal,
An evaluation unit that sequentially determines the achievement level of the behavior goal based on the sensing result related to the user's behavior,
A processing unit that performs support processing for supporting the achievement of the behavioral goal according to the achievement level determined by the evaluation unit;
A detection unit for detecting the movement of the user;
Whether the predetermined process should be executed depending on whether the detection result of the detection unit satisfies a predetermined condition when a change amount of the achievement level determined by the evaluation unit for a certain period of time is equal to or less than a predetermined threshold value An action goal achievement support system comprising a determination unit for determining whether or not.
前記所定条件は、前記検知結果が、前記ユーザが移動している状態を示す場合に満たされ、前記検知結果が、前記ユーザが移動していない状態を示す場合に満たされず、
前記判定部は、前記検知結果が前記所定条件を満たすと判定した場合に前記所定処理が実行されるべきと判定し、
前記処理部は更に、前記所定処理が実行されるべきと前記判定部が判定した場合に前記所定処理を実行する
請求項1記載の行動目標達成支援システム。
The predetermined condition is satisfied when the detection result indicates a state where the user is moving, and is not satisfied when the detection result indicates a state where the user is not moving,
The determination unit determines that the predetermined process should be executed when it is determined that the detection result satisfies the predetermined condition,
The action target achievement support system according to claim 1, wherein the processing unit further executes the predetermined process when the determination unit determines that the predetermined process should be executed.
前記行動目標は、所定の複数物品の全てを収納することであり、
前記検知部は更にユーザが前記複数物品のうちの1つ以上の物品を保持しているか否かを検知し、
前記所定条件は、前記検知結果が、前記ユーザが移動している状態を示し、かつ、前記ユーザが前記物品を保持していない状態を示す場合に満たされ、前記検知結果が、前記ユーザが移動していない状態を示す又は前記ユーザが前記物品を保持している状態を示す場合に満たされず、
前記判定部は、前記検知結果が前記所定条件を満たすと判定した場合に前記所定処理が実行されるべきと判定し、
前記処理部は更に、前記所定処理が実行されるべきと前記判定部が判定した場合に前記所定処理を実行する
請求項1記載の行動目標達成支援システム。
The action goal is to store all of the predetermined plurality of articles,
The detection unit further detects whether or not the user holds one or more items of the plurality of items,
The predetermined condition is satisfied when the detection result indicates a state where the user is moving and the user does not hold the article, and the detection result is determined when the user moves. Is not satisfied if it indicates a state that is not or indicates that the user is holding the article,
The determination unit determines that the predetermined process should be executed when it is determined that the detection result satisfies the predetermined condition,
The action target achievement support system according to claim 1, wherein the processing unit further executes the predetermined process when the determination unit determines that the predetermined process should be executed.
前記所定処理は、前記ユーザが行動目標の達成のための行動に飽きていることを示す通知情報を出力する通知処理を含む
請求項2又は3記載の行動目標達成支援システム。
The action target achievement support system according to claim 2 or 3, wherein the predetermined process includes a notice process for outputting notice information indicating that the user is bored with an action for achieving the action goal.
前記通知処理は、所定端末への前記通知情報の送信の処理である
請求項4記載の行動目標達成支援システム。
The action goal achievement support system according to claim 4, wherein the notification process is a process of transmitting the notification information to a predetermined terminal.
前記処理部は、前記達成レベルが所定基準を満たす場合に、支援用画像として定められている画像の表示を前記支援処理として行い、
前記所定処理は、前記支援処理によって既に表示された画像とは異なる画像を前記支援用画像として定める処理を含む
請求項2〜5のいずれか一項に記載の行動目標達成支援システム。
When the achievement level satisfies a predetermined criterion, the processing unit performs display of an image defined as a support image as the support process,
The action target achievement support system according to any one of claims 2 to 5, wherein the predetermined process includes a process of defining an image different from the image already displayed by the support process as the support image.
前記支援用画像として定められる画像は、前記ユーザの行動を褒める情報を表した画像である
請求項6記載の行動目標達成支援システム。
The action target achievement support system according to claim 6, wherein the image defined as the support image is an image representing information that gives up the action of the user.
前記処理部は更に、前記所定処理が実行されるべきでないと前記判定部が判定した場合に、前記ユーザに行動目標の達成のための行動を行うことを促す画像の表示を行う
請求項6又は7記載の行動目標達成支援システム。
The processing unit further displays an image prompting the user to perform an action for achieving the action target when the determination unit determines that the predetermined process should not be executed. 7. The action goal achievement support system according to 7.
前記処理部は更に、前記所定処理が実行されるべきでないと前記判定部が判定した場合に、前記ユーザが行動目標の達成のための行動を中断していることを示す情報を所定端末へ送信する
請求項6〜8のいずれか一項に記載の行動目標達成支援システム。
The processing unit further transmits, to the predetermined terminal, information indicating that the user has suspended the action for achieving the action target when the determination unit determines that the predetermined process should not be executed. The action goal achievement support system according to any one of claims 6 to 8.
前記評価部は、前記ユーザを撮像可能なイメージセンサによるセンシングの結果に基づいて前記達成レベルを決定し、
前記検知部は、前記イメージセンサによるセンシングの結果に基づいて前記ユーザの移動の検知を行う
請求項1〜9のいずれか一項に記載の行動目標達成支援システム。
The evaluation unit determines the achievement level based on a sensing result by an image sensor capable of imaging the user,
The action target achievement support system according to any one of claims 1 to 9, wherein the detection unit detects movement of the user based on a result of sensing by the image sensor.
行動目標の達成を支援する行動目標達成支援システムで用いられる情報処理方法であって、
ユーザの行動に関連したセンシングの結果に基づいて、行動目標の達成レベルを逐次決定する評価ステップと、
前記評価ステップで決定された前記達成レベルに応じて行動目標の達成の支援のための支援処理を行う処理ステップと、
前記ユーザの移動を検知する検知ステップと、
前記評価ステップで決定された前記達成レベルの一定時間の変化量が所定閾値以下である場合に、前記検知ステップでの検知結果が所定条件を満たすか否かに応じて前記ユーザが行動目標の達成のための行動に飽きているか否かを判定する判定ステップとを含む
情報処理方法。
An information processing method used in an action goal achievement support system for supporting achievement of an action goal,
An evaluation step that sequentially determines the achievement level of the behavior goal based on the sensing result related to the user's behavior,
A processing step for performing a support process for supporting the achievement of an action target according to the achievement level determined in the evaluation step;
A detecting step for detecting movement of the user;
When the amount of change in the achievement level determined in the evaluation step over a predetermined time is equal to or less than a predetermined threshold, the user achieves the action target depending on whether the detection result in the detection step satisfies a predetermined condition. A determination step of determining whether or not the user is bored with the action for the information processing method.
行動目標の達成を支援する行動目標達成支援システムを構成するコンピュータに情報処理を実行させるためのプログラムであって、
前記情報処理は、
ユーザの行動に関連したセンシングの結果に基づいて、行動目標の達成レベルを逐次決定する評価ステップと、
前記評価ステップで決定された前記達成レベルに応じて行動目標の達成の支援のための支援処理を行う処理ステップと、
前記ユーザの移動を検知する検知ステップと、
前記評価ステップで決定された前記達成レベルの一定時間の変化量が所定閾値以下である場合に、前記検知ステップでの検知結果が所定条件を満たすか否かに応じて所定処理が実行されるべきか否かを判定する判定ステップとを含む
プログラム。
A program for causing a computer constituting an action goal achievement support system to support achievement of an action goal to execute information processing,
The information processing
An evaluation step that sequentially determines the achievement level of the behavior goal based on the sensing result related to the user's behavior,
A processing step for performing a support process for supporting the achievement of the action target according to the achievement level determined in the evaluation step;
A detecting step for detecting movement of the user;
When the amount of change in the achievement level determined in the evaluation step over a certain period of time is equal to or less than a predetermined threshold, the predetermined process should be executed depending on whether the detection result in the detection step satisfies a predetermined condition And a determination step for determining whether or not.
JP2019517504A 2017-05-12 2018-04-09 Action goal achievement support system, information processing method and program Active JP6807565B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017095361 2017-05-12
JP2017095361 2017-05-12
PCT/JP2018/014859 WO2018207519A1 (en) 2017-05-12 2018-04-09 Behavioral objective achievement support system, information processing method, and program

Publications (2)

Publication Number Publication Date
JPWO2018207519A1 true JPWO2018207519A1 (en) 2019-12-12
JP6807565B2 JP6807565B2 (en) 2021-01-06

Family

ID=64102779

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019517504A Active JP6807565B2 (en) 2017-05-12 2018-04-09 Action goal achievement support system, information processing method and program

Country Status (2)

Country Link
JP (1) JP6807565B2 (en)
WO (1) WO2018207519A1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020241222A1 (en) * 2019-05-28 2020-12-03 パナソニックIpマネジメント株式会社 Cleanup assisting system and cleanup assisting method
WO2024095379A1 (en) * 2022-11-01 2024-05-10 日本電信電話株式会社 Behavior continuation support device, behavior continuation support method, and program

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05265369A (en) * 1992-03-18 1993-10-15 Olympus Optical Co Ltd Learning device
JP2002149909A (en) * 2000-11-10 2002-05-24 Tomy Co Ltd Infant management system, monitoring device and management server
JP2003337528A (en) * 2002-05-17 2003-11-28 Nec Corp Learning system, learning method, and learning program capable of reflecting learner's learning state
JP2004096630A (en) * 2002-09-03 2004-03-25 Sekisui Chem Co Ltd Living condition environment expression device, expression device, and living condition environment expression method
JP2004274101A (en) * 2003-03-05 2004-09-30 Shigeo Kaneda Mobile object identification system
JP2006178581A (en) * 2004-12-21 2006-07-06 Weic:Kk Cellphone type chinese learning system having high performance virtual assistant
JP2009198896A (en) * 2008-02-22 2009-09-03 Yamaha Corp Communication system, communication device and program
JP2011007963A (en) * 2009-06-24 2011-01-13 Tokyo Denki Univ Remote learning system and remote learning method
JP2012168308A (en) * 2011-02-14 2012-09-06 Brother Ind Ltd Electronic writing system, electronic writing device, and display control program
US20130216989A1 (en) * 2012-02-22 2013-08-22 Mgoodlife, Corp. Personalization platform for behavioral change
US20140045156A1 (en) * 2012-08-07 2014-02-13 Nerio Alessandri Methods for managing lifestyle of individuals
JP2015114658A (en) * 2013-12-14 2015-06-22 芳実 村田 Scholastic ability measuring device integrating testing and reviewing and learning management system
JP2015161892A (en) * 2014-02-28 2015-09-07 大日本印刷株式会社 Analysis apparatus and program
WO2015177908A1 (en) * 2014-05-22 2015-11-26 株式会社日立製作所 Training system

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05265369A (en) * 1992-03-18 1993-10-15 Olympus Optical Co Ltd Learning device
JP2002149909A (en) * 2000-11-10 2002-05-24 Tomy Co Ltd Infant management system, monitoring device and management server
JP2003337528A (en) * 2002-05-17 2003-11-28 Nec Corp Learning system, learning method, and learning program capable of reflecting learner's learning state
JP2004096630A (en) * 2002-09-03 2004-03-25 Sekisui Chem Co Ltd Living condition environment expression device, expression device, and living condition environment expression method
JP2004274101A (en) * 2003-03-05 2004-09-30 Shigeo Kaneda Mobile object identification system
JP2006178581A (en) * 2004-12-21 2006-07-06 Weic:Kk Cellphone type chinese learning system having high performance virtual assistant
JP2009198896A (en) * 2008-02-22 2009-09-03 Yamaha Corp Communication system, communication device and program
JP2011007963A (en) * 2009-06-24 2011-01-13 Tokyo Denki Univ Remote learning system and remote learning method
JP2012168308A (en) * 2011-02-14 2012-09-06 Brother Ind Ltd Electronic writing system, electronic writing device, and display control program
US20130216989A1 (en) * 2012-02-22 2013-08-22 Mgoodlife, Corp. Personalization platform for behavioral change
US20140045156A1 (en) * 2012-08-07 2014-02-13 Nerio Alessandri Methods for managing lifestyle of individuals
JP2015114658A (en) * 2013-12-14 2015-06-22 芳実 村田 Scholastic ability measuring device integrating testing and reviewing and learning management system
JP2015161892A (en) * 2014-02-28 2015-09-07 大日本印刷株式会社 Analysis apparatus and program
WO2015177908A1 (en) * 2014-05-22 2015-11-26 株式会社日立製作所 Training system

Also Published As

Publication number Publication date
WO2018207519A1 (en) 2018-11-15
JP6807565B2 (en) 2021-01-06

Similar Documents

Publication Publication Date Title
US9824606B2 (en) Adaptive system for real-time behavioral coaching and command intermediation
US11750883B2 (en) System and method for using personal computing devices to determine user engagement while viewing an audio/video program
JP6981412B2 (en) Information processing system, program and information processing method
JP6765083B2 (en) Action goal achievement support system, action goal achievement support method and action goal achievement support processing program
US20180068080A1 (en) Systems and methods for health monitoring
JP6807565B2 (en) Action goal achievement support system, information processing method and program
JP7379996B2 (en) Information processing system, information processing device, method and program
JP2021154393A (en) Control apparatus, control method, and program
JP6899543B2 (en) Cleanup support system, cleanup support method and program
JP6715477B2 (en) Device control system, device control method, and control program
US20170076618A1 (en) Physical Object Training Feedback Based On Object-Collected Usage Data
KR20210089984A (en) A hand-wash monitoring system and its method furnished with smart-mirror
JP6765084B2 (en) Action goal achievement support system, action goal achievement support method and action goal achievement support processing program
JP2015133611A (en) Notification system, notification program, notification method, and notification device
KR102424120B1 (en) Apparatus for Providing Information of Infant by Using Growth Capsule and Driving Method Thereof
JP6765073B2 (en) Temperament estimation system, temperament estimation method and temperament estimation processing program
JP6909963B2 (en) Action goal achievement support system, information processing method and program
JP7466088B2 (en) Behavior Prediction System
WO2016142351A1 (en) Robotic companion sensitive to physiological data gathered by wearable devices
JP6781460B2 (en) Remote play support systems, methods and programs
JP7532182B2 (en) Remote conference support control device, method and program
JP7392306B2 (en) Information processing system, information processing method, and program
CN112580593A (en) Behavior monitoring method and apparatus, behavior monitoring device, and computer storage medium
JP7709413B2 (en) DATA PROCESSING DEVICE, CARE SUPPORT SYSTEM, AND DATA PROCESSING METHOD
WO2019151005A1 (en) Display method for information terminal display unit

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190807

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200818

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200903

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20201117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201124

R151 Written notification of patent or utility model registration

Ref document number: 6807565

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151