[go: up one dir, main page]

JP7642752B2 - HARDWARE ARCHITECTURE FOR MODULARIZED EYEWEAR SYSTEMS, APPARATUS AND METHODS - Patent application - Google Patents

HARDWARE ARCHITECTURE FOR MODULARIZED EYEWEAR SYSTEMS, APPARATUS AND METHODS - Patent application Download PDF

Info

Publication number
JP7642752B2
JP7642752B2 JP2023149103A JP2023149103A JP7642752B2 JP 7642752 B2 JP7642752 B2 JP 7642752B2 JP 2023149103 A JP2023149103 A JP 2023149103A JP 2023149103 A JP2023149103 A JP 2023149103A JP 7642752 B2 JP7642752 B2 JP 7642752B2
Authority
JP
Japan
Prior art keywords
temple
user
sensors
processor
component
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2023149103A
Other languages
Japanese (ja)
Other versions
JP2024001031A (en
Inventor
エルネスト カルロス マルティネス ビリャルパンド
ワイクェン チュン
クォクワー ロー
チューミン ソー
Original Assignee
ソロズ・テクノロジー・リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US16/926,722 external-priority patent/US11709376B2/en
Application filed by ソロズ・テクノロジー・リミテッド filed Critical ソロズ・テクノロジー・リミテッド
Priority to JP2023149103A priority Critical patent/JP7642752B2/en
Publication of JP2024001031A publication Critical patent/JP2024001031A/en
Application granted granted Critical
Publication of JP7642752B2 publication Critical patent/JP7642752B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C11/00Non-optical adjuncts; Attachment thereof
    • G02C11/10Electronic devices other than hearing aids
    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C2200/00Generic mechanical aspects applicable to one or more of the groups G02C1/00 - G02C5/00 and G02C9/00 - G02C13/00 and their subgroups
    • G02C2200/02Magnetic means

Landscapes

  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • General Physics & Mathematics (AREA)
  • Ophthalmology & Optometry (AREA)
  • Optics & Photonics (AREA)
  • Eyeglasses (AREA)
  • Telephone Function (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Details Of Audible-Bandwidth Transducers (AREA)
  • Manipulator (AREA)
  • Prostheses (AREA)
  • Arrangements For Transmission Of Measured Signals (AREA)

Description

[関連出願への相互参照]
本出願は、2019年12月11日に出願された、発明の名称「モジュール化された眼鏡システム、装置、および方法」、番号16/711,340号の米国特許出願の継続出願であり、本出願は、2018年12月12日に出願された米国仮特許出願番号62/778,709号、発明の名称「モバイル・オーディオ・ビジュアル拡張および支援現実のための交換可能なフレームと埋め込み型エレクトロニクスを備えるテンプルとを備えるモジュール化された眼鏡システム」からの優先権を主張する。米国仮特許出願番号62/778,709号、発明の名称「モバイル・オーディオ・ビジュアル拡張および支援現実のための交換可能なフレームと埋め込み型エレクトロニクスを備えるテンプルとを備えるモジュール化された眼鏡システム」は、全て参照により本明細書中に組み入れられる。本出願は、2019年7月13日に出願された米国仮特許出願番号62/873,889号、発明の名称「ウェアラブル・デバイス装置、システム、および方法」からの優先権を主張する。米国仮特許出願番号62/873,889号、発明の名称「ウェアラブル・デバイス装置、システム、および方法」は、全て参照により本明細書中に組み入れられる。米国特許出願番号16/711,340号、発明の名称「モジュール化された眼鏡システム、装置、および方法」は、全て参照により本明細書中に組み入れられる。
CROSS-REFERENCE TO RELATED APPLICATIONS
This application is a continuation of U.S. Patent Application No. 16/711,340, entitled "MODULAR EYEWEAR SYSTEM, APPARATUS, AND METHOD," filed Dec. 11, 2019, which claims priority from U.S. Provisional Patent Application No. 62/778,709, entitled "MODULAR EYEWEAR SYSTEM WITH INTERCHANGEABLE FRAME AND TEMPLES WITH EMBEDDED ELECTRONICS FOR MOBILE AUDIO-VISUAL AUGMENTED AND ASSISTED REALITY," filed Dec. 12, 2018. U.S. Provisional Patent Application No. 62/778,709, entitled "MODULAR EYEWEAR SYSTEM WITH INTERCHANGEABLE FRAME AND TEMPLES WITH EMBEDDED ELECTRONICS FOR MOBILE AUDIO-VISUAL AUGMENTED AND ASSISTED REALITY," is incorporated herein by reference in its entirety. This application claims priority from U.S. Provisional Patent Application No. 62/873,889, entitled "WEARABLE DEVICE APPARATUS, SYSTEM, AND METHOD," filed Jul. 13, 2019. U.S. Provisional Patent Application No. 62/873,889, entitled "Wearable Device Apparatus, System, and Method," is hereby incorporated by reference in its entirety. U.S. Provisional Patent Application No. 16/711,340, entitled "Modular Eyewear System, Apparatus, and Method," is hereby incorporated by reference in its entirety.

本発明は、一般に、眼鏡デバイスに関し、より具体的には、モジュール化された眼鏡デバイスを介してユーザに情報を提供するための装置、方法、およびシステムに関する。 The present invention relates generally to eyewear devices, and more specifically to an apparatus, method, and system for providing information to a user via a modular eyewear device.

現代の生活のペースは速い。人はしばしば時間の制約下に置かれ、彼または彼女の手が占有され、その人が情報を入手し難い状況に置かれる。これは問題を引き起こす可能性がある。現在入手可能な眼鏡は、高価であり、例えば、度付き読書眼鏡や度付きサングラスなどの度付き眼鏡は、さまざまなユーザのニーズに合わせて簡単に再構成することができない。それは問題を引き起こす可能性がある。パーソナル化音声送信は、多くの場合に、イヤフォンまたはイヤホンと呼ばれる閉塞性インイヤ式デバイスを使用して行われる。そのようなデバイスは、外耳道を塞ぎ、ユーザが遠距離場の音声を聞くことを妨げる可能性がある。それは問題を引き起こす可能性がある。したがって、技術的解決策を必要とする問題が存在する。それらの技術的解決策は、技術的効果を生み出すための技術的手段を使用する。 Modern life is fast paced. A person is often under time pressure, his or her hands are occupied, and the person is placed in situations where information is difficult to obtain. This can cause problems. Currently available glasses are expensive, and prescription glasses, for example, prescription reading glasses or prescription sunglasses, cannot be easily reconfigured to suit different user needs. That can cause problems. Personalized audio transmission is often done using occlusive in-ear devices called earbuds or earphones. Such devices can block the ear canal and prevent the user from hearing far-field audio. That can cause problems. Thus, a problem exists that requires a technical solution. Those technical solutions use technical means to produce a technical effect.

本発明の実施形態を説明するために使用される以下の説明および添付の図面を参照することにより、本発明は最もよく理解され得る。本発明は、実施形態において例として例示され、以下のような添付の図面に限定されない。添付の図面において、同じ参照符号は、同様の要素を示す。 The present invention may be best understood by referring to the following description and the accompanying drawings, which are used to explain embodiments of the invention. The present invention is illustrated by way of example in embodiments and is not limited to the accompanying drawings, in which like reference numerals refer to similar elements.

本発明の実施形態に係る、モジュール化再構成可能な眼鏡システムを示す。1 illustrates a modular reconfigurable eyewear system according to an embodiment of the present invention. 本発明の実施形態に係る、眼鏡デバイスで使用するための再構成可能なコンポーネントを示す。1 illustrates a reconfigurable component for use in an eyewear device, according to an embodiment of the present invention. 本発明の実施形態に係る、眼鏡デバイスで使用するための複数の再構成可能なコンポーネントを示す。1 illustrates a number of reconfigurable components for use in an eyewear device, according to an embodiment of the present invention. 本発明の実施形態に係る、別のモジュール化再構成可能な眼鏡システムを示す。1 illustrates another modular reconfigurable eyewear system according to an embodiment of the present invention. 本発明の実施形態に係る、図4からのモジュール化再構成可能な眼鏡システムの斜視図および上面図を示す。5A-5C show perspective and top views of the modular reconfigurable eyewear system from FIG. 4 according to an embodiment of the present invention. 本発明の実施形態に係る、モジュール化された眼鏡デバイスで使用するためのシステム構築を示す。1 illustrates a system configuration for use with a modularized eyewear device according to an embodiment of the present invention. 本発明の実施形態に係る、図6Aのモジュール化された眼鏡デバイスで使用するためのシステム構築に対応する無線ネットワークを示す。6B illustrates a wireless network corresponding to a system configuration for use with the modularized eyewear device of FIG. 6A according to an embodiment of the present invention. 本発明の実施形態に係る、図4のモジュール化された眼鏡デバイスで使用するための別のシステム構築を示す。5 illustrates another system configuration for use with the modular eyewear device of FIG. 4 in accordance with an embodiment of the present invention. 本発明の実施形態に係る、テンプル挿入モジュールのブロック図を示す。FIG. 2 shows a block diagram of a temple insertion module according to an embodiment of the present invention. 本発明の実施形態に係る、後ろ首モジュール・アセンブリを装着したモジュール化された眼鏡デバイスを示す。1 illustrates a modularized eyewear device equipped with a back neck module assembly according to an embodiment of the present invention. 本発明の実施形態に係る、ウェアラブル・デバイスを配置する後ろ首モジュール・アセンブリの斜視図を示す。1 illustrates a perspective view of a rear neck module assembly for positioning a wearable device according to an embodiment of the present invention. 本発明の実施形態に係る、テンプル・インターロックをテンプルに連結することを示す。13 illustrates connecting a temple interlock to a temple according to an embodiment of the present invention. 本発明の実施形態に係る、後ろ首モジュール・アセンブリをテンプルに含まれるエレクトロニクスに連結する態様を示す。13 illustrates the connection of the rear neck module assembly to electronics contained in the temples, according to an embodiment of the present invention. 本発明の実施形態に係る、後ろ首モジュール・アセンブリをテンプル・エレクトロニクスと組み合わせる態様の概略図を示す。1 shows a schematic diagram of a combination of a rear neck module assembly with temple electronics according to an embodiment of the present invention. 本発明の実施形態に係る、後ろ首モジュール・アセンブリのユーザ・インターフェースを示す。1 illustrates a user interface for a rear neck module assembly according to an embodiment of the present invention. 本発明の実施形態に係る、後ろ首電子ユニットのブロック図を示す。FIG. 2 shows a block diagram of a rear neck electronics unit according to an embodiment of the present invention. 本発明の実施形態に係る、概略ブロック図を示す。FIG. 1 shows a schematic block diagram according to an embodiment of the present invention. 本発明の実施形態に係る、ウェイク・アップ制御の概略ブロック図を示す。1 shows a schematic block diagram of a wake-up control according to an embodiment of the present invention. 本発明の実施形態に係る、ボタン操作の状態図を示す。4 illustrates a state diagram of button operations according to an embodiment of the present invention. 本発明の実施形態に係る、タッチ・センサ操作の状態図を示す。4 illustrates a state diagram of touch sensor operation according to an embodiment of the present invention. 本発明の実施形態に係る、近接センサ操作の状態図を示す。4 illustrates a state diagram of proximity sensor operation according to an embodiment of the present invention. 本発明の実施形態に係る、ボタンの位置を示す。1 illustrates button locations according to an embodiment of the present invention.

本発明の実施形態の以下の詳細な説明において、添付の図面が参照され、これらの添付の図面において、同様の参照は同様の要素を示し、本発明を実施することができる特定の実施形態は、例として示されている。これらの実施形態は、当業者が本発明を実施できるように十分詳細に説明されている。他の例において、この説明の理解を曖昧にしないために、周知の回路、構造、および技術は詳細には示されていない。したがって、以下の詳細な説明は、限定的な意味で解釈されるべきではなく、本発明の範囲は添付の特許請求の範囲によりのみ限定される。 In the following detailed description of the embodiments of the present invention, reference is made to the accompanying drawings, in which like references indicate like elements, and in which specific embodiments in which the present invention may be practiced are shown by way of example. These embodiments are described in sufficient detail to enable one skilled in the art to practice the invention. In other instances, well-known circuits, structures and techniques have not been shown in detail in order not to obscure an understanding of this description. Therefore, the following detailed description should not be taken in a limiting sense, and the scope of the present invention is limited only by the appended claims.

一つまたは複数の実施形態において、ユーザに眼鏡システムのモジュール化を提供する方法、装置、およびシステムが説明されている。以下の実施形態の説明に記載されているように、エレクトロニクスの様々な組み合わせおよび構成が、眼鏡デバイスに組み込むために教示されている。一部のエレクトロニクスの構成は、眼鏡デバイスに取り外し可能に連結することができる。いくつかの実施形態において、エレクトロニクスの構成が眼鏡デバイスに組み込まれている。さらに他の実施形態において、後ろ首モジュール・アセンブリは、眼鏡デバイスと取り外し可能に連結することができる。様々な実施形態において、モジュール化された再構成可能な眼鏡デバイスは、眼鏡デバイスを通じてユーザに情報を提供する。実施形態の説明で使用されるように、情報は、音楽の形式でのストリーミング・オーディオを含み、情報は、例えば、これに限定するものではないが、心拍数、呼吸数、姿勢、歩数、ケーデンスなどのユーザの生物学のパラメータ(例えば、生理学のバイオメトリックス、バイオメカニクスなど)をも含み、情報は、例えば、これに限定するものではないが、ユーザが使用している車両に関する情報などのユーザに興味がある情報も含み、当該車両に関する情報は、例えば、自転車の毎分回転数(RPM)、RPM、油圧、冷却水温、風速、水深、対気速度などのエンジン・パラメータがある。様々な実施形態において、例えばユーザが聞くオーディオ・ブロードキャスト、およびユーザが眼鏡デバイスで見るディスプレイへのビデオ・ブロードキャストまたはユーザの目の瞳孔に投影されるイメージにより、情報をユーザに提示する。したがって、本明細書において教示される実施形態の範囲内で、情報は、広範な意味が与えられるべきである。 In one or more embodiments, methods, apparatus, and systems are described that provide a user with a modular eyewear system. As described in the following description of the embodiments, various combinations and configurations of electronics are taught for incorporation into the eyewear device. Some electronics configurations can be removably coupled to the eyewear device. In some embodiments, the electronics configurations are incorporated into the eyewear device. In yet other embodiments, the back neck module assembly can be removably coupled to the eyewear device. In various embodiments, the modular reconfigurable eyewear device provides information to the user through the eyewear device. As used in the description of the embodiments, information includes streaming audio in the form of music, information also includes parameters of the user's biology (e.g., physiological biometrics, biomechanics, etc.), such as, for example, but not limited to, heart rate, respiratory rate, posture, stride rate, cadence, and information also includes information of interest to the user, such as, for example, but not limited to, information about the vehicle the user is using, such as, for example, engine parameters, such as, for example, revolutions per minute (RPM), RPM, oil pressure, coolant temperature, wind speed, water depth, air speed, and the like. In various embodiments, information is presented to the user, for example, by an audio broadcast that the user hears, and a video broadcast to a display that the user sees on an eyeglass device or an image projected into the pupil of the user's eye. Thus, within the scope of the embodiments taught herein, information should be given a broad meaning.

図1は、本発明の実施形態に係る、モジュール化再構成可能な眼鏡システムを示す。図1を参照すると、モジュール化された眼鏡デバイスが斜視図の100で示されている。モジュール化された眼鏡デバイス100はフレーム・シャーシ102を有する。様々な実施形態において、フレーム・シャーシ102は、レンズ120およびレンズ122を保持するフレーム・リム部分を提供するように眼科的に構成される。レンズ120および122は、眼鏡デバイスが提供する機能のいずれかを提供することができ、例えば、これに限定するものではないが、安全ガラスレンズ、処方レンズ、サングラス・レンズ、溶接ガラスレンズなどがある。眼鏡デバイスはまた、示された二重レンズの代わりに単レンズを含むこともできる。いくつかの実施形態において、ノーズ・パッドが提供され、それにより、使用者の鼻との接触領域にクッションが提供される。いくつかの実施形態において、ノーズ・パッドは、シリコン・ゴムなどの柔軟な材料で作られる。 1 illustrates a modular reconfigurable eyewear system according to an embodiment of the present invention. Referring to FIG. 1, a modular eyewear device is shown at 100 in a perspective view. The modular eyewear device 100 has a frame chassis 102. In various embodiments, the frame chassis 102 is ophthalmically configured to provide a frame rim portion that holds a lens 120 and a lens 122. The lenses 120 and 122 can provide any of the functions that the eyewear device provides, such as, but not limited to, a safety glass lens, a prescription lens, a sunglass lens, a welding glass lens, etc. The eyewear device can also include a single lens instead of the doublet lens shown. In some embodiments, a nose pad is provided to provide cushioning in the contact area with the user's nose. In some embodiments, the nose pad is made of a flexible material, such as silicone rubber.

テンプル104(左テンプル)およびテンプル114(右テンプル)は、フレーム・シャーシ102に連結されている。テンプル104および114は、図に示すように蝶番によりフレーム・シャーシ102に柔軟に連結され、またはテンプル104および114は、フレーム・シャーシ102に対して配向固定されるように提供されることができる。 Temple 104 (left temple) and temple 114 (right temple) are connected to frame chassis 102. Temples 104 and 114 can be flexibly connected to frame chassis 102 by hinges as shown, or temples 104 and 114 can be provided so as to be fixedly oriented relative to frame chassis 102.

様々な実施形態において、一つまたは複数のテンプル(104および114)およびシャーシ・フレーム102には、以下に説明するようにエレクトロニクスが装着されることができる。100の図において、左テンプル挿入モジュール(temple insert module;TIM)106には、左テンプル104が配置され、右テンプル挿入モジュール(TIM)116には、右テンプル114が配置される。テンプル挿入モジュール(TIMs)については、以下の図と併せて詳しく説明する。 In various embodiments, one or more of the temples (104 and 114) and the chassis frame 102 can be populated with electronics as described below. In the diagram of 100, a left temple insert module (TIM) 106 accommodates the left temple 104, and a right temple insert module (TIM) 116 accommodates the right temple 114. The temple insert modules (TIMs) are described in more detail in conjunction with the following figures.

続けて図1を参照すると、モジュール化された眼鏡デバイスが、斜視図において130で示されている。フレーム・シャーシ132は、フレーム・リムによりレンズ140およびレンズ142を取り囲んで、レンズ140およびレンズ142をそこに固定するように眼科的に構成される。眉バー146が、組み立てファスナ、接着剤などを介して、様々な方法でフレーム・シャーシ132に固定される。テンプル144は、左シャーシ・コネクタ150と回転可能に連結できる左テンプル・コネクタ152を含む。左シャーシ・コネクタ150は左テンプル・コネクタ152とともに、シャーシ132と左テンプル144との間に回転可能な機械的および電気的な接続を形成して、フレーム・シャーシ132を左テンプル144に接続するための一つまたは複数の電気経路を提供する。同様に、右テンプル134は、右蝶番アセンブリ148を介してフレーム・シャーシ132に回転可能に連結することができる。 Continuing with reference to FIG. 1, a modularized eyeglass device is shown at 130 in a perspective view. The frame chassis 132 is ophthalmically configured to surround the lenses 140 and 142 by a frame rim to secure the lenses 140 and 142 thereto. A brow bar 146 is secured to the frame chassis 132 in various ways, such as via assembly fasteners, adhesives, and the like. The temple 144 includes a left temple connector 152 that can be rotatably coupled to a left chassis connector 150. The left chassis connector 150 together with the left temple connector 152 form a rotatable mechanical and electrical connection between the chassis 132 and the left temple 144 to provide one or more electrical paths for connecting the frame chassis 132 to the left temple 144. Similarly, the right temple 134 can be rotatably coupled to the frame chassis 132 via a right hinge assembly 148.

いくつかの実施形態において、モジュール化された眼鏡デバイスは、明瞭化のために図示されていない一つまたは複数の電気接点を有する電気/機械コネクタを介して、各テンプルを蝶番から取り外すことができるように構成されることに留意されたい。それらの電気的接点は、例えば、ピン、ポイント、パッド、スロット、接触デバイスなどを使用して作成されることができる。例えば、154で示された線は、右テンプル・コネクタと右テンプル134との接合の境界を定めている。同様に、156で示された線は、左テンプル・コネクタ152と左テンプル144との接合の境界を定めている。 Note that in some embodiments, the modular eyewear device is configured such that each temple can be detached from the hinge via an electrical/mechanical connector having one or more electrical contacts, not shown for clarity. Those electrical contacts can be made using, for example, pins, points, pads, slots, contact devices, etc. For example, the line indicated at 154 defines the junction of the right temple connector with the right temple 134. Similarly, the line indicated at 156 defines the junction of the left temple connector 152 with the left temple 144.

134、144などの各テンプルとフレーム・シャーシ132との間に電気的/機械的コネクタを設けることにより、テンプルは眼鏡デバイスと交換することができる。その機能により、ユーザはあるテンプルを別のテンプルと交換することができる。本明細書に記載される異なる機能を提供するために、異なるテンプルは、異なるエレクトロニクスを有するように構成されることができる。いずれのテンプルも、さまざまなエレクトロニクス構成に対応するように構成されることができる。例えば、一つまたは複数の実施形態において、右交換可能なテンプルは、電子パッケージを収容し、当該電子パッケージは、生体センサ、生体力学センサ、車両センサ、環境センサ、温度センサ、音響センサ、運動センサ、光センサ、タッチ・センサ、近接センサ、速度センサ、加速度センサ、回転センサ、磁場センサ、グローバル・ポジション・システム(GPS)レシーバー、ケーブル、マイク、マイクロ・スピーカ、電源(バッテリ)、カメラ、マイクロ・ディスプレイ、ヘッド・アップ・ディスプレイ(HUD)モジュール、多軸慣性測定ユニット、無線通信システムうちの一つまたは複数を含むことができる。TIMには、上記の電子パッケージとセンサを含めることもできることに留意されたい。様々な実施形態において、一つまたは複数の無線通信システムが提供され、当該システムは、例えば13.56MHzの産業科学医療(ISM)周波数を使用する近距離無線通信(NFC)、適応型ネットワーク・トポロジ(ANT)ANT+無線規格、ブルートゥース(登録商標)規格、ブルートゥース低エネルギー規格(BLE)を使用する無線通信、Wi-Fi規格を使用する無線通信、および3G、4G、ロング・ターム・エボリューション(LTE)、5Gなどの規格または他の無線規格などの携帯電話規格を使用する無線通信を利用する。いくつかの実施形態において、エレクトロニクスからの電気経路は、シースの腔を介してテンプルから出て、テンプル・シースに進み、眉バー・シースの腔へと続く。右交換可能なテンプルは、眉バー146およびシャーシ・フレーム132に固定する蝶番コネクタ148を含む。 By providing electrical/mechanical connectors between each temple, such as 134, 144, and the frame chassis 132, the temples can be interchanged with the eyewear device. This functionality allows the user to exchange one temple for another. Different temples can be configured with different electronics to provide different functionality as described herein. Any temple can be configured to accommodate a variety of electronic configurations. For example, in one or more embodiments, the right interchangeable temple contains an electronic package that can include one or more of a biosensor, a biomechanical sensor, a vehicle sensor, an environmental sensor, a temperature sensor, an acoustic sensor, a motion sensor, a light sensor, a touch sensor, a proximity sensor, a speed sensor, an acceleration sensor, a rotation sensor, a magnetic field sensor, a global position system (GPS) receiver, a cable, a microphone, a micro-speaker, a power source (battery), a camera, a micro-display, a head-up display (HUD) module, a multi-axis inertial measurement unit, and a wireless communication system. It should be noted that the TIM can also include the electronic package and sensors described above. In various embodiments, one or more wireless communication systems are provided, such as those using Near Field Communication (NFC) using the 13.56 MHz Industrial Scientific and Medical (ISM) frequency, Adaptive Network Topology (ANT) ANT+ wireless standard, Bluetooth® standard, Bluetooth Low Energy standard (BLE) wireless communication, Wi-Fi standard, and wireless communication using cellular standards such as 3G, 4G, Long Term Evolution (LTE), 5G, or other wireless standards. In some embodiments, the electrical path from the electronics exits the temple through a cavity in the sheath, passes into the temple sheath, and continues into a cavity in the brow bar sheath. The right interchangeable temple includes a hinged connector 148 that secures to the brow bar 146 and chassis frame 132.

一つまたは複数の実施形態において、右交換可能なテンプルは、蝶番コネクタを介してフレーム・シャーシの前部に取り付けられ、蝶番コネクタは、モジュール化眉バーを介して左交換可能なテンプルに電力およびデータを転送できるようにする。蝶番コネクタは、フレーム・シャーシと機械的に連動し、電気ピン導体と電力/データ接続を可能にする。一つまたは複数の実施形態において、着用時において開いた方向に置かれる場合、蝶番コネクタは、デバイスの開いた状態を感知し、電力またはデータを転送できるようにする。閉じた位置(テンプルが内側に折りたたまれている)にある場合、蝶番コネクタは、数の近接センサおよび複数の運動センサのうちの一つまたは複数から受信した信号と併せて、システムがユーザとデバイスの相互作用状態を感知できるようにし、電力またはデータ転送を終了する。その機能は、折りたたまれて収納されたときの電力消費を削減し、ユーザがデバイスを頭に着用する時に自動的に電源を入れることができる。蝶番コネクタからの切り替え可能なデータまたは電力転送に加えて、蝶番コネクタは、安定的な無中断電力および/またはデータ転送を提供する柔軟な回路と有線マイクロ・コネクタを提供することができる。 In one or more embodiments, the right interchangeable temple is attached to the front of the frame chassis via a hinge connector, which allows power and data transfer to the left interchangeable temple via the modular brow bar. The hinge connector mechanically interfaces with the frame chassis and allows power/data connection to electrical pin conductors. In one or more embodiments, when placed in an open orientation when worn, the hinge connector senses the open state of the device and allows power or data transfer. When in a closed position (temples folded inward), the hinge connector, in conjunction with signals received from one or more of the plurality of proximity sensors and the plurality of motion sensors, allows the system to sense the user-device interaction state and terminate power or data transfer. This function can reduce power consumption when folded and stored, and automatically power on when the user wears the device on their head. In addition to switchable data or power transfer from the hinge connector, the hinge connector can provide flexible circuitry and wired micro connectors that provide stable uninterrupted power and/or data transfer.

いくつかの実施形態において、眉バー146のボリューム内で電気経路を配線することが便利である。いくつかの実施形態において、眉バー146は、その長さに沿ってチャネルを提供するように構成され、そのチャネルの中に電気経路が配線される。したがって、眉バー146は、その長さに沿って一つまたは複数のシース、チャネルなどを提供し、その中に電気経路およびセンサを収容することができる。例として、電気経路は、これに限定するものではないが、ワイヤ、プリント回路基板、フレキシブル・プリント回路基板などである。様々な実施形態において、一つまたは複数のセンサをブロウバー146に取り付けて、フレーム・シャーシ132用の電気サブアセンブリを作成することが有利である。いくつかの実施形態において、フレーム・シャーシ132からの追加の電気経路は、眉バー146に含まれる電気経路と結合される。いくつかの実施形態において、フレキシブル電子回路が、眉バーの下側上面に接着され、左右のシースの腔を介して眉バーから出る。別の方法として、または組み合わせて、完全に埋め込まれたフレキシブル・エレクトロニクスを眉バーにキャストし、統合された接触点が各蝶番の近くで眉バーから出ることができる。眉バーの両側にあるこれらの統合された接点が左右のテンプルの統合された接点に接触される場合、データまたは電力の伝送が許可される。エレクトロニクスとの接続を容易にすることに加えて、眉バーは、固定フランジによりオプションの瞳孔モジュールを隠すことができ、ユーザが眉バーの瞳孔開口部を介してマイクロ・ディスプレイを見ることを許可する。 In some embodiments, it is convenient to route the electrical pathways within the volume of the brow bar 146. In some embodiments, the brow bar 146 is configured to provide a channel along its length within which the electrical pathways are routed. Thus, the brow bar 146 can provide one or more sheaths, channels, etc. along its length within which the electrical pathways and sensors can be housed. By way of example, and not limitation, the electrical pathways can be wires, printed circuit boards, flexible printed circuit boards, etc. In various embodiments, it is advantageous to attach one or more sensors to the brow bar 146 to create an electrical subassembly for the frame chassis 132. In some embodiments, additional electrical pathways from the frame chassis 132 are combined with the electrical pathways included in the brow bar 146. In some embodiments, flexible electronics are bonded to the lower top surface of the brow bar and exit the brow bar through the cavities of the left and right sheaths. Alternatively, or in combination, fully embedded flexible electronics can be cast into the brow bar with integrated contact points exiting the brow bar near each hinge. When these integrated contacts on either side of the brow bar are touched to the integrated contacts on the left and right temples, data or power transmission is permitted. In addition to facilitating connection to electronics, the brow bar can conceal an optional pupil module with a fixed flange, allowing the user to view a micro display through the pupil opening of the brow bar.

同様に、左テンプルは、左交換可能なテンプルとして、左蝶番コネクタにより眼鏡の前フレームに接続されるように構成される。様々な実施形態において、左交換可能なテンプルは、右交換可能なテンプルと同じ電子構成/機能を含むことができ、または交換可能なテンプルは、異なる電子構成および異なる機能を含むことができる。 Similarly, the left temple is configured to be connected to the front frame of the eyeglasses by a left hinge connector as a left interchangeable temple. In various embodiments, the left interchangeable temple can include the same electronic configuration/functionality as the right interchangeable temple, or the interchangeable temple can include a different electronic configuration and different functionality.

続けて図1を参照すると、左テンプル164および右テンプル174は、160で示されるように構成される。テンプル164および174のそれぞれは、眼鏡システムのユーザに情報および機能を提供するように構成されるエレクトロニクスを含む。160で示されるように、左テンプル164はテンプル・ドア(図示せず)を有し、186で示される電子パッケージを露出させるために、テンプル・ドアが取り除かれた。テンプル・ドアは、エレクトロニクスを環境暴露および危険から守る。テンプル・ドアは、所定の用途に適する機械的な留め具によりテンプル・アセンブリに固定される。いくつかの実施形態において、テンプル・ドアは、国際保護マーキングIEC規格60529からのIPコードを介して水の侵入に関する定格を提供する。電源(バッテリ)は184で示され、オーディオ・スピーカおよびポートは182で示される。オーディオ・スピーカおよびポート182は、通常に、テンプルの後端に位置し、いくつかの実施形態において、ユーザの耳に音を個人的に向ける統合された指向性プロジェクション・スピーカである。プロジェクション・ステレオ・スピーカは、例えば、これに限定するものではないが、音声プロンプト、ストリーミング音楽、スマート・オーディオ・アシスタンス、データなどのさまざまなオーディオ信号をユーザに伝えることができる。プロジェクション・スピーカのデザインは、ユーザの耳を塞がないことに留意されたい。したがって、ユーザは遠距離場音声を聞くことができ、当該遠距離場音声はユーザの耳を塞ぐ現在入手可能なイヤホン式ヘッドフォンのように劣化することがない。 Continuing with reference to FIG. 1, the left temple 164 and the right temple 174 are configured as shown at 160. Each of the temples 164 and 174 includes electronics configured to provide information and functionality to a user of the eyewear system. As shown at 160, the left temple 164 has a temple door (not shown) that has been removed to expose an electronics package shown at 186. The temple door protects the electronics from environmental exposure and hazards. The temple door is secured to the temple assembly by mechanical fasteners appropriate for a given application. In some embodiments, the temple door provides a rating for water ingress via IP Code from the International Protection Marking IEC standard 60529. A power source (battery) is shown at 184 and an audio speaker and port are shown at 182. The audio speaker and port 182 is typically located at the rear end of the temple and in some embodiments is an integrated directional projection speaker that personally directs sound to the user's ears. The projection stereo speaker can convey a variety of audio signals to the user, such as, but not limited to, voice prompts, streaming music, smart audio assistance, data, etc. It is noted that the design of the projection speaker does not block the user's ears. Thus, the user can hear far-field audio that is not degraded as with currently available earbud style headphones that block the user's ears.

右テンプル174にも、電子パッケージ(図には示されていない)が設けられている。電子パッケージが、右テンプル174内に含まれる。右テンプルには、オーディオ・スピーカ・ポート184を備えるオーディオ・スピーカが備えられ、そのオーディオ・スピーカは、統合された指向性プロジェクション・スピーカであることができる。一つまたは複数の実施形態において、右テンプル174は、マイクロ・ディスプレイ・アセンブリ192を含む外部アセンブリ190を収容するように構成される。同様に、左テンプルは、外部アセンブリ190およびマイクロ・ディスプレイ・アセンブリ192を収容するために構成されることができる。 The right temple 174 is also provided with an electronics package (not shown). The electronics package is contained within the right temple 174. The right temple is provided with an audio speaker with an audio speaker port 184, which may be an integrated directional projection speaker. In one or more embodiments, the right temple 174 is configured to accommodate an external assembly 190 that includes a micro-display assembly 192. Similarly, the left temple may be configured to accommodate the external assembly 190 and the micro-display assembly 192.

様々な実施形態において、マイクロ・ディスプレイ・アセンブリ、例えば192は、
光学システムを形成する光学素子、エレクトロニクス、およびマイクロ・ディスプレイを収容するヘッド・アップ・ディスプレイ(HUD)Pupil(登録商標)光学モジュールである。当該瞳孔機構はまた、ハウジングから電子接点経路に入れるケーブル、フレキシブル回路基板、またはワイヤを収容することができる。一つまたは複数の実施形態において、それらの電気経路は、左テンプル174の側面に接続され、そうすると、ユーザはシースルー・ヘッド・アップ・ディスプレイ外部アクセサリを有し、モバイル現実体験の視覚的要素が強化され得る。
In various embodiments, a micro display assembly, e.g., 192, includes:
A Head Up Display (HUD) Pupil® Optical Module that houses the optics, electronics, and micro-display that form the optical system. The pupil mechanism can also house cables, flexible circuit boards, or wires that run from the housing to electrical contact paths. In one or more embodiments, those electrical paths are connected to the side of the left temple 174 so that the user has a see-through head up display external accessory and the visual element of the mobile reality experience can be enhanced.

一つまたは複数の実施形態において、ブロウバーから出る配線は、テンプルの左右のシースに隠され、シースの腔を介して左右のテンプルに入り、それにより環境の危険から配線を守る。接触点経路の近くの領域は、ヘッド・アップ・マイクロ・ディスプレイ・モジュールの瞳孔間距離をカスタマイズするための運動機構を収容することができる。 In one or more embodiments, the wiring exiting the brow bar is concealed in the left and right sheaths of the temples and enters the left and right temples through cavities in the sheaths, thereby protecting the wiring from environmental hazards. The area near the contact point path can house a movement mechanism for customizing the interpupillary distance of the head-up micro-display module.

様々な実施形態において、102または132(図1)または下図内の任意の類似の構成などの前フレーム部分、および104、114、134、144、164、174(図1)または下図内の任意の類似の構成などの右と左のテンプル部分は、一組の交換可能な前フレーム部分とテンプル部分の一部であり、それぞれが同じまたは異なるデバイス、アクセサリ、性能および/または機能の組み合わせを有する。電子基板、マイク、スピーカ、バッテリ、カメラ、ヘッド・アップ・ディスプレイ・モジュール、無線Wi-Fiラジオ、GPSチップ・セット、LTEセルラー・ラジオ、多軸慣性測定ユニット、運動センサ、タッチ・センサ、ライトおよび近接センサなどのうちの少なくとも一つが、必要な組み合わせに含まれることができる。ユーザがセルラー・サービス、スマート・フォン、スマート・ウォッチ、スマート・ブレスレット、モバイル・コンピューター、およびセンサ周辺機器に無線で接続することのうちの少なくとも一つを実行できるようにするエレクトロニクスをさらに含むことができる。エレクトロニクスは、モジュール化ヘッド・アップ・ディスプレイ(HUD)を介してシースルーの拡張現実画像を表示したり、ステレオ・オーディオ・コンテンツを提供したり、一つまたは複数の統合されたプロジェクション・マイクロ・スピーカを介して音楽を含む音声およびオーディオ通知を提供したりする機能をさらに含むことができる。前フレーム電気接点デバイスおよびテンプル電気接点デバイスは、それぞれの蝶番コネクタ内またはその近くにある電気的接触点を含むことができる。当該接触点は、接触点が電気的閉位置にある時のテンプル部分と前フレーム部分との間の電力、電気信号、およびデータのうちの少なくとも一つを電気的に伝達するために、互いに取り外し可能に電気接触する。いくつかの実施形態において、一緒に組み立てられると、前フレーム蝶番コネクタ、前フレーム電気接点デバイス、テンプル蝶番コネクタ、およびテンプル電気接点デバイスは、電気機械蝶番、蝶番コネクタ、アセンブリまたはデバイスを形成することができる。いくつかの実施形態において、テンプル部分を格納位置に折り畳むことにより、接点を切断してシステムの電力をオフにすることができる。 In various embodiments, the front frame portion, such as 102 or 132 (FIG. 1) or any similar configuration in the figures below, and the right and left temple portions, such as 104, 114, 134, 144, 164, 174 (FIG. 1) or any similar configuration in the figures below, are part of a set of interchangeable front frame portions and temple portions, each having the same or different combinations of devices, accessories, capabilities and/or functions. At least one of electronic boards, microphones, speakers, batteries, cameras, head-up display modules, wireless Wi-Fi radios, GPS chip sets, LTE cellular radios, multi-axis inertial measurement units, motion sensors, touch sensors, lights and proximity sensors, etc. may be included in the required combination. Electronics may further be included to enable a user to wirelessly connect to at least one of cellular services, smart phones, smart watches, smart bracelets, mobile computers, and sensor peripherals. The electronics may further include the ability to display see-through augmented reality images via a modular head-up display (HUD), provide stereo audio content, and provide voice and audio notifications, including music, via one or more integrated projection micro-speakers. The front frame electrical contact device and the temple electrical contact device may include electrical contact points in or near the respective hinge connectors. The contact points are in releasable electrical contact with each other to electrically transmit at least one of power, electrical signals, and data between the temple portion and the front frame portion when the contact points are in an electrically closed position. In some embodiments, when assembled together, the front frame hinge connector, the front frame electrical contact device, the temple hinge connector, and the temple electrical contact device may form an electromechanical hinge, hinge connector, assembly, or device. In some embodiments, folding the temple portion into a storage position may disconnect the contacts to power off the system.

いくつかの実施形態において、前フレーム・エレクトロニクスとテンプル・エレクトロニクスとのうちの少なくとも一つは、バッテリ、カメラ、ヘッド・アップ・ディスプレイ・モジュール、コントローラー、デジタル・ストレージ・エレクトロニクス、CPU、プロジェクション・マイクロ・スピーカ、マイク、無線Wi-Fiラジオ、GPSチップ・セット、LTEセルラー・ラジオ、多軸慣性測定システムもしくはユニット、並びに、感覚、運動、接触、光、近接、温度および圧力センサなどのうちの少なくとも一つを含むことができる。 In some embodiments, at least one of the front frame electronics and temple electronics may include at least one of a battery, a camera, a heads up display module, a controller, digital storage electronics, a CPU, a projection micro-speaker, a microphone, a wireless Wi-Fi radio, a GPS chip set, an LTE cellular radio, a multi-axis inertial measurement system or unit, and sensory, motion, touch, light, proximity, temperature and pressure sensors, etc.

いくつかの実施形態において、少なくとも一つのテンプルは、選択されたテンプル・エレクトロニクスを搭載するテンプル・モジュール・インサート(TIM)を含むことができる。他の実施形態において、首スマート・コードは、後ろ首電子モジュールに電気的に接続される。首スマート・コードには、後ろ首電子モジュールを眼鏡デバイスの左右のテンプルと機械的または電気的に相互接続するための左右のコネクタまたはコネクタ端部を有する。 In some embodiments, at least one temple can include a temple module insert (TIM) that carries selected temple electronics. In other embodiments, the neck smart cord is electrically connected to the rear neck electronics module. The neck smart cord has left and right connectors or connector ends for mechanically or electrically interconnecting the rear neck electronics module with the left and right temples of the eyewear device.

図2は、本発明の実施形態に係る眼鏡デバイスで使用するための再構成可能なコンポーネントを示す。図2の200を参照すると、テンプル202には、係合部204が設けられている。この実施形態の説明において、210で示されて「TIM」と呼ばれるテンプル挿入モジュールは、テンプル202の係合部204と着脱可能に連結できるように構成される。TIM210は、矢印212aおよび212bにより示されるように、テンプル202に取り付けられる。様々な実施形態において、係合部204は、例えば、これに限定するものではないが、圧入、クリップ、機械的なインターロック、フックとループ、磁気面、テンプルへの外部クランプ、フランジおよびテンプルへの機械的な連結などの機械的な接続により達成される。さらに他の実施形態において、係合部204およびTIM210は磁気表面を利用して、磁力によりTIM210を固定する。204で示される係合部の形状、および本明細書に示される図の他の場所で示される係合部の形状は、単に例示のために与えられ、本発明の実施形態を制限するものではない。200で示される図において、TIM210はテンプル202と機械的に接続するだけであり、TIM210とテンプル202との間には電気的接続が提供されていない。 2 illustrates a reconfigurable component for use in an eyeglass device according to an embodiment of the present invention. Referring to FIG. 2 at 200, a temple 202 is provided with an engagement portion 204. In the description of this embodiment, a temple insertion module, designated 210 and referred to as a "TIM", is configured to be removably coupled to the engagement portion 204 of the temple 202. The TIM 210 is attached to the temple 202 as indicated by arrows 212a and 212b. In various embodiments, the engagement portion 204 is achieved by a mechanical connection, such as, but not limited to, a press fit, a clip, a mechanical interlock, a hook and loop, a magnetic surface, an external clamp to the temple, a flange and a mechanical connection to the temple. In yet other embodiments, the engagement portion 204 and the TIM 210 utilize a magnetic surface to secure the TIM 210 by magnetic force. The shape of the engagement portion designated 204 and the shapes of the engagement portions shown elsewhere in the figures illustrated herein are provided merely for illustrative purposes and are not intended to limit the embodiments of the present invention. In the diagram shown at 200, the TIM 210 is only mechanically connected to the temple 202, and no electrical connection is provided between the TIM 210 and the temple 202.

いくつかの実施形態において、TIM210には、マイクロ・プロジェクション・スピーカとすることができるスピーカおよびスピーカ・ポート214が設けられている。スピーカは、オーディオ・ブロードキャストを通じてユーザに情報を提供する。ここで提供されるスピーカは、ユーザの耳の外部にあるスピーカであるため、挿入されるイヤホンのようにユーザの耳に挿入されることがないことに留意されたい。TIM210には、プロセッサ、メモリ、電力、およびTIM210が一つまたは複数のデバイス220と無線通信222できるようにする一つまたは複数の無線通信プロトコルを含む電子パッケージが配置されている。デバイス220は、例えば、これに限定するものではないが、生体センサまたは車両センサ、ローカル・ユーザ・デバイス、無線ルーターなどのネットワーク・ノード、リモート・ネットワーク、またはネットワークを介してアクセスされる携帯電話などのリモート・ユーザ・デバイスなどの外部センサであり得る。さまざまなセンサ、ネットワーク、およびリモートデバイスについて、以下の図と併せて詳しく説明する。 In some embodiments, the TIM 210 is provided with a speaker and speaker port 214, which may be a micro-projection speaker. The speaker provides information to the user through audio broadcast. It is noted that the speaker provided here is a speaker that is external to the user's ear and is not inserted into the user's ear like an inserted earphone. Disposed in the TIM 210 is an electronics package that includes a processor, memory, power, and one or more wireless communication protocols that enable the TIM 210 to wirelessly communicate 222 with one or more devices 220. The devices 220 may be external sensors such as, for example, but not limited to, biosensors or vehicle sensors, local user devices, network nodes such as wireless routers, remote networks, or remote user devices such as mobile phones accessed via a network. Various sensors, networks, and remote devices are described in more detail in conjunction with the following figures.

図2の200のアーキテクチャに従って、いくつかの実施形態において、第二テンプルおよび第二TIMが提供される。そのようなシステムにおける二つのTIMsは、必要に応じてデバイス220間およびそれらの間の無線通信に参加して、あるレベルの設計機能をユーザに提供することができる。例えば、一実施形態において、左TIMは、第一ネットワーク・プロトコルを利用してリモートデバイス220と通信するのに十分な無線ネットワーク機能を含む。さらに、左TIMおよび右TIMは、第二ネットワーク・プロトコルを利用して通信することをサポートする無線ネットワーク機能を有する。電力を節約するために、第一ネットワーク・プロトコルは、第二ネットワーク・プロトコルよりも広い範囲を有する。なぜなら、左TIMとリモートデバイスとの間の距離は、左TIMと右TIMとの間の分離距離(名目上、ユーザの頭の幅)よりも大きい。左TIMと右TIMとの間に有線接続がないため、200で示されているアーキテクチャは、真の無線と呼ばれる。一つまたは複数の実施形態において、オーディオ・ストリームは、第一無線ネットワークを利用して、ユーザ・デバイスから第一TIMに提供される。次に、オーディオ・ストリームを眼鏡デバイスの左および右のプロジェクション・スピーカのそれぞれに提供するために、第二無線ネットワークを利用して、第二無線オーディオ・ストリームが一方のTIMから他方のTIMに提供される。 In accordance with the architecture of 200 in FIG. 2, in some embodiments, a second temple and a second TIM are provided. The two TIMs in such a system can participate in wireless communication between and among the devices 220 as needed to provide a level of design functionality to the user. For example, in one embodiment, the left TIM includes wireless network capabilities sufficient to communicate with the remote device 220 utilizing a first network protocol. Additionally, the left TIM and the right TIM have wireless network capabilities that support communicating utilizing a second network protocol. To conserve power, the first network protocol has a wider range than the second network protocol because the distance between the left TIM and the remote device is greater than the separation distance between the left TIM and the right TIM (nominal: the width of the user's head). Because there is no wired connection between the left TIM and the right TIM, the architecture shown in 200 is referred to as true wireless. In one or more embodiments, an audio stream is provided from the user device to the first TIM utilizing a first wireless network. A second wireless audio stream is then provided from one TIM to the other TIM using a second wireless network to provide the audio stream to each of the left and right projection speakers of the eyewear device.

本明細書の図と併せて説明されるように、200で説明されるテンプルおよびTIMsは、眼鏡デバイス用の再構成可能なコンポーネントを提供する。テンプル202の前端206は、上述の眼鏡デバイスのフレーム・シャーシと係合する。テンプルとフレームとの間には、コネクタを有し、または、コネクタを有さない。したがって、眼鏡の所与の設計に応じて、テンプル202は、フレーム・シャーシに対して固定された位置を得ることができ、またはテンプルは、フレーム・シャーシに回転可能に連結されることができる。 As described in conjunction with the figures herein, the temples and TIMs described at 200 provide a reconfigurable component for an eyewear device. The front end 206 of the temple 202 engages with the frame chassis of the eyewear device described above. There may or may not be a connector between the temple and the frame. Thus, depending on a given design of the glasses, the temple 202 may have a fixed position relative to the frame chassis or the temple may be rotatably coupled to the frame chassis.

図2の250を参照すると、テンプル252には、係合部254が設けられている。260で示すテンプル挿入モジュールTIMは、テンプル252の係合部254と着脱可能に連結できるように構成される。TIM260は、矢印262aおよび262bにより示されるように、テンプル252に取り付けられる。様々な実施形態において、係合部204は、電気的な接続と機械的な接続の組み合わせにより達成される。機械的な接続は、210/204と併せて説明されているように、例えば、これに限定するものではないが、圧入、クリップ、機械的なインターロック、フックとループなどであり得る。さらに他の実施形態において、係合部254およびTIM260は磁気表面を利用し、磁力によりTIM260を固定する。いくつかの電気接点280は、例示のために提供されており、それにより限定を意味するものではない。電気接点280は、テンプル252内の対応する電気接点と嵌合して、テンプル252内の一つまたは複数の電気経路(図示せず)への電気接続を提供する。テンプル252内の電気経路は、TIM260と一つまたは複数のディスプレイに提供される信号のソースを表すこともできるセンサ272および274との間の電気的な接続を容易にする。センサ272および274は、眼鏡デバイスで構成される電子パッケージと組み合わせて使用するためのマイクロホンなどの音響センサまたは本明細書に記載されているセンサのいずれかであり得る。一つまたは複数の実施形態において、272および274のうちの一つまたは複数は、HUDなどのディスプレイに信号を提供する。 2, 250, the temple 252 is provided with an engagement portion 254. The temple insert module TIM, shown at 260, is configured to be removably coupled to the engagement portion 254 of the temple 252. The TIM 260 is attached to the temple 252 as shown by arrows 262a and 262b. In various embodiments, the engagement portion 204 is achieved by a combination of electrical and mechanical connections. The mechanical connection can be, for example, but not limited to, a press fit, clip, mechanical interlock, hook and loop, etc., as described in conjunction with 210/204. In yet other embodiments, the engagement portion 254 and the TIM 260 utilize magnetic surfaces to secure the TIM 260 by magnetic force. Some electrical contacts 280 are provided for illustrative purposes and are not meant to be limiting. The electrical contacts 280 mate with corresponding electrical contacts in the temple 252 to provide an electrical connection to one or more electrical pathways (not shown) in the temple 252. The electrical pathways in the temple 252 facilitate an electrical connection between the TIM 260 and the sensors 272 and 274, which may also represent sources of signals provided to one or more displays. The sensors 272 and 274 may be acoustic sensors, such as microphones, or any of the sensors described herein for use in combination with an electronics package configured in a glasses device. In one or more embodiments, one or more of 272 and 274 provide a signal to a display, such as a HUD.

いくつかの実施形態において、TIM260には、マイクロ・プロジェクション・スピーカとすることができるスピーカおよびスピーカ・ポート264が設けられている。スピーカは、オープンイヤー・オーディオ・ブロードキャストを通じてユーザに情報を提供する。 In some embodiments, the TIM 260 is provided with a speaker, which may be a micro-projection speaker, and a speaker port 264. The speaker provides information to the user through an open-ear audio broadcast.

図2の250のアーキテクチャに従って、いくつかの実施形態において、以下の図3に示すような第二テンプルおよび第二TIMが提供される。そのようなシステムにおける二つのTIMsは、必要に応じてデバイス220間およびそれらの間の無線通信に参加して、あるレベルの設計機能をユーザに提供する。本明細書の図と併せて説明されるように、250で説明されるテンプルおよびTIMsは、眼鏡デバイス用の再構成可能なコンポーネントを提供する。例えば、テンプル252の前端256は、上述の眼鏡デバイスのフレーム・シャーシと係合する。テンプルとフレームとの間には、コネクタを有し、または、コネクタを有さない。したがって、眼鏡の所与の設計に応じて、テンプル252は、フレーム・シャーシに対して固定された位置を得ることができ、またはテンプルは、フレーム・シャーシに回転可能に連結されることができる。 In accordance with the architecture of 250 in FIG. 2, in some embodiments, a second temple and a second TIM are provided, as shown in FIG. 3 below. The two TIMs in such a system may participate in wireless communication between and among the devices 220 as needed to provide a level of design functionality to the user. As described in conjunction with the figures herein, the temple and TIMs described in 250 provide a reconfigurable component for an eyeglass device. For example, the front end 256 of the temple 252 engages with the frame chassis of the eyeglass device described above. There may or may not be a connector between the temple and the frame. Thus, depending on a given design of the eyeglasses, the temple 252 may obtain a fixed position relative to the frame chassis, or the temple may be rotatably coupled to the frame chassis.

図3は、本発明の実施形態に係る眼鏡デバイスで使用するための複数の再構成可能なコンポーネントを300で示す。図3の300を参照すると、図2の左再構成可能なコンポーネント250が、眼鏡デバイス用の付随する右再構成可能なコンポーネントとともに示されている。右テンプル352は、図3には示されていない係合部を有し、当該係合部は、左テンプル252の係合部254と同様のものである。360で示すテンプル挿入モジュールTIMは、テンプル352の係合部と着脱可能に連結できるように構成される。TIM360は、矢印362aおよび362bにより示されるように、テンプル352と連結する。様々な実施形態において、テンプル352の係合部は、電気的な接続と機械的な接続の組み合わせにより達成される。機械的な接続は、上記の210/204と併せて提供されているように、例えば、これに限定するものではないが、圧入、クリップ、機械的なインターロック、フックとループなどであり得る。さらに他の実施形態において、テンプル352の係合部およびTIM360は、磁気表面を利用し、磁力によりTIM360を固定する。いくつかの電気接点380は、例示のために提供されており、それにより限定を意味するものではない。電気接点380は、テンプル352内の対応する電気接点と嵌合して、テンプル352内の一つまたは複数の電気経路(図示せず)への電気接続を提供する。テンプル352内の電気経路は、TIM360と一つまたは複数のセンサ372および374との間の電気的な接続を容易にする。センサ372および374は、眼鏡デバイスで構成されている電子パッケージと組み合わせて使用するためのマイクロホンなどの音響センサまたは本明細書に記載されているセンサのいずれかであり得る。様々な実施形態において、TIM360には、プロセッサ、メモリ、電力、および一つまたは複数の無線通信システムを含む電子パッケージが配置されている。当該無線通信システムは、TIM360が222での無線伝送により示されるように一つまたは複数のデバイスと無線で通信することを可能にするプロトコルを使用する。さらに、TIM360およびTIM260は、382での無線送信により示されるようにTIMs間の無線通信を可能にする無線通信機能を有するように構成されることができる。いくつかの実施形態において、TIM360には、マイクロ・プロジェクション・スピーカとすることができるスピーカおよび364で示されるスピーカ・ポートが設けられている。当該スピーカは、オーディオ・ブロードキャストを通じてユーザに情報を提供する。 3 illustrates a number of reconfigurable components at 300 for use in an eyewear device according to an embodiment of the present invention. Referring to FIG. 3 at 300, the left reconfigurable component 250 of FIG. 2 is illustrated along with an associated right reconfigurable component for an eyewear device. The right temple 352 has an engagement portion, not shown in FIG. 3, which is similar to the engagement portion 254 of the left temple 252. A temple insertion module TIM, shown at 360, is configured to be removably coupled to the engagement portion of the temple 352. The TIM 360 couples with the temple 352 as shown by arrows 362a and 362b. In various embodiments, the engagement portion of the temple 352 is achieved by a combination of electrical and mechanical connections. The mechanical connection can be, for example, but not limited to, a press fit, a clip, a mechanical interlock, a hook and loop, etc., as provided in conjunction with 210/204 above. In yet another embodiment, the engagement portion of the temple 352 and the TIM 360 utilize a magnetic surface to secure the TIM 360 by magnetic force. Several electrical contacts 380 are provided for illustrative purposes and are not meant to be limiting thereby. The electrical contacts 380 mate with corresponding electrical contacts in the temple 352 to provide an electrical connection to one or more electrical pathways (not shown) in the temple 352. The electrical pathways in the temple 352 facilitate an electrical connection between the TIM 360 and one or more sensors 372 and 374. The sensors 372 and 374 can be acoustic sensors such as microphones or any of the sensors described herein for use in combination with an electronic package configured in an eyewear device. In various embodiments, the TIM 360 is disposed in an electronic package that includes a processor, memory, power, and one or more wireless communication systems. The wireless communication systems use a protocol that allows the TIM 360 to wirelessly communicate with one or more devices as indicated by the wireless transmission at 222. Additionally, TIM 360 and TIM 260 can be configured with wireless communication capabilities to allow wireless communication between the TIMs as shown by the wireless transmission at 382. In some embodiments, TIM 360 is provided with a speaker, which can be a micro-projection speaker, and a speaker port, shown at 364, which provides information to the user through audio broadcasts.

図3のビュー390を参照すると、TIM260およびTIM360のそれぞれについて電気接続の概略図が示されている。TIM260は、電気経路394によりセンサ272に電気的に連結されている。同様に、TIM260は、電気経路392によりセンサ274に電気的に連結されている。TIM260とそれぞれのセンサとの間の接続が、左テンプルの電気回路図384を構成する。左テンプルの電気回路図384は、図よりも複雑であっても、複雑でなくてもよいことに留意されたい。したがって、左テンプルの電気回路図は、単に説明のために提供されており、それにより限定を意味するものではない。 Referring to view 390 of FIG. 3, a schematic diagram of the electrical connections is shown for each of TIM 260 and TIM 360. TIM 260 is electrically coupled to sensor 272 by electrical path 394. Similarly, TIM 260 is electrically coupled to sensor 274 by electrical path 392. The connections between TIM 260 and each sensor constitute left temple electrical schematic 384. Note that left temple electrical schematic 384 may be more or less complex than shown. Thus, the left temple electrical schematic is provided for illustrative purposes only and is not meant to be limiting.

同様に、TIM360は、電気経路398によりセンサ372に電気的に連結されている。TIM260は、電気経路396によりセンサ374に電気的に連結されている。TIM360とそれぞれのセンサとの間の接続が、右テンプルの電気回路図386を構成する。右テンプルの電気回路図386は、図よりも複雑であっても、複雑でなくてもよいことに留意されたい。したがって、右テンプルの電気回路図は、単に説明のために提供されており、それにより限定を意味するものではない。 Similarly, TIM 360 is electrically coupled to sensor 372 by electrical pathway 398. TIM 260 is electrically coupled to sensor 374 by electrical pathway 396. The connections between TIM 360 and each sensor constitute right temple electrical schematic 386. Note that right temple electrical schematic 386 may be more or less complex than shown. Thus, right temple electrical schematic is provided merely for purposes of illustration and no limitation is meant thereby.

そのようなシステムにおける二つのTIMsは、必要に応じてデバイス220間およびそれらの間の無線通信に参加して、あるレベルの設計機能をユーザに提供する。例えば、一つの実施形態において、左TIMは、第一ネットワーク・プロトコルを利用してリモートデバイス220と通信するのに十分な無線ネットワーク機能を含む。さらに、左TIMおよび右TIMは、382に示す無線通信をサポートする無線ネットワーク機能を有する。無線通信382は、222で使用されるものとは異なる第二ネットワーク・プロトコルにより、実行されることができる。電力を節約するために、第一ネットワーク・プロトコル(222)は、第二ネットワーク・プロトコル(382)よりも広い範囲を有する。なぜなら、左TIM260とリモートデバイス220との間の距離は、左TIM260と右TIM360との間の分離距離よりも大きい。後者は名目上ユーザの頭の幅であり、前者は携帯電話のセルラー・タワーまでの距離と同じになる可能性がある。 The two TIMs in such a system may participate in wireless communications with and among the devices 220 as needed to provide a level of design functionality to the user. For example, in one embodiment, the left TIM includes sufficient wireless network capabilities to communicate with the remote device 220 utilizing a first network protocol. Additionally, the left TIM and the right TIM have wireless network capabilities to support wireless communications as shown at 382. The wireless communications 382 may be performed according to a second network protocol different from that used at 222. To conserve power, the first network protocol (222) has a wider range than the second network protocol (382) because the distance between the left TIM 260 and the remote device 220 is greater than the separation distance between the left TIM 260 and the right TIM 360. The latter is nominally the width of the user's head, and the former may be the same as the distance to a cellular tower for a mobile phone.

図4は、本発明の実施形態に係る、別のモジュール化再構成可能な眼鏡システムを示す。図4を参照すると、センサ、電源コンポーネント、および計算ユニットのうちの一つまたは複数は、眼鏡デバイスの全体に分布され、402などのフレーム・シャーシの全体に分布されることを含む。フレーム・シャーシ402は、フレーム・リムでレンズ440を取り囲み、それによりレンズ440をそこに固定するように眼科的に構成される。左テンプル404と右テンプル414とは、フレーム・シャーシ402に連結されて眼鏡デバイスを形成する。左レンズ404は、408で示されている係合部を有するように構成される。左テンプル挿入モジュール(TIM)406は、上記のように係合部408と係合するように構成され、それにより、TIM406とテンプル404との間の機械的および電気的な接続の両方を提供する。同様に、右テンプル426は、右テンプル414の係合部と係合しているように示されている。TIM406は、410で示されるオーディオ・スピーカおよびオーディオ・ポートを含み、TIM426は、430で示されるオーディオ・スピーカおよびオーディオ・ポートを含む。様々な実施形態において、オーディオ・スピーカ410および430は、プロジェクション・スピーカである。眼鏡デバイスは、いくつかのセンサまたはディスプレイ、電気経路に統合される左テンプル404からフレーム・シャーシ402を通って右テンプル414まで延びる462、464、466、468、および470を含む。様々な実施形態において、図4に示されるものよりも多くのセンサまたはより少ないセンサがあり得る。図4に示されるセンサおよびセンサの位置は、単に例示として提供され、本発明の実施形態を制限するものではない。前の図と併せて上で説明したように、テンプル挿入モジュール406および/または426のうちの少なくとも一つは、デバイス220に無線接続222を提供するために、一式の必要なエレクトロニクスを備えている。 4 illustrates another modular reconfigurable eyeglass system according to an embodiment of the present invention. Referring to FIG. 4, one or more of the sensors, power components, and computing units are distributed throughout the eyeglass device, including throughout a frame chassis such as 402. The frame chassis 402 is ophthalmically configured to surround a lens 440 at a frame rim, thereby securing the lens 440 thereto. A left temple 404 and a right temple 414 are coupled to the frame chassis 402 to form an eyeglass device. The left lens 404 is configured to have an engagement portion, shown at 408. A left temple insert module (TIM) 406 is configured to engage with the engagement portion 408 as described above, thereby providing both a mechanical and electrical connection between the TIM 406 and the temple 404. Similarly, the right temple 426 is shown engaged with the engagement portion of the right temple 414. The TIM 406 includes an audio speaker and an audio port, indicated at 410, and the TIM 426 includes an audio speaker and an audio port, indicated at 430. In various embodiments, the audio speakers 410 and 430 are projection speakers. The glasses device includes several sensors or displays, 462, 464, 466, 468, and 470, that are integrated into the electrical pathway and extend from the left temple 404 through the frame chassis 402 to the right temple 414. In various embodiments, there may be more or fewer sensors than those shown in FIG. 4. The sensors and sensor locations shown in FIG. 4 are provided merely as examples and are not intended to limit the embodiments of the present invention. As described above in conjunction with the previous figures, at least one of the temple insert modules 406 and/or 426 includes a set of necessary electronics to provide the wireless connection 222 to the device 220.

眼鏡デバイス400において、電気経路概略図の高レベル図が480で示されている。480を参照すると、左TIM406および右TIM426は、電気経路要素482、484、486、488、490、および492により、センサ462、464、466、468、および470と電気的に連結されている。484などの電気経路要素は、センサ464を電気的に接続する。480に示されているコンポーネントは一緒に、眼鏡デバイス用のモジュール化された再構成可能なコンポーネントのセットを提供する。一つまたは複数の実施形態において、一つまたは複数の音響センサは、フレーム・シャーシ402、左テンプル404、および右テンプル414のうちの少なくとも一つに位置する。したがって、音響センサは、眼鏡デバイスのテンプル(左または右)またはフレーム・シャーシのどこにでも位置することができる。 In the eyewear device 400, a high level view of the electrical path schematic is shown at 480. Referring to 480, the left TIM 406 and the right TIM 426 are electrically coupled to the sensors 462, 464, 466, 468, and 470 by electrical path elements 482, 484, 486, 488, 490, and 492. Electrical path elements such as 484 electrically connect the sensor 464. The components shown in 480 together provide a set of modularized reconfigurable components for the eyewear device. In one or more embodiments, one or more acoustic sensors are located in at least one of the frame chassis 402, the left temple 404, and the right temple 414. Thus, the acoustic sensor can be located anywhere in the temple (left or right) or frame chassis of the eyewear device.

図5は、本発明の実施形態に係る図4のモジュール化された眼鏡システムの斜視図および上面図を全体的に500で示す。図5を参照すると、モジュール化された眼鏡デバイスは、斜視図において130で示されている。モジュール化されたノーズ・パッド504は、506で示されるように、モジュール化された眼鏡デバイス502と着脱可能に連結することができる。ノーズ・パッドのモジュール化により、ユーザはノーズ・パッドを交換して眼鏡とユーザの鼻および顔の構造との間のフィット感を向上させることができる。眼鏡デバイスのノーズ・パッドをモジュール化することにより、より快適な装着感を実現できる。さらに、ノーズ・パッドには、生体センサなどの他のセンサを設けることができる。 5 illustrates, generally at 500, a perspective view and a top view of the modularized eyewear system of FIG. 4 according to an embodiment of the present invention. Referring to FIG. 5, a modularized eyewear device is shown at 130 in a perspective view. A modularized nose pad 504 can be removably coupled to the modularized eyewear device 502 as shown at 506. The modularization of the nose pad allows a user to replace the nose pad to improve the fit between the eyewear and the user's nose and facial structure. The modularization of the nose pad of the eyewear device can provide a more comfortable fit. Additionally, the nose pad can be provided with other sensors, such as a biometric sensor.

図6Aは、本発明の実施形態に係る、モジュール化された眼鏡デバイスで使用するためのシステム構築を全体的に600で示す。図6Aを参照すると、様々な実施形態において、モジュール化された再構成可能な眼鏡デバイスには、複数の無線通信システムを含むことができる。様々な実施形態において、眼鏡デバイス602は、604で示されるような高レベルのブロック図アーキテクチャを有する。様々な実施形態において、眼鏡デバイス602は、無線センサ640およびモバイル・デバイス670と通信するように構成される。無線センサ640は、単一のセンサまたは複数のセンサを含むことができる。無線センサ640は、限定することなく、本明細書にリストされた任意の一つまたは複数のセンサを含むことができる。例えば、無線センサ640は、ユーザと共に使用するために構成された生体測定センサまたは生体力学的センサ、または車両または建物と共に使用されるように構成されたセンサであることができる。生体認証センサのいくつかの例は、これに限定するものではないが、心拍数モニター、発汗センサ、温度センサなどがある。車両センサのいくつかの例は、これに限定するものではないが、速度センサ、加速度センサ、全地球測位システム信号、車両エンジン・パラメータ、風速インジケータなどがある。建物と共に使用されるセンサのいくつかの例は、これに限定するものではないが、サーモスタットからの温度読み取り、水圧値などがある。車両のいくつかの非限定的な例は、これに限定するものではないが、スクーター、自転車、自動車、ボート、ヨット、船舶、飛行機、軍用車両、ウィング スーツなどがある。いくつかの実施形態において、データは、640または616で特殊な用途のネットワークから受信される。例示のために示される特殊な用途のネットワークは、ヨット(パワーまたはセイル)などの船舶用に設計される米国海洋電子機器協会(NMEA)のNMEA2000ネットワークがある。NMEA2000は、当技術分野で「NMEA2k」または「N2K」とも呼ばれ、国際電気標準会議(IEC)61162-1として標準化されている。NMEA200は、船舶、ボート、ヨットなどの海洋センサおよびディスプレイ・ユニットを接続するために使用されるプラグ・アンド・プレー通信規格である。モバイル・デバイス670は、限定することなく、本明細書にリストされた任意の一つまたは複数のモバイル・デバイスであり得る。例えば、モバイル・デバイスは、携帯電話、時計、リスト・バンド、ブレスレット、タブレット・コンピュータ、ラップトップ・コンピュータ、デスクトップ・コンピュータ、車載コンピュータなどとすることができる。 FIG. 6A illustrates a system architecture generally at 600 for use with a modularized eyewear device according to an embodiment of the present invention. Referring to FIG. 6A, in various embodiments, a modularized reconfigurable eyewear device can include multiple wireless communication systems. In various embodiments, the eyewear device 602 has a high level block diagram architecture as shown at 604. In various embodiments, the eyewear device 602 is configured to communicate with a wireless sensor 640 and a mobile device 670. The wireless sensor 640 can include a single sensor or multiple sensors. The wireless sensor 640 can include, without limitation, any one or more sensors listed herein. For example, the wireless sensor 640 can be a biometric or biomechanical sensor configured for use with a user, or a sensor configured for use with a vehicle or building. Some examples of biometric sensors include, but are not limited to, a heart rate monitor, a sweat sensor, a temperature sensor, and the like. Some examples of vehicle sensors include, but are not limited to, a speed sensor, an acceleration sensor, a global positioning system signal, a vehicle engine parameter, a wind speed indicator, and the like. Some examples of sensors used with buildings include, but are not limited to, temperature readings from a thermostat, water pressure readings, etc. Some non-limiting examples of vehicles include, but are not limited to, scooters, bicycles, automobiles, boats, yachts, watercraft, airplanes, military vehicles, wingsuits, etc. In some embodiments, data is received from a special purpose network at 640 or 616. A special purpose network shown for illustrative purposes is the National Marine Electronics Association's (NMEA) NMEA2000 network, designed for marine vessels such as yachts (power or sail). NMEA2000 is also referred to in the art as "NMEA2k" or "N2K" and is standardized as International Electrotechnical Commission (IEC) 61162-1. NMEA200 is a plug-and-play communications standard used to connect marine sensors and display units on vessels, boats, yachts, etc. Mobile device 670 can be any one or more of the mobile devices listed herein, without limitation. For example, a mobile device can be a mobile phone, a watch, a wrist band, a bracelet, a tablet computer, a laptop computer, a desktop computer, an in-vehicle computer, etc.

眼鏡デバイス602は、604で示されるような高レベルのアーキテクチャを有し、スピーカ606、中央処理装置608、電源610、音響センサ608、記憶装置614、および無線通信システム616を含む。無線通信システム616は、以下の一つまたは複数の無線通信システムを含むことができる。例えば、近距離通信システム618、ブルートゥース通信プロトコルを利用する無線通信システム620、624でのWi-Fi通信プロトコルを利用する無線通信システム、携帯電話通信プロトコル622などである。LTEにより622で指定された無線通信プロトコルは、無線デバイスの例としてのみ与えられており、本発明の実施形態を制限するものではない。当業者は、一つまたは複数のアンテナが無線通信システムブロック616に含まれるが、明確にするために示されていないことを認識できる。 The glasses device 602 has a high level architecture as shown at 604, including a speaker 606, a central processing unit 608, a power source 610, an acoustic sensor 608, a storage device 614, and a wireless communication system 616. The wireless communication system 616 may include one or more of the following wireless communication systems: a short-range communication system 618, a wireless communication system 620 utilizing a Bluetooth communication protocol, a wireless communication system 620 utilizing a Wi-Fi communication protocol at 624, a cellular communication protocol 622, etc. The wireless communication protocol specified by LTE at 622 is provided only as an example of a wireless device and is not limiting of embodiments of the present invention. Those skilled in the art will recognize that one or more antennas are included in the wireless communication system block 616, but are not shown for clarity.

無線センサ640は、642で示されるような高レベルのアーキテクチャを有し、一つまたは複数のセンサ644および無線通信システム646を含む。無線通信システム646は、近距離通信システム、BLE、ANT+、または同種のものなどの低データ・レート通信システムであり得る。または、無線通信システム646は、センサ644に必要なより高いデータ・レートのシステムとして提供されることができる。 The wireless sensor 640 has a high level architecture as shown at 642 and includes one or more sensors 644 and a wireless communication system 646. The wireless communication system 646 can be a low data rate communication system such as a short range communication system, BLE, ANT+, or the like. Alternatively, the wireless communication system 646 can be provided as a higher data rate system required for the sensor 644.

モバイル・デバイス670は、672で示されるような高レベルのアーキテクチャを有し、中央処理装置674、電源676、ストレージ678、およびブロック680に示される一つまたは複数の無線通信システムを含む。モバイル・デバイス670は、オプションとして、クラウド689で示されるようなリモート・ネットワークに到達するように構成されることができる。無線通信ブロック680は、以下の一つまたは複数の無線通信システムを含むことができる。例えば、近距離通信システム682、ブルートゥース通信プロトコルを利用する無線通信システム684、686でのWi-Fi通信プロトコルを利用する無線通信システム、688での携帯電話通信プロトコルなどである。LTEにより688で指定された無線通信プロトコルは、モバイル・デバイスの通信システムの例としてのみ与えられており、本発明の実施形態を制限するものではない。当業者は、一つまたは複数のアンテナが無線通信システムブロック680および642に含まれるが、明確にするために示されていないことを認識できる。 The mobile device 670 has a high level architecture as shown at 672, including a central processing unit 674, a power supply 676, storage 678, and one or more wireless communication systems as shown at block 680. The mobile device 670 can be optionally configured to reach a remote network as shown at cloud 689. The wireless communication block 680 can include one or more of the following wireless communication systems: a short range communication system 682, a wireless communication system 684 utilizing a Bluetooth communication protocol, a wireless communication system utilizing a Wi-Fi communication protocol at 686, a cellular communication protocol at 688, etc. The wireless communication protocol specified by LTE at 688 is provided only as an example of a communication system of a mobile device and is not limiting of the embodiments of the present invention. Those skilled in the art can recognize that one or more antennas are included in the wireless communication system blocks 680 and 642, but are not shown for clarity.

いくつかの実施形態において、無線センサ・システム642および眼鏡デバイス602は、モバイル・デバイス670およびモバイルデ・バイス・ユーザ・インターフェースのユーザにより最初に構成される。経路652aおよび652bにより示されるように、動作において、眼鏡デバイス602は、650で示されるように、近距離無線通信システム618などの適切な無線通信システムからデータを無線で受信する。無線センサ・システム642から取得した無線データは、654で示されるような別の無線通信システムによりユーザ・デバイス670/672に送信することができる。654で示される無線通信は、例えば、620/684でのブルートゥース・プロトコル、624/686でのWi-Fiプロトコル、または622/688で示される携帯電話通信プロトコルを使用して、より高いデータ・レート・チャネルで達成されることができる。様々な実施形態において、眼鏡デバイス602から転送されたデータは、ユーザ・デバイス670に保存および分析され、様々なアプリケーション・プログラムを有することができる。 In some embodiments, the wireless sensor system 642 and the glasses device 602 are initially configured by a user of the mobile device 670 and the mobile device user interface. In operation, as shown by paths 652a and 652b, the glasses device 602 wirelessly receives data from a suitable wireless communication system, such as a near field communication system 618, as shown at 650. Wireless data acquired from the wireless sensor system 642 can be transmitted to the user device 670/672 by another wireless communication system, as shown at 654. The wireless communication, as shown at 654, can be accomplished on a higher data rate channel, for example, using a Bluetooth protocol at 620/684, a Wi-Fi protocol at 624/686, or a cellular communication protocol, as shown at 622/688. In various embodiments, the data transferred from the glasses device 602 can be stored and analyzed on the user device 670 and can have various application programs.

図6Bは、本発明の実施形態に係る、図6Aのモジュール化された眼鏡システムのシステム・アーキテクチャに対応する無線ネットワークを全体的に690で示す。図6Bを参照すると、無線通信ブロック616は、図に示すように複数のデバイスに接続することができる。例えば、一つまたは複数の無線センサ640は、618で示されるような低データ・レートの近距離通信ネットワークを利用して無線通信ブロック616に接続することができる。一つまたは複数のユーザ・デバイス670は、620で示されるようなブルートゥース通信プロトコルを使用して無線通信ブロックと無線で通信することができる。624で示されるように、692で示されるWi-Fiノードなどの一つまたは複数の無線ノードは、無線通信ブロック616と無線で通信することができる。一つまたは複数のリモート・ネットワーク694は、622で示されるようなセルラー通信プロトコルを使用して、無線通信ブロック616と無線で通信することができる。したがって、再構成可能な眼鏡デバイスは、690で示される一つまたは複数の無線通信システムを含むことができる。例えば、一つのTIMモジュールを別のTIMモジュールに交換することにより、さまざまな無線通信ために眼鏡デバイスが再構成されることができる。または、一つまたは複数のテンプルを上記のフレーム・シャーシと交換することができ、それにより眼鏡デバイスにカスタマイズされた機能を提供する。 FIG. 6B illustrates a wireless network generally at 690 corresponding to the system architecture of the modularized glasses system of FIG. 6A according to an embodiment of the present invention. Referring to FIG. 6B, the wireless communication block 616 can be connected to multiple devices as shown. For example, one or more wireless sensors 640 can be connected to the wireless communication block 616 using a low data rate short-range communication network as shown at 618. One or more user devices 670 can wirelessly communicate with the wireless communication block using a Bluetooth communication protocol as shown at 620. One or more wireless nodes, such as a Wi-Fi node as shown at 692, can wirelessly communicate with the wireless communication block 616 as shown at 624. One or more remote networks 694 can wirelessly communicate with the wireless communication block 616 using a cellular communication protocol as shown at 622. Thus, a reconfigurable glasses device can include one or more wireless communication systems as shown at 690. For example, by replacing one TIM module with another TIM module, the glasses device can be reconfigured for various wireless communications. Alternatively, one or more temples can be replaced with the frame chassis described above, thereby providing customized functionality to the eyewear device.

図7は、本発明の実施形態に係る、図4のモジュール化された眼鏡デバイスで使用するための別のシステム構築を全体的に700で示す。図7を参照すると、眼鏡デバイス602の無線通信ブロック616は、仲介者として機能するユーザ装置を必要とせずに、携帯電話ネットワークを介して直接にセルラー通信することができるように構成される。例えば、700において、眼鏡デバイス602は、無線通信システム622により、携帯電話であり得るリモートデバイス702と通信するように構成され、それにより、クラウド704で示される外部ネットワークを介してリモートデバイス702と直接に接続する。この通信回線をサポートするための仲介ユーザのモバイル・デバイスは必要ない。眼鏡デバイスのそのような構成により、眼鏡デバイスのユーザは、音声インターフェース、ボタンなどの一つまたは複数の触覚インターフェースなどのインターフェースの助けを借りて、眼鏡デバイスから電話をかけることができる。音声インターフェースは、ユーザの音声信号を、デバイスが通話のための無線ネットワークの操作を容易にするために使用するコマンドに変換することにより、通話のコマンドと制御を提供する。このようなコマンドの例は、これに限定するものではないが、電話をかける人の選択、電話をかけること、音量を上げること、音量を下げること、通話を終了することなどがある。 7 illustrates another system architecture generally at 700 for use with the modularized glasses device of FIG. 4 according to an embodiment of the present invention. Referring to FIG. 7, the wireless communication block 616 of the glasses device 602 is configured to enable direct cellular communication over a mobile phone network without the need for a user device acting as an intermediary. For example, in 700, the glasses device 602 is configured to communicate with a remote device 702, which may be a mobile phone, over a wireless communication system 622, thereby connecting directly with the remote device 702 over an external network, represented by a cloud 704. No intermediate user mobile device is required to support this line of communication. Such an arrangement of the glasses device allows a user of the glasses device to make a call from the glasses device with the aid of an interface, such as a voice interface, one or more tactile interfaces, such as buttons. The voice interface provides command and control of the call by translating the user's voice signals into commands that the device uses to facilitate operation of the wireless network for the call. Examples of such commands include, but are not limited to, selecting a caller, making a call, turning the volume up, turning the volume down, and ending the call.

図8は、本発明の実施形態に係るテンプル挿入モジュール(TIM)のブロック図を全体的に800で示す。図8を参照すると、この実施形態の説明で使用されるように、TIMは、コンピュータなどのデバイスに基づくことができ、本発明の実施形態は、そのデバイスに使用され得る。ブロック図は、高レベルの概念的な表現であり、さまざまな方法でさまざまなアーキテクチャにより実装されることができる。バス・システム802は、中央処理装置(CPU)804(または本明細書ではプロセッサと呼ばれる)、読み取り専用メモリ(ROM)806、ランダム・アクセス・メモリ(RAM)808、ストレージ810、オーディオ822、ユーザ・インターフェース824、および通信830を相互接続する。RAM808は、ダイナミック・ランダム・アクセス・メモリ(DRAM)または他の形態のメモリを表すこともできる。様々な実施形態において、ユーザ・インターフェース824は、音声インターフェース、タッチ・インターフェース、物理ボタン、またはそれらの組み合わせであり得る。メモリ(図示せず)はCPUブロック804に含まれることができることが理解される。バス・システム802は、例えば、システム・バス、周辺機器相互接続(PCI)、アドバンスト・グラフィックポート(AGP)、小型コンピュータ・システム・インターフェース(SCSI)、米国電気電子技術者協会(IEEE)規格番号994(FireWire)、ユニバーサル・シリアル・バス(USB)、汎用非同期送受信回路(UART)、シリアル・ペリフェラル・インターフェース(SPI)、インター集積回路(I2C)などの一つまたは複数のバスであってもよい。CPU804は、単一、複数、または分散コンピューティング・リソースであってもよい。ストレージ810は、フラッシュ・メモリ等であってもよい。TIMの実際の実装に応じて、TIMには、ブロック図中のコンポーネントの一部、全部、またはそれ以上、または再配置が含まれる場合があることに留意されたい。したがって、図8のシステムには多くのバリエーションが可能である。 FIG. 8 illustrates a block diagram of a temple insertion module (TIM) generally at 800 according to an embodiment of the present invention. Referring to FIG. 8, as used in the description of this embodiment, the TIM may be based on a device such as a computer, and the embodiment of the present invention may be used in that device. The block diagram is a high-level conceptual representation and may be implemented in a variety of ways and with a variety of architectures. A bus system 802 interconnects a central processing unit (CPU) 804 (also referred to herein as a processor), a read-only memory (ROM) 806, a random access memory (RAM) 808, storage 810, audio 822, a user interface 824, and communications 830. The RAM 808 may also represent dynamic random access memory (DRAM) or other forms of memory. In various embodiments, the user interface 824 may be a voice interface, a touch interface, a physical button, or a combination thereof. It is understood that memory (not shown) may be included in the CPU block 804. The bus system 802 may be one or more buses, such as a system bus, peripheral component interconnect (PCI), advanced graphics port (AGP), small computer system interface (SCSI), Institute of Electrical and Electronics Engineers (IEEE) standard number 994 (FireWire), universal serial bus (USB), universal asynchronous receiver/transmitter (UART), serial peripheral interface (SPI), inter-integrated circuit (I2C), etc. The CPU 804 may be a single, multiple, or distributed computing resource. The storage 810 may be a flash memory, etc. It should be noted that depending on the actual implementation of the TIM, the TIM may include some, all, or more, or a rearrangement of the components in the block diagram. Thus, many variations of the system of FIG. 8 are possible.

一つまたは複数のワイヤレスネットワーク832との接続は、通信(COMM)830を介して取得され、それにより、TIM800は、ローカル・センサ、ローカル・デバイス、およびリモート・ネットワーク上のリモートデバイスと無線で通信することができる。いくつかの実施形態において、832/830は、リモート音声をテキストに変換するシステムへのアクセスを提供し、そのシステムは、例えばクラウド・ベースの遠隔地にあり得る。832および830は、さまざまな実装において、無線通信システムを柔軟に表し、さまざまな形式のテレメトリー、ジェネラル・パケット・ラジオ・サービス(GPRS)、イーサネット(登録商標)、ワイド・エリア・ネットワーク(WAN)、ローカル・エリア・ネットワーク(LAN)、インターネット接続、Wi-Fi、WiMAX(登録商標)、ZigBee(登録商標)、赤外線、ブルートゥース、近距離通信、3G、4G、LTE、5Gなどの携帯電話通信システム、およびそれらの組み合わせを表すことができる。様々な実施形態において、オプションとして、タッチ・インターフェースが824で提供される。一つまたは複数のセンサからの信号は、829および828を介してシステムに入力される。826で、全地球測位システム(GPS)情報が、受信され、システムに入力される。オーディオは、本明細書に記載されているプロジェクション・スピーカまたはプロジェクション・マイクロ・スピーカなどのスピーカを表すことができる。 A connection to one or more wireless networks 832 is obtained via communications (COMM) 830, allowing the TIM 800 to wirelessly communicate with local sensors, local devices, and remote devices on a remote network. In some embodiments, 832/830 provide access to a remote speech-to-text system, which may be at a remote location, e.g., cloud-based. 832 and 830 flexibly represent wireless communication systems in various implementations and may represent various forms of telemetry, general packet radio service (GPRS), Ethernet, wide area network (WAN), local area network (LAN), Internet connections, Wi-Fi, WiMAX, ZigBee, infrared, Bluetooth, near field communications, cellular communication systems such as 3G, 4G, LTE, 5G, and combinations thereof. In various embodiments, a touch interface is optionally provided at 824. Signals from one or more sensors are input to the system via 829 and 828. Global Positioning System (GPS) information is received and input to the system at 826. Audio can represent speakers such as the projection speakers or projection micro-speakers described herein.

様々な実施形態において、ハードウェア構成に応じて、異なる無線プロトコルがネットワークで使用され、それにより、上記の図で説明されるシステムを提供する。無線信号伝送に使用される技術の非限定的な一実施形態は、IEEE802.15.1規格として一般的に知られているブルートゥース無線技術規格である。他の実施形態において、IEEE802.11規格を使用するWi-Fiとして知られる無線信号送信プロトコルが使用される。他の実施形態において、IEEE802.15.4規格に基づくZigBee通信プロトコルが使用される。これらの例は、単に説明のためのものであり、異なる実施形態を限定するものではない。伝送制御プロトコル(TCP)およびインターネット・プロトコル(IP)も、さまざまな実施形態で使用される。実施形態は、本明細書に記載されているデータ通信プロトコルに限定されず、本明細書に具体的に記載されていない他のデータ通信プロトコルと共に容易に使用される。 In various embodiments, depending on the hardware configuration, different wireless protocols are used in the network, thereby providing the system described in the figures above. One non-limiting embodiment of the technology used for wireless signal transmission is the Bluetooth wireless technology standard, commonly known as the IEEE 802.15.1 standard. In other embodiments, a wireless signal transmission protocol known as Wi-Fi, which uses the IEEE 802.11 standard, is used. In other embodiments, the ZigBee communication protocol, which is based on the IEEE 802.15.4 standard, is used. These examples are merely illustrative and are not intended to limit the different embodiments. Transmission Control Protocol (TCP) and Internet Protocol (IP) are also used in various embodiments. The embodiments are not limited to the data communication protocols described herein, and are readily used with other data communication protocols not specifically described herein.

様々な実施形態において、システムのコンポーネントおよび前図で説明されるシステム(例えばテンプル挿入モジュール(TIM))は、集積回路デバイスに実装され、集積回路デバイスは、集積回路を含む集積回路パッケージを含むことができる。いくつかの実施形態において、システムのコンポーネントおよびシステムは、単一の集積回路ダイに実装される。他の実施形態において、システムのコンポーネントおよびシステムは、集積回路デバイスの複数の集積回路ダイに実装され、その集積回路デバイスは、集積回路を含むマルチチップ・パッケージを含むことができる。 In various embodiments, the system components and systems described in the previous figures (e.g., the temple insertion module (TIM)) are implemented on an integrated circuit device, which may include an integrated circuit package containing an integrated circuit. In some embodiments, the system components and systems are implemented on a single integrated circuit die. In other embodiments, the system components and systems are implemented on multiple integrated circuit dies on an integrated circuit device, which may include a multi-chip package containing an integrated circuit.

図9は、本発明の実施形態に係る、後ろ首モジュール・アセンブリを装着するモジュール化される眼鏡デバイスを示す。図9を参照すると、900で、後ろ首モジュール・アセンブリは、受動的な眼鏡のセットに装着される。受動的な眼鏡は、眼鏡にエレクトロニクスが配置されていないことを表す。または、眼鏡は、本明細書に記載されるように一つまたは複数のテンプルまたはテンプル挿入モジュール(TIM)にパッケージ化されたエレクトロニクスで構成されるアクティブまたはパワード眼鏡であり得る。眼鏡は、レンズ906を含むフレーム・シャーシ902を有する。左テンプル904および右テンプル914は、フレーム・シャーシ902に連結されている。後ろ首モジュール・アセンブリは、後ろ首電子ポッド(behind the neck electronics pod;ePOD)924、左テンプル・インターロック920、右テンプル・インターロック922、左スマート・コード926、および右スマート・コード928を含む。左スマート・コード926は、ePOD924を左テンプル・インターロック920に電気的および機械的に連結し、右スマート・コードは、ePOD924を右テンプル・インターロック922に電気的および機械的に連結する。 FIG. 9 illustrates a modularized eyewear device that is fitted with a back neck module assembly according to an embodiment of the present invention. Referring to FIG. 9, at 900, the back neck module assembly is fitted to a set of passive glasses. Passive glasses represent no electronics disposed in the glasses. Alternatively, the glasses may be active or powered glasses comprised of electronics packaged in one or more temples or temple insert modules (TIMs) as described herein. The glasses have a frame chassis 902 that includes a lens 906. A left temple 904 and a right temple 914 are coupled to the frame chassis 902. The back neck module assembly includes a behind the neck electronics pod (ePOD) 924, a left temple interlock 920, a right temple interlock 922, a left smart cord 926, and a right smart cord 928. The left smart cord 926 electrically and mechanically couples the ePOD 924 to the left temple interlock 920, and the right smart cord electrically and mechanically couples the ePOD 924 to the right temple interlock 922.

左テンプル・インターロック920は、音響キャビティ、オーディオ・スピーカ、および音響ポートを含む。左オーディオ・スピーカの音響ポートは、930で示されている。左スマート・コード926は、導電体を含み、その導電体は、左テンプル・インターロック920内に含まれるオーディオ・スピーカにオーディオ信号を提供する。一つまたは複数の実施形態において、左テンプル・インターロックに含まれるオーディオ・スピーカは、マイクロ・プロジェクション・スピーカである。同様に、右オーディオ・スピーカの音響ポートは、932で示されている。右スマート・コード928は、導電体を含み、その導電体は、右テンプル・インターロック922内に含まれるオーディオ・スピーカにオーディオ信号を提供する。一つまたは複数の実施形態において、右テンプル・インターロックに含まれるオーディオ・スピーカは、マイクロ・プロジェクション・スピーカである。 The left temple interlock 920 includes an acoustic cavity, an audio speaker, and an acoustic port. The acoustic port for the left audio speaker is indicated at 930. The left smart cord 926 includes electrical conductors that provide an audio signal to the audio speaker included in the left temple interlock 920. In one or more embodiments, the audio speaker included in the left temple interlock is a micro-projection speaker. Similarly, the acoustic port for the right audio speaker is indicated at 932. The right smart cord 928 includes electrical conductors that provide an audio signal to the audio speaker included in the right temple interlock 922. In one or more embodiments, the audio speaker included in the right temple interlock is a micro-projection speaker.

様々な実施形態において、ePOD924は電子ユニットを含む。電子ユニットには、ここに記載されているテンプル挿入モジュール(TIM)用の電子コンポーネントおよび機能が含まれている。言い換えれば、電子ユニットは、後ろ首モジュール・アセンブリで使用するための機械的および電気的にパッケージ化されたTIMである。 In various embodiments, the ePOD 924 includes an electronics unit that contains the electronic components and functionality for the temple insert module (TIM) described herein. In other words, the electronics unit is a mechanically and electrically packaged TIM for use in a rear neck module assembly.

さまざまな電子構成および機能を備える電子ユニットは、さまざまなTIMsを眼鏡デバイスのテンプルに交換により出入りさせる方法と同様の方法で、交換によりePODに出入りすることができる。 Electronic units with different electronic configurations and functions can be interchangeably moved in and out of the ePOD in a manner similar to the way that different TIMs can be interchangeably moved in and out of the temples of an eyeglass device.

950で、右スマート・コードおよび左スマート・コードを短くしたり長くしたりするために、長さ調整が提供される。後ろ首電子ポッド(ePOD)954には、ePOD954の同じ端部から出る左スマート・コード956および右スマート・コード958が配置される。スマート・コード956および958のそのような構成により、スライダー960は、ePODから遠ざかるか、またはePODに向かって移動することができる。スライダー960をePOD954から遠ざけると、スマート・コード965/958の利用可能な自由長さが短くなる。スライダー960をePOD954に向かって移動すると、スマート・コード956/958の利用可能な自由長さが増加される。 At 950, length adjustments are provided to shorten or lengthen the right and left smart cords. A rear neck electronics pod (ePOD) 954 is positioned with a left smart cord 956 and a right smart cord 958 exiting the same end of the ePOD 954. Such an arrangement of smart cords 956 and 958 allows the slider 960 to move away from or towards the ePOD. Moving the slider 960 away from the ePOD 954 shortens the available free length of the smart cords 965/958. Moving the slider 960 towards the ePOD 954 increases the available free length of the smart cords 956/958.

一つまたは複数の実施形態において、動作において、「オン」状態にある場合、オーディオ・データは、ePOD924の電子ユニットにストリーミングされて左右のスピーカに向けられ、それにより、後ろ首モジュール・アセンブリがアイ・ウェア・デバイスに取り付けられてユーザが眼鏡デバイスを装着する時に、オーディオ・データをユーザにブロードキャストする。 In one or more embodiments, in operation, when in the "on" state, audio data is streamed to the ePOD924 electronics unit and directed to the left and right speakers, thereby broadcasting the audio data to the user when the back neck module assembly is attached to the eye wear device and the user wears the eyewear device.

図10は、斜視図において、本発明の実施形態に係るウェアラブル・デバイスを配置する後ろ首モジュール・アセンブリを全体的に1000で示す。図10を参照すると、ePOD924上に第一センサ1050が示されている。右テンプル・インターロック922に組み込まれた第二センサ1052が示されている。左テンプル・インターロック920に組み込まれた第三センサ1054が示されている。センサ1050、1052、および1054は、本明細書で前述したTIMまたはテンプルに組み込まれたエレクトロニクスに直接に使用される任意のセンサであり得る。 10 illustrates, in a perspective view, a rear neck module assembly generally at 1000 for positioning a wearable device according to an embodiment of the present invention. Referring to FIG. 10, a first sensor 1050 is shown on the ePOD 924. A second sensor 1052 is shown integrated into the right temple interlock 922. A third sensor 1054 is shown integrated into the left temple interlock 920. Sensors 1050, 1052, and 1054 can be any sensor used directly with the TIM or electronics integrated into the temples as previously described herein.

図10に示す実施形態において、920および922などの各テンプル・インターロックモ・ジュールは、貫通穴を含み、眼鏡のテンプルが当該貫通穴に挿入される。本実施形態において、テンプル・インターロックモ・ジュール920および922は、テンプルを挿入するのに十分な伸びを可能にするエラストマーまたはゴムなどの柔軟な材料から作られる。例えば、左テンプル・インターロック920は、貫通穴1040を含み、左テンプル904が貫通穴1040に挿入される。右テンプル・インターロック922は、貫通穴1042を含み、右テンプル914が貫通穴1042に挿入される。各テンプル・インターロック920および922は、各スピーカ・ポート930および932がユーザの耳の前および近くに位置するように、互換性のある眼鏡に配置される。互換性のある眼鏡は、テンプル・インターロックに提供されるメカニカル・アタッチメントと互換性がある眼鏡である。 In the embodiment shown in FIG. 10, each temple interlock module, such as 920 and 922, includes a through hole into which the temple of the eyeglasses is inserted. In this embodiment, the temple interlock modules 920 and 922 are made of a flexible material, such as an elastomer or rubber, that allows sufficient stretch to insert the temple. For example, the left temple interlock 920 includes a through hole 1040 into which the left temple 904 is inserted. The right temple interlock 922 includes a through hole 1042 into which the right temple 914 is inserted. Each temple interlock 920 and 922 is positioned on a compatible eyeglass such that each speaker port 930 and 932 is located in front of and near the user's ear. A compatible eyeglass is an eyeglass that is compatible with the mechanical attachment provided to the temple interlock.

図11は、本発明の実施形態に係るテンプル・インターロックをテンプルに連結することを全体的に1100及び1150で示す。図11を参照すると、磁気テンプル・インターロックが1100で示されている。当該磁気テンプル・インターロックは、眼鏡デバイスのテンプル1102上の磁気領域1108を含む。テンプル・インターロック1104は、対応する磁気領域1106を有する。動作において、磁気領域1106と1108を一つにまとめて、磁気領域1106および1108が互いに引き付けられ、それにより、テンプル・インターロック1104とテンプル1102との間にクランプ力を提供する。スピーカを含む音響キャビティのポートは、1110で示されている。 FIG. 11 illustrates generally at 1100 and 1150 coupling a temple interlock to a temple according to an embodiment of the present invention. Referring to FIG. 11, a magnetic temple interlock is shown at 1100. The magnetic temple interlock includes a magnetic region 1108 on a temple 1102 of an eyewear device. The temple interlock 1104 has a corresponding magnetic region 1106. In operation, the magnetic regions 1106 and 1108 are brought together such that the magnetic regions 1106 and 1108 are attracted to each other, thereby providing a clamping force between the temple interlock 1104 and the temple 1102. A port for an acoustic cavity containing a speaker is shown at 1110.

他のクランプの方法が1150で示されている。テンプル・インターロック1152は、コンプライアント材料の第一側1156aと第二側1156bとの間にあるスロット1158を含む。1158、1156a、および1156bの形状は、眼鏡デバイスのテンプルを挿入できるU字型を形成する。材料1152の弾性は、(図示せず)眼鏡のテンプル・インターロック1152とテンプルとの間に着脱可能な連結を提供する。スピーカを収容する音響キャビティの音響ポートは、1154で示されている。 Another method of clamping is shown at 1150. Temple interlock 1152 includes a slot 1158 between a first side 1156a and a second side 1156b of compliant material. The shape of 1158, 1156a, and 1156b form a U-shape into which the temple of an eyeglass device can be inserted. The elasticity of material 1152 provides a removable connection between temple interlock 1152 and the temple of the eyeglasses (not shown). An acoustic port for the acoustic cavity that houses the speaker is shown at 1154.

図12は、本発明の実施形態に係る後ろ首モジュールをテンプル内に含まれるエレクトロニクスに連結することを全体的に1200で示す。図12を参照すると、後ろ首モジュール・アセンブリは、テンプルに含まれるエレクトロニクスに連結されている。後ろ首モジュール・アセンブリの一部は、後ろ首電子ポッド(ePOD)1220、左スマート・コード1222、および左テンプル・インターロック1210を有するように示されている。前述のように、テンプルに含まれるエレクトロニクスはいずれも、テンプル挿入モジュール(TIM)を使用せずにテンプル内に直接に含まれることができる。または、テンプルに含まれるエレクトロニクスは、オプションとして1204で示されるように、TIMの一部とするエレクトロニクスであり得る。いずれの状況でも、テンプル1202には、1206で示されるいくつかの電気接点が設けられている。左テンプル・インターロック1210には、対応する数の電気接点1208が設けられている。1210と1202との間の接続を着脱可能に連結可能にするために、テンプル1202と左テンプル・インターロック1210との間に機械的なインターロックが提供される。一つまたは複数の実施形態において、磁気連結が、1206/1208の位置の近くまたはその位置に提供されて、そこに着脱可能な連結を提供する。 FIG. 12 illustrates generally at 1200 the coupling of a rear neck module to electronics contained within a temple according to an embodiment of the present invention. Referring to FIG. 12, the rear neck module assembly is coupled to electronics contained within the temple. A portion of the rear neck module assembly is shown having a rear neck electronics pod (ePOD) 1220, a left smart cord 1222, and a left temple interlock 1210. As previously mentioned, any electronics contained within the temple can be directly contained within the temple without the use of a temple insert module (TIM). Alternatively, the electronics contained within the temple can be electronics that are optionally part of the TIM, as shown at 1204. In either situation, the temple 1202 is provided with a number of electrical contacts, as shown at 1206. The left temple interlock 1210 is provided with a corresponding number of electrical contacts 1208. A mechanical interlock is provided between temple 1202 and left temple interlock 1210 to allow the connection between 1210 and 1202 to be releasably couplable. In one or more embodiments, a magnetic coupling is provided near or at the location of 1206/1208 to provide a releasable coupling thereto.

図13は、本発明の実施形態に係る後ろ首モジュール・アセンブリをテンプル・エレクトロニクスと組み合わせるための概略図を全体的に1300で示す。図13を参照すると、眼鏡デバイスの輪郭は、1302で示されている。眼鏡デバイス1302の左テンプル、右テンプル、およびフレーム・シャーシには、エレクトロニクスおよびまたは電子経路を含む。輪郭1302は、フレーム・シャーシ、左テンプル、および右テンプルを含む。図に示すシステムにおいて、電子回路経路1308は、眼鏡デバイス1302の左テンプルと右テンプルとの間に延在する。 FIG. 13 illustrates a schematic diagram generally at 1300 for combining a back neck module assembly with temple electronics according to an embodiment of the present invention. Referring to FIG. 13, an outline of an eyewear device is shown at 1302. The left temple, right temple, and frame chassis of the eyewear device 1302 include electronics and/or electronic paths. The outline 1302 includes the frame chassis, left temple, and right temple. In the illustrated system, an electronic circuit path 1308 extends between the left temple and right temple of the eyewear device 1302.

眼鏡デバイスは、左テンプルに位置する左テンプル挿入モジュール(TIM)1304と、右テンプルに位置する右TIM1306とを含む。電子ユニット(ePOD)を備える後ろ首モジュール・アセンブリは、1310で示されている。左スマート・コード1312は、ePOD1310と左TIM1304との間に電気経路を提供する。右スマート・コード1314は、ePOD1310と右TIM1306との間に電気経路を提供する。様々な実施形態において、左TIM1304および右TIM1306の両方には、1316で示されるように、左TIM1304と右TIM1306との間の無線通信を可能にする一つまたは複数の無線通信ネットワーク・システムが配置される。リモートデバイス1320は、前図と併せて説明されるように、1つまたは複数の無線センサまたは無線ユーザ・デバイスを表す。無線通信1322は、リモートデバイス1320と、左TIM1304、右TIM1306およびePOD1310のうちの少なくとも一つとの間で達成される。上記のTIMに関するすべての電子システム機能の説明は、ePOD1310などのePODに適用できる。 The eyeglass device includes a left temple insert module (TIM) 1304 located on the left temple and a right TIM 1306 located on the right temple. A back neck module assembly with electronic unit (ePOD) is shown at 1310. A left smart cord 1312 provides an electrical path between the ePOD 1310 and the left TIM 1304. A right smart cord 1314 provides an electrical path between the ePOD 1310 and the right TIM 1306. In various embodiments, both the left TIM 1304 and the right TIM 1306 are disposed with one or more wireless communication network systems, as shown at 1316, that enable wireless communication between the left TIM 1304 and the right TIM 1306. The remote device 1320 represents one or more wireless sensors or wireless user devices, as described in conjunction with the previous figures. Wireless communication 1322 is achieved between the remote device 1320 and at least one of the left TIM 1304, the right TIM 1306, and the ePOD 1310. All electronic system functionality descriptions for the TIMs above are applicable to ePODs such as ePOD 1310.

いくつかの実施形態において、例えば電気経路1308が1300で示される電気回路図から削除された場合に、左テンプルは右テンプルに電気的に接続されていない。 In some embodiments, for example, if electrical path 1308 is deleted from the electrical schematic shown in 1300, the left temple is not electrically connected to the right temple.

図14は、本発明の実施形態に係る後ろ首モジュール・アセンブリのユーザ・インターフェースを全体的に1400で示す。図14を参照すると、首の後ろの電子ポッド(ePOD)は、1402で示されている。ePOD1402は、ディスプレイ・インターフェース1404を備える。異なる実施形態において、ディスプレイ・インターフェース1404は、様々な方法により実装されることができる。いくつかの実施形態において、ユーザ・インターフェースは触覚表面ボタンである。いくつかの実施形態において、ユーザ・インターフェースは、一つまたは複数のコントロールをユーザに提示する静電容量式タッチ・スクリーンなどのタッチ・スクリーンにより実装されるいくつかの実施形態において、ユーザ・インターフェースは、情報をユーザに伝達する。さらに他の実施形態において、ユーザ・インターフェースは、ePOD1402を着用しているユーザの背後からユーザ・インターフェース1404を見る人に情報を伝達する。そのような情報の例は、これに限定するものではないが、1406で示される絵文字、気分ステータス、アイコンなどである。 14 illustrates a user interface for a rear neck module assembly generally at 1400, according to an embodiment of the present invention. Referring to FIG. 14, a rear neck electronics pod (ePOD) is shown at 1402. The ePOD 1402 includes a display interface 1404. In different embodiments, the display interface 1404 can be implemented in a variety of ways. In some embodiments, the user interface is a tactile surface button. In some embodiments, the user interface is implemented by a touch screen, such as a capacitive touch screen, that presents one or more controls to the user. In some embodiments, the user interface communicates information to the user. In yet other embodiments, the user interface communicates information to a person viewing the user interface 1404 from behind the user wearing the ePOD 1402. Examples of such information are, but are not limited to, emojis, mood status, icons, etc., as shown at 1406.

図15は、本発明の実施形態に係る後ろ首電子ユニットのブロック図を全体的に1500で示す。図15を参照すると、本実施形態の説明で使用されるように、後ろ首電子ユニットは、本発明の実施形態に使用され得るコンピュータなどのデバイスに基づくことができる。ブロック図は、高レベルの概念的な表現であり、さまざまな方法でさまざまなアーキテクチャにより実装されることができる。バス・システム1502は、中央処理装置(CPU)1504(または本明細書ではプロセッサと呼ばれる)、読み取り専用メモリ(ROM)1506、ランダム・アクセス・メモリ(RAM)1508、ストレージ1510、オーディオ1522、ユーザ・インターフェース1524、および通信1530を相互接続する。RAM808は、ダイナミック・ランダム・アクセス・メモリ(DRAM)または他の形態のメモリを表すこともできる。様々な実施形態において、ユーザ・インターフェース1524は、音声インターフェース、タッチ・インターフェース、物理ボタン、またはそれらの組み合わせであり得る。メモリ(図示せず)はCPUブロック1504に含まれることができることが理解される。バス・システム1502は、例えば、システム・バス、周辺機器相互接続(PCI)、アドバンスト・グラフィックポート(AGP)、小型コンピュータ・システム・インターフェース(SCSI)、米国電気電子技術者協会(IEEE)規格番号994(FireWire)、ユニバーサル・シリアル・バス(USB)、汎用非同期送受信回路(UART)、シリアル・ペリフェラル・インターフェース(SPI)、インター集積回路(I2C)などのうちの一つまたは複数のバスであってもよい。CPU1504は、単一、複数、または分散コンピューティング・リソースであってもよい。ストレージ1510は、フラッシュ・メモリ等であってもよい。TIMの実際の実装に応じて、TIMには、ブロック図中のコンポーネントの一部、全部、またはそれ以上、または再配置が含まれる場合があることに留意されたい。したがって、図15のシステムには多くのバリエーションが可能である。 FIG. 15 illustrates, generally at 1500, a block diagram of a rear neck electronic unit according to an embodiment of the present invention. Referring to FIG. 15, as used in the description of the present embodiment, the rear neck electronic unit can be based on a device such as a computer that can be used in the embodiment of the present invention. The block diagram is a high-level conceptual representation and can be implemented in various ways and with various architectures. A bus system 1502 interconnects a central processing unit (CPU) 1504 (or referred to herein as a processor), a read-only memory (ROM) 1506, a random access memory (RAM) 1508, a storage 1510, an audio 1522, a user interface 1524, and a communication 1530. The RAM 808 can also represent a dynamic random access memory (DRAM) or other forms of memory. In various embodiments, the user interface 1524 can be a voice interface, a touch interface, a physical button, or a combination thereof. It is understood that a memory (not shown) can be included in the CPU block 1504. The bus system 1502 may be, for example, one or more of the following buses: system bus, peripheral component interconnect (PCI), advanced graphics port (AGP), small computer system interface (SCSI), Institute of Electrical and Electronics Engineers (IEEE) standard number 994 (FireWire), universal serial bus (USB), universal asynchronous receiver/transmitter (UART), serial peripheral interface (SPI), inter-integrated circuit (I2C), etc. The CPU 1504 may be a single, multiple, or distributed computing resource. The storage 1510 may be a flash memory, etc. It should be noted that depending on the actual implementation of the TIM, the TIM may include some, all, or more, or a rearrangement of the components in the block diagram. Thus, many variations of the system of FIG. 15 are possible.

一つまたは複数の無線ネットワーク1532との接続は、通信(COMM)1530を介して取得され、それにより、TIM1500は、ローカル・センサ、ローカル・デバイス、およびリモート・ネットワーク上のリモートデバイスと無線で通信することができる。いくつかの実施形態において、1532/1530は、リモート音声をテキストに変換するシステムへのアクセスを提供し、そのシステムは、例えばクラウド・ベースの遠隔地にあり得る。1532および1530は、さまざまな実装において、無線通信システムを柔軟に表し、さまざまな形式のテレメトリー、ジェネラル・パケット・ラジオ・サービス(GPRS)、イーサネット、ワイド・エリア・ネットワーク(WAN)、ローカル・エリア・ネットワーク(LAN)、インターネット接続、Wi-Fi、WiMAX、ZigBee、赤外線、ブルートゥース、近距離通信、3G、4G、LTE、5Gなどの携帯電話通信システム、およびそれらの組み合わせを表すことができる。様々な実施形態において、オプションとして、タッチ・インターフェースが1524で提供される。オプションのディスプレイが1520で提供される。一つまたは複数のセンサからの信号は、1529および1528を介してシステムに入力される。1526で、全地球測位システム(GPS)情報は、受信され、システムに入力される。オーディオは、本明細書に記載されているプロジェクション・スピーカまたはプロジェクション・マイクロ・スピーカなどのスピーカを表すことができる。 A connection to one or more wireless networks 1532 is obtained via communications (COMM) 1530, allowing the TIM 1500 to wirelessly communicate with local sensors, local devices, and remote devices on a remote network. In some embodiments, 1532/1530 provide access to a remote speech-to-text system, which may be at a remote location, e.g., cloud-based. 1532 and 1530 flexibly represent wireless communication systems in various implementations and may represent various forms of telemetry, general packet radio service (GPRS), Ethernet, wide area network (WAN), local area network (LAN), Internet connections, Wi-Fi, WiMAX, ZigBee, infrared, Bluetooth, near field communications, cellular communication systems such as 3G, 4G, LTE, 5G, and combinations thereof. In various embodiments, an optional touch interface is provided at 1524. An optional display is provided at 1520. Signals from one or more sensors are input to the system via 1529 and 1528. At 1526, Global Positioning System (GPS) information is received and input to the system. The audio can represent a speaker, such as a projection speaker or a projection micro-speaker as described herein.

様々な実施形態において、ハードウェア構成に応じて、異なる無線プロトコルがネットワークで使用され、それにより、上記の図で説明されるシステムを提供する。無線信号伝送に使用される技術の非限定的な一実施形態は、IEEE802.15.1規格として一般的に知られているブルートゥース無線技術規格である。他の実施形態において、IEEE802.11規格を使用するWi-Fiとして知られる無線信号送信プロトコルが使用される。他の実施形態において、IEEE802.15.4規格に基づくZigBee通信プロトコルが使用される。これらの例は、単に説明のためのものであり、異なる実施形態を限定するものではない。伝送制御プロトコル(TCP)およびインターネット・プロトコル(IP)も、さまざまな実施形態で使用される。実施形態は、本明細書に記載されるデータ通信プロトコルに限定されず、本明細書に具体的に記載されていない他のデータ通信プロトコルと共に容易に使用される。 In various embodiments, depending on the hardware configuration, different wireless protocols are used in the network, thereby providing the system described in the figures above. One non-limiting embodiment of the technology used for wireless signal transmission is the Bluetooth wireless technology standard, commonly known as the IEEE 802.15.1 standard. In other embodiments, a wireless signal transmission protocol known as Wi-Fi, which uses the IEEE 802.11 standard, is used. In other embodiments, the ZigBee communication protocol, which is based on the IEEE 802.15.4 standard, is used. These examples are merely illustrative and are not limiting of the different embodiments. Transmission Control Protocol (TCP) and Internet Protocol (IP) are also used in various embodiments. The embodiments are not limited to the data communication protocols described herein and are readily used with other data communication protocols not specifically described herein.

様々な実施形態において、システムのコンポーネントおよび前図で説明されるシステム(例えば後ろ首電子ユニット)は、集積回路デバイスに実装され、集積回路デバイスは、集積回路を含む集積回路パッケージを含むことができる。いくつかの実施形態において、システムのコンポーネントおよびシステムは、単一の集積回路ダイに実装される。他の実施形態において、システムのコンポーネントおよびシステムは、集積回路デバイスの複数の集積回路ダイに実装され、その集積回路デバイスは、集積回路を含むマルチチップ・パッケージを含むことができる。 In various embodiments, the components of the system and the systems described in the previous figures (e.g., the rear neck electronics unit) are implemented in an integrated circuit device, which may include an integrated circuit package containing an integrated circuit. In some embodiments, the components and systems of the system are implemented in a single integrated circuit die. In other embodiments, the components and systems of the system are implemented in multiple integrated circuit dies of an integrated circuit device, which may include a multi-chip package containing an integrated circuit.

様々な実施形態において、本明細書で提供される実施形態の説明は、頭部装着型デバイス用の再構成可能なコンポーネントを提供する。頭部装着型デバイス用の再構成可能なコンポーネントは、これに限定するものではないが、取り外し可能なテンプル、取り外し可能なテンプル挿入モジュール(TIM)、後ろ首モジュール・アセンブリ、後ろ首モジュール・アセンブリ用の電子ポッドePOD、ePOD用の取り外し可能な電子ユニットを含む。 In various embodiments, the description of the embodiments provided herein provides reconfigurable components for a head-worn device, including, but not limited to, a removable temple, a removable temple insert module (TIM), a back neck module assembly, an electronics pod (ePOD) for the back neck module assembly, and a removable electronics unit for the ePOD.

図16は、本発明の実施形態に係る、システム・アーキテクチャの概略ブロック図を全体的に1600で示す。図16を参照すると、本発明の実施形態は、頭部装着型デバイス向けにカスタマイズされたシステム・アーキテクチャにおいて使用され、前記頭部装着型デバイスは、例えば、これに限定するものではないが、スマート眼鏡や他のアイ・ウェア・デバイスまたは頭部装着型デバイスやなどである。以下の図と併せて説明するシステム・アーキテクチャは、上記の頭部装着型デバイス用の再構成可能なコンポーネントと組み合わせて使用される。上記の頭部装着型デバイス用の再構成可能なコンポーネントは、これに限定するものではないが、取り外し可能なテンプル、取り外し可能なテンプル挿入モジュール(TIMs)、後ろ首モジュール・アセンブリ、後ろ首モジュール・アセンブリ用の電子ポッドePOD、およびePODs用の取り外し可能な電子ユニットなどを含む。 16 illustrates a schematic block diagram of a system architecture generally at 1600 according to an embodiment of the present invention. Referring to FIG. 16, an embodiment of the present invention is used in a system architecture customized for a head-mounted device, such as, but not limited to, smart glasses or other eye wear or head mounted devices. The system architecture described in conjunction with the following figures is used in combination with reconfigurable components for the head-mounted device, such as, but not limited to, removable temples, removable temple insert modules (TIMs), a back neck module assembly, an electronics pod ePOD for the back neck module assembly, and a removable electronics unit for the ePODs.

図16を参照すると、モバイル通信ユニット(MCU)、様々な実施形態に示されているデジタル信号プロセッサ(DSP)を備えるMCUは、図16において、1602で示される。システム1600は、様々な実施形態において、以下のサブ・ブロックのうちの一つまたは複数を含む。
・中央処理装置(CPU)+DSPチップ1634
・音声ウェイク・アップ・チップ1608
・バッテリ充電およびコンピュータまたはモバイル・デバイスへの信号パスのための汎用シリアル・バス(USB)タイプA磁気ポゴ・ピン・コネクタ1610
・多機能ボタン1614
・発光ダイオード(LED)などの二色の光源(例えば、赤色および青色)1620
・二つのスピーカ1628を駆動するためのステレオ・パワー・アンプ1630
・二つのマイク1604/1606
・センサ:
o タッチ・センサ1616
o 近接センサ1618
o 6軸センサ(3軸加速度計+3軸ジャイロスコープ)1622
o 3軸磁力計1620
Referring to Figure 16, a mobile communication unit (MCU), which in various embodiments includes a digital signal processor (DSP), is shown in Figure 16 at 1602. The system 1600, in various embodiments, includes one or more of the following sub-blocks:
Central processing unit (CPU) + DSP chip 1634
Voice wake-up chip 1608
Universal Serial Bus (USB) Type A magnetic pogo pin connector 1610 for battery charging and signal path to a computer or mobile device
Multi-function button 1614
A bi-color light source (e.g., red and blue) 1620, such as a light emitting diode (LED)
A stereo power amplifier 1630 to drive two speakers 1628
・Two microphones 1604/1606
Sensor:
Touch Sensor 1616
o Proximity sensor 1618
o 6-axis sensor (3-axis accelerometer + 3-axis gyroscope) 1622
o 3-axis magnetometer 1620

いくつかの実施形態において、ハードウェア・アーキテクチャのコアは、デバイスの内部にあるCPUを備える単一チップ、デジタル信号プロセッサ、およびブルートゥースRFモジュールである。CPUおよびDSP(1634)は、別々のチップにすることも、単一のチップに統合されることもできる。いくつかの実施形態において、コストを削減するために、DSPをCPUに統合することを採用する。上記のサブ・ブロックのリストは単に説明のために提供されており、本発明の実施形態は、上記にリストされたものよりも多くのサブ・ブロックまたはより少ないサブ・ブロックを含み得ることに留意されたい。本明細書に示されている汎用入出力(GPIO)、アイ・スクエアド・シー(I2C)、汎用非同期送受信回路(UART)などのインターフェースは、例として示され、本発明の実施形態を制限するものではない。本発明の実施形態は、異なるインターフェースおよびバス規格を利用して容易に実施される。 In some embodiments, the core of the hardware architecture is a single chip with the CPU inside the device, the digital signal processor, and the Bluetooth RF module. The CPU and DSP (1634) can be separate chips or integrated into a single chip. In some embodiments, integrating the DSP into the CPU is adopted to reduce costs. It should be noted that the above list of sub-blocks is provided for illustrative purposes only, and embodiments of the present invention may include more or fewer sub-blocks than those listed above. The interfaces such as general purpose input/output (GPIO), Inter-Cell (I2C), and Universal Asynchronous Receiver/Transmitter (UART) shown herein are shown as examples and are not limiting of embodiments of the present invention. Embodiments of the present invention are easily implemented utilizing different interfaces and bus standards.

CPUのタスクは、タスク・スケジューリング、GPIO制御、センサ制御データ収集および操作、ブルートゥース(登録商標)無線周波数(RF)管理および電力管理を含む。様々な実施形態において、DSPは、雑音消去、アコースティック・エコー・キャンセレーション、クロストーク補正、およびすべての時間のかかる信号処理アルゴリズムなどの信号処理タスクを処理する。ブルートゥース(BT)RFモジュール1632は、BT無線通信プロトコルを処理する。いくつかの実施形態において、ブルートゥース・モジュール1632に加えて、頭部装着型デバイスに埋め込まれたシステム1600からの携帯電話通信を直接に提供するためにセルラー通信モジュールが追加される。他の実施形態において、ブルートゥース・モジュール1632は、セルラー通信モジュールにより置き換えられる。したがって、システム1600は、無線通信の多くの異なる構成を備えることができる。システム1600は、以下にリストされるものなどの様々なセンサを備えるように構成されることができる。当業者は、システム1600が、以下のリストに示されるものよりも多くのセンサまたはより少ないセンサを備え得るように構成されることを認識するであろう。
・LED1620 - GPIO出力ピンを経由する。
・ボタン1614 - GPIO入力ピンを経由する。
・タッチ・センサ1616 - GPIOの入力ピンと出力ピンを経由する。
・音声ウェイク・アップ・チップ1608 - GPIOおよびUARTを経由する。
・近接センサ1618 - I2Cバスを経由する。
・マイク1604/1606&スピーカ1628 - アナログ・デジタル・コンバーター(ADC)1640およびデジタル・アナログ・コンバーター(DAC)1636を経由する。
・6+3軸センサ - I2Cバスを経由する。
The CPU tasks include task scheduling, GPIO control, sensor control data collection and manipulation, Bluetooth radio frequency (RF) management, and power management. In various embodiments, the DSP handles signal processing tasks such as noise cancellation, acoustic echo cancellation, crosstalk correction, and all time-consuming signal processing algorithms. The Bluetooth (BT) RF module 1632 handles the BT wireless communication protocol. In some embodiments, in addition to the Bluetooth module 1632, a cellular communication module is added to provide mobile phone communication directly from the system 1600 embedded in the head-worn device. In other embodiments, the Bluetooth module 1632 is replaced by a cellular communication module. Thus, the system 1600 can have many different configurations of wireless communication. The system 1600 can be configured to include various sensors, such as those listed below. Those skilled in the art will recognize that the system 1600 can be configured to include more or fewer sensors than those listed below.
LED1620 - via GPIO output pin.
Button 1614 - via GPIO input pin.
Touch Sensor 1616 - via GPIO input and output pins.
Voice wake up chip 1608 - via GPIO and UART.
Proximity Sensor 1618 - via the I2C bus.
Microphone 1604/1606 & Speaker 1628 - via Analog to Digital Converter (ADC) 1640 and Digital to Analog Converter (DAC) 1636.
6+3 axis sensors – via I2C bus.

図17は、本発明の実施形態に係る、ウェイク・アップ制御の概略ブロック図を示す。図17を参照すると、システム1702は、バッテリ電力を節約するためにスリープ・モード1704に入る。例えば1608などの音声ウェイク・アップ・チップは、ウェイク・アップ・ワード1710(例えば、ユーザにより発声された1604などのマイクで受信された「SOLOS」)を検出するために使用される。ウェイク・アップ・ワード1710が1608で検出された場合、CPU/システムは、パワー・アップされ、1706で示されるように「ラン」状態に移行する。 Figure 17 shows a schematic block diagram of wake-up control according to an embodiment of the present invention. Referring to Figure 17, a system 1702 enters a sleep mode 1704 to conserve battery power. A voice wake-up chip, such as 1608, is used to detect a wake-up word 1710 (e.g., "SOLOS" spoken by a user and received at a microphone, such as 1604). If the wake-up word 1710 is detected at 1608, the CPU/system is powered up and transitions to a "run" state, as shown at 1706.

図16および図17と併せて図示されるシステム1700、1702、または1600は、組み込み音声認識システム1608を利用する。本発明の実施形態において使用する組み込み音声認識システムの例は、これらに限定されないが、VoCon HybirdなどのNUANCEからの組み込み音声認識システムまたは他の製造業者からの組み込み音声認識システムである。NUANCE VoCon Hybirdのデータ・シートは、付録1として本明細書に含まれる。 The systems 1700, 1702, or 1600 illustrated in conjunction with Figures 16 and 17 utilize an embedded speech recognition system 1608. Examples of embedded speech recognition systems for use in embodiments of the present invention include, but are not limited to, embedded speech recognition systems from NUANCE, such as the VoCon Hybrid, or embedded speech recognition systems from other manufacturers. A data sheet for the NUANCE VoCon Hybrid is included herein as Appendix 1.

図16および図17を参照すると、動作中、アイドルの場合に、システム1702は「スリープ」モードであるが、DSP VoCon 1608は常に「オン」であり、それにより、接続されているマイク1604からの入力を介してウェイク・アップ・ワード1710を検出することができる。DSP VoConシステム1608がウェイク・アップ・ワード1710を検出すると、システム1702を「スリープ」モード1704から「ラン」モード1706に移行させるために、ウェイク・アップ制御信号1714が送信される。 Referring to FIG. 16 and FIG. 17, during operation, when idle, the system 1702 is in "sleep" mode, but the DSP VoCon 1608 is always "on" so that it can detect the wake-up word 1710 via input from the connected microphone 1604. When the DSP VoCon system 1608 detects the wake-up word 1710, a wake-up control signal 1714 is sent to transition the system 1702 from "sleep" mode 1704 to "run" mode 1706.

組み込み音声認識システム1608は、ウェイク・アップ・ワード1710を処理するために使用され、または、ユーザの音声から抽出されたコマンドにより、頭部装着型デバイスをコマンドおよび制御するために使用される。 The built-in speech recognition system 1608 is used to process the wake-up word 1710 or to command and control the head-worn device with commands extracted from the user's voice.

様々な実施形態において、図16および/または図17に示されるシステムのコンポーネントは、集積回路デバイスに実装され、当該集積回路デバイスは、集積回路を含む集積回路パッケージを含むことができる。いくつかの実施形態において、当該システムのコンポーネントは、単一の集積回路ダイに実装される。他の実施形態において、当該システムのコンポーネントは、集積回路デバイスの複数の集積回路ダイに実装され、当該集積回路デバイスは、集積回路を含むマルチチップ・パッケージを含むことができる。 In various embodiments, the components of the systems shown in FIG. 16 and/or FIG. 17 are implemented on an integrated circuit device, which may include an integrated circuit package containing an integrated circuit. In some embodiments, the components of the systems are implemented on a single integrated circuit die. In other embodiments, the components of the systems are implemented on multiple integrated circuit dies on an integrated circuit device, which may include a multi-chip package containing an integrated circuit.

様々な実施形態において、1624で示される六つ(6)の軸センサ、および1622で示される三つ(3)の軸センサは、ヘッディング、追跡、および電子コンパス機能を実行するために使用される。一実施形態において、単に説明のために提供されており、それによる暗示される制限はないが、センサは、以下の9軸のデータ(1秒に10サンプルの割合で)をキャプチャし、それらの9軸のデータは、ユーザの頭の動きを計算するために、モバイル通信ユニット(MCU)1602により使用されることができる。九(9)軸のデータは、これらに限定されないが、X、YおよびZ軸に沿って加速度計から測定された加速度データ、X、YおよびZ軸からのジャイロスコープ・データ、およびX、YおよびZ軸からの磁力計データを含む。当業者は、X、YおよびZ軸が直交座標系を意味することを理解している。いくつかの実施形態において、それらのセンサ・データは、頭部装着型デバイスを装着しているユーザの動きの軌跡を追跡するために使用される。 In various embodiments, six (6) axis sensors, indicated at 1624, and three (3) axis sensors, indicated at 1622, are used to perform heading, tracking, and electronic compass functions. In one embodiment, provided merely for purposes of illustration and with no implied limitation therefrom, the sensors capture the following nine axes of data (at a rate of 10 samples per second), which can be used by the mobile communication unit (MCU) 1602 to calculate the movement of the user's head: Nine (9) axes of data include, but are not limited to, acceleration data measured from an accelerometer along the X, Y, and Z axes, gyroscope data from the X, Y, and Z axes, and magnetometer data from the X, Y, and Z axes. Those skilled in the art will appreciate that the X, Y, and Z axes refer to a Cartesian coordinate system. In some embodiments, the sensor data is used to track the trajectory of the movement of a user wearing the head-mounted device.

図18は、本発明の実施形態に係る、ボタン操作の状態図を全体的に1800で示す。図16の1614のようなボタンは、多目的機能をサポートするように設計されている。一つまたは複数の実施形態において、単一のボタン、タッチ・スライダー、および近接センサによりサポートされる機能の説明を例として示す。ボタン、タッチ・センサ、および近接センサは、他の機能を提供できる。様々な実施形態において、所与の頭部装着型デバイスに必要な機能を提供するために、異なる数のボタン、スライダー、およびセンサを提供することもできる。本明細書に提示される機能および状態図は、単に例として提供されており、本発明の実施形態を制限するものではない。電源のオン/オフ機能1802/1804は、以下のように示される。 18 illustrates a state diagram for button operation generally at 1800, according to an embodiment of the present invention. Buttons such as 1614 in FIG. 16 are designed to support multipurpose functions. In one or more embodiments, a description of the functions supported by a single button, touch slider, and proximity sensor is shown by way of example. Buttons, touch sensors, and proximity sensors can provide other functions. In various embodiments, a different number of buttons, sliders, and sensors can be provided to provide the functionality required for a given head worn device. The functions and state diagrams presented herein are provided by way of example only and are not limiting of embodiments of the present invention. A power on/off function 1802/1804 is shown as follows:

a)「オン」表示ライトが作動するまで、「電源ボタン」を所定の時間(一つまたは複数の実施形態において、所定の時間は二(2)秒である)短く押すことにより、1802での電源「オン」状態に入る。一つまたは複数の実施形態において、「オン」表示ライトは青色のライトである。「オン」状態1082において、ユーザは、音声コマンドにより、システムにバッテリ・パワー・レベルを尋ねることができる。例えば、システムは、さまざまな粒度に量子化されたバッテリ・パワー・レベルを返すように構成されることができる。一例は、三(3)つのバッテリ・パワー・レベル、つまり、低、中、高への量子化である。他の量子化も可能であり、三つのバッテリ電力レベルを使用するその例は、単に説明のために提供されており、それによる暗示される制限はない。または、システムは、機械により生成された聞こえる音声メッセージを介して現在のバッテリ・パワー・レベルをユーザに通知するように構成され得る。 a) Enter the power "on" state at 1802 by briefly pressing the "power button" for a predetermined time (in one or more embodiments, the predetermined time is two (2) seconds) until the "on" indicator light is activated. In one or more embodiments, the "on" indicator light is a blue light. In the "on" state 1082, the user can ask the system for the battery power level via a voice command. For example, the system can be configured to return the battery power level quantized to various granularities. One example is a quantization to three (3) battery power levels, namely, low, medium, and high. Other quantizations are possible, and the example using three battery power levels is provided merely for purposes of illustration, with no implied limitation thereby. Alternatively, the system can be configured to inform the user of the current battery power level via a machine-generated audible voice message.

b)「オフ」表示ライトが作動するまで、「電源ボタン」を所定の時間(一つまたは複数の実施形態において、所定の時間は三(3)秒である)長押しすることにより、1804での電源「オフ」状態に入る。一つまたは複数の実施形態において、「オフ」表示ライトは赤色のライトである。システムは、機械により生成された聞こえる音声メッセージを介して、システムが「オフ」状態になるために、電源を切っていることをユーザに通知するように構成され得る。 b) Enter the power "OFF" state at 1804 by pressing and holding the "Power Button" for a predetermined period of time (in one or more embodiments, the predetermined period of time is three (3) seconds) until the "OFF" indicator light is activated. In one or more embodiments, the "OFF" indicator light is a red light. The system may be configured to notify the user that the system is powering down to the "OFF" state via an audible machine-generated voice message.

携帯電話などのデバイスとのペアリング/不対機能1806/1807は、以下のように示される。
i. 「電源ボタン」をオフ状態に移行するのに必要な時間より長く押すと、システムとモバイル・デバイスを「ペア」にする。ここに例を示すために提供される5秒は、システムを「ペアリング」用に設定するのに適切な時間であり、5秒は、システムをオフ状態に移行するのに必要な時間(2秒)よりも長いことに留意されたい。したがって、動作中、ユーザは、青色のライトと赤色のライトが交互に点滅するまで「電源ボタン」を押すことにより、1806で示されるように、システムがモバイル・デバイスとペアになる。ペアリング後、システムは、機械により生成された音声プロンプトを再生することにより、ペアリングが成功したことをユーザに通知する。1807において、電源ボタンをペアリングに必要な時間よりも長く押すと、システムを「不対」状態に移行することができる。したがって、1807において、八(8)秒でシステムを「不対」状態に移行することができる。異なる時間が選択されることができ、本明細書において提供されるそれらの所定の時間は、単に例として提供されており、本発明の実施形態を制限するものではない。
ii. ペアリングに成功した後、ユーザは、1808において音楽を再生し、1810において頭部装着型デバイスと携帯電話またはMCU(一般にデバイスと呼ばれる)との間の無線接続を利用して電話をかけることができる。接続に失敗した場合、スマート眼鏡などの頭部装着型デバイスは、プリセット時間後に自動的にオフになる。 一実施形態において、単に例として提供されるそのプリセット時間は三(3)分である。
iii. 1808においてスマート眼鏡で音楽を再生しているときに、ボタンを短く押すと、1812において次の曲に進む。一実施形態において、単に説明のために、これによる暗示される制限はなく、次の曲に進むために、ボタンを短く押す時間は二(2)秒未満である。
iv. 音楽の再生中に着信があった場合、またはアイドル状態にある場合、ボタンを所定の時間未満短く押すと、1814において当該着信に応答する。説明のために、これによる暗示される制限はなく、ボタンを短く押すための所定の時間は2秒未満である。ユーザがボタンを押す時間は当該所定の時間よりも長い場合、1816において当該着信が拒否される。
The pairing/unpairing function 1806/1807 with a device such as a mobile phone is shown as follows:
i. Pressing the "Power Button" for longer than the time required to transition to the off state "pairs" the system with the mobile device. Note that the 5 seconds provided for illustrative purposes herein is a suitable time to set up the system for "pairing", and 5 seconds is longer than the time required to transition the system to the off state (2 seconds). Thus, in operation, the user presses the "Power Button" until the blue and red lights flash alternately, causing the system to pair with the mobile device, as shown at 1806. After pairing, the system notifies the user that pairing was successful by playing a machine-generated voice prompt. Pressing the Power Button for longer than the time required for pairing can transition the system to an "unpaired" state, at 1807. Thus, eight (8) seconds can transition the system to an "unpaired" state, at 1807. Different times can be selected, and the predetermined times provided herein are provided merely as examples and are not limiting of embodiments of the present invention.
ii. After successful pairing, the user can play music at 1808 and make calls at 1810 utilizing the wireless connection between the head-mounted device and a mobile phone or MCU (commonly referred to as device). If the connection fails, the head-mounted device, such as smart glasses, will automatically turn off after a preset time. In one embodiment, the preset time, provided by way of example only, is three (3) minutes.
iii. When music is playing on the smart glasses at 1808, a short press of the button advances to the next song at 1812. In one embodiment, for purposes of illustration only and no limitations implied thereby, the short press of the button to advance to the next song is less than two (2) seconds.
iv. If an incoming call occurs while music is playing or in an idle state, pressing the button for less than a predetermined time will answer the incoming call at 1814. For purposes of illustration, and no limitation is implied hereby, the predetermined time for pressing the button is less than 2 seconds. If the user presses the button for longer than the predetermined time, the incoming call will be rejected at 1816.

図19は、本発明の実施形態に係る、タッチ・センサ操作の状態図を全体的に1900で示す。一つまたは複数の実施形態において、タッチ・センサは、「スライダー」機能と「タップ」機能とを同時に備えるように構成される。タッチ・センサのー例は、図16の1616である。 FIG. 19 illustrates a state diagram generally at 1900 for touch sensor operation in accordance with an embodiment of the present invention. In one or more embodiments, the touch sensor is configured to provide both "slider" and "tap" functionality simultaneously. An example of a touch sensor is 1616 in FIG. 16.

一つまたは複数の実施形態において、単に例として提供されており、これによる暗示される制限はなく、タッチ・センサは、タッチ・スライダー、シングル・タップおよびダブル・タップ操作など二つの機能をサポートする。他の実施形態において、タッチ・センサは、本明細書に記載されているセンサの機能よりも多くのまたはより少ない機能をサポートするように構成され得る。図19を参照すると、タッチ・センサ操作に対応する状態図は示される。スライダー1930による音量制御は、眼鏡デバイス1940の上に構成されている。スライダー1930は、ユーザがセンサ領域に沿って指をスライドさせることにより登録された「スライド」入力を受け入れるように構成される。この例において、音量制御は、8つのレベル(レベル1…レベル8)を有する。タッチ・スライダーに「迅速なスライド」を付与すると、「迅速なスライド」の方向に応じて音量が1レベル増減する。例えば、現在の音量がレベル3である場合、前方へ迅速にスライドする1952/1954と、音量1904が増加し、その音量がレベル3からレベル4に変更される。1は最小音量を表し、8は最大音量を表す。同様に、レベル3から後方へ迅速にスライドすると、音量1906が減少し、それにより、音量がレベル3からレベル2に変更される。 In one or more embodiments, provided merely as an example and with no implied limitation thereto, the touch sensor supports two functions, such as a touch slider, single tap and double tap operation. In other embodiments, the touch sensor may be configured to support more or less functions than those of the sensor described herein. Referring to FIG. 19, a state diagram corresponding to touch sensor operation is shown. A volume control with a slider 1930 is configured on the glasses device 1940. The slider 1930 is configured to accept a "slide" input registered by a user sliding a finger along the sensor area. In this example, the volume control has eight levels (level 1...level 8). A "quick slide" on the touch slider increases or decreases the volume by one level depending on the direction of the "quick slide". For example, if the current volume is level 3, a quick slide forward 1952/1954 increases the volume 1904 and changes the volume from level 3 to level 4. 1 represents the minimum volume and 8 represents the maximum volume. Similarly, sliding quickly backwards from level 3 decreases the volume 1906, thereby changing the volume from level 3 to level 2.

ユーザがタッチ・スライダーに応用する「緩やかなスライド」とは、音量を連続的に増減することを意味する。例えば、現在の音量がレベル3である場合、タッチ・センサ領域の端までゆっくりと前方へスライドすると、音量1904が増加し、その音量がレベル1からレベル8に変更される。タッチ・センサ領域の中央までゆっくりと前方へスライドすると、音量1904が増加し、その音量がレベル1からレベル4に変更される。 A "slow slide" applied by a user to the touch slider means a continuous increase or decrease in the volume. For example, if the current volume is at level 3, slowly sliding forward to the edge of the touch sensor area increases the volume 1904 and changes the volume from level 1 to level 8. Sliding slowly forward to the center of the touch sensor area increases the volume 1904 and changes the volume from level 1 to level 4.

現在の音量がレベル4である場合、タッチ・センサ領域の端までゆっくりと後方へスライドする1962/1964と、音量1906が減少し、その音量がレベル4からレベル1に変更される。 If the current volume is at level 4, slowly sliding back to the edge of the touch sensor area 1962/1964 will decrease the volume 1906 and change the volume from level 4 to level 1.

電話の着信状態1920から、前方へスライドする1952/1954と、1924において着信電話に出る。その電話の着信状態1920から、後方へスライドする1962/1964と、1922において着信電話を拒否する。 From the incoming call state 1920, slide forward 1952/1954 to answer the incoming call at 1924. From the incoming call state 1920, slide backward 1962/1964 to reject the incoming call at 1922.

スマート眼鏡1940のタッチ・スライダー領域1930上においてユーザにより実行されるダブル・タップは、ウェイク・アップ・チップを作動させ、またはウェイク・アップ・チップを無効にするために使用される。一つまたは複数の実施形態において、音声ウェイク・アップが「オフ」状態にある場合、タッチ・スライダー領域に適用されるダブル・タップは、音声ウェイク・アップを「オン」状態1910に変更する。同様に、音声ウェイク・アップが「オン」状態1910にある場合、タッチ・スライダー領域に適用されるダブル・タップは、音声ウェイク・アップを「オフ」状態1902に変更する。 A double tap performed by a user on the touch slider area 1930 of the smart glasses 1940 is used to activate or disable the wake-up chip. In one or more embodiments, if audio wake-up is in the "off" state, a double tap applied to the touch slider area changes audio wake-up to the "on" state 1910. Similarly, if audio wake-up is in the "on" state 1910, a double tap applied to the touch slider area changes audio wake-up to the "off" state 1902.

様々な実施形態において、シングル・タップは、システムを音楽「再生」状態1902に移行することにより音楽を再生するために、または音楽「一時停止」状態1908に入るために使用され、「一時停止」状態1908において、ユーザからのさらなる入力を待つ間に、音楽再生は一時停止される。「一時停止」状態にある場合、ユーザからの後続のシングル・タップは、制御を「再生」状態に戻し、1902において音楽の再生を再開する。必要に応じて「再生」から「一時停止」へまたはその逆に移行するために、追加の状態変更は、後続のシングル・タップにより達成される。 In various embodiments, a single tap is used to play music by transitioning the system to a music "playing" state 1902, or to enter a music "paused" state 1908, where music playback is paused while awaiting further input from the user. When in the "paused" state, a subsequent single tap from the user returns control to the "playing" state and resumes music playback at 1902. Additional state changes are accomplished with subsequent single taps to transition from "playing" to "paused" or vice versa as needed.

図20は、本発明の実施形態に係る、近接センサ操作の状態図を全体的に2000で示す。様々な実施形態において、近接センサ(例えば、図16の1618)は、ユーザが頭部装着型デバイスを着用しているか、またはユーザが頭部装着型デバイス(眼鏡)を取り外したかどうかを検出するために使用される。一例において、単に説明のために、これによる暗示される制限はなく、センサ操作のロジックは以下のように進む。近接センサの出力が「1」の場合、ユーザが眼鏡を着用していること2002を意味する。近接センサの出力が「0」の場合、ユーザが眼鏡を取り外したこと2004を意味する。 FIG. 20 illustrates a state diagram generally at 2000 for proximity sensor operation, according to an embodiment of the present invention. In various embodiments, a proximity sensor (e.g., 1618 in FIG. 16) is used to detect whether a user is wearing a head-worn device or if the user has removed the head-worn device (glasses). In one example, for purposes of illustration only and no limitation implied thereby, the logic for sensor operation proceeds as follows: If the output of the proximity sensor is "1", it means the user is wearing glasses 2002. If the output of the proximity sensor is "0", it means the user has removed glasses 2004.

ロジックは、ユーザが当該ユーザの頭から眼鏡を取り外したときに音楽再生を「オフ」にするように構成される。例えば、ユーザが眼鏡を着用している場合2002、音楽は、音楽再生機能を制御する上記のセンサのいずれかにより制御されて、2006において「再生」される。ユーザが眼鏡を取り外した場合2004、近接センサは「0」を出力し、「0」出力が所定の時間以上続く場合、音楽を「停止」し、システムは音楽再生のために「一時停止」状態2008になる。一つまたは複数の実施形態において、音楽の再生を停止するのに必要な所定の時間は五(5)秒である。ユーザが眼鏡を再び装着した場合、音楽は2006において「再生」状態に回復し、その場合、近接センサの出力は「1」に変わる。 The logic is configured to turn music playback "off" when the user removes the glasses from the user's head. For example, if the user is wearing the glasses 2002, music is "played" 2006 as controlled by any of the sensors described above that control the music playback function. If the user removes the glasses 2004, the proximity sensor outputs a "0" and if the "0" output continues for more than a predetermined time, the music is "stopped" and the system goes into a "paused" state 2008 for music playback. In one or more embodiments, the predetermined time required to stop music playback is five (5) seconds. If the user puts the glasses back on, the music is restored to the "playing" state 2006, in which case the output of the proximity sensor changes to a "1".

眼鏡は所定の時間以上ユーザの頭から離れている場合、システムは、電源を切って、2010において「オフ」状態に入る。一つまたは複数の実施形態において、ユーザが眼鏡を着用していない場合、システムの電源を切るのに必要な所定の時間は、10秒以上である。当業者は、上記の所定の時間が例であり、異なる所定の時間が様々な実施形態において使用されることができることを認識するであろう。本明細書において提供される例のために選択される時間は、制限を意味しない。 If the glasses are off the user's head for more than a predetermined time, the system powers down and enters an "off" state at 2010. In one or more embodiments, the predetermined time required to power down the system when the user is not wearing the glasses is 10 seconds or more. Those skilled in the art will recognize that the above predetermined times are examples and that different predetermined times can be used in various embodiments. The times selected for the examples provided herein are not meant to be limiting.

図21A乃至図21Dは、タッチ・センサと多機能ボタンの位置を示す。図21Aを参照すると、眼鏡デバイスは、後向きの透視図において2102で示される。多機能ボタン2106は、右テンプル2108の下側に位置するように示される。タッチ・センサ領域2104は、右テンプル2108の外表面に位置するように示される。多機能ボタン2106およびタッチ・センサ領域2104の両方は、上の図と併せて説明したような機能を提供する。 21A-21D show the location of the touch sensor and multi-function button. Referring to FIG. 21A, an eyewear device is shown at 2102 in a rear perspective view. A multi-function button 2106 is shown located on the underside of the right temple 2108. A touch sensor area 2104 is shown located on the outer surface of the right temple 2108. Both the multi-function button 2106 and the touch sensor area 2104 provide functionality as described in conjunction with the figures above.

図21Bを参照すると、眼鏡デバイス2252は、前向きの透視図において2200で示され、側面図において2275で示される。多機能ボタン2276は、眼鏡デバイス2252の右テンプル2278の下側に位置するように示される。タッチ・センサ領域2254は、右テンプル2278の外表面に位置するように示される。多機能ボタン2276およびタッチ・センサ領域2254の両方は、上の図と併せて説明したような機能を提供する。 Referring to FIG. 21B, eyewear device 2252 is shown in a front perspective view at 2200 and in a side view at 2275. Multi-function button 2276 is shown located on the underside of right temple 2278 of eyewear device 2252. Touch sensor area 2254 is shown located on the outer surface of right temple 2278. Both multi-function button 2276 and touch sensor area 2254 provide functionality as described in conjunction with the figures above.

図21Cを参照すると、眼鏡デバイスは側面図において2300で示される。タッチ・センサ領域2304は、右テンプル2378の外側の長方形の領域として示されている。タッチ・センサ領域2304は、長方形以外の形状で提供され得ることにも留意されたい。長方形2304の形状は、単に説明のために提供されており、それによる暗示される制限がない。ユーザは、指2306を利用して、音量を制御するために上記の前の図と併せて説明するように前方または後方にスライドし、上記のようにタップを開始する。 Referring to FIG. 21C, the eyewear device is shown at 2300 in a side view. The touch sensor area 2304 is shown as a rectangular area on the outside of the right temple 2378. It should also be noted that the touch sensor area 2304 may be provided in shapes other than rectangular. The rectangular 2304 shape is provided for illustration purposes only, with no limitations implied thereby. The user utilizes finger 2306 to slide forward or backward as described in conjunction with the previous figure above to control the volume, and initiates a tap as described above.

図21Dを参照すると、眼鏡デバイス2402は、側面図において2400で示される。多機能ボタン2404は、右テンプル2478の下側に位置するように示される。ユーザは、2402の眼鏡システムの機能を制御するために、上記の前の図と併せて説明するように、指2406を利用してボタン2404を押す。 Referring to FIG. 21D, an eyewear device 2402 is shown in a side view at 2400. A multi-function button 2404 is shown located on the underside of the right temple 2478. A user utilizes a finger 2406 to press the button 2404 as described in conjunction with the previous figure above to control the functionality of the eyewear system of 2402.

多機能ボタンおよび/またはタッチ・センサ領域は、例えば、テンプルの外表面、テンプルの上面、または左テンプルなどの頭部装着型デバイスの他の位置に配置され得ることにも留意されたい。 It should also be noted that the multi-function button and/or touch sensor area may be located at other locations on the head-worn device, such as, for example, on the outer surface of the temple, the top surface of the temple, or on the left temple.

例えば、一つまたは複数の実施形態において、多機能ボタンは、右テンプルの上面に位置する。使用中、ユーザは2本の指で右テンプルをつかみ、1本の指はテンプルの底面に置かれ、もう1本の指はテンプルの上面に置かれる。例えば、一つのシナリオにおいて、ユーザは右の親指を右テンプルの下側に置き、右の中指を右テンプルの上面に置き、それにより右テンプルをつかむ。ユーザは右手の人さし指を使って多機能ボタンを操作できる。そのように配置された多機能ボタンは、前フレームの平面の後ろに位置し、それにより、上記のようにテンプルをつかんだときに、ボタンは、ユーザの人差し指に合わせて、その人差し指で操作され得る。 For example, in one or more embodiments, the multifunction button is located on the top surface of the right temple. In use, the user grasps the right temple with two fingers, one finger resting on the bottom surface of the temple and the other finger resting on the top surface of the temple. For example, in one scenario, the user places the right thumb on the underside of the right temple and the right middle finger on the top surface of the right temple, thereby grasping the right temple. The user can operate the multifunction button using the index finger of the right hand. The multifunction button so positioned is located behind the plane of the front frame, such that when the temple is grasped as described above, the button is aligned with and can be operated by the user's index finger.

様々な実施形態において、ユーザが自転車に乗るなどの活動を行いつつ、ユーザが多機能ボタンを操作している場合、多機能ボタンのそのような配置は、より容易に操作される。 In various embodiments, such a placement of the multi-function button makes it easier to operate when the user is operating the multi-function button while engaging in an activity such as riding a bicycle.

いくつかの実施形態において、多機能ボタンの位置に対するユーザの1本または複数の指の整列位置として機能するために、突起、くぼみ、または他の形状の整列マークは、テンプルに形成された。多機能ボタンを整列位置からの指定される距離の所に配置すると、眼鏡がユーザの頭にある場合、ユーザは多機能ボタンを素早く見つけることができる。いくつかの実施形態において、ユーザがテンプルとフロントフレームとの接合部において親指と中指でテンプルをつかむ場合、整列が提供される。 In some embodiments, a protrusion, indentation, or other shaped alignment mark is formed on the temple to serve as an alignment location for one or more of the user's fingers relative to the location of the multi-function button. Placing the multi-function button at a specified distance from the alignment location allows the user to quickly find the multi-function button when the glasses are on the user's head. In some embodiments, alignment is provided when the user grasps the temple with their thumb and middle finger at the junction of the temple and the front frame.

多機能ボタンは右テンプルに位置するように示されるが、多機能ボタンはまた、眼鏡デバイスの左テンプルに位置することができる。左利きのユーザは、多機能ボタンとタッチ・センサを左テンプルに配置することを好むかもしれないが、右利きのユーザは、多機能ボタンとタッチ・センサを右テンプルに配置することを好むかもしれない。したがって、本発明の実施形態は、ボタン/テンプル構成のいずれかの中に構成される。 Although the multi-function button is shown located on the right temple, the multi-function button can also be located on the left temple of the eyewear device. A left-handed user may prefer to have the multi-function button and touch sensor located on the left temple, while a right-handed user may prefer to have the multi-function button and touch sensor located on the right temple. Thus, embodiments of the present invention may be configured in either button/temple configuration.

姿勢検出
様々な実施形態において、ハードウェア・アーキテクチャは、上記のようなタッチ・センサおよび多軸モーション・センサを含む。いくつかの実施形態において、九(9)軸モーション・センサが使用される。センサ・データは、さまざまな頭の姿勢を検出するために使用される。頭の姿勢が検出されると、システムは対応するアクションを実行する。一例において、電話がかかってきたとき、ユーザは、電話に出るために、上下などの一方向にうなずくことができる。同様に、左から右または右から左へ首を振ることは、システムにより、電話を拒否すると解釈される。例えば、電話がかかってきたら、ユーザはタッチ・センサに指を置いて、下へうなずくことにより、電話に出ることができる。または、タッチ・センサに指を置いて、ユーザは自分の首を振ることにより、電話を拒否する。
Posture Detection In various embodiments, the hardware architecture includes touch sensors and multi-axis motion sensors as described above. In some embodiments, a nine (9) axis motion sensor is used. The sensor data is used to detect various head postures. Once the head posture is detected, the system performs a corresponding action. In one example, when a call comes in, the user can nod in one direction, such as up or down, to answer the call. Similarly, shaking the head from left to right or right to left is interpreted by the system to reject the call. For example, when a call comes in, the user can answer the call by placing a finger on the touch sensor and nodding down. Or, the user can reject the call by placing a finger on the touch sensor and shaking their head.

いくつかの実施形態において、多軸センサは、ユーザの姿勢検出に使用される。様々な実施形態において、センサは、加速度計データ、ジャイロスコープ・データ、および磁力計データを収集してシステムに渡し、それにより、上の図と併せて説明するように、中央処理装置(CPU)、DSPなどにおいて実行されるソフトウェア・アルゴリズムを使用してそれらのデータを処理する。いくつかの実施形態において、センサは、3つの直交軸を使用して構成される。ユーザの頭の姿勢を検出するために、それらのデータは、以下の一つまたは複数を使用して処理される。ソフトウェア・アルゴリズム、CPU、およびDSPである。様々な実施形態において、ユーザの頭が長い間ずっと適切な位置にない場合、音声メッセージは、生成されて、スピーカを介してユーザにブロードキャストされる。例えば、ユーザへのそのようなメッセージは、ユーザが是正措置を取り、姿勢を改善することを可能にする。 In some embodiments, multi-axis sensors are used for user posture detection. In various embodiments, the sensors collect and pass accelerometer, gyroscope, and magnetometer data to a system that processes the data using software algorithms running in a central processing unit (CPU), DSP, etc., as described in conjunction with the diagram above. In some embodiments, the sensors are configured using three orthogonal axes. To detect the user's head posture, the data is processed using one or more of the following: software algorithms, CPU, and DSP. In various embodiments, if the user's head is not in the proper position for a long period of time, an audio message is generated and broadcast to the user via a speaker. For example, such a message to the user allows the user to take corrective action and improve posture.

オーディオ内容
上記のように、様々な実施形態において、頭部装着型デバイス(眼鏡デバイス)に構成されたシステムとの電話を容易にするために、頭部装着型デバイスは、モバイル・デバイスと組み合わせて使用される。音楽などの内容は、モバイル・デバイスを介して頭部装着型デバイスにストリーミングすることができる。内容ストリームは、「クラウド」、つまり、インターネット、またはローカル・ネットワークから発信され、頭部装着型デバイスにストリーミングされることもできる。さらに、システムを備えているローカル・ストレージ(図16)、またはシステムにより使用するために頭部装着型デバイスにおいて構成されているローカル・ストレージ(図16)は、頭部装着型デバイスに組み込まれたスピーカを介して、ユーザに再生する内容のソースを提供するように使用されることができる。したがって、様々な実施形態において、内容は、モバイル・デバイスと組み合わせている頭部装着型デバイス、またはモバイル・デバイスを使用しない頭部装着型デバイスの単独の配置を介して、ユーザに再生される。
Audio Content As mentioned above, in various embodiments, the head-mounted device is used in combination with a mobile device to facilitate a call with a system configured on the head-mounted device (glasses device). Content such as music can be streamed to the head-mounted device via the mobile device. Content streams can also originate from the "cloud", i.e., the Internet, or a local network, and streamed to the head-mounted device. Additionally, local storage provided with the system (FIG. 16) or configured in the head-mounted device for use by the system (FIG. 16) can be used to provide a source of content to play to the user via speakers built into the head-mounted device. Thus, in various embodiments, content is played to the user via the head-mounted device in combination with the mobile device, or via a standalone arrangement of the head-mounted device without the use of a mobile device.

電話の応答
様々な実施形態において、様々な方法を利用して電話に出ることができる。電話は音声インターフェースにより応答および/または終了することができ、その音声インターフェースは、ローカル音声認識システムを利用して、「ANSWER」などの制御語を使用して電話を受けたり、「GOODBYE」などの制御語を使用して電話を終了したりする。または、「タッチ・センサ」および/または「ボタン」などの物理センサのうちの一つまたは複数を使用して電話に出ることもできる。または、加速度計、ジャイロスコープなどから出力されたデータを利用して頭の姿勢を分析することにより、電話に出ることもできる。電話に出るために、上記の一つまたは複数(つまり、音声認識、センサ出力、および姿勢識別)を組み合わせることができることには留意されたい。同様に、頭部装着型デバイスに組み込まれたシステムを介してユーザにオーディオ内容の選択および/または再生を提供するために、上記の一つまたは複数を組み合わせることができる。
Answering a Call In various embodiments, a call can be answered using various methods. A call can be answered and/or ended by a voice interface that utilizes a local voice recognition system to answer the call using a control word such as "ANSWER" and end the call using a control word such as "GOODBYE". Alternatively, a call can be answered using one or more of physical sensors such as "touch sensors" and/or "buttons". Alternatively, a call can be answered by analyzing head posture using data output from an accelerometer, gyroscope, etc. It is noted that one or more of the above (i.e., voice recognition, sensor output, and posture identification) can be combined to answer a call. Similarly, one or more of the above can be combined to provide the user with audio content selection and/or playback via a system integrated into the head-worn device.

コマンドと制御
システム制御 ― ウェイク・アップ・ワードを利用して、例えば、「SOLOS」などのウェイク・アップ・ワードを使用して、システムをスリープ状態から起動する。内容制御 ― 「ランニング音楽を再生する」、「曲をスキップする」、「音量を上げる」、「音量を下げる」など。電話制御 ― 例えば、「「名前」に電話をかける」(「名前」に対応する電話番号を、例えば、連絡先から選択できる)、「音量を上げる」、「音量を下げる」。情報制御 ― 例えば、「インターネットの閲覧」、「温度」のチェック、「天気」をチェックする、「ナビゲーション」など。それらの例は、単に説明のために提供されており、本発明の実施形態を制限するものではない。
Commands and Control System Control - Utilizing a wake up word, e.g., waking up the system from a sleep state using a wake up word such as "SOLOS". Content Control - "Play running music", "Skip song", "Volume up", "Volume down", etc. Phone Control - e.g., "Call 'name'" (a phone number corresponding to the "name" can be selected, e.g., from Contacts), "Volume up", "Volume down". Information Control - e.g., "Browse the Internet", "Check the temperature", "Check the weather", "Navigation", etc. These examples are provided for illustrative purposes only and are not intended to limit the embodiments of the present invention.

磁力計
様々な実施形態において、磁力計は、頭部装着型デバイスに組み込まれた。いくつかの実施形態において、磁力計は3軸磁力計である。頭部装着型デバイスの磁力計は、ナビゲーションのために使用され、それにより地球の磁場に対するユーザの向きを確認する。頭部装着型デバイスに取り付けられている磁力計は、ユーザの身に付ける場合、ユーザの動きを合わせる固定されたポインティング方向を持つ。したがって、ユーザの携帯電話が、ユーザの指している方向と必ずしも一致していないため、頭部装着型デバイスからの磁力計の出力は、ユーザの携帯電話に組み込まれできる磁力計よりも有用な信号を提供する。
Magnetometer In various embodiments, a magnetometer is incorporated into the head-worn device. In some embodiments, the magnetometer is a three-axis magnetometer. The magnetometer in the head-worn device is used for navigation, thereby ascertaining the user's orientation relative to the Earth's magnetic field. The magnetometer attached to the head-worn device, when worn by the user, has a fixed pointing direction that aligns with the user's movements. Thus, the magnetometer output from the head-worn device provides a more useful signal than a magnetometer that may be incorporated into the user's mobile phone, since the user's mobile phone does not necessarily match the direction the user is pointing.

様々な実施形態において、例えば、磁力計の出力は、アプリケーション・プログラム内において使用され、そのアプリケーション・プログラムは、地図を利用してユーザの方向を表示し、ユーザの北向きの変化に応じてデジタル・マップを回転させる。 In various embodiments, for example, the magnetometer output is used within an application program that uses a map to display the user's orientation and rotates a digital map in response to changes in the user's north orientation.

加速度計
様々な実施形態において、一つまたは複数の加速度計は、頭部装着型デバイスにおいて提供される。いくつかの実施形態において、3軸加速度計が提供される。
Accelerometer In various embodiments, one or more accelerometers are provided in the head worn device, hi some embodiments, a three-axis accelerometer is provided.

ジャイロスコープ
様々な実施形態において、一つまたは複数のジャイロスコープは、頭部装着型デバイスにおいて提供される。いくつかの実施形態において、3軸ジャイロスコープが提供される。
Gyroscope In various embodiments, one or more gyroscopes are provided in the head worn device, hi some embodiments, a three-axis gyroscope is provided.

一つまたは複数のテンプルに収容されたバッテリ
様々な実施形態において、システムに電力を供給するために提供される一つまたは複数のバッテリは、一つまたは複数のテンプルのボリューム内に格納される。バッテリは、リチウムイオンなどの化学物質または他のバッテリ化学物質で構成されており、それにより、長寿命をサポートし、バッテリの寿命全体にわたって多くの再充電サイクルを可能にする。頭部装着型デバイスに必要な期待電力に応じて、さまざまなアプリケーションにいくつかの異なるサイズのテンプルを提供することができる。例えば、一部のスポーツ・イベントにおいて、システムに6時間以上の「オン」時間が必要になる場合がある。そのような場合、大きなテンプルには、長寿命のバッテリが収納される。容積がより小さいテンプルには、充電サイクル間の有効時間が短い小型のバッテリが収納される。頭部装着型デバイスは、スポーツ活動、ビジネス用途、家庭用、および商業用などのさまざまな用途のために構成される。スポーツ活動のいくつかの非限定的な例は、これらに限定されないが、自転車、ランニング、スキー、ボート、ハイキングなどである。
Batteries Housed in One or More Temples In various embodiments, one or more batteries provided to power the system are housed within the volume of one or more temples. The batteries are constructed with chemistries such as lithium ion or other battery chemistries, which support a long life span and allow many recharge cycles over the life of the battery. Several different sizes of temples can be provided for different applications depending on the expected power required by the head-worn device. For example, some sporting events may require six or more hours of "on" time for the system. In such cases, the larger temples house the longer-life batteries. The smaller volume temples house the smaller batteries that have a shorter effective time between charge cycles. The head-worn device is configured for various applications such as sporting activities, business applications, home use, and commercial use. Some non-limiting examples of sporting activities are, but are not limited to, biking, running, skiing, boating, hiking, etc.

頭部装着型デバイスにわたるシステムの分布
一つまたは複数の実施形態において、頭部装着型デバイスの電子システムは、左テンプル、前フレーム、および右テンプルに分布している。一つまたは複数の実施形態において、左テンプルは、バッテリ、一つまたは複数のマイク、および少なくとも一つのスピーカを収容する。右テンプルは、バッテリ、システム・エレクトロニクス、一つまたは複数のマイク、および少なくとも一つのスピーカを収容する。いくつかの実施形態において、システムのコンポーネント(テンプルおよび前フレーム)間の電気的接続は、取り外し可能なコネクタの形で提供される。いくつかの実施形態において、それらのコネクタはヒンジ式にすることができる。
Distribution of the system across the head-worn device In one or more embodiments, the electronic system of the head-worn device is distributed across the left temple, the front frame, and the right temple. In one or more embodiments, the left temple houses a battery, one or more microphones, and at least one speaker. The right temple houses a battery, system electronics, one or more microphones, and at least one speaker. In some embodiments, the electrical connections between the components of the system (temples and front frame) are provided in the form of removable connectors. In some embodiments, those connectors can be hinged.

異なる実施形態を議論し理解する目的で、技術およびアプローチを説明するために、当業者は様々な用語を使用することを理解されたい。さらに、説明する際、説明のために、多数の特定の詳細が示され、それにより、実施形態の完全な理解を提供する。しかし、当業者が、これらの特定の詳細がなくても実施形態を実施できることは明らかである。いくつかの実施形態において、あいまいにするのを避けるために、よく知られた構造およびデバイスを詳細ではなくブロック図の形で示している。それらの実施形態は、当業者が本発明を実施できるように十分詳細に説明されており、他の実施形態を利用して本発明の範囲を逸脱しない限り、論理的な、機械的な、電気的な、およびその他の変更を行うことができることを理解されたい。 It should be understood that for purposes of discussing and understanding different embodiments, those skilled in the art use various terms to describe techniques and approaches. Furthermore, in the description, for purposes of explanation, numerous specific details are set forth, thereby providing a thorough understanding of the embodiments. However, it is apparent that those skilled in the art can practice the embodiments without these specific details. In some embodiments, well-known structures and devices are shown in block diagram form rather than in detail to avoid obscuration. The embodiments are described in sufficient detail to enable those skilled in the art to practice the invention, and it should be understood that logical, mechanical, electrical, and other changes can be made without departing from the scope of the invention by utilizing other embodiments.

説明のいくつかの部分は、アルゴリズム、およびコンピュータ・メモリ内のデータ・ビットなどに対する運用の記号表現で提示され得る。それらのアルゴリズムの説明および表現は、データ処理技術の当業者が作業の内容を他の当業者に最も効果的に伝えるために使用する手段である。そこでのアルゴリズムは、一般的に、望ましい結果につながる行為のセルフコンシステントのシーケンスであると考えられている。それらの行為は、物理量の物理的な操作を必要とする行為である。通常に、必ずしもそうではないが、それらの量は、保存、転送、結合、比較、その他の操作が可能な電気信号または磁気信号の形を取る。主に一般的な使用上の理由で、それらの信号をビット、値、要素、記号、文字、用語、数字などと呼ぶことは、いつも便利であることが証明された。 Some portions of the description may be presented in terms of algorithms and symbolic representations of operations on data bits and the like within a computer memory. These algorithmic descriptions and representations are the means used by those skilled in the data processing arts to most effectively convey the substance of their work to others skilled in the art. An algorithm here is generally conceived to be a self-consistent sequence of acts leading to a desired result. These acts are those requiring physical manipulations of physical quantities. Usually, though not necessarily, these quantities take the form of electrical or magnetic signals capable of being stored, transferred, combined, compared and otherwise manipulated. It has proven convenient at times, primarily for reasons of common usage, to refer to these signals as bits, values, elements, symbols, characters, terms, numbers, or the like.

しかし、それらおよび類似の用語はすべて、適切な物理量に関連付けられており、それらの量に適用される便利なラベルにすぎないことに留意されたい。別途説明されない限り、議論から明らかなように、説明全体にわたって「処理」または「コンピューティング」または「計算」または「決定」または「表示」などの用語を使用する議論は、コンピュータ・システムまたは類似の電子コンピューティング・デバイスの動作およびプロセスを参照することができ、そのコンピュータ・システムまたは類似の電子コンピューティング・デバイスは、コンピュータ・システムのレジスタおよびメモリ内の物理(電子)量として表されるデータを操作して、コンピュータ・システムのメモリまたはレジスタまたは他のそのような情報記憶装置、送信装置、または表示装置内の物理(電子)量として表される他のデータに変換する。 However, it should be noted that all of these and similar terms are associated with the appropriate physical quantities and are merely convenient labels applied to those quantities. Unless otherwise stated, as will be apparent from the discussion, discussions using terms such as "processing" or "computing" or "calculating" or "determining" or "displaying" throughout the description may refer to operations and processes of a computer system or similar electronic computing device that manipulates and converts data represented as physical (electronic) quantities in the computer system's registers and memory into other data represented as physical (electronic) quantities in the computer system's memory or registers or other such information storage, transmission, or display devices.

そこでの動作を実行する装置は、本発明を実施することができる。この装置は、必要な目的のために特別に構築されてもよいし、またはコンピュータに記憶されているコンピュータ・プログラムにより選択的に作動または再構成された汎用コンピュータを含んでもよい。コンピュータ・プログラムは、コンピュータ可読記憶媒体に記憶されることができる。当該コンピュータ可読記憶媒体は、例えば、これに限定するものではないが、フロッピー・ディスク(登録商標)、ハード・ディスク、光ディスク、コンパクト・ディスク読み取り専用メモリ(CD-ROMs)、磁気ディスク、読み取り専用メモリ(ROMs)、ランダム・アクセス・メモリ(RAMs)、ダイナミック・ランダム・アクセス・メモリ(DRAM)、電気的にプログラム可能な読み取り専用メモリ(EPROM)、電気的に消去可能なプログラム可能な読み取り専用メモリ(EEPROMs)、フラッシュ・メモリ、磁気または光学カード、RAIDなどを含む任意のタイプのディスク、またはコンピュータのローカルまたはコンピュータのリモートのいずれかで電子命令の格納に適用する任意のタイプのメディアである。 Any apparatus for performing the operations therein may embody the invention. This apparatus may be specially constructed for the required purposes, or may comprise a general-purpose computer selectively activated or reconfigured by a computer program stored in the computer. The computer program may be stored on a computer-readable storage medium, such as any type of disk, including, but not limited to, floppy disks, hard disks, optical disks, compact disk read-only memories (CD-ROMs), magnetic disks, read-only memories (ROMs), random access memories (RAMs), dynamic random access memories (DRAMs), electrically programmable read-only memories (EPROMs), electrically erasable programmable read-only memories (EEPROMs), flash memory, magnetic or optical cards, RAID, etc., or any type of media adapted for storage of electronic instructions, either locally or remotely from the computer.

本明細書に提示されるアルゴリズムおよび表示は、特定のコンピュータまたは他の装置に本質的に関連するものではない。本明細書の教示に従って、様々な汎用システムは、プログラムと共に使用されることができ、または必要な方法を実行するためのより特殊な装置を構築することが便利であることが証明された。例えば、実施形態による方法はいずれも、汎用プロセッサをプログラミングすることにより得られるハードウェア回路、またはハードウェアおよびソフトウェアの任意の組み合わせにより、実装されることができる。当業者は、実施形態が、ハンドヘルド・デバイス、マルチプロセッサ・システム、マイクロプロセッサベースまたはプログラム可能な家庭用電化製品、デジタル信号処理(DSP)デバイス、セット・トップ・ボックス、ネットワークPC、ミニコンピュータ、メインフレーム・コンピュータなどの説明されたもの以外の他のコンピュータ・システム構成により実施できることをすぐに理解する。それらの実施形態は、分散コンピューティング環境で実施されることができ、その中のタスクが通信ネットワークを介してリンクされたリモート処理デバイスにより実行される。 The algorithms and displays presented herein are not inherently related to any particular computer or other apparatus. Various general purpose systems can be used with programs in accordance with the teachings herein, or it may prove convenient to construct more specialized apparatus to perform the required methods. For example, any of the methods according to the embodiments can be implemented by hardware circuits obtained by programming a general purpose processor, or any combination of hardware and software. Those skilled in the art will readily appreciate that the embodiments can be practiced with other computer system configurations than those described, such as handheld devices, multiprocessor systems, microprocessor-based or programmable consumer electronics, digital signal processing (DSP) devices, set-top boxes, network PCs, minicomputers, mainframe computers, and the like. The embodiments can also be practiced in distributed computing environments, where tasks therein are performed by remote processing devices linked through a communications network.

本明細書の方法は、コンピュータ・ソフトウェアを使用して実装されることができる。認知された標準に準拠するプログラミング言語で書く場合に、さまざまなハードウェア・プラットフォームで実行したり、さまざまなオペレーティング・システムとインターフェースしたりするように、それらの方法を実装するように設計される命令シーケンスをコンパイルすることができる。さらに、実施形態は、特定のプログラミング言語を参照して説明されていない。本明細書に記載される実施形態の教示を実施するために、様々なプログラミング言語を使用することができることを理解されたい。さらに、当技術分野において、ある形式または他の形式(例えば、プログラム、手順、アプリケーション、ドライバーなど)のソフトウェアは、一般的に、あるアクションを実行すること、またはある結果を引き起こすことと言われる。そのような表現は、コンピュータがソフトウェアを実行することにより、コンピュータのプロセッサがアクションを実行したり、結果を生成したりすることについての単なる短い表現である。 The methods herein can be implemented using computer software. When written in a programming language conforming to a recognized standard, instruction sequences designed to implement those methods can be compiled to run on a variety of hardware platforms and interface with a variety of operating systems. Additionally, the embodiments are not described with reference to a particular programming language. It should be understood that a variety of programming languages can be used to implement the teachings of the embodiments described herein. Additionally, in the art, software in one form or another (e.g., programs, procedures, applications, drivers, etc.) is generally referred to as performing an action or causing a result. Such expressions are merely shorthand for a computer executing the software, thereby causing the computer's processor to perform an action or produce a result.

当業者は、さまざまな用語および技術を使用して、通信、プロトコル、アプリケーション、実装、メカニズムなどを説明することを理解されたい。そのような技術の一つは、アルゴリズムまたは数式により、技法の実装を説明することである。すなわち、技術は、例えば、コンピュータのコードを実行することとして実装され得るが、その技術の表現は、式、アルゴリズム、または数式として、より適切かつ簡潔に伝えられて伝達され得る。したがって、当業者は、A+B=Cを加算関数ブロックと表わすことのハードウェアおよび/またはソフトウェアにおける実装が、二つの入力(AおよびB)を取り、総和出力(C)を生成することであることを認識できる。したがって、説明としての式、アルゴリズム、または数式の使用は、少なくともハードウェアおよび/またはソフトウェア(例えば、コンピュータ・システム、本発明の技術が当該コンピュータ・システムにおいて、実施形態として実施され得る)において、物理的な表現を有するものとして理解されるべきである。 Those skilled in the art will appreciate that a variety of terms and techniques are used to describe communications, protocols, applications, implementations, mechanisms, and the like. One such technique is to describe the implementation of a technique with an algorithm or formula. That is, a technique may be implemented, for example, as executing computer code, but the expression of the technique may be more appropriately and succinctly conveyed and communicated as a formula, algorithm, or formula. Thus, those skilled in the art will appreciate that the implementation in hardware and/or software of representing A+B=C as an additive function block takes two inputs (A and B) and produces a sum output (C). Thus, the use of a formula, algorithm, or formula as a description should be understood as having a physical expression, at least in hardware and/or software (e.g., a computer system, in which the techniques of the present invention may be implemented as embodiments).

非一時的な機械可読媒体は、機械(例えば、コンピュータ)により読み取り可能な形式で情報(プログラム・コードなど)を記憶するための任意のメカニズムを含むことが理解される。例えば、コンピュータ可読媒体と同義で呼ばれる機械可読媒体は、リードオンリーメモリ(ROM)、ランダム・アクセス・メモリ(RAM)、磁気ディスク記憶媒体、光学記憶媒体、フラッシュ・メモリ・デバイスを含み、伝播信号(例えば、搬送波、赤外線信号、デジタル信号など)を介する電気的、光学的、音響的、または他の形態の情報伝達を除く。 It is understood that non-transitory machine-readable media includes any mechanism for storing information (such as program code) in a form readable by a machine (e.g., a computer). For example, machine-readable media that are synonymous with computer-readable media include read-only memory (ROM), random access memory (RAM), magnetic disk storage media, optical storage media, and flash memory devices, and exclude electrical, optical, acoustic, or other forms of information transmission via propagated signals (e.g., carrier waves, infrared signals, digital signals, etc.).

本説明で使用される「一実施形態」または「実施形態」または類似の語句は、説明されている特徴が本発明の少なくとも一つの実施形態に含まれることを意味する。本説明における「一実施形態」への言及は、必ずしも同じ実施形態を指すとは限らない。しかし、それらの実施形態は相互に排他的ではない。また、「一実施形態」は、本発明の実施形態が単一であることを意味するものではない。例えば、「一実施形態」に記載されている特徴、構成、行為などは、他の実施形態にも含まれ得る。したがって、本発明は、本明細書に記載されている実施形態の様々な組み合わせおよび/または統合を含むことができる。 As used in this description, "one embodiment" or "embodiment" or similar phrases means that the described feature is included in at least one embodiment of the invention. References in this description to "one embodiment" do not necessarily refer to the same embodiment. However, the embodiments are not mutually exclusive. Also, "one embodiment" does not imply a single embodiment of the invention. For example, features, configurations, acts, etc. described in "one embodiment" may also be included in other embodiments. Thus, the present invention may include various combinations and/or integrations of the embodiments described herein.

本発明をいくつかの実施形態において説明してきたが、当業者は、本発明が説明した実施形態に限定されず、添付の特許請求の範囲の精神および範囲内で修正および変更して実施できることを理解できる。したがって、当該説明は、限定ではなく例示と見なされるべきである。


While the present invention has been described in several embodiments, those skilled in the art will understand that the invention is not limited to the described embodiments, but can be practiced with modification and alteration within the spirit and scope of the appended claims. Accordingly, the description should be considered illustrative rather than limiting.


Claims (24)

眼鏡デバイスで使用するためのコンポーネントであって、
前記眼鏡デバイスは、フレーム・シャーシを含み、
前記コンポーネントは、第一交換可能なテンプルと、第二交換可能なテンプルと、少なくとも一つの組み込み電子システムと、前記少なくとも一つの組み込み電子システムと電気的に通信する複数のセンサと、を含み、
前記少なくとも一つの組み込み電子システムおよび前記複数のセンサは、前記第一交換可能なテンプルまたは/および前記第二交換可能なテンプルに組み込まれ、
前記少なくとも一つの組み込み電子システムは、無線通信とセンサ信号の処理とのために構成され、プロセッサと、ウェイク・アップ・ワードを検出するために使用される音声ウェイク・アップ・チップと、を含み、
前記複数のセンサは、複数の近接センサと、複数の運動センサと、タッチ・センサと、を含み、
前記第一交換可能なテンプルは、蝶番コネクタを介して前記眼鏡デバイスのフレーム・シャーシに取り付けられ、
前記眼鏡デバイスが着用時において開いた方向に置かれる場合、前記蝶番コネクタは、
前記眼鏡デバイスの開いた状態を感知し、電源を入れ、
前記第一交換可能なテンプルが内側に折りたたまれている場合、前記蝶番コネクタは、前記複数の近接センサおよび前記複数の運動センサのうちの一つまたは複数から受信される信号と併せて、前記電源を切断し、
スリープ・モードでは、前記ウェイク・アップ・ワードが前記音声ウェイク・アップ・チップで検出された場合、前記プロセッサは、パワー・アップされ、ラン状態に移行し、
前記タッチ・センサにおいてユーザで実行されるダブル・タップにより、前記音声ウェイク・アップ・チップを作動させるまたは無効にすることを特徴とするコンポーネント。
1. A component for use in an eyewear device, comprising:
The eyewear device includes a frame chassis;
the component includes a first interchangeable temple, a second interchangeable temple, at least one embedded electronic system, and a plurality of sensors in electrical communication with the at least one embedded electronic system;
the at least one embedded electronic system and the plurality of sensors are embedded in the first interchangeable temple or/and the second interchangeable temple;
the at least one embedded electronic system is configured for wireless communication and processing of sensor signals, and includes a processor and a voice wake-up chip used to detect a wake-up word;
the plurality of sensors includes a plurality of proximity sensors, a plurality of motion sensors, and a touch sensor;
the first interchangeable temple is attached to a frame chassis of the eyewear device via a hinge connector;
When the eyewear device is in an open orientation when worn, the hinge connector
Detecting an open state of the glasses device and turning it on;
when the first interchangeable temple is folded inward, the hinge connector in conjunction with signals received from one or more of the plurality of proximity sensors and the plurality of motion sensors disconnects the power source;
In a sleep mode, when the wake-up word is detected by the voice wake-up chip, the processor is powered up and transitions to a run state;
A component that activates or disables the voice wake-up chip upon a double tap performed by a user on the touch sensor.
前記プロセッサは、前記複数のセンサからの出力を受信し、前記複数のセンサのうちの少なくとも一つの出力によりシステム制御パラメータを確定するように構成され、
前記プロセッサは、前記複数のセンサからユーザの頭の動きのデータを抽出し、前記ユーザの頭の動きのデータは、システム制御パラメータとしてシステムにより使用されることを特徴とする請求項1に記載のコンポーネント。
the processor is configured to receive outputs from the plurality of sensors and determine a system control parameter according to an output of at least one of the plurality of sensors;
2. The component of claim 1, wherein the processor extracts user head movement data from the plurality of sensors, the user head movement data being used by the system as a system control parameter.
前記少なくとも一つの組み込み電子システムは、前記プロセッサと電気的に接続される無線通信システムをさらに含み、
前記プロセッサは、前記システム制御パラメータを利用し、前記無線通信システムによって受信される電話に出るまたは前記電話を拒否するように、さらに構成されていることを特徴とする請求項2に記載のコンポーネント。
the at least one embedded electronic system further comprising a wireless communication system electrically connected to the processor;
3. The component of claim 2, wherein the processor is further configured to utilize the system control parameters to answer or reject calls received by the wireless communication system.
前記コンポーネントは、複数の前記第一交換可能なテンプルと、複数の前記第二交換可能なテンプルと、を含み、
各前記テンプルは、前記眼鏡デバイスと着脱可能に連結できるように構成され、
異なる前記テンプルを交換することにより、前記眼鏡デバイスに異なるカスタマイズされる機能を提供するために、各前記テンプルは、それぞれ異なるエレクトロニクスを有するように構成され、
前記眼鏡デバイスには、さまざまな用途のための複数のアプリケーションが搭載され、
前記複数の第一交換可能なテンプルまたは/および前記複数の第二交換可能なテンプルのうちの一部のテンプルは、異なるサイズを有し、
前記異なるサイズを有するテンプルには、それぞれ、前記さまざまな用途のための複数のアプリケーションに合う異なる寿命のバッテリが収納される、ことを特徴とする請求項1に記載のコンポーネント。
The component includes a plurality of the first interchangeable temples and a plurality of the second interchangeable temples;
Each of the temples is configured to be removably coupled to the eyewear device;
each of the temples is configured with different electronics to provide different customized functions to the eyewear device by interchanging different temples;
The glasses device is equipped with a plurality of applications for various uses,
some of the first plurality of interchangeable temples or/and some of the second plurality of interchangeable temples have different sizes;
The component of claim 1 , wherein the temples having different sizes each house a battery with a different life span to suit multiple applications for the various uses.
前記第一交換可能なテンプルまたは/および前記第二交換可能なテンプルには、前記プロセッサと電気的に接続される少なくとも一つのスピーカが設けられ、
前記プロセッサは、前記システム制御パラメータを使用し、音楽の再生のために、前記少なくとも一つのスピーカを制御するようにさらに構成されていることを特徴とする請求項2に記載のコンポーネント。
The first interchangeable temple or/and the second interchangeable temple are provided with at least one speaker electrically connected to the processor;
3. The component of claim 2, wherein the processor is further configured to use the system control parameters to control the at least one speaker for playing music.
前記コンポーネントは、前記フレーム・シャーシに固定される眉バーと、をさらに含み、
前記第一交換可能なテンプルは、前記蝶番コネクタを介して前記フレーム・シャーシに取り付けられ、
前記蝶番コネクタは、前記フレーム・シャーシおよび前記眉バーに固定され、
前記眉バーのボリューム内には、電気経路が配線され、
前記蝶番コネクタは、前記眉バーを介して前記第二交換可能なテンプルに電力およびデータを転送する、ことを特徴とする請求項1に記載のコンポーネント。
The component further includes a brow bar secured to the frame chassis;
the first interchangeable temple is attached to the frame chassis via the hinge connector;
the hinge connector is secured to the frame chassis and the brow bar;
An electrical pathway is routed within the volume of the brow bar;
The component of claim 1 , wherein the hinged connector transfers power and data to the second interchangeable temple through the brow bar.
前記複数のセンサは、
三つの相互に直交する軸X、Y、およびZに沿って加速度を測定するように構成されるセンサと、
三つの相互に直交する軸X、Y、およびZに沿ったジャイロスコープ出力向けに構成されるセンサと、
三つの相互に直交する軸X、Y、およびZに沿った磁力計出力向けに構成されるセンサとのうちの少なくとも一つ、をさらに含む、ことを特徴とする請求項1に記載のコンポーネント。
The plurality of sensors include
a sensor configured to measure acceleration along three mutually orthogonal axes X, Y, and Z;
a sensor configured for gyroscope output along three mutually orthogonal axes X, Y, and Z;
2. The component of claim 1, further comprising at least one of: a sensor configured for magnetometer output along three mutually orthogonal axes X, Y, and Z.
前記第一交換可能なテンプルまたは/および前記第二交換可能なテンプルには、前記プロセッサと電気的に接続されるマイクが設けられ、
前記音声ウェイク・アップ・チップは、前記マイクからのオーディオ信号を受信し、前記ウェイク・アップ・ワードが検出された場合に、前記少なくとも一つの組み込み電子システムをラン状態に移行するように構成されること、を特徴とする請求項3に記載のコンポーネント。
The first and/or second interchangeable temples are provided with a microphone electrically connected to the processor;
4. The component of claim 3, wherein the voice wake-up chip is configured to receive an audio signal from the microphone and transition the at least one embedded electronic system to a run state when the wake-up word is detected.
前記音声ウェイク・アップ・チップは、コマンドが前記音声ウェイク・アップ・チップにより識別された場合に、前記無線通信システムにより、前記眼鏡デバイスとリモートデバイスとの間で無線音声通信の操作をするために、前記マイクおよび前記プロセッサからのオーディオ信号を受信するように、さらに構成されること、を特徴とする請求項8に記載のコンポーネント。 The component of claim 8, wherein the voice wake-up chip is further configured to receive audio signals from the microphone and the processor for operating wireless audio communications between the glasses device and a remote device over the wireless communication system when a command is identified by the voice wake-up chip. 前記音声ウェイク・アップ・チップは、コマンドが前記音声ウェイク・アップ・チップにより識別された場合に、内容制御の操作をするために、前記マイクからのオーディオ信号を受信するように構成されること、を特徴とする請求項8に記載のコンポーネント。 10. The component of claim 8, wherein the voice wake-up chip is configured to receive an audio signal from the microphone for operating a content control when a command is identified by the voice wake-up chip . 前記音声ウェイク・アップ・チップは、コマンドが前記音声ウェイク・アップ・チップにより識別された場合に、情報制御の操作をするために、前記マイクからのオーディオ信号を受信するように構成されること、を特徴とする請求項8に記載のコンポーネント。 10. The component of claim 8, wherein the voice wake-up chip is configured to receive an audio signal from the microphone for operating an information control when a command is identified by the voice wake-up chip . 眼鏡デバイスで使用するためのコンポーネントであって、
前記眼鏡デバイスは、フレーム・シャーシを含み、
前記コンポーネントは、
複数のテンプルと、
複数のテンプル挿入モジュールと、
無線通信およびセンサ信号の処理のために構成され、前記テンプル挿入モジュールに組み込まれている少なくとも一つの組み込み電子システムと、
前記組み込み電子システムと電気的に通信する複数のセンサと、を含み、
各前記テンプル挿入モジュールは、着脱可能に各前記テンプルの係合部と連結され、
前記複数のセンサは、前記テンプル挿入モジュールまたは/および前記複数のテンプルに組み込まれており、
前記組み込み電子システムは、プロセッサと、ウェイク・アップ・ワードを検出するために使用される音声ウェイク・アップ・チップと、をさらに含み、
前記プロセッサは、前記複数のセンサからの出力を受信し、前記複数のセンサのうちの少なくとも一つの出力によりシステム制御パラメータを確定するように構成され、
前記複数のセンサは、複数の近接センサと、複数の運動センサと、タッチ・センサと、を含み、
前記複数のテンプルのうちの第一交換可能なテンプルは、蝶番コネクタを介して前記眼鏡デバイスのフレーム・シャーシに取り付けられ、
前記眼鏡デバイスが着用時において開いた方向に置かれる場合、前記蝶番コネクタは、
前記眼鏡デバイスの開いた状態を感知し、電源を入れ、
前記第一交換可能なテンプルが内側に折りたたまれている場合、前記蝶番コネクタは、前記複数の近接センサおよび前記複数の運動センサのうちの一つまたは複数から受信される信号と併せて、前記電源を切断し、
スリープ・モードでは、前記ウェイク・アップ・ワードが前記音声ウェイク・アップ・チップで検出された場合、前記プロセッサは、パワー・アップされ、ラン状態に移行し、
前記タッチ・センサにおいてユーザで実行されるダブル・タップにより、前記音声ウェイク・アップ・チップを作動させるまたは無効にすること、を特徴とするコンポーネント。
1. A component for use in an eyewear device, comprising:
The eyewear device includes a frame chassis;
The component comprises:
With multiple templates,
A plurality of temple insertion modules;
At least one embedded electronic system configured for wireless communication and processing of sensor signals, the embedded electronic system being integrated into the temple insertion module;
a plurality of sensors in electrical communication with the embedded electronic system;
Each of the temple insertion modules is detachably connected to an engagement portion of each of the temples;
the plurality of sensors are incorporated into the temple insertion module and/or the plurality of temples;
The embedded electronic system further includes a processor and a voice wake-up chip used to detect a wake-up word;
the processor is configured to receive outputs from the plurality of sensors and determine a system control parameter according to an output of at least one of the plurality of sensors;
the plurality of sensors includes a plurality of proximity sensors, a plurality of motion sensors, and a touch sensor;
a first interchangeable temple of the plurality of temples attached to a frame chassis of the eyewear device via a hinge connector;
When the eyewear device is in an open orientation when worn, the hinge connector
Detecting an open state of the glasses device and turning it on;
when the first interchangeable temple is folded inward, the hinge connector in conjunction with signals received from one or more of the plurality of proximity sensors and the plurality of motion sensors disconnects the power source;
In a sleep mode, when the wake-up word is detected by the voice wake-up chip, the processor is powered up and transitions to a run state;
A component characterized in that a double tap performed by a user on the touch sensor activates or disables the voice wake-up chip.
前記コンポーネントは、前記テンプルまたは前記フレーム・シャーシに設けられている多機能ボタンをさらに含み、前記組み込み電子システムは、前記プロセッサと電気的に接続される無線通信システムをさらに含み、
前記プロセッサは、前記多機能ボタンからの信号を受信するように構成され、
前記プロセッサは、前記多機能ボタンがユーザにより押される時間の長さを確定するように構成され、
前記時間の長さは、前記プロセッサにより、
a.)モバイル・デバイスをペアリングすること、
b.)モバイル・デバイスのペアリングを解除すること、
c.)前記テンプルに設けられているマイクロ・ディスプレイ・アセンブリまたは/およびスピーカを制御して内容を再生すること、
d.)前記スピーカにより再生される次の曲を選択すること、
e.)前記無線通信システムにより、前記眼鏡デバイスと前記モバイル・デバイスとの間の無線接続を利用して電話をかけること、
f.)前記無線通信システムによって受信される電話に出ること、および
g.)前記無線通信システムによって受信される電話を拒否することのうちの一つまたは複数を開始するために使用され、
前記多機能ボタンの位置に対するユーザの1本または複数の指の整列位置として機能するために、整列マークは、前記テンプルに形成されていること、を特徴とする請求項12に記載のコンポーネント。
The component further includes a multifunction button provided on the temple or the frame/chassis, and the embedded electronic system further includes a wireless communication system electrically connected to the processor;
the processor is configured to receive a signal from the multi-function button;
the processor is configured to determine a length of time the multi-function button is pressed by a user;
The amount of time is determined by the processor:
a.) pairing a mobile device;
b.) unpairing your mobile device;
c.) controlling a micro display assembly and/or a speaker on said temple to play content;
d.) selecting the next song to be played by said speaker;
e.) making a call using a wireless connection between the glasses device and the mobile device via the wireless communication system;
f.) answering a call received by said wireless communication system; and g.) rejecting a call received by said wireless communication system;
The component of claim 12 , wherein alignment marks are formed on the temple to serve as alignment positions for one or more fingers of a user relative to the position of the multi-function button.
前記複数のセンサは、タッチ・センサをさらに含み、前記組み込み電子システムは、前記プロセッサと電気的に接続される無線通信システムをさらに含み、
前記プロセッサは、前記タッチ・センサからの信号を受信するように構成され、
前記プロセッサは、ユーザからタッチ・センサ表面へのタップ入力、または前記ユーザからタッチ・センサ表面へのスライド入力を処理するように構成され、
前記プロセッサは、タップ入力の受信の後で、一つまたの複数のタップ・アクションを開始するように構成され、
前記タップ・アクションは、
a.)前記テンプルに設けられているマイクロ・ディスプレイ・アセンブリまたは/およびスピーカを制御して内容を再生すること、
b.)前記マイクロ・ディスプレイ・アセンブリまたは/および前記スピーカを制御して内容の再生を一時停止すること、および
c.)前記テンプルに設けられているマイクによる音声制御オーディオ入力、を含み、
前記プロセッサは、ユーザからのスライド入力の受信の後で、以下のスライド・アクションのうちの一つまたの複数を開始するように構成され、
前記スライド・アクションは、
d.)前記無線通信システムによって受信される電話に出ること、
e.)前記無線通信システムによって受信される電話を拒否すること、
f.)前記スピーカの音量を下げること、および
g.)前記スピーカの音量を上げること、を含むこと、を特徴とする請求項12に記載のコンポーネント。
the plurality of sensors further includes a touch sensor, and the embedded electronic system further includes a wireless communication system electrically connected to the processor;
the processor is configured to receive a signal from the touch sensor;
the processor is configured to process a tap input from a user onto a touch sensitive surface or a slide input from the user onto the touch sensitive surface;
the processor is configured to initiate one or more tap actions after receiving a tap input;
The tap action is
a.) controlling a micro display assembly and/or a speaker on said temple to play content;
b.) controlling the micro-display assembly and/or the speaker to pause content playback; and c.) voice-controlled audio input via a microphone in the temple;
The processor is configured to initiate one or more of the following slide actions after receiving a slide input from a user:
The sliding action is
d.) answering a call received by said wireless communication system;
e.) rejecting a call received by said wireless communication system;
13. The component of claim 12, further comprising: f.) decreasing a volume of the speaker; and g.) increasing a volume of the speaker.
前記内容の再生と前記内容の一時停止とを切り替えるタップ入力は、シングル・タップ入力であること、を特徴とする請求項14に記載のコンポーネント。 The component of claim 14, wherein the tap input that switches between playing the content and pausing the content is a single tap input. 前記音声制御を開始するタップ入力は、ダブル・タップ入力であること、を特徴とする請求項14に記載のコンポーネント。 The component of claim 14, wherein the tap input that initiates the voice control is a double tap input. 第一スライド入力で、音量の増分変化を得ること、を特徴とする請求項14に記載のコンポーネント。 The component of claim 14, wherein a first slide input provides an incremental change in volume. 第二スライド入力で、音量の連続的な変化を得、前記第一スライド入力のスライド軌跡の長さは、前記第二スライド入力のスライド軌跡の長さよりも短いこと、を特徴とする請求項17に記載のコンポーネント。 The component of claim 17, characterized in that a second slide input produces a continuous change in volume, and the length of the slide path of the first slide input is shorter than the length of the slide path of the second slide input. 前記プロセッサは、前記近接センサの出力によりユーザの存在を確認し、アクションを実行するように構成され、
前記アクションは、
a.)ユーザは前記眼鏡デバイスを前記ユーザの頭から取り外した場合、前記テンプルに設けられているマイクロ・ディスプレイ・アセンブリまたは/およびスピーカを制御して内容の再生を一時停止すること、
b.)ユーザは前記眼鏡デバイスを前記ユーザの頭に戻した場合、前記マイクロ・ディスプレイ・アセンブリまたは/および前記スピーカを制御して前記内容の再生を再開すること、
c.)前記眼鏡デバイスがユーザの頭から離れたまま、時間が第一所定の時間になったら、前記マイクロ・ディスプレイ・アセンブリまたは/および前記スピーカを制御して前記内容の再生をオフにすること、および
d.)前記眼鏡デバイスがユーザの頭から離れたまま、時間が第二所定の時間になったら、前記眼鏡デバイスの電源を切ることのうちのいずれかであること、を特徴とする請求項12に記載のコンポーネント。
the processor is configured to determine a presence of a user via an output of the proximity sensor and to perform an action;
The action is:
a.) when the user removes the glasses device from the user's head, controlling a micro display assembly and/or a speaker provided on the temple to pause playback of content;
b.) controlling the micro-display assembly and/or the speaker to resume playback of the content when the user places the glasses device back on the user's head;
13. The component of claim 12, further comprising: c.) controlling the micro-display assembly and/or the speaker to turn off playback of the content when the glasses device is away from the user's head and a first predetermined time has elapsed; and d.) powering off the glasses device when the glasses device is away from the user's head and a second predetermined time has elapsed.
眼鏡デバイスを介してユーザに情報を提供する方法であって、
前記眼鏡デバイスが着用時において開いた方向に置かれる場合、前記眼鏡デバイスの第一交換可能なテンプルの蝶番コネクタにより、前記眼鏡デバイスの開いた状態を感知し、電源を入れるステップと、
前記眼鏡デバイスの第一交換可能なテンプルが内側に折りたたまれている場合、前記蝶番コネクタにより、前記眼鏡デバイスに設けられている複数の近接センサおよび複数の運動センサのうちの一つまたは複数から受信される信号と併せて、前記電源を切断するステップと、を含み、
前記方法は、
スリープ・モードでは、ウェイク・アップ・ワードが前記眼鏡デバイスに設けられている音声ウェイク・アップ・チップで検出された場合、前記眼鏡デバイスのプロセッサは、パワー・アップされ、ラン状態に移行するステップと、
前記眼鏡デバイスに設けられているタッチ・センサにおいてユーザで実行されるダブル・タップにより、前記音声ウェイク・アップ・チップを作動させるまたは無効にするステップと、をさらに含むこと、を特徴とする方法。
1. A method for providing information to a user via an eyewear device, comprising:
When the eyeglass device is placed in an open orientation during wearing, detecting the open state of the eyeglass device by a hinge connector of a first interchangeable temple of the eyeglass device and powering it on;
and disconnecting the power source by the hinge connector in conjunction with signals received from one or more of a plurality of proximity sensors and a plurality of motion sensors provided on the eyewear device when a first interchangeable temple of the eyewear device is folded inward;
The method comprises:
In a sleep mode, when a wake-up word is detected by a voice wake-up chip provided in the glasses device, a processor of the glasses device is powered up and transitions to a run state;
and activating or disabling the voice wake-up chip by a double tap performed by a user on a touch sensor provided on the eyewear device.
テンプル挿入モジュール内に含まれるプロセッサで、前記眼鏡デバイスに設けられている複数のセンサからの出力を受信するステップと、
前記複数のセンサからの少なくとも一つの出力を使用して、システム制御パラメータを確定するステップと、
前記システム制御パラメータを使用して、前記眼鏡デバイスの少なくとも一つの機能を制御するステップと、をさらに含み、
前記テンプル挿入モジュールは、前記眼鏡デバイスのテンプル内に含まれ、
前記複数のセンサは、前記眼鏡デバイスを用いて設定され、
前記複数のセンサのうちの一つはボタンであり、前記プロセッサは、ボタンがユーザにより押される時間の長さをシステム・アクションと関連付けるように構成され、
前記システム・アクションは、
モバイル・デバイスとのペアリング、
モバイル・デバイスからのペアリングの解除、
前記眼鏡デバイスに設けられているマイクロ・ディスプレイ・アセンブリまたは/およびスピーカによる内容の再生、
前記スピーカにより再生される次の曲の選択、
前記眼鏡デバイスに設けられている無線通信システムにより、前記眼鏡デバイスと前記モバイル・デバイスとの間の無線接続を利用して電話をかけること、
前記無線通信システムによって受信される電話に出ること、および
前記無線通信システムによって受信される電話を拒否することのうちの一つまたは複数であること、を特徴とする請求項20に記載の方法。
receiving, at a processor included in a temple insertion module, outputs from a plurality of sensors provided on the eyewear device;
determining a system control parameter using at least one output from the plurality of sensors;
and using the system control parameters to control at least one function of the eyewear device.
the temple insertion module is included within a temple of the eyewear device;
the plurality of sensors are configured using the glasses device;
one of the plurality of sensors is a button, and the processor is configured to associate a length of time the button is pressed by a user with a system action;
The system action is:
Pairing with mobile devices,
Unpair from your mobile device,
Reproducing content through a micro display assembly and/or a speaker provided in the eyeglass device;
Selecting the next song to be played by the speaker;
making a call using a wireless connection between the glasses device and the mobile device via a wireless communication system provided in the glasses device;
21. The method of claim 20, further comprising one or more of: answering a call received by the wireless communication system; and rejecting a call received by the wireless communication system.
前記複数のセンサのうちの一つはタッチ・センサであり、前記プロセッサは前記タッチ・センサからの信号を受信するように構成され、
前記プロセッサは、ユーザからタッチ・センサ表面へのタップ入力、または前記ユーザからタッチ・センサ表面へのスライド入力を処理するように構成され、
前記プロセッサは、タップ入力の受信の後で、一つまたの複数のタップ・アクションを開始するように構成され、
前記タップ・アクションは、
モバイル・デバイスとのペアリングと、
モバイル・デバイスからのペアリングの解除と、を含むこと、を特徴とする請求項21に記載の方法。
one of the plurality of sensors is a touch sensor, and the processor is configured to receive a signal from the touch sensor;
the processor is configured to process a tap input from a user onto a touch sensitive surface or a slide input from the user onto the touch sensitive surface;
the processor is configured to initiate one or more tap actions after receiving a tap input;
The tap action is
Pairing with a mobile device
and unpairing the mobile device from the mobile device.
前記プロセッサは、前記タッチ・センサ表面へのスライド入力を受信した後で、一つまたの複数のスライド・アクションを開始するように構成され、
前記スライド・アクションは、
前記無線通信システムによって受信される電話に出ること、
前記無線通信システムによって受信される電話を拒否すること、
眼鏡デバイスからのオーディオ・ブロードキャストの音量を下げること、および
眼鏡デバイスからのオーディオ・ブロードキャストの音量を上げこと、を含むこと、を特徴とする請求項22に記載の方法。
the processor is configured to initiate one or more slide actions after receiving a slide input on the touch sensitive surface;
The sliding action is
answering a call received by said wireless communication system;
rejecting a call received by said wireless communication system;
23. The method of claim 22, comprising: decreasing a volume of an audio broadcast from the eyewear device; and increasing a volume of an audio broadcast from the eyewear device.
前記複数のセンサのうちの一つは近接センサであり、
前記プロセッサは、前記近接センサからの信号を受信し、前記信号によりユーザの存在を確認し、アクションを実行するように構成され、
前記アクションは、
前記ユーザが前記眼鏡デバイスを前記ユーザの頭から取り外した場合、前記マイクロ・ディスプレイ・アセンブリまたは/およびスピーカを制御して内容の再生を一時停止すること、
前記ユーザが前記眼鏡デバイスを前記ユーザの頭に戻した場合、前記マイクロ・ディスプレイ・アセンブリまたは/および前記スピーカを制御して前記内容の再生を再開すること、
前記眼鏡デバイスが前記ユーザの頭から離れたまま、時間が第一所定の時間になったら、前記マイクロ・ディスプレイ・アセンブリまたは/および前記スピーカを制御して前記内容の再生をオフにすること、および
前記眼鏡デバイスが前記ユーザの頭から離れたまま、時間が第二所定の時間になったら、前記眼鏡デバイスの電源を切ること、をさらに含むこと、を特徴とする請求項21に記載の方法。
one of the plurality of sensors is a proximity sensor;
the processor is configured to receive a signal from the proximity sensor, determine a user presence using the signal, and perform an action;
The action is:
controlling the micro-display assembly and/or speaker to pause content playback when the user removes the eyewear device from the user's head;
controlling the micro-display assembly and/or the speaker to resume playing the content when the user places the glasses device back on the user's head;
22. The method of claim 21, further comprising: controlling the micro-display assembly and/or the speaker to turn off playback of the content when the glasses device remains away from the user's head for a first predetermined time; and powering off the glasses device when the glasses device remains away from the user's head for a second predetermined time.
JP2023149103A 2019-07-13 2023-09-14 HARDWARE ARCHITECTURE FOR MODULARIZED EYEWEAR SYSTEMS, APPARATUS AND METHODS - Patent application Active JP7642752B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023149103A JP7642752B2 (en) 2019-07-13 2023-09-14 HARDWARE ARCHITECTURE FOR MODULARIZED EYEWEAR SYSTEMS, APPARATUS AND METHODS - Patent application

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201962873889P 2019-07-13 2019-07-13
US16/926,722 US11709376B2 (en) 2018-12-12 2020-07-12 Hardware architecture for modularized eyewear systems, apparatuses, and methods
PCT/IB2020/000831 WO2021044219A2 (en) 2019-07-13 2020-07-13 Hardware architecture for modularized eyewear systems apparatuses, and methods
JP2022502185A JP7352004B2 (en) 2019-07-13 2020-07-13 Hardware architecture for modularized eyeglass systems, devices, and methods
JP2023149103A JP7642752B2 (en) 2019-07-13 2023-09-14 HARDWARE ARCHITECTURE FOR MODULARIZED EYEWEAR SYSTEMS, APPARATUS AND METHODS - Patent application

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2022502185A Division JP7352004B2 (en) 2019-07-13 2020-07-13 Hardware architecture for modularized eyeglass systems, devices, and methods

Publications (2)

Publication Number Publication Date
JP2024001031A JP2024001031A (en) 2024-01-09
JP7642752B2 true JP7642752B2 (en) 2025-03-10

Family

ID=74853450

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2022502185A Active JP7352004B2 (en) 2019-07-13 2020-07-13 Hardware architecture for modularized eyeglass systems, devices, and methods
JP2023149103A Active JP7642752B2 (en) 2019-07-13 2023-09-14 HARDWARE ARCHITECTURE FOR MODULARIZED EYEWEAR SYSTEMS, APPARATUS AND METHODS - Patent application

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2022502185A Active JP7352004B2 (en) 2019-07-13 2020-07-13 Hardware architecture for modularized eyeglass systems, devices, and methods

Country Status (4)

Country Link
JP (2) JP7352004B2 (en)
CN (1) CN114270296B (en)
GB (1) GB2600562B (en)
WO (1) WO2021044219A2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220299792A1 (en) * 2021-03-18 2022-09-22 Meta Platforms Technologies, Llc Lanyard for smart frames and mixed reality devices
CN114153078B (en) * 2021-11-26 2024-01-30 美特科技(苏州)有限公司 Intelligent glasses and camera device thereof
CN116068771A (en) * 2023-02-23 2023-05-05 宁波未知数字信息技术有限公司 A Modular Augmented Reality Head Display System
WO2025245141A1 (en) * 2024-05-22 2025-11-27 Snap Inc. Hinge-based head-worn device power control

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011065094A (en) 2009-09-18 2011-03-31 Olympus Corp Frame of glasses, attachment and method of attaching wearable device
US20170245065A1 (en) 2013-11-08 2017-08-24 Avraham Suhami Hearing Eyeglass System and Method
WO2017163641A1 (en) 2016-03-22 2017-09-28 富士フイルム株式会社 Fit-adjustable eyeglasses system, fit-adjustable eyeglasses, and program to be used in fit-adjustable eyeglasses system
CN109032384A (en) 2018-08-30 2018-12-18 Oppo广东移动通信有限公司 Music control method, device and storage medium and wearable device
US20190101977A1 (en) 2017-09-29 2019-04-04 Apple Inc. Monitoring a user of a head-wearable electronic device
WO2020121065A2 (en) 2018-12-12 2020-06-18 Solos Technology Limited Modularized eyewear systems, apparatuses, and methods

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8094858B2 (en) * 2009-04-27 2012-01-10 Joseph Adam Thiel Eyewear retention device
GB2476033A (en) * 2009-12-04 2011-06-15 Marcus Lewis Personal audio equipment device
EP2439580A1 (en) * 2010-10-01 2012-04-11 Ophtimalia Data exchange system
EP2611177A3 (en) * 2011-12-29 2013-09-25 Samsung Electronics Co., Ltd Display apparatus, glasses apparatus linked with display apparatus and controlling method thereof
JP6021582B2 (en) * 2012-10-24 2016-11-09 オリンパス株式会社 Glasses-type wearable device and front part of glasses-type wearable device
KR102209512B1 (en) * 2014-06-30 2021-01-29 엘지전자 주식회사 Glasses type mobile terminal
JP2017092628A (en) * 2015-11-06 2017-05-25 セイコーエプソン株式会社 Display device and control method of display device
WO2017131814A1 (en) * 2015-07-13 2017-08-03 LAFORGE Optical, Inc. Apparatus and method for exchanging and displaying data between electronic eyewear, vehicles and other devices
CN105578355B (en) * 2015-12-23 2019-02-26 惠州Tcl移动通信有限公司 A kind of method and system enhancing virtual reality glasses audio
CN205563002U (en) * 2016-01-25 2016-09-07 中山大学 Detachable intelligent glasses
US20180130371A1 (en) * 2016-11-09 2018-05-10 Bradley Haber Digital music reading system and method
CN206193378U (en) * 2016-11-21 2017-05-24 北京水镜先生科技有限公司 Connection structure of removable mirror leg and have glasses of this structure
US9910298B1 (en) * 2017-04-17 2018-03-06 Vision Service Plan Systems and methods for a computerized temple for use with eyewear
CN109407858A (en) * 2018-09-29 2019-03-01 深圳前海格物致知科技有限公司 A kind of intelligent glasses

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011065094A (en) 2009-09-18 2011-03-31 Olympus Corp Frame of glasses, attachment and method of attaching wearable device
US20170245065A1 (en) 2013-11-08 2017-08-24 Avraham Suhami Hearing Eyeglass System and Method
WO2017163641A1 (en) 2016-03-22 2017-09-28 富士フイルム株式会社 Fit-adjustable eyeglasses system, fit-adjustable eyeglasses, and program to be used in fit-adjustable eyeglasses system
US20190101977A1 (en) 2017-09-29 2019-04-04 Apple Inc. Monitoring a user of a head-wearable electronic device
CN109032384A (en) 2018-08-30 2018-12-18 Oppo广东移动通信有限公司 Music control method, device and storage medium and wearable device
WO2020121065A2 (en) 2018-12-12 2020-06-18 Solos Technology Limited Modularized eyewear systems, apparatuses, and methods

Also Published As

Publication number Publication date
JP2024001031A (en) 2024-01-09
CN114270296A (en) 2022-04-01
WO2021044219A3 (en) 2021-06-03
WO2021044219A2 (en) 2021-03-11
JP7352004B2 (en) 2023-09-27
GB2600562A (en) 2022-05-04
CN114270296B (en) 2025-05-06
GB202115401D0 (en) 2021-12-08
GB2600562B (en) 2023-09-20
JP2022543738A (en) 2022-10-14

Similar Documents

Publication Publication Date Title
US12276867B2 (en) Modularized eyewear systems, apparatus, and methods
JP7642752B2 (en) HARDWARE ARCHITECTURE FOR MODULARIZED EYEWEAR SYSTEMS, APPARATUS AND METHODS - Patent application
TWI821208B (en) Sound reproduction device
US12210220B2 (en) Hardware architecture for modularized eyewear systems, apparatuses, and methods
US11835798B2 (en) Eyewear systems, apparatuses, and methods for providing assistance to a user
KR20150111198A (en) Mobile terminal
WO2013019893A1 (en) Eyewear with detachable adjustable electronics module
US10321217B2 (en) Vibration transducer connector providing indication of worn state of device
CN206096664U (en) Intelligence glasses and mirror leg subassembly thereof
US20250328367A1 (en) True wireless headphones with improved user interface to an experiential eco-system and related devices, methods, and systems
US12216339B2 (en) Eyewear systems, apparatus, and methods for providing assistance to a user
CN113366859B (en) Personalized directional audio, device and method for head-mounted audio projection system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230914

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240719

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240806

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20241105

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20241224

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20250117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20250218

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20250226

R150 Certificate of patent or registration of utility model

Ref document number: 7642752

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150