JP7333823B2 - 携帯機器向け携帯機器アクセサリを使用および位置合わせするためシステムおよび方法 - Google Patents
携帯機器向け携帯機器アクセサリを使用および位置合わせするためシステムおよび方法 Download PDFInfo
- Publication number
- JP7333823B2 JP7333823B2 JP2021548202A JP2021548202A JP7333823B2 JP 7333823 B2 JP7333823 B2 JP 7333823B2 JP 2021548202 A JP2021548202 A JP 2021548202A JP 2021548202 A JP2021548202 A JP 2021548202A JP 7333823 B2 JP7333823 B2 JP 7333823B2
- Authority
- JP
- Japan
- Prior art keywords
- center
- processing
- housing opening
- current position
- housing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/56—Accessories
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
- A61B5/442—Evaluating skin mechanical properties, e.g. elasticity, hardness, texture, wrinkle assessment
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
- A61B5/443—Evaluating skin constituents, e.g. elastin, melanin, water
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
- A61B5/444—Evaluating skin marks, e.g. mole, nevi, tumour, scar
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
- A61B5/445—Evaluating skin irritation or skin trauma, e.g. rash, eczema, wound, bed sore
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
- A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
- A61B5/743—Displaying an image simultaneously with additional graphical information, e.g. symbols, charts, function plots
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
- A61B5/744—Displaying an avatar, e.g. an animated cartoon character
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
- A61B5/0015—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
- A61B5/0022—Monitoring a patient using a global network, e.g. telephone networks, internet
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/56—Accessories
- G03B17/565—Optical accessories, e.g. converters for close-up photography, tele-convertors, wide-angle convertors
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B17/00—Details of cameras or camera bodies; Accessories therefor
- G03B17/56—Accessories
- G03B17/566—Accessory clips, holders, shoes to attach accessories to camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20112—Image segmentation details
- G06T2207/20132—Image cropping
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30088—Skin; Dermal
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Pathology (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- General Physics & Mathematics (AREA)
- Dermatology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Dentistry (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Studio Devices (AREA)
Description
本願は、2019年2月19日に出願された米国仮特許出願第62/807,553号の優先権を主張し、当該出願の内容は参照により本明細書に援用される。
携帯機器上の現在位置にある皮膚分析装置を観察することと、
ハウジング開口部の少なくとも一部を含む現在位置画像をカメラで撮影することと、
現在位置画像に対して処理を行って現在位置が位置合わせ目標位置であるかを判定することと、
処理からのメッセージを伝えることと、を含む。
ハロー(光輪)処理を行うことと、
ハロー処理が成功した場合に、
底面を使ってマイクロ処理を行い、ハロー処理を確認することと、を含みうる。
現在位置画像内にハウジング開口部中心を配置することと、
現在位置画像内でハウジング開口部中心が視野中心にあるかを確認することと、
ハウジング開口部中心が視野中心にある場合は成功メッセージを返送し、ハウジング開口部中心が視野中心にない場合は失敗メッセージを返送することと、を含みうる。
配置されたハウジング開口部中心を使い調整値を計算して皮膚分析装置へ適用し、皮膚分析装置を現在位置から位置合わせ目標位置へ動かすこと、を含むことができて、
失敗メッセージは調整値をさらに含む。
視覚的位置ずれインジケータ(指示子)のために現在位置画像に対してマクロ処理を行うことと、
視覚的位置ずれインジケータが見つかった場合、現在位置画像から視覚的位置ずれインジケータを取り除くための調整値をさらに含む失敗メッセージを返送することと、を含みうる。
未知の位置合わせ位置である現在位置にある、携帯機器に取り外し可能に取り付けられる携帯機器アクセサリを観察することと、
携帯機器のカメラから、現在位置にある携帯機器アクセサリの少なくとも一部の像を含む現在位置画像を取得することと、
現在位置画像に対して処理を行って現在位置が位置合わせ目標位置であるかを判定することと、
処理からのメッセージを伝えることと、を含む。
調整値を計算して携帯機器アクセサリへ適用し、携帯機器アクセサリを現在位置から位置合わせ目標位置へ動かすことを含むことができて、メッセージはさらに調整値を含む。
視覚的位置ずれインジケータのために現在位置画像に対してマクロ処理を行うことを含むことができて、
視覚的位置ずれインジケータが見つかった場合、メッセージは現在位置画像から視覚的位置ずれインジケータを取り除くための調整値をさらに含む。
観察するより前に、携帯機器の画面上に位置合わせガイドを示して携帯アクセサリを現在位置に配置するのを支援すること、を含みうる。
携帯機器に取り外し可能に取り付け可能でハウジング開口部を画定するハウジングを含む皮膚分析装置であって、ハウジング開口部はハウジング開口部中心を含み、皮膚分析装置が位置合わせ目標位置にある場合にハウジング開口部は携帯機器のカメラの上に中心に置かれ、ハウジングは皮膚分析を実行する皮膚分析コンポーネントをさらに含む、皮膚分析装置と、
画面およびカメラをさらに含む携帯機器と、を含み、携帯機器は、
ハウジング開口部の少なくとも一部を含む現在位置画像をカメラで撮影し、
現在位置画像に対して処理を行って現在位置が位置合わせ目標位置であるかを判定し、
処理からのメッセージを伝える、よう構成される。
現在位置画像内にハウジング開口部中心を配置することと、
現在位置画像内でハウジング開口部中心が視野中心にあるかを確認することと、
ハウジング開口部中心が視野中心にある場合は成功メッセージを返送し、ハウジング開口部中心が視野中心にない場合は失敗メッセージを返送することと、を含みうる。
配置されたハウジング開口部中心を使い調整値を計算して皮膚分析装置へ適用し、皮膚分析装置を現在位置から位置合わせ目標位置へ動かすこと、を含むことができて、
失敗メッセージは調整値を含む。
視覚的位置ずれインジケータのために現在位置画像に対してマクロ処理を行うことと、
視覚的位置ずれインジケータが見つかった場合、現在位置画像から視覚的位置ずれインジケータを取り除くための調整値をさらに含む失敗メッセージを返送することと、を含みうる。
(a)位置合わせに左右される携帯機器アクセサリ:その機能を実行するために携帯機器上で適切な位置合わせを必要とする携帯機器アクセサリであって、位置合わせが略完全であることが必要となる可能性があり、さもないと機能がほぼ使い物にならない、携帯機器アクセサリ。
(b)背面:電子機器がそのユーザにより使用されている場合に典型的にはユーザに背を向けている、バックカメラを有することがある電子機器の面。
(c)電子機器または携帯機器:少なくとも1つのカメラ(および、好ましくは少なくとも1つのバックカメラ)を有し、携帯機器アクセサリが取り付け可能で、好ましくは(携帯電話やタブレットなどのような)携帯可能な機器であって、例示の電子機器には、スマートフォン、タブレット、デジタルカメラ、パソコン、テレビ、および同種のものが含まれる。
(d)電子機器アクセサリまたは携帯機器アクセサリ:携帯機器に取り外し可能に取り付けることができるアクセサリであって、皮膚分析装置を含みうる。
(e)前面:電子機器がそのユーザにより使用されている場合に典型的にはユーザの方を向いている、フロントカメラおよび画面を有することがある電子機器の面。
(f)画像:別途指定がない限り、本明細書では画像への言及は、デジタルデータで表現することができて、電子機器およびコンピュータ(アプリなど)で操作および処理することができるデジタル画像を指す。
(g)共同機能:携帯機器と携帯機器アクセサリ/位置合わせに左右される携帯機器アクセサリにより共同で実行される機能。
(h)皮膚特性:色、水分、脂っぽさ、弾力性、および同種のものなどの、1つまたは複数の皮膚(毛を含む)の特性。
(i)皮膚特性測定援助部:スキンケア測定を行う際に皮膚特性測定装置を支援するコンポーネント。これらは、通常は受動的(つまり、電子機器または皮膚分析装置による制御を必要としない)、または能動的(光源板や振動モータなどの電子機器による制御などを必要とする)のどちらかであると考えられる。
(j)皮膚特性測定装置:自身による制御、または別のコンポーネントの制御のいずれかの下で皮膚分析行為を行うコンポーネント。これらは、MD104またはMA102上にあってもよく、あるいはそれらとは別になっていてもよい。それぞれは、多くの皮膚分析行為、皮膚分析、皮膚分析較正、および皮膚分析測定を行うことがある、あるいはこれらの一部でありうる。
(k)皮膚分析:1つまたは複数の皮膚特性の1回または複数回の分析。
(l)皮膚分析行為:皮膚分析測定などの皮膚分析の一部につながる、またはこれらをもたらす行為であって、例示の皮膚分析行為には、写真撮影、水分センサの読取り、画像または記録を用いた弾力性の試験、および同種のものが含まれる。
(m)皮膚分析較正:正確な皮膚分析が可能となるように皮膚分析装置および/または電子機器のうちの1つまたは複数の側面を較正することであって、例示の皮膚分析較正には、露出および色温度(いずれも色補正のための変換機能を使って実現可能)のための光の規格化が含まれる。
(n)皮膚分析装置:MD104へ取り外し可能に取り付け可能で、1つまたは複数の皮膚特性測定装置もしくは皮膚特性測定援助部を有しうる、本発明の態様に係る装置。
(o)皮膚分析測定:水分測定値、しわ/小じわ/毛穴の画像、弾力性測定値、皮膚の色、および同種のものを含む、1つまたは複数の皮膚特性の測定であって、これらの皮膚特性はいずれも絶対的な、相対的な、または平均の「スコア」、つまり、毛穴のスコア、しわの相対的スコア、色、などと表現することができる。
(p)皮膚分析処理:画像に対して画像処理を行うなどにより、1つまたは皮膚分析測定値を処理すること。
(q)皮膚分析推薦:1回または複数回の皮膚分析の1つまたは複数の結果、および1つまたは複数のスキンケア製品の特性を用いて、ユーザに適切なスキンケア製品を推薦すること。
(r)スキンケア製品:保湿剤、小じわ対策クリーム、(ファンデーションやブラシなどの)化粧品、および同種のものなどの、1つまたは複数のスキンケアに関する特性を支援する製品。
(s)スキンケア製品製造会社:スキンケア製品の製作者、製造会社、販売業者、ブランド、およびブランドオーナー。
(t)スキンケア製品特性:製品の色、保湿能力、しわ低減能力、および同種のものを含みうる、特定の肌製品の特性。
(u)スキンケア最新情報:これらは、外部情報源からもたらされうるスキンケアに関連する情報を含みうる。例えば、天候(雲、太陽、高紫外線、雪)については、天候についての情報源(示されないが、当業者には既知)からもたらされることがある。
(v)皮膚特性:皮膚または体の一部の特性、例えば毛穴、吹き出物、感受性(肌の表面に近い血管が見えるようにする偏光、または他の光のスペクトルを使用することがあり、「より赤い」画像となることがある)、しわ、弾力性、水分、脂、にきび、および肌色など。
(w)ユーザ/人間ユーザ/被験者、人:皮膚分析装置を使う人、および/または、場合によっては皮膚特性サンプルの被験者である人。
システム100は、ユーザがMA102をMD104へ結合する、または取り付けて、MA102が位置合わせ目標位置にあるように配置できるようにすることができて、MA102が最適に動作できるようにする。これらすべては本明細書でより詳細に説明される。位置合わせ目標位置がほぼ完璧に位置合わせされる(例えば、ハウジング開口部の中心がMD104のカメラの視野の中心と厳密に一致する)のが好まれるが、特に本明細書に記載される機能(皮膚分析、共同機能、および同種のもの)の実行に対する調整値に基づき、不完全だがそれでも位置合わせ目標位置にあるとみなされる位置合わせに対していくらかの許容範囲がありうる。
MD104は、iPhone(登録商標)やAndroid(登録商標)携帯電話、タブレット、ノートパソコン、または他のコンピュータ装置などの携帯電話でありうる。MD104は、(少なくとも1つがMD104の背面にある)1つまたは複数のカメラなどのもう1つの構成要素と、そのような機器で一般的な他の構成要素、例えばカメラ用のフラッシュ8、電源ボタンおよび音量ボタン、振動を生じさせるためのモータ(MD104の内部の「振動モータ」)、308のような画面、プロセッサ、記憶装置/メモリ、および同種のものを有することがある(命令および/またはデータ、ならびに同種のものを処理、および記憶するためにMA102もその一部またはすべてを有することがある)。そのような構成要素の一部は、MD104の外面上に見える、または外面上に存在しうる視覚的または物理的な側面を有することがある(「見える構成要素」)。他の構成要素(「内部構成要素」)、例えばGPSトランシーバなどはMD104の内部に存在しうるが、正しく機能するためにMD104の外面に対して要件(GPSまたは他の無線信号を遮断しない、など)を有することがある。
MA102(携帯機器アクセサリ、またはより簡潔に携帯アクセサリ)は、MD104へ取り付けられるアクセサリでありうる。そのような取付けは数多くの方法で実現可能だが、そのような取付けは好ましくは、i)取り外し可能、ii)調整可能、そしてiii)取付けおよび取り外しが素早く行える。MA102はMD104のユーザに対して目的を持っていることがあり、そのような目的はMD104の用途に関連している、あるいは別のものでありうる。好ましくは、MA102は、MD104への取付けに最適な、MA102がその目的を最も効果的に実行することが可能な位置を有する。そのような位置は、位置合わせ目標位置と呼ばれることがある。一実施形態では、そのような位置合わせ目標位置は、MD104の背面上の特徴(バックカメラなど)と位置合わせされる本体118の一部を指すことがある。好ましくは、MA102は、MA102がMD104へ取り付けられる際にMD104により撮影することができて、これによりMA102の現在位置画像がもたらされる。好ましくは、現在位置画像はMD104などにより分析して、i)MD104に対するMA102の現在位置を判定する、または計算することができて、これによりMA102を位置合わせ目標位置へ持って行くのを支援可能であり、ii)1つまたは複数の調整(並進、回転、締め付け、および同種のもの)を決定してMA102をその現在位置から位置合わせ目標位置へと動かすことができる。好ましくは、MA102の大きさおよび形状は様々なMD104に対して使用可能である(つまり、単一モデルまたは単一設計のMA102が、本明細書に記載されるシステム100に対して考えられる調整に影響を受ける、様々な携帯電話の大きさ、カメラ位置、および同種のものに対して、MD104でのそのような差異を考慮して機能する)。
本体118は、部品112、ハウジング接触部またはベゼル120、およびハウジング開口部122をさらに含みうるアクセサリハウジング(ハウジング)110をさらに含みうる。
方法200は、MA102が位置合わせ目標位置にあるように、MD104上でMA102を位置合わせする方法である。方法200の一部、またはすべては、例えば最初にMA102を調整する際に、あるいは、MA102が動いて位置合わせ目標位置からずれてしまった場合にMA102を調整する際に、反復して行うことができる。
(a)(何枚でも可能であるが)以下の位置ずれなどの、多数の起こりうる位置ずれにおける格子の画像を撮影する
(i)MA102が「.001”」を単位として「.001”」だけ高すぎる、から「.01”」だけ高すぎる、までの、高すぎる、低すぎる、左過ぎる、右過ぎる(および、もしかすると高い/左、高い/右、低い/左、低い/右などの組み合わせ)
(ii)MAが.5度の単位で、.5度から5度回転してずれている
(b)画像のそれぞれに対して、格子は直線を有するべきであるとの理解で、フィルタ処理をして線を直線に戻し、このフィルタ手法を保存する。
(a)ハロー処理(マクロ処理)に続いて円弧処理(マイクロ処理)
(i)ハロー検出(マクロ処理)を第1処理ステップとして行うことができる。あらゆるカメラフレームをLAB色空間へ変換することができて、アルゴリズムを使用して、特定の方向(例えば、上から下、右から左、下から上、左から右、右上から左下、右下から左上、左下から右上、および左上から右下)における多数の輝度均一性のパラメータを決定することができる。特定の方向に対して特定の閾値を上回った場合はいつでも、位置合わせを修正して調整し、ハローを取り除く、またはハローに焦点を合わせるのを助けるために(502a/bや504などの)案内情報が画面上に表示される。それゆえ、ハロー処理は、MA102がほぼ位置合わせされているとハロー処理が示すまで、続けられることがある。また、410の内側にあるであろう小さなハローへ焦点を合わせる、小さな中心ハローの検出が用いられることがある。
(ii)円弧検出(マイクロ処理)を次の処理ステップとして行うことができて、ハロー処理を確認することができる。カメラフレーム(画像400aまたは400b)を処理して形状情報を抽出し、照明変動アーティファクトを取り除いた後に、特別に設計されたコンピュータビジョンモデルを使用して、画像の4つのすべての隅における円弧の押し出しを検出することができる。円弧の押し出しは、メモリに2次元点として記憶することができる。そしてそれらの2次元点が、読取用レンズ自体の中心点と直接的な相関関係にある4つの円弧の中心点の平均を計算する、または特定するのに使用される。この中心点は、カメラ視野中心である「完全な」中心点と比較される。そして、案内情報が、算出された点が中心からどの方向にどれだけ離れているかに基づいて、生成される。閾値が満足され、少なくとも2つの円弧がフレーム内で検出された場合は、位置合わせは高品質な肌画像を作り出すのに充分良好で、現在位置は位置合わせ目標位置であるとみなされる(そして、全円状のインジケータ510が表示される)と考えることができる。
(iii)また、円弧の中心をマクロ処理、またはより可能性が高いが、マイクロ処理の一部として使用することができる。円弧は、理想的には現在位置画像の少なくとも2つの隅に確認することができる。現在位置が位置合わせ目標位置であるかどうかの良い目安になりうる、それぞれの円弧の中心の中心を決定することができる。
(iv)400aに対して適用されて、ハロー410は存在しないことがある。そして処理によって調整が推奨されうると判断される。400bに対して適用されて、ハロー処理の後にハロー410は許容されうる。そして円弧が確認され、(例えば、画像におけるx、y座標で)中心を計算するのに使用されて、400bで位置合わせされているか確認した際に、この中心は、(例えば、画像におけるx、y座標で)視野中心に充分に近くなりうる。
(b)((i)または(ii)と同様に)マクロ処理に続いてマイクロ処理
(i)例えばハウジング部分402が画像内に存在する(そのような部分の色と形状に注目することで判定される)ため、あるいは第4円弧部分がないため(開口部中心を少なくとも数学的に算出するにはわずか2つの円弧が必要になりうるが、2つの円弧しかないことで、皮膚分析装置が位置合わせ目標位置にある可能性が低くなったとしても、円弧部分404は3つの隅に存在する、ただし404bが見つからないので右下部分には存在しない)、のいずれかにより、画像400aのマクロ位置合わせ処理により位置ずれが示される。ハウジング部分402が画像408aの右下部分にあると仮定すると、調整はMA102を下方左側へ動かすことになる。したがって、矢印504は下向きとなり、また理想的には少し左向きになる。それに加えて、調整メッセージ506を、「少し下へ動かして下さい」または「下方で少し左へ動かして下さい」と示すことができる。状態インジケータ508は、「位置合わせが確認されました」や同種のものではなく、なおも「位置合わせを確認」と示すことができる。
(ii)マクロ処理は、ハロー処理、すなわち、i)ハロー410を探す、ii)ハロー410を見つける、iii)見つけたハロー410の形状および対称性が位置合わせ位置を示唆することを見出す、iv)中心(ハロー中心)を判定しハロー中心が視野中心に近いかどうかを判断する、のうちの1つまたは複数を実行することで構成されうる。ハロー処理は、ハローが存在してハロー中心が視野中心に近い場合に成功を返送することができる。しかし、400aにはハローは存在せず、これは成功ではないこと(そして、ハロー412がまったくないことを考えるとむしろマクロ位置ずれ)を示し、むしろハロー処理の失敗を示す。このようにハローがない場合は、調整を決定するためにいくらかの更なる処理が必要となりえて、例えば3つの円弧404、またはハウジング部分402を使うことで、類似した「下へ少し動かして下さい」というメッセージがもたらされることがある。ハロー処理は、通常はマクロ処理として、ハロー412が(位置ずれを考慮すると正しい形状となっておらず、多くの場合はあまり鮮明ではないため、円弧404は開口部122の中心を高精度で判定するには信頼性が低いとしても)通常はある程度見えるために効果的でありうるので、もし見えない場合は、位置ずれがある(一方で、円弧がないことは、円弧が視野の範囲外にあるのであれば、位置ずれを意味しないことがある)。このように、画像400aはやや珍しいものである可能性があり、ユーザが通常カメラの上で開口部122を位置合わせする、および/またはベース接触部106を位置合わせガイド302に合わせる場合は、通常はハローが存在する。
(iii)マイクロ処理(マイクロ処理の実際の性質に応じて底面マイクロ処理または円弧検出マイクロ処理でありうる)は、ハウジング110の底面122により画定される円の中心を検出することを含むことがあり、ハロー処理で中心が少なくともほぼ位置合わせされたと確認された後に使用することができる。画像400b内の白い円弧404は、ハウジング110の底面の円弧部分の組からなり、検出されて、幾何学的公式を用いて、これらの円弧により画定される円の中心を計算するのに使用される。これが開口部122の中心である。もちろん、底面122のどの部分が見えるかはMD104によって変わり、また円弧の大きさも、異なるカメラは異なる視野を持ちうるために変動する。これに対処するため、画像400bは、異なる画像サイズに対する処理は調整の必要があるのとは対照的に、すべての画像が大部分で比較可能で処理を一貫して適用可能であるように、クロップされることがある。例えば、一つのカメラが32mmの視野を持ち、別のカメラが28mmの視野を持つ場合、後者のカメラは像をより多く(より広い角度)「見る」ことを意味し、一つ一つは約12%(4/32)だけ小さくなる。クロップすることで視野の差異を正規化し、差異が取り除かれる。加えて、400bではハロー410および被写体部分412が見えるが、これらは画像内にあることが想定されており、かつ位置合わせ目標位置にある場合には中心にあるべき(案内する特徴の可能性を増やし、中心の計算または場所を行う、など)であるため、これらはいずれも適切な位置合わせを示す。ハローはMD104から遠い側のハウジング開口部の端部の形状およびハウジング開口部122の内側表面の色となっているべきなので、ハロー410はマクロ位置合わせに使用することができる。被写体412は背景の一部、すなわち、開口部を通して見える画像内に実際に入っているものでありうるが、フィルタ処理および円弧512へ焦点を合わせることで、照明とレンズおよび開口部を通して見える内容をあまり関係ないようにすることができる。
1)装置をスマートデバイスにクリップで留める。異なる長さのアームが提供されて、異なる大きさのデバイス(例えば、タブレットやスマートフォン)に対応することができる。クリップの円形開口部(案内開口部)をスマートデバイスのレンズと平行に保つため、反対側にはクリップのそちらの側を適切な角度にするのを可能とする棒が用いられることで、円形開口部(案内開口部)をカメラレンズと平行に保つことができる。
2)装置の円形開口部(案内開口部)をスマートデバイスの内蔵カメラと位置合わせする。位置合わせは垂直および水平平面の両方でされる。位置合わせを容易にするため、装置のソフトウェアはスマートデバイスの画面上に装置の外形またはテンプレートを示す。ユーザは装置を位置合わせして、画面上に示されるテンプレート(スクリーンガイド)に一致させる。位置合わせ画面は特定のスマートデバイスに固有であり、位置合わせ画面を設計、修正するのはハードウェア装置全体よりもずっと簡単である。ソフトウェアにより位置合わせを容易にするため、1つまたは複数のタッチ感応型パッドをクリップアームの一方または両方に使用することができる。タッチ感応型パッドにより、ソフトウェアはクリップアームがx平面およびy平面の両方でどのような向きとなっているか、およびどれだけの角度で回転されているかを正確に判定することができる。これにより、タッチ感応型パッドはタッチ式画面と相互作用するので、ソフトウェアはクリップアームがどこに位置しているかがわかる。位置合わせを容易にするため、タッチ感応型パッドの形状は、クリップの端部の大きさおよび形状と一致する。これにより、ユーザは、クリップの端部とスマートデバイスの画面上に示されるテンプレートの位置合わせを容易に行うことができる。スマートデバイスの各モデルは異なる取付け位置を有するので、オンスクリーンガイドは使用されるスマートデバイスのモデルに応じて変わる。ユーザは、クリップをどのようにしてスマートデバイスと位置合わせするかについて、音声および/または視覚的な手がかり(prompt)によって案内される。
3)ソフトウェアにより、焦点ずれの領域、ビネットの量、および画像内に存在する余分な光の量を測定することで、不正確な配置を検出することができる。これは、カメラのレンズを介して、カメラレンズにより撮像された画像を分析することで実現される。シャープネスの不足および色ずれを検出するマシンビジョンアルゴリズムを使用して、レンズの不適切な位置合わせに由来する画像劣化を検出することができる。また、こうしたツールを使用して、タッチ感応型パッドがタッチパネルと接触しない、または何もない場合にユーザがクリップとスマートデバイスのレンズを位置合わせするのを支援することができる。
4)装置は、オン/オフスイッチを押すことでソフトウェアにより作動される、あるいは、皮膚検出システム(水分センサや近接センサなど)を用いて作動される。また、装置は画面に触ることでも作動させることができる。ソフトウェアは、画面への接触がなされたことをタッチ感応型パッドを用いて検出し、クリップの電子装置へ接続する。
5)直線偏光、交差偏光、および偏光していない光を含む、(様々な波長の)1つまたは複数の光が点灯して皮膚を照らす。
6)1つまたは複数のUVセンサにより、皮膚に跳ね返される反射光の量を測定する。
7)ソフトウェアアプリケーションの警告灯または警告メッセージによって、その時点での肌の日焼け止めのレベルが充分であるかどうかをユーザに伝える。他の分析には、肌の水分、しわ、小じわ、毛穴、脂、弾力性、しみ、および汚染度が含まれる。
8)利用データが収集されて、化粧品またはスキンケアの製造会社と共有される。収集されるデータの例としては、限定されないが、消費者の性別、年齢、GPSによる位置、その場所の天候、日焼け止め剤塗布時間、確認回数、保護を上回った回数、使用された日焼け止め製品、消費者からのフィードバックが挙げられる。
9)消費者の肌のタイプに合わせた推奨製品が表示される。
Claims (7)
- 取り外し可能に取り付け可能な皮膚分析装置を位置合わせする方法であって、前記皮膚分析装置はハウジング開口部を画定するハウジングを含み、前記ハウジング開口部はハウジング開口部中心を含み、前記皮膚分析装置が位置合わせ目標位置にある場合に前記ハウジング開口部は携帯機器のカメラの上に中心に置かれ、前記ハウジングは皮膚分析を実行する皮膚分析コンポーネントをさらに含み、前記方法は、
前記携帯機器上の現在位置にある前記皮膚分析装置を観察することと、
前記ハウジング開口部の少なくとも一部を含む現在位置画像を前記カメラで撮影することと、
前記現在位置画像に対して処理を行って前記現在位置が前記位置合わせ目標位置であるかを判定することと、
前記処理からのメッセージを伝えることと、
を含み、
前記処理はさらに、
ハロー処理を行うことと、
前記ハロー処理が成功した場合に、
底面を使ってマイクロ処理を行い、前記ハロー処理を確認することと、
を含む、方法。 - 位置合わせに左右される携帯機器アクセサリ(携帯機器アクセサリ)を携帯機器上の位置合わせ目標位置に準備する方法であって、
未知の位置合わせ位置である現在位置にある、前記携帯機器に取り外し可能に取り付けられる前記携帯機器アクセサリを観察することと、
前記携帯機器のカメラから、前記現在位置にある前記携帯機器アクセサリの少なくとも一部の像を含む現在位置画像を取得することと、
前記現在位置画像に対して処理を行って前記現在位置が前記位置合わせ目標位置であるかを判定することと、
前記処理からのメッセージを伝えることと、
を含み、
前記処理はさらに、
ハロー処理を行うことと、
前記ハロー処理が成功した場合に、
底面を使ってマイクロ処理を行い、前記ハロー処理を確認することと、
を含む、方法。 - 前記カメラは視野中心をさらに含む視野を有し、前記処理は、
前記現在位置画像内に前記ハウジング開口部中心を配置することと、
前記現在位置画像内で前記ハウジング開口部中心が前記視野中心に置かれているかを確認することと、
前記ハウジング開口部中心が前記視野中心に置かれている場合は成功メッセージを返送し、前記ハウジング開口部中心が前記視野中心に置かれていない場合は失敗メッセージを返送することと、
をさらに含む、請求項1に記載の方法。 - 前記ハウジング開口部は円形底面を有し、前記現在位置画像内の前記ハウジング開口部の一部分は前記円形底面の円弧部分の組を含み、前記配置することは前記円弧部分の組を使って前記ハウジング開口部中心を判定することを含む、請求項3に記載の方法。
- 携帯機器に取り外し可能に取り付け可能な皮膚分析装置であって、前記皮膚分析装置はハウジング開口部を画定するハウジングを含み、前記ハウジング開口部はハウジング開口部中心を含み、前記皮膚分析装置が位置合わせ目標位置にある場合に前記ハウジング開口部は前記携帯機器のカメラの上に中心に置かれ、前記ハウジングは皮膚分析を実行する皮膚分析コンポーネントをさらに含む、皮膚分析装置と、
画面、アプリ、およびカメラをさらに含む前記携帯機器と、を含み、前記携帯機器は、
前記ハウジング開口部の少なくとも一部を含む現在位置画像を前記カメラで撮影し、
前記現在位置画像に対して処理を行って前記現在位置が前記位置合わせ目標位置であるかを判定し、
前記処理からのメッセージを伝える、
よう構成され、
前記処理はさらに、
ハロー処理を行うことと、
前記ハロー処理が成功した場合に、
底面を使ってマイクロ処理を行い、前記ハロー処理を確認することと、
を含む、スキンケア分析システム。 - 前記カメラは視野中心をさらに含む視野を有し、前記処理はさらに、
前記現在位置画像内に前記ハウジング開口部中心を配置することと、
前記現在位置画像内で前記ハウジング開口部中心が前記視野中心に置かれているかを確認することと、
前記ハウジング開口部中心が前記視野中心に置かれている場合は成功メッセージを返送し、前記ハウジング開口部中心が前記視野中心に置かれていない場合は失敗メッセージを返送することと、
を含む、請求項5に記載のシステム。 - 前記ハウジング開口部は円形底面を有し、前記現在位置画像内の前記ハウジング開口部の一部分は前記円形底面の円弧部分の組を含み、前記配置することは前記円弧部分の組を使って前記ハウジング開口部中心を判定することを含む、請求項6に記載のシステム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201962807553P | 2019-02-19 | 2019-02-19 | |
US62/807,553 | 2019-02-19 | ||
PCT/CA2020/050216 WO2020168428A1 (en) | 2019-02-19 | 2020-02-19 | Systems and methods for use and alignment of mobile device accessories for mobile devices |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022519909A JP2022519909A (ja) | 2022-03-25 |
JP7333823B2 true JP7333823B2 (ja) | 2023-08-25 |
Family
ID=72143343
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021548202A Active JP7333823B2 (ja) | 2019-02-19 | 2020-02-19 | 携帯機器向け携帯機器アクセサリを使用および位置合わせするためシステムおよび方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US12211220B2 (ja) |
EP (1) | EP3928157A4 (ja) |
JP (1) | JP7333823B2 (ja) |
SG (1) | SG11202109006VA (ja) |
WO (1) | WO2020168428A1 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11514161B2 (en) * | 2020-09-11 | 2022-11-29 | Mcafee, Llc | Method and apparatus for detecting malware via analysis of a screen capture |
EP4284228A1 (en) * | 2021-01-28 | 2023-12-06 | Johnson & Johnson Consumer Inc. | Alignment of a clip-on medical device to a smart device camera |
US20230115395A1 (en) | 2021-09-09 | 2023-04-13 | Sephora USA, Inc. | Skin Tone Scanning and Cosmetics in Three-Dimensional Skin Tone Color Space |
KR20230083939A (ko) * | 2021-12-03 | 2023-06-12 | 삼성전자주식회사 | 플렉서블 디스플레이를 갖는 전자 장치 및 그의 카메라 모듈 제어 방법 |
WO2024077379A1 (en) * | 2022-10-11 | 2024-04-18 | Fitskin Inc. | Systems and methods for improved skin tone rendering in digital images |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010160286A (ja) | 2009-01-07 | 2010-07-22 | Softbank Mobile Corp | 携帯電話用拡張機器 |
JP2014131121A (ja) | 2012-12-28 | 2014-07-10 | Hitachi Maxell Ltd | 肌撮影システム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120023642A1 (en) | 2010-07-30 | 2012-02-02 | Holland Denise D | Garment for Retaining Long Hair Including Braids or Dreadlocks |
US8279544B1 (en) * | 2011-03-18 | 2012-10-02 | Premier Systems USA, Inc | Selectively attachable and removable lenses for communication devices |
US10008013B2 (en) * | 2014-10-01 | 2018-06-26 | Ora Inc. | Multidimensional halo-based visualization system |
WO2016204417A1 (ko) * | 2015-06-15 | 2016-12-22 | 서울바이오시스 주식회사 | 하이퍼스펙트럴 이미지 측정장치 및 그 캘리브레이션 방법, 피부 진단용 촬영 모듈 및 장치, 피부 진단 방법 및 피부 이미지 처리 방법 |
US10405752B2 (en) * | 2015-06-23 | 2019-09-10 | Metaoptima Technology Inc. | Apparatus for imaging skin |
EP4235690B1 (en) * | 2016-04-22 | 2025-04-02 | Fitskin Inc. | Systems for skin analysis using electronic devices |
US10031312B2 (en) | 2016-08-10 | 2018-07-24 | Apple Inc. | Adapting camera systems to accessory lenses |
US10867422B2 (en) * | 2017-06-12 | 2020-12-15 | Adobe Inc. | Facilitating preservation of regions of interest in automatic image cropping |
-
2020
- 2020-02-19 EP EP20759234.6A patent/EP3928157A4/en active Pending
- 2020-02-19 WO PCT/CA2020/050216 patent/WO2020168428A1/en unknown
- 2020-02-19 US US17/431,691 patent/US12211220B2/en active Active
- 2020-02-19 JP JP2021548202A patent/JP7333823B2/ja active Active
- 2020-02-19 SG SG11202109006VA patent/SG11202109006VA/en unknown
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010160286A (ja) | 2009-01-07 | 2010-07-22 | Softbank Mobile Corp | 携帯電話用拡張機器 |
JP2014131121A (ja) | 2012-12-28 | 2014-07-10 | Hitachi Maxell Ltd | 肌撮影システム |
Also Published As
Publication number | Publication date |
---|---|
JP2022519909A (ja) | 2022-03-25 |
US20220138972A1 (en) | 2022-05-05 |
SG11202109006VA (en) | 2021-09-29 |
US12211220B2 (en) | 2025-01-28 |
WO2020168428A1 (en) | 2020-08-27 |
EP3928157A4 (en) | 2022-11-02 |
EP3928157A1 (en) | 2021-12-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7333823B2 (ja) | 携帯機器向け携帯機器アクセサリを使用および位置合わせするためシステムおよび方法 | |
US10699099B2 (en) | System and method of capturing and producing biometric-matching quality fingerprints and other types of dactylographic images with a mobile device | |
US10533925B2 (en) | Fixtureless lensmeter and methods of operating same | |
KR102085766B1 (ko) | 촬영 장치의 자동 초점 조절 방법 및 장치 | |
JP6027286B2 (ja) | 撮像モジュールの製造方法及び撮像モジュールの製造装置 | |
US8988519B2 (en) | Automatic magnification of data on display screen based on eye characteristics of user | |
US20180140182A1 (en) | Apparatus, system and method of determining one or more optical parameters of a lens | |
JP6490242B2 (ja) | 測定方法、および端末 | |
US11580639B2 (en) | Electronic device for measuring skin condition of user and method for operating same | |
JP6858352B2 (ja) | 画像投影装置 | |
JP6984071B6 (ja) | 器具なしレンズメータシステム | |
WO2017072009A1 (en) | Hair diameter measurement | |
CA2876412C (en) | Device and method for eye tracking data trigger arrangement | |
CN107837070A (zh) | 具有大拍摄面积的便携式皮肤检测仪 | |
CN111354378A (zh) | 语音端点检测方法、装置、设备及计算机存储介质 | |
TW201503687A (zh) | 拍照控制系統及方法 | |
CN108801161A (zh) | 测量系统、方法及装置、可读存储介质 | |
KR20130084413A (ko) | 지문 인식 장치 및 방법 | |
TW201617786A (zh) | 自動控制電子裝置使用時間的系統及方法 | |
US10681280B2 (en) | Camera component location indicator on display | |
EP4447426A1 (en) | Grip gesture recognition method and apparatus, device, storage medium, and chip |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211105 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211105 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221129 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221205 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20230217 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230602 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230623 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230630 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230718 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230815 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7333823 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |