[go: up one dir, main page]

KR102842211B1 - 무인 화장품 판매를 위한 안내문 제공 장치 - Google Patents

무인 화장품 판매를 위한 안내문 제공 장치

Info

Publication number
KR102842211B1
KR102842211B1 KR1020230098768A KR20230098768A KR102842211B1 KR 102842211 B1 KR102842211 B1 KR 102842211B1 KR 1020230098768 A KR1020230098768 A KR 1020230098768A KR 20230098768 A KR20230098768 A KR 20230098768A KR 102842211 B1 KR102842211 B1 KR 102842211B1
Authority
KR
South Korea
Prior art keywords
unit
cosmetic
diagnosis result
guidance
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
KR1020230098768A
Other languages
English (en)
Other versions
KR20250017845A (ko
Inventor
김경태
Original Assignee
김경태
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김경태 filed Critical 김경태
Priority to KR1020230098768A priority Critical patent/KR102842211B1/ko
Publication of KR20250017845A publication Critical patent/KR20250017845A/ko
Application granted granted Critical
Publication of KR102842211B1 publication Critical patent/KR102842211B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F9/00—Details other than those peculiar to special kinds or types of apparatus
    • G07F9/02—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus
    • G07F9/023—Arrangements for display, data presentation or advertising
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/442—Evaluating skin mechanical properties, e.g. elasticity, hardness, texture, wrinkle assessment
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A61B5/443—Evaluating skin constituents, e.g. elastin, melanin, water
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
    • G06K7/1404—Methods for optical code recognition
    • G06K7/1408—Methods for optical code recognition the method being specifically adapted for the type of code
    • G06K7/1413—1D bar codes
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0282—Rating or review of business operators or products
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/62—Extraction of image or video features relating to a temporal dimension, e.g. time-based feature extraction; Pattern tracking
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F9/00—Details other than those peculiar to special kinds or types of apparatus
    • G07F9/006—Details of the software used for the vending machines

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Multimedia (AREA)
  • Pathology (AREA)
  • Medical Informatics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Accounting & Taxation (AREA)
  • Strategic Management (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Dermatology (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Electromagnetism (AREA)
  • Game Theory and Decision Science (AREA)
  • Toxicology (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명은 무인 화장품 판매를 위한 안내문 제공 장치에 관한 것으로 본 발명의 일면에 따른 무인 화장품 판매를 위한 안내문 제공 장치는 매장내부를 촬영하는 카메라로부터 영상데이터를 입력받는 영상입력부, 매장에 설치된 피부진단기로부터 수분, 색소침착, 탄력, 유분 중 적어도 하나를 포함하는 평가항목에 대한 점수를 포함하는 진단결과를 입력받는 진단결과 입력부, 영상입력부로 입력된 영상데이터에서 사용자에 대응하는 적어도 하나의 객체를 검출하고 진단결과 입력부로 진단결과가 입력된 시점에 영상데이터에서 기설정된 제1위치에 위치한 어느 하나의 객체를 선택해 다른 사용자와 구분하기 위한 사용자코드를 부여하는 객체식별부, 진단결과 입력부에서 입력된 진단결과와 진단결과가 입력된 것에 대응하여 객체식별부에서 부여된 사용자코드를 매칭시켜 저장하는 매칭부, 영상입력부로 입력된 영상데이터에서 검출된 객체 중 객체식별부에서 사용자코드가 부여된 각 객체의 위치 변화를 추적하는 객체추적부, 사용자가 미리 정해진 위치에 화장품을 놓는 것에 대응하여 화장품바코드를 인식하여 화장품바코드에 따라 각 화장품에 대응하여 미리 저장된 화장품명을 포함하는 복수의 화장품정보 중 어느 하나의 화장품정보를 선택하는 화장품 인식부, 화장품 인식부에서 화장품정보가 선택되면 상기 객체추적부에서 추적중인 객체의 위치에 따라 매칭부에 저장된 진단결과를 추출하는 진단결과 추출부, 진단결과 추출부에서 추출한 진단결과와 화장품 인식부에서 선택한 화장품정보를 이용해 안내문을 생성하는 안내문 생성부 및 안내문 생성부에서 생성한 안내문을 출력하는 표시부를 포함한다.

Description

무인 화장품 판매를 위한 안내문 제공 장치{APPARATUS FOR PROVINDING GUIDANCE TO SELL COSMETICS UNATTENDED}
본 발명은 무인 화장품 판매가 가능하도록 하는 기술에 관한 것으로, 더욱 상세하게는 무인으로 화장품에 대한 안내를 제공하는 기술에 관한 것이다.
화장품은 작은 규모의 매장에 방문시 좁은 공간에서 직원과 대면해야 하므로 제품을 체험하기에 부담되고, 자유롭게 제품을 둘러보기에 어려움이 있다. 이에 따라 직원의 간섭이 적어 편하게 제품을 체험할 수 있는 대형매장에 고객 쏠림 현상이 나타나고 있다. 그러나 대형매장의 경우 큰 공간이 필요하고, 관리비와 인건비가 많이 드는 문제가 있다.
이와 관련해, 직원에 의한 부담감이 없으며 인건비와 같은 운영비를 절감할 수 있는 무인 판매 기술이 개시되고 있다. 특히 코로나로 인해 비대면 판매를 위한 기술 개발과 적용이 활발하게 이뤄지며 음식 서비스, 편의점, 영화관 등 여러 분야에서 무인 판매 서비스가 제공되고 있다.
다만, 화장품은 필요에 따라 고객의 피부에 맞는 제품을 추천하는 등의 상담 서비스가 필요하여, 단순 판매 서비스만을 제공하는 종래의 무인 판매 기술을 적용하기에는 어려움이 있다.
이와 관련해 사용자의 피부를 진단한 결과에 따라 화장품을 추천하는 무인 화장품 판매 기술이 개시되나, 이러한 종래의 기술은 여러 사용자가 들어왔을 때 사용자를 구분해서 추천하기 위한 구성을 개시하지 못해 한번에 사용자 한 명만 받을 수 있는 한계가 있다.
대한민국 특허출원번호 제10-2021-0063303호 대한민국 특허출원번호 제10-2021-0098459호
본 발명의 목적은 상기 문제점을 해결하기 위한 것으로, 영상에서 검출된 사용자의 위치에 따라 사용자를 구분해 각 사용자의 진단결과와 인식시킨 화장품에 따라 맞춤형 안내가 가능하도록 하는 무인 화장품 판매를 위한 안내문 제공 장치를 제공하는 것이다.
본 발명의 목적은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 명확하게 이해될 수 있을 것이다.
전술한 목적을 달성하기 위한 본 발명의 일면에 따른 무인 화장품 판매를 위한 안내문 제공 장치는 매장내부를 촬영하는 카메라로부터 영상데이터를 입력받는 영상입력부, 매장에 설치된 피부진단기로부터 수분, 색소침착, 탄력, 유분 중 적어도 하나를 포함하는 평가항목에 대한 점수를 포함하는 진단결과를 입력받는 진단결과 입력부, 영상입력부로 입력된 영상데이터에서 사용자에 대응하는 적어도 하나의 객체를 검출하고 진단결과 입력부로 진단결과가 입력된 시점에 영상데이터에서 기설정된 제1위치에 위치한 어느 하나의 객체를 선택해 다른 사용자와 구분하기 위한 사용자코드를 부여하는 객체식별부, 진단결과 입력부에서 입력된 진단결과와 진단결과가 입력된 것에 대응하여 객체식별부에서 부여된 사용자코드를 매칭시켜 저장하는 매칭부, 영상입력부로 입력된 영상데이터에서 검출된 객체 중 객체식별부에서 사용자코드가 부여된 각 객체의 위치 변화를 추적하는 객체추적부, 사용자가 미리 정해진 위치에 화장품을 놓는 것에 대응하여 화장품바코드를 인식하여 화장품바코드에 따라 각 화장품에 대응하여 미리 저장된 화장품명을 포함하는 복수의 화장품정보 중 어느 하나의 화장품정보를 선택하는 화장품 인식부, 화장품 인식부에서 화장품정보가 선택되면 상기 객체추적부에서 추적중인 객체의 위치에 따라 매칭부에 저장된 진단결과를 추출하는 진단결과 추출부, 진단결과 추출부에서 추출한 진단결과와 화장품 인식부에서 선택한 화장품정보를 이용해 안내문을 생성하는 안내문 생성부 및 안내문 생성부에서 생성한 안내문을 출력하는 표시부를 포함한다.
본 발명에 따르면 영상에서 검출된 사용자의 위치에 따라 사용자를 구분해 각 사용자의 진단결과와 인식시킨 화장품에 따라 맞춤형 안내가 가능하도록 하는 무인 화장품 판매를 위한 안내문 제공 장치를 제공하는 효과가 있다.
본 발명에 따르면 다수가 이용시에도 각 사용자에 맞춤형 안내가 제공되도록 함으로써 무인 화장품 판매 매장의 활용성이 향상되도록 한다.
본 발명의 효과는 상기에서 언급한 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 청구범위의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 일 실시예에 따른 무인 화장품 판매를 위한 안내문 제공 장치의 블록도이다.
도 2는 본 발명의 다른 실시예에 따른 무인 화장품 판매를 위한 안내문 제공 방법의 순서도이다.
도 3은 본 발명의 실시예들에 있어서 사용자에게 제공되는 안내문을 나타낸 제1예시도이다.
도 4는 본 발명의 실시예들에 있어서 사용자에게 제공되는 안내문을 나타낸 제2예시도이다.
도 5는 본 발명의 실시예에 따른 무인 화장품 판매를 위한 안내문 제공 장치가 적용된 무인 화장품 판매 매장의 내부 배치를 나타낸 예시도이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것으로서, 본 발명은 청구항의 기재에 의해 정의될 뿐이다. 한편, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며, 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다.
도 1은 본 발명의 일 실시예에 따른 무인 화장품 판매를 위한 안내문 제공 장치의 블록도이고, 도 2는 본 발명의 다른 실시예에 따른 무인 화장품 판매를 위한 안내문 제공 방법의 순서도이다.
본 발명의 다른 실시예에 따른 무인 화장품 판매를 위한 안내문 제공 방법은 본 발명의 일 실시예에 따른 무인 화장품 판매를 위한 안내문 제공 장치에 의해 수행될 수 있다.
한편, 첨부된 블록도의 블록과 순서도의 단계는 데이터 프로세싱이 가능한 전자 장치(예를 들어 범용 컴퓨터, 특수용 컴퓨터, 휴대용 노트북 컴퓨터, 네트워크 컴퓨터)의 프로세서나 메모리에 탑재되어 지정된 기능들을 수행하는 컴퓨터 명령들(instructions)로 구현될 수 있다. 이들 컴퓨터 프로그램 명령들은 컴퓨터에서 판독 가능한 메모리에 저장될 수 있기 때문에, 블록도의 블록 또는 흐름도의 단계에서 설명된 기능들은 이를 수행하는 명령 수단을 내포하는 제조물로 생산될 수도 있다.
이하 설명의 편의를 위해 동일한 구성에 대해서는 도면 부호를 일치시키고 중복하여 설명하지 않도록 한다.
무인 화장품 판매를 위한 안내문 제공 장치(30)는 매장 내부를 촬영하며 영상데이터를 생성하는 카메라(10)와 사용자의 입력에 따라 사용자의 피부를 진단한 진단결과를 생성하는 피부진단기(20)가 설치된 무인 화장품 판매 매장에 구비될 수 있다.
도 5를 참조하면, 본 발명에 따른 무인 화장품 판매를 위한 안내문 제공 장치(30)가 적용되는 무인 화장품 판매 매장은 화장품을 진열하는 진열공간과, 화장품을 직접 체험하고 화장품을 바른 모습을 확인할 수 있게 하는 체험공간과, 화장품을 결제하기 위한 계산대와, 매장내부를 촬영하는 카메라(10)와, 사용자의 입력에 따라 사용자의 피부를 진단한 진단결과를 생성하는 피부진단기(20)를 포함할 수 있다.
카메라(10)는 무인 화장품 판매 매장 내에 설치되어 무인 화장품 판매 매장 내부를 촬영함에 따라 영상데이터를 생성하고 생성한 영상데이터를 외부로 출력할 수 있다.
피부진단기(20)는 무인 화장품 판매 매장 내에 설치되고, 사용자의 피부를 촬영하기 위한 촬영부와 사용자의 피부를 촬영한 영상을 분석하여 수분, 색소침착, 탄력, 유분 중 적어도 하나를 포함하는 평가항목 각각에 대한 점수를 포함하는 진단결과를 생성하는 분석부가 구비되어, 사용자의 입력에 따라 진단결과를 생성하고 생성한 진단결과를 외부로 출력할 수 있다.
진단결과는 수분, 색소침착, 탄력, 유분 각각에 대응하는 복수의 평가항목에 대한 점수를 포함할 수 있다.
피부진단기(20)는 수분, 색소침착, 탄력, 유분 중 적어도 하나를 포함하는 평가항목 각각에 대한 점수를 포함하는 진단결과를 생성하는 기존의 피부진단기 중 어느 하나가 적용될 수 있다.
무인 화장품 판매를 위한 안내문 제공 장치(30)는 카메라(10) 및 피부진단기(20)와 전기적으로 연결되어 카메라(10)로부터 영상데이터를 입력받고, 피부진단기(20)로부터 진단결과를 입력받을 수 있다.
또한 무인 화장품 판매를 위한 안내문 제공 장치(30)는 사용자가 미리 정해진 위치에 화장품을 놓는 것에 대응하여 화장품을 인식하고, 진단결과와 인식한 화장품의 정보를 이용해 안내문을 생성해 표시할 수 있다.
본 발명에 따르면 무인 화장품 판매 매장에 방문한 사용자의 피부 진단결과와 사용자가 인식시킨 화장품을 기반으로 안내문을 제공함으로써, 무인으로 사용자 맞춤형 화장품 카운슬링이 가능하도록 한다.
특히, 본 발명에 따른 무인 화장품 판매를 위한 안내문 제공 장치(30)는 진단결과가 입력된 시점과 화장품이 인식된 각 시점에서 영상데이터에서 검출된 객체의 위치에 따라 사용자를 식별하여, 매장내의 사용자들 중 화장품을 인식시킨 사용자에게 맞춤형 안내를 제공하는 것을 특징으로 한다.
구체적으로, 무인 화장품 판매를 위한 안내문 제공 장치(30)는 영상입력부(310), 진단결과 입력부(320), 객체식별부(330), 매칭부(340), 객체추적부(350), 화장품 인식부(360), 진단결과 추출부(370), 안내문 생성부(380), 표시부(390)를 포함할 수 있다.
영상입력부(310)는 매장내부를 촬영하는 카메라(10)로부터 영상데이터를 입력받을 수 있다(S101).
진단결과 입력부(320)는 매장에 설치된 피부진단기(20)로부터 수분, 색소침착, 탄력, 유분 중 적어도 하나를 포함하는 평가항목에 대한 점수를 포함하는 진단결과를 입력받을 수 있다(S103).
진단결과는 수분, 색소침착, 탄력, 유분 각각에 대응하는 복수의 평가항목에 대한 점수를 포함할 수 있다.
예를 들어, 수분, 색소침착, 탄력, 유분 각각에 대응하는 복수의 평가항목에 대한 점수의 최솟값이 0이고 최댓값이 10인 경우, 진단결과는 평가항목 수분에 대한 점수 3, 평가항목 색소침착에 대한 점수 6, 평가항목 탄력에 대한 점수 5, 평가항목 유분에 대한 점수 4를 포함할 수 있다.
객체식별부(330)는 영상입력부(310)로 입력된 영상데이터에서 사용자에 대응하는 적어도 하나의 객체를 검출하고 진단결과 입력부(320)로 진단결과가 입력된 시점에 영상데이터에서 기설정된 제1위치에 위치한 어느 하나의 객체를 선택해 다른 사용자와 구분하기 위한 사용자코드를 부여할 수 있다(S105).
객체식별부(330)는 진단결과 입력부(320)에서 진단결과가 입력된 것에 대응하여 영상입력부(310)로 입력된 영상데이터에서 사용자에 대응하는 객체를 검출하고 검출한 객체 중 기설정된 제1위치에 위치한 어느 하나의 객체에 대해 사용자를 다른 사용자와 구분하기 위한 사용자코드를 부여할 수 있다(S105).
여기서, 제1위치는 영상입력부(310)로 입력된 영상데이터에서 피부진단기가 표시되는 지점에 대응되도록 미리 설정될 수 있다.
제1위치는 영상데이터에서 피부진단기가 표시되는 영역에 포함된 어느 하나의 픽셀의 좌표로 미리 설정될 수 있다.
객체식별부(330)는 진단결과 입력부(320)에서 진단결과가 입력된 것에 대응하여 영상에서 사람에 대응하는 객체를 라벨링한 학습데이터를 입력받아 외부로부터 입력된 영상데이터에서 사람에 대응하는 객체를 검출하도록 미리 학습된 학습모델을 이용해 영상입력부(310)로 입력된 영상데이터로부터 사용자에 대응하는 적어도 하나의 객체를 검출할 수 있다.
그리고, 객체식별부(330)는 검출한 객체 중 객체의 중심 좌표가 기설정된 제1위치의 좌표를 기준으로 가장 가까운 객체에 사용자를 다른 사용자와 구분하기 위한 사용자코드를 부여할 수 있다(S105).
이때, 가장 가까운 객체는 중심좌표와 제1위치의 좌표의 차이에 따라 산출한 거리가 가장 작은 객체를 의미한다.
상기한 구성에 따라 객체식별부(330)는 사용자가 피부진단기(20)를 사용하여 진단결과가 입력되면 영상데이터에서 피부진단기가 표시되는 위치에서 검출된 객체에 사용자코드를 부여하여, 피부를 진단한 사용자를 사용자코드로 구분할 수 있도록 한다.
즉, 객체식별부(330)는 복수의 사용자 중 피부진단 결과가 입력되었을 때 피부진단기 인근에 위치한 객체를 피부 진단한 사용자로 식별할 수 있도록 한다.
매칭부(340)는 진단결과 입력부(320)에서 입력된 진단결과와, 진단결과가 입력된 것에 대응하여 객체식별부(330)에서 검출한 객체에 대해 부여된 사용자코드를 매칭시켜 저장할 수 있다(S107).
객체추적부(350)는 영상입력부(310)로 입력된 영상데이터에서 검출된 객체 중 객체식별부(330)에서 사용자코드가 부여된 각 객체의 위치 변화를 추적할 수 있다(S109).
객체추적부(350)는 객체식별부(330)가 영상데이터에서 객체에 사용자코드를 부여한 것에 대응하여 사용자코드가 부여된 객체를 포함하는 영역의 픽셀값 분포에 따른 특징을 사용자코드와 매칭시켜 저장하고, 사용자코드별로 미리 저장된 특징과의 유사도에 따라 영상데이터에서 각 사용자코드에 대응하는 객체를 검출하며 사용자코드가 부여된 각 객체의 위치 변화를 추적할 수 있다(S109).
객체추적부(350)는 객체식별부(330)에서 객체에 사용자코드를 부여한 이후 영상입력부(310)로 입력된 영상데이터에서 검출된 객체 중 픽셀값의 분포에 따른 특징이 사용자코드에 대해 미리 저장된 특징과 유사도가 가장 높은 객체를 각 사용자코드에 대응하는 객체로 검출해 사용자코드가 부여된 객체의 위치 변화를 추적할 수 있다(S109).
여기서 특징간의 유사도는 평균제곱차이 유사도를 적용하여 각 객체가 포함된 영역에 포함된 픽셀들 각각에서 픽셀값의 차이를 제곱해서 합함에 따라 산출될 수 있다.
화장품 인식부(360)는 사용자가 미리 정해진 위치에 화장품을 놓는 것에 대응하여 화장품바코드를 인식하여 화장품바코드에 따라 각 화장품에 대응하여 미리 저장된 화장품명을 포함하는 복수의 화장품정보 중 어느 하나의 화장품정보를 선택할 수 있다.
화장품 인식부(360)는 복수의 화장품 각각에 대한 화장품코드, 화장품명, 화장품에 포함된 성분을 나타내는 복수의 성분명으로 구성된 복수의 화장품정보를 저장할 수 있다.
화장품 인식부(360)는 사용자가 미리 정해진 위치에 화장품을 놓는 것에 대응하여 화장품바코드를 입력받기 위한 바코드인식수단을 구비하고, 화장품바코드가 입력되는지를 판단할 수 있다(S111).
화장품 인식부(360)는 사용자가 바코드인식수단에 화장품을 높는 동작에 대응하여 화장품바코드가 입력되면 미리 저장된 화장품정보 중 입력된 화장품바코드에서 인식된 화장품코드와 대응하는 화장품코드를 포함하는 화장품정보를 선택할 수 있다(S113).
진단결과 추출부(370)는 화장품 인식부(360)에서 화장품정보가 선택되면 객체추적부(350)에서 추적하고 있는 사용자코드가 부여된 객체의 위치에 따라 매칭부(340)에 저장된 진단결과를 추출할 수 있다(S115).
진단결과 추출부(370)는 화장품 인식부(360)에서 화장품정보가 선택된 것에 대응하여 객체식별부(330)에서 위치 변화를 추적하던 적어도 하나의 객체 중 화장품 인식부(360)에서 화장품정보가 선택된 시점에 영상데이터에서 기설정된 제2위치에 위치한 객체를 선택하고, 매칭부(340)에 각 사용자코드와 매칭된 진단결과 중 제2위치에 위치한 객체의 사용자코드가 매칭된 하나의 진단결과를 추출할 수 있다(S115).
여기서 제2위치는 영상데이터에서 무인 화장품 판매를 위한 안내문 제공 장치(30)가 표시되는 지점에 대응되도록 미리 설정될 수 있다.
제2위치는 영상데이터에서 무인 화장품 판매를 위한 안내문 제공 장치(30)가 표시되는 영역에 포함된 어느 하나의 픽셀의 좌표로 미리 설정될 수 있다.
진단결과 추출부(370)는 객체식별부(330)에서 위치 변화를 추적하던 적어도 하나의 객체 중 화장품 인식부(360)에서 화장품정보가 선택된 시점에 중심좌표가 영상데이터에서 기설정된 제2위치의 좌표와 가장 가까운 하나의 객체를 선택해서, 매칭부(340)에 저장된 진단결과 중 선택한 객체의 사용자코드가 매칭된 하나의 진단결과를 추출할 수 있다(S115).
즉, 진단결과 추출부(370)는 화장품정보가 선택된 시점에 영상데이터에서 무인 화장품 판매를 위한 안내문 제공 장치와 인접하고 사용자코드가 부여된 객체를 기준으로, 화장품을 인식시킨 사용자의 진단결과를 추출할 수 있다.
안내문 생성부(380)는 진단결과 추출부(370)에서 추출한 진단결과와 화장품 인식부(360)에서 선택한 화장품정보를 이용해 안내문을 생성할 수 있다(S117).
안내문 생성부(380)는 진단결과 추출부(370)에서 추출한 진단결과에 포함된 수분, 색소침착, 탄력, 유분 중 적어도 하나를 포함하는 평가항목에 대한 점수 중 가장 낮은 점수에 대응하는 평가항목을 선택하고, 화장품 인식부(360)에서 선택한 화장품정보의 화장품명과 선택한 평가항목에 대해 기설정된 평가항목텍스트를 기설정된 템플릿에 입력함에 따라 안내문을 생성할 수 있다(S117).
안내문 생성부(380)는 복수의 평가항목 각각에 대해 각 평가항목을 표시하기 위해 기설정된 복수의 평가항목텍스트, 안내문을 생성하기 위해 기설정된 템플릿, 복수의 화장품명 각각에 수분, 색소침착, 탄력, 유분 중 어느 하나에 대한 항목코드로 구성된 복수의 유효정보를 저장할 수 있다.
유효정보는 화장품의 화장품명과, 수분, 색소침착, 탄력, 유분에 대응하는 복수의 항목코드 중 어느 하나로 구성될 수 있다.
각 화장품명에 대한 항목코드는 각 화장품명에 대응하는 수분, 색소침착, 탄력, 유분 중 화장품이 개선 효과를 제공하는 항목을 나타내기 위해 사용자의 입력에 따라 미리 설정될 수 있다.
안내문 생성부(380)는 안내문 생성부(380)는 진단결과 추출부(370)에서 추출한 진단결과에 포함된 수분, 색소침착, 탄력, 유분 중 적어도 하나를 포함하는 평가항목에 대한 점수 중 가장 낮은 점수에 대응하는 평가항목을 선택하고, 화장품 인식부(360)에서 선택한 화장품정보의 화장품명에 대한 유효정보를 추출하며, 추출한 유효정보의 항목코드에 따른 항목이 선택된 평가항목과 일치하는지에 따라, 유효정보의 항목코드에 따른 항목이 선택된 평가항목과 일치하면 점수가 가장 낮은 항목에 대해 사용자가 인식시킨 화장품의 사용을 추천하기 위해 미리 저장되며, 기설정된 제1기본텍스트가 표시되는 텍스트영역과, 텍스트영역상에서 제1기본텍스트와 구분되어 평가항목명을 표시하기 위한 제1입력영역과, 텍스트영역상에서 제1기본텍스트 및 제1입력영역과 구분되어 화장품명을 표시하기 위한 제2입력영역을 포함하는 제1템플릿을 가져와, 제1템플릿의 제1입력영역에 선택한 평가항목에 대해 기설정된 평가항목텍스트를 입력하고 제2입력영역에 선택한 화장품정보의 화장품명을 입력함에 따라 안내문을 생성할 수 있다(S117).
안내문 생성부(380)는 화장품 인식부(360)에서 선택한 화장품정보의 화장품명인 제1화장품명에 대해 추출한 유효정보의 항목코드에 따른 항목이 선택된 평가항목과 일치하지 않으면 선택된 평가항목에 대응하는 항목의 항목코드를 포함하는 유효정보가 매칭된 어느 하나의 화장품명인 제2화장품명을 선택하고, 점수가 가장 낮은 항목에 대해 사용자가 인식시킨 화장품 외의 다른 화장품을 추천하기 위해 미리 저장된 제2템플릿을 가져와 제2템플릿에 선택한 평가항목에 대해 기설정된 평가항목텍스트, 제1화장품명, 제2화장품명을 입력함에 따라 안내문을 생성할 수 있다.
여기서, 제2템플릿은 기설정된 제2기본텍스트가 표시되는 텍스트영역과, 텍스트영역상에서 제2기본텍스트와 구분되어 평가항목명을 표시하기 위한 제1입력영역과, 텍스트영역상에서 제2기본텍스트 및 제1입력영역과 구분되어 제1화장품명을 표시하기 위한 제2입력영역, 텍스트영역상에서 제2기본텍스트, 제1입력영역, 및 제2입력영역과 구분되어 제2화장품명을 표시하기 위한 제2입력영역을 포함할 수 있다.
안내문 생성부(380)는 제2템플릿의 제1입력영역에 선택한 평가항목에 대해 기설정된 평가항목텍스트를 입력하고, 제1입력영역에 제1화장품명을 입력하며, 제2입력영역에 제2화장품명을 입력함에 따라, 사용자가 인식시킨 화장품 외에 다른 화장품을 추천해주는 안내문을 생성할 수 있다.
안내문 생성부(380)는 사용자가 인식시킨 화장품이 사용자의 피부 진단결과 가장 점수가 낮은 평가항목에 대해 효과가 있는 것으로 설정된 화장품인지에 따라 사용자가 인식시킨 화장품을 추천하는 안내문 또는 사용자가 인식시킨 화장품 외의 다른 화장품을 추천하는 안내문을 생성할 수 있다.
따라서, 안내문을 통해 사용자의 진단결과에 맞춰 사용자가 인식시킨 화장품의 사용을 추천하거나, 사용자가 인식시킨 화장품 외의 다른 화장품을 추천하며 무인으로 사용자 맞춤형 카운슬링이 가능하도록 한다.
표시부(390)는 안내문 생성부(380)에서 생성한 안내문을 출력할 수 있다(S119).
표시부(390)는 안내문 생성부(380)에서 생성한 안내문을 사용자가 확인 가능하도록 표시할 수 있다(S119).
도 3을 참조하면, 사용자가 인식시킨 화장품에 대해 매칭된 항목과 사용자의 진단결과에서 점수가 가장 낮은 평가항목이 일치하는 경우 표시부(390)에는 사용자가 인식시킨 화장품의 사용을 추천하기 위한 제1기본텍스트와 사용자의 진단결과에서 점수가 가장 낮은 평가항목이 표시되는 제1입력영역(1110)과 사용자가 인식시킨 화장품명이 표시되는 제2입력영역(1110)을 포함하는 안내문(1100)이 표시될 수 있다.
도 4를 참조하면, 사용자가 인식시킨 화장품에 대해 매칭된 항목과 사용자의 진단결과에서 점수가 가장 낮은 평가항목이 일치하지 않는 경우 표시부(390)에는 사용자가 인식시킨 화장품 외의 다른 화장품의 사용을 추천하기 위한 제2기본텍스트와 사용자의 진단결과에서 점수가 가장 낮은 평가항목이 표시되는 제1입력영역(1210)과 사용자가 인식시킨 화장품명이 표시되는 제2입력영역(1220)과 사용자가 인식한 화장품 외에 사용자의 진단결과에서 점수가 가장 낮은 평가항목에 대한 개선 기능을 제공하는 다른 화장품명이 표시되는 제3입력영역(1230)을 포함하는 안내문(1200)이 표시될 수 있다.
본 발명에 따르면 영상에서 검출된 사용자의 위치에 따라 화장품을 인식시킨 사용자를 구분해서 사용자의 피부 진단결과를 기반으로 사용자가 인식시킨 화장품을 사용해도 괜찮을 지 다른 화장품을 사용하는게 괜찮을 지 안내가 가능하다.
본 발명에 따르면, 영상 분석을 기반으로 피부 진단한 사용자화 화장품을 인식한 사용자를 구분함으로써, 다수가 무인 매장을 이용할 때에도 각 사용자에 맞춤형 안내가 가능하도록 한다.
이에 따라, 무인 화장품 판매 매장의 활용성과 이용 편의를 높이는 효과도 기대할 수 있다.
본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구의 범위에 의하여 나타내어지며, 특허청구의 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
10 : 카메라
20 : 피부진단기
30 : 무인 화장품 판매를 위한 안내문 제공 장치
310 : 영상입력부
320 : 진단결과 입력부
330 : 객체식별부
340 : 매칭부
350 : 객체추적부
360 : 화장품 인식부
370 : 진단결과 추출부
380 : 안내문 생성부
390 : 표시부

Claims (3)

  1. 매장내부를 촬영하는 카메라로부터 영상데이터를 입력받는 영상입력부;
    매장에 설치된 피부진단기로부터 수분, 색소침착, 탄력, 유분 중 적어도 하나를 포함하는 평가항목에 대한 점수를 포함하는 진단결과를 입력받는 진단결과 입력부;
    상기 영상입력부로 입력된 영상데이터에서 사용자에 대응하는 적어도 하나의 객체를 검출하고 상기 진단결과 입력부로 진단결과가 입력된 시점에 상기 영상데이터에서 기설정된 제1위치에 위치한 어느 하나의 객체를 선택해 다른 사용자와 구분하기 위한 사용자코드를 부여하는 객체식별부;
    상기 진단결과 입력부에서 입력된 진단결과와 상기 진단결과가 입력된 것에 대응하여 상기 객체식별부에서 부여된 사용자코드를 매칭시켜 저장하는 매칭부;
    상기 영상입력부로 입력된 영상데이터에서 검출된 객체 중 상기 객체식별부에서 사용자코드가 부여된 각 객체의 위치 변화를 추적하는 객체추적부;
    사용자가 미리 정해진 위치에 화장품을 놓는 것에 대응하여 화장품바코드를 인식하여 상기 화장품바코드에 따라 각 화장품에 대응하여 미리 저장된 화장품명을 포함하는 복수의 화장품정보 중 어느 하나의 화장품정보를 선택하는 화장품 인식부;
    상기 화장품 인식부에서 화장품정보가 선택되면 상기 객체추적부에서 추적중인 객체의 위치에 따라 상기 매칭부에 저장된 진단결과를 추출하는 진단결과 추출부;
    상기 진단결과 추출부에서 추출한 진단결과와 상기 화장품 인식부에서 선택한 화장품정보를 이용해 안내문을 생성하는 안내문 생성부; 및
    상기 안내문 생성부에서 생성한 안내문을 출력하는 표시부;를 포함하는 무인 화장품 판매를 위한 안내문 제공 장치.
  2. 제1항에 있어서,
    상기 진단결과 추출부는
    상기 화장품 인식부에서 화장품정보가 선택된 것에 대응하여 상기 객체식별부에서 위치 변화를 추적하던 적어도 하나의 객체 중 상기 화장품 인식부에서 화장품정보가 선택된 시점에 기설정된 제2위치에 위치한 객체를 선택하고, 상기 매칭부에 각 사용자코드와 매칭된 진단결과 중 상기 제2위치에 위치한 객체의 사용자코드가 매칭된 하나의 진단결과를 추출하는 것
    인 무인 화장품 판매를 위한 안내문 제공 장치.
  3. 제2항에 있어서,
    상기 안내문 생성부는
    상기 진단결과 추출부에서 추출한 진단결과에 포함된 수분, 색소침착, 탄력, 유분 중 적어도 하나를 포함하는 평가항목에 대한 점수 중 가장 낮은 점수에 대응하는 평가항목을 선택하고, 상기 화장품 인식부에서 선택한 화장품정보의 화장품명과 선택한 상기 평가항목에 대해 기설정된 평가항목텍스트를 기설정된 템플릿에 입력함에 따라 안내문을 생성하는 것
    인 무인 화장품 판매를 위한 안내문 제공 장치.
KR1020230098768A 2023-07-28 2023-07-28 무인 화장품 판매를 위한 안내문 제공 장치 Active KR102842211B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020230098768A KR102842211B1 (ko) 2023-07-28 2023-07-28 무인 화장품 판매를 위한 안내문 제공 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020230098768A KR102842211B1 (ko) 2023-07-28 2023-07-28 무인 화장품 판매를 위한 안내문 제공 장치

Publications (2)

Publication Number Publication Date
KR20250017845A KR20250017845A (ko) 2025-02-04
KR102842211B1 true KR102842211B1 (ko) 2025-08-01

Family

ID=94605163

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020230098768A Active KR102842211B1 (ko) 2023-07-28 2023-07-28 무인 화장품 판매를 위한 안내문 제공 장치

Country Status (1)

Country Link
KR (1) KR102842211B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101661588B1 (ko) 2015-10-26 2016-10-04 주식회사 엘지유플러스 피부 분석 방법 및 이를 위한 장치
KR102184177B1 (ko) 2020-03-10 2020-11-27 주식회사 만컴퍼니 사용자의 단말을 이용하여 획득한 얼굴 이미지를 분석하여 화장품을 추천하는 장치 및 방법

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170039463A (ko) * 2015-10-01 2017-04-11 에스케이플래닛 주식회사 사용자 장치, 비콘, 서비스 제공 장치, 그를 포함하는 결제 시스템, 그의 제어 방법 및 컴퓨터 프로그램이 기록된 기록매체
EP3663623A1 (en) 2018-12-05 2020-06-10 Bayer AG Pressure stabilizer
KR102257992B1 (ko) 2019-07-08 2021-05-28 삼성전기주식회사 커패시터 부품
KR102261518B1 (ko) * 2019-07-30 2021-06-07 (주)트라이큐빅스코리아 오프라인 가상 제품 진열 매장에서의 고객 추적을 위한 고객 인식 방법 및 그 시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101661588B1 (ko) 2015-10-26 2016-10-04 주식회사 엘지유플러스 피부 분석 방법 및 이를 위한 장치
KR102184177B1 (ko) 2020-03-10 2020-11-27 주식회사 만컴퍼니 사용자의 단말을 이용하여 획득한 얼굴 이미지를 분석하여 화장품을 추천하는 장치 및 방법

Also Published As

Publication number Publication date
KR20250017845A (ko) 2025-02-04

Similar Documents

Publication Publication Date Title
US11132737B2 (en) Dynamic customer checkout experience within an automated shopping environment
US10380603B2 (en) Assessing personality and mood characteristics of a customer to enhance customer satisfaction and improve chances of a sale
US10559102B2 (en) Makeup simulation assistance apparatus, makeup simulation assistance method, and non-transitory computer-readable recording medium storing makeup simulation assistance program
US10290031B2 (en) Method and system for automated retail checkout using context recognition
US20220344044A1 (en) User-customized skin diagnosis system and method
CN109816441B (zh) 策略推送方法、系统及相关装置
US20140363059A1 (en) Retail customer service interaction system and method
US20170213268A1 (en) Method for facilitating a transaction using a humanoid robot
CN109166007A (zh) 一种基于自动售货机的商品推荐方法及其装置
US20160203499A1 (en) Customer behavior analysis system, customer behavior analysis method, non-transitory computer readable medium, and shelf system
US12387319B2 (en) Systems and methods for acne counting, localization and visualization
US11475500B2 (en) Device and method for item recommendation based on visual elements
KR102400172B1 (ko) 시선추적에 기초하여 상품을 추천하기 위한 방법 및 시스템
JP4910717B2 (ja) 年齢確認装置、年齢確認方法、及び年齢確認プログラム
KR102561883B1 (ko) 오프라인 가상 제품 진열 매장에서의 고객 추적을 위한 고객 인식 방법 및 그 시스템
KR20160011804A (ko) 얼굴인식기술을 이용하여 추출된 고객의 성별 및 연령 정보에 기초하여 매장 이용 고객에 대한 마케팅 정보를 제공하는 방법
JP6476678B2 (ja) 情報処理装置及び情報処理プログラム
CN113392295A (zh) 数据标注方法、平台、电子设备和计算机存储介质
KR102842211B1 (ko) 무인 화장품 판매를 위한 안내문 제공 장치
CN110110688B (zh) 一种信息分析方法及系统
KR102925772B1 (ko) 전시 공간 내 관람객의 관심도 측정 장치 및 방법
JP7206806B2 (ja) 情報処理装置、分析方法、及びプログラム
US20260024119A1 (en) Store system with automated customer reply and customer behavior tracking
JP2024176134A (ja) 情報処理プログラム、情報処理方法および情報処理装置
EP4386649A1 (en) Information processing program, information processing method, and information processing device

Legal Events

Date Code Title Description
PA0109 Patent application

St.27 status event code: A-0-1-A10-A12-nap-PA0109

PA0201 Request for examination

St.27 status event code: A-1-2-D10-D11-exm-PA0201

D13-X000 Search requested

St.27 status event code: A-1-2-D10-D13-srh-X000

PG1501 Laying open of application

St.27 status event code: A-1-1-Q10-Q12-nap-PG1501

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

St.27 status event code: A-1-2-D10-D22-exm-PE0701

F11 Ip right granted following substantive examination

Free format text: ST27 STATUS EVENT CODE: A-2-4-F10-F11-EXM-PR0701 (AS PROVIDED BY THE NATIONAL OFFICE)

PR0701 Registration of establishment

St.27 status event code: A-2-4-F10-F11-exm-PR0701

PR1002 Payment of registration fee

St.27 status event code: A-2-2-U10-U11-oth-PR1002

Fee payment year number: 1

U11 Full renewal or maintenance fee paid

Free format text: ST27 STATUS EVENT CODE: A-2-2-U10-U11-OTH-PR1002 (AS PROVIDED BY THE NATIONAL OFFICE)

Year of fee payment: 1

PG1601 Publication of registration

St.27 status event code: A-4-4-Q10-Q13-nap-PG1601

Q13 Ip right document published

Free format text: ST27 STATUS EVENT CODE: A-4-4-Q10-Q13-NAP-PG1601 (AS PROVIDED BY THE NATIONAL OFFICE)