[go: up one dir, main page]

KR20140135320A - 얼굴인식 사진 공유 시스템 및 방법 - Google Patents

얼굴인식 사진 공유 시스템 및 방법 Download PDF

Info

Publication number
KR20140135320A
KR20140135320A KR1020130055180A KR20130055180A KR20140135320A KR 20140135320 A KR20140135320 A KR 20140135320A KR 1020130055180 A KR1020130055180 A KR 1020130055180A KR 20130055180 A KR20130055180 A KR 20130055180A KR 20140135320 A KR20140135320 A KR 20140135320A
Authority
KR
South Korea
Prior art keywords
terminal
photo
face recognition
photograph
storage space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020130055180A
Other languages
English (en)
Other versions
KR102084564B1 (ko
Inventor
서혜경
Original Assignee
주식회사 엘지유플러스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엘지유플러스 filed Critical 주식회사 엘지유플러스
Priority to KR1020130055180A priority Critical patent/KR102084564B1/ko
Publication of KR20140135320A publication Critical patent/KR20140135320A/ko
Application granted granted Critical
Publication of KR102084564B1 publication Critical patent/KR102084564B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/50—Business processes related to the communications industry
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • General Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephone Function (AREA)

Abstract

얼굴인식 사진 공유 시스템 및 방법이 개시된다. 본 발명의 일실시예에 따른 얼굴인식 사진 공유 시스템은 제1 단말로부터 사진을 수신하여 저장공간에 보관하는 제어부, 상기 사진을 이용하여 연락처를 획득하는 인식부, 상기 사진이 보관된 상기 저장공간에 관한 대한 링크정보를 포함하여 메시지를 작성하고, 상기 연락처에 의해 식별되는 제2 단말로 상기 메시지를 전송하는 전송부를 포함한다.

Description

얼굴인식 사진 공유 시스템 및 방법{SYSTEM AND METHOD FOR PHOTO SHARING BY FACE RECOGNITION}
본 발명의 실시예들은 제1 단말로부터 사진을 수신하여 얼굴을 인식하고, 주소록에 저장된 지인 사진의 얼굴과 일치하는지 판단하여 제2 단말의 연락처를 통해 상기 사진이 보관된 저장공간에 관한 링크정보를 전송함으로써 상기 사진을 공유하는 기술에 관한 것이다.
촬영 기능이 있는 단말은 사진이 촬상되면 주소록에 있는 지인의 연락처로 문자메시지 또는 이메일을 통해 상기 사진을 전송할 수 있다. 이를 위해 사용자는 상기 주소록에서 지인의 이름으로 연락처를 검색하고, 상기 사진을 첨부하는 방식으로 메시지를 작성하여 상기 지인에게 전송할 수 있다. 종래 기술에서 상기 사진에 여러 명의 지인이 찍히거나, 상기 사진이 여러 장일 때, 상기 사진을 공유하기 위해 사용자는 해당 횟수만큼 연락처를 검색하고 메시지를 작업하는 일을 반복하여 왔다. 상기 사진을 수신한 지인 단말에서는 상기 사진이 일방적으로 전송되어 선택의 여지 없이 메모리 공간을 차지할 수 있다.
이에 따라 사진이 촬상되는 즉시 저장공간에 사진을 저장하고, 얼굴인식을 통해 상기 사진의 얼굴과 일치하는 지인 사진이 저장된 주소록에서 연락처를 획득하여 자동으로 지인 단말로 메시지를 전송하고, 상기 메시지에 상기 저장공간에 접근할 수 있는 링크정보를 포함하여 상기 사진을 공유할 수 있는 기술이 요구되고 있다.
본 발명의 실시예는, 지인 사진과 연락처를 포함하는 주소록에서 지인 단말의 연락처를 획득하고, 상기 지인 단말과 사진을 공유하는 것을 목적으로 한다.
또한, 본 발명의 실시예는, 단말에서 촬영된 사진을 저장공간에 저장하여 상기 사진을 상기 단말 및 상기 지인 단말에 표시하는 것을 목적으로 한다.
본 발명의 일실시예에 따른 얼굴인식 사진 공유 시스템은 제1 단말로부터 사진을 수신하여 저장공간에 보관하는 제어부, 상기 사진을 이용하여 연락처를 획득하는 인식부, 상기 사진이 보관된 상기 저장공간에 관한 대한 링크정보를 포함하여 메시지를 작성하고, 상기 연락처에 의해 식별되는 제2 단말로 상기 메시지를 전송하는 전송부를 포함한다.
또한, 본 발명의 일실시예에 따른 얼굴인식 사진 공유 방법은 제1 단말로부터 사진을 수신하여 저장공간에 보관하는 단계, 상기 사진을 이용하여 연락처를 획득하는 단계, 상기 사진이 보관된 상기 저장공간에 관한 대한 링크정보를 포함하여 메시지를 작성하고, 상기 연락처에 의해 식별되는 제2 단말로 상기 메시지를 전송하는 단계를 포함한다.
본 발명의 실시예에 따르면, 사진을 촬영한 즉시, 기존에 저장된 지인 사진과 얼굴을 기준으로 비교하여 두 사진이 일치하면 지인의 연락처를 획득하여 자동으로 공유 저장공간의 링크정보를 보낼 수 있다.
본 발명의 실시예에 따르면, 사진의 링크정보를 보내 저장공간에 접속할 수 있도록 하여 지인의 방문 및 다운로드 관련한 기록을 확인할 수 있다.
또한 본 발명의 실시예에 따르면 촬영한 사진을 보내는 대신 상기 사진이 보관된 저장공간에 관한 링크정보를 보내 방대한 양의 사진을 공유할 수 있다.
도 1은 본 발명의 일실시예에 따른 얼굴인식 사진 공유 시스템을 설명하기 도면이다.
도 2는 본 발명의 일실시예에 따른 얼굴인식 사진 공유 시스템의 구성을 나타내는 도면이다.
도 3은 본 발명의 일실시예에 따른 제1 단말에서의 사진 공유를 설명하기 위한 도면이다.
도 4는 본 발명의 일실시예에 따른 제2 단말에서의 사진 공유를 설명하기 위한 도면이다.
도 5는 본 발명의 또 다른 실시예에 따른 얼굴인식 사진 공유 방법의 흐름을 나타내는 도면이다.
이하, 첨부된 도면들을 참조하여 본 발명의 일실시예에 따른 얼굴인식 사진 공유 시스템 및 방법에 대해 상세히 설명한다. 그러나, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
도 1은 본 발명의 일실시예에 따른 얼굴인식 사진 공유 시스템을 설명하기 도면이다.
도 1을 참조하면 얼굴인식 사진 공유 시스템(120)은 제1 단말(110)에서 생성된 사진을 입력 받아 저장공간에 보관한다. 상기 사진은 제1 단말(110)에서 구동되는 어플리케이션의 카메라 기능을 통해 생성된다.
제1 단말(110) 및 제2 단말(130)은 인터넷을 통해 상기 저장공간에 접근하고, 저장된 사진을 공유할 수 있다.
얼굴인식 사진 공유 시스템(120)은 상기 사진을 분류하여 상기 저장공간에 저장한다. 상기 저장공간은 하나의 사진을 독립적으로 보관하는 저장단위로서의 필드, 카테고리별로 복수의 사진을 보관하는 저장단위로서의 폴더를 포함할 수 있다. 예컨대, 얼굴인식 사진 공유 시스템(120)은 얼굴이 인식되는 특정 사진을, 독립적인 필드에 저장할 수 있다. 또한, 얼굴인식 사진 공유 시스템(120)은 상기 사진에서 동일한 얼굴이 인식되는 복수의 사진들을, 하나의 폴드에 저장할 수 있다.
얼굴인식 사진 공유 시스템(120)은 상기 사진과 제1 단말(110)의 주소록에 포함된 지인 사진에서 인식되는 얼굴을 비교하여 제2 단말(130)의 연락처를 획득한다. 상기 주소록은 제1 단말(110)과 제2 단말(130)이 통신하기 위한 정보로서, 지인의 사진, 이름, 연락처를 저장할 수 있다. 상기 주소록은 제1 단말(110)에 보유되는 단말 주소록, 또는 제1 단말(110)로 소셜 네트워크 서비스(SNS)를 제공하는 서버(140)의 서버 주소록이다.
얼굴인식 사진 공유 시스템(120)은 상기 연락처를 참조하여 상기 저장공간의 링크정보를 제2 단말(130)로 전송한다.
얼굴인식 사진 공유 시스템(120)은 제1 단말(110) 또는 제2 단말(130)이 상기 저장공간에 접근하면, 상기 저장공간에 저장된 사진을 제1 단말(110) 또는 제2 단말(130)에게 표시할 수 있다. 제1 단말(110)은 상기 어플리케이션의 갤러리 기능을 실행하여 상기 저장공간에 접근할 수 있다. 제2 단말(130)은 상기 저장공간의 링크정보를 선택하여 상기 저장공간에 접근할 수 있다. 상기 저장공간에 제1 단말(110) 또는 제2 단말(130)이 접근하면 뷰 이벤트가 발생하고, 얼굴인식 사진 공유 시스템(120)은 상기 뷰 이벤트에 따라 상기 저장공간에 보관된 사진을 제1 단말(110) 또는 제2 단말(130)에게 표시한다.
도 2는 본 발명의 일실시예에 따른 얼굴인식 사진 공유 시스템의 구성을 나타내는 도면이다.
도 2를 참조하면 얼굴인식 사진 공유 시스템(200)은 제어부(210), 인식부(220), 및 전송부(230)를 포함하여 구성할 수 있다.
제어부(210)는 제1 단말로부터 사진을 수신하여 저장공간에 보관한다. 상기 사진은, 상기 제1 단말에서 구동되는 어플리케이션의 카메라 기능을 통해 생성된다. 얼굴인식 사진 공유 시스템(200)은 상기 어플리케이션을 제어하여 카메라로 촬영하는 카메라 기능, 상기 사진을 조회하는 갤러리 기능을 제공할 수 있다. 상기 저장공간은 인터넷을 통해 상기 제1 단말에서 접근될 수 있다. 상기 저장공간은 다수의 사진을 저장하기 위한 필드 또는 폴더의 단위로 구성될 수 있다.
제어부(210)는 상기 사진의 생성에 연동하여 상기 제1 단말로부터 사진을 수신하고, 상기 어플리케이션의 갤러리 기능에 의한 뷰 이벤트의 발생에 따라, 상기 보관된 사진을 상기 제1 단말에게 표시한다. 제어부(210)는 상기 갤러리 기능을 통해 상기 저장공간의 링크정보를 제공하고 사진을 분류하여 표시할 수 있다. 제어부(210)는 상기 사진 중에서 동일한 연락처가 획득되는 사진을 분류하여, 상기 저장공간에 지정된 순서대로 보관할 수 있다.
제어부(210)는 제2 단말에서의 상기 링크정보에 대한 선택에 의해, 상기 제2 단말이 상기 저장공간에 접속하면, 상기 제2 단말에게 상기 사진을 시각화하여 표시한다. 예컨대, 상기 제1 단말로 사진을 촬영한 지인은 상기 제2 단말을 통해 상기 링크정보를 포함하는 메시지를 수신할 수 있다. 상기 메시지를 통해 상기 제2 단말에서 상기 저장공간에 접속하면 제어부(210)는 방문 횟수를 증가시켜 상기 제2 단말의 접속에 관한 방문 정보와 함께 이를 상기 제1 단말에게 알린다.
제어부(210)는 제2 단말로부터의 요청에 따라, 상기 제2 단말로 상기 사진을 전송하여 다운로드 수를 증가시키되, 상기 증가된 다운로드 수가 설정된 수를 만족하면 상기 사진의 전송을 제한한다. 제어부(210)는 상기 다운로드 수가 상기 사진으로 식별되는 제2 단말의 수를 만족하면 상기 사진의 전송을 제한하거나 상기 제1 단말의 선택에 의해 자동으로 상기 사진을 삭제할 수 있다.
제어부(210)는 제2 단말로부터 상기 사진에 대한 댓글을 입력 받아, 상기 제1 단말에서 구동되는 어플리케이션을 통해 표시한다. 제어부(210)는 지인의 이름, 방문 횟수, 방문 정보와 함께 상기 댓글을 상기 사진과 연관시켜 표시할 수 있다.
인식부(220)는 상기 사진에서 얼굴을 인식하고, 상기 인식된 얼굴이, 상기 제1 단말과 연관되는 주소록에 저장된 지인 사진의 얼굴과 일치하는지를 판단하여 상기 연락처를 획득한다. 인식부(220)는 얼굴의 기하학적 특징점을 추출하여 일치 여부를 판단할 수 있다. 상기 주소록은 상기 제1 단말에 보유되는 단말 주소록, 또는 상기 제1 단말로 소셜 네트워크 서비스(SNS)를 제공하는 서버의 서버 주소록이다.
전송부(230)는 상기 사진이 보관된 상기 저장공간에 관한 링크정보를 포함하여 메시지를 작성하고, 상기 연락처에 의해 식별되는 제2 단말로 상기 메시지를 전송한다. 상기 링크정보는 상기 저장공간의 위치를 나타내는 지정자가 될 수 있다. 일례로서, 복수의 사진들이 하나의 파일로 저장되는 경우, 전송부(230)는 상기 파일이 저장되는 저장공간에 접근할 수 있는 경로로서의 링크정보를 만들 수 있다. 상기 제1 단말 및 상기 제2 단말은 상기 링크정보를, 예를 들어 웹브라우저에 입력하면, 상기 사진이 보관되고 있는 저장공간에 접속할 수 있다.
실시예에 따라, 전송부(230)는 상기 링크정보를 포함하는 메시지를, 상기 얼굴이 인식된 제2단말의 사용자에게 전송하기 전에, 상기 제1단말에게 상기 메시지를 전송할 사람이 제2단말의 사용자가 맞는지 사전에 확인하고, 상기 제1 단말로부터 확인이 이루어진 이후에, 상기 메시지를 상기 제2 단말의 사용자에게 전송 함으로써, 정당한 사용자 만이 본인의 사진을 확인하게 위해 저장공간에 접근하도록 유도할 수 있다.
도 3은 본 발명의 일실시예에 따른 단말 장치의 구성을 설명하기 위한 도면이다.
얼굴인식 사진 공유 시스템은 제1 단말로부터 사진을 수신하여 저장공간에 보관한다. 도 3(a)는 상기 제1 단말에서 구동되는 어플리케이션의 카메라 기능(310)을 통해 생성된 사진을 나타낸다. 얼굴인식 사진 공유 시스템은 상기 어플리케이션을 제어하여 카메라로 촬영하는 카메라 기능(310), 상기 사진을 조회하는 갤러리 기능(320)을 제공할 수 있다. 상기 저장공간은 인터넷을 통해 상기 제1 단말에서 접근될 수 있다. 상기 저장공간은 다수의 사진을 저장하기 위한 필드 또는 폴더의 단위로 구성될 수 있다.
도 3(b)는 얼굴인식 사진 공유 시스템이 상기 사진의 생성에 연동하여 상기 제1 단말로부터 사진을 수신하고, 상기 어플리케이션의 갤러리 기능(320)에 의한 뷰 이벤트의 발생에 따라, 저장공간에 보관된 사진을 표시하는 것을 나타낸다. 얼굴인식 사진 공유 시스템은 갤러리 기능(320)을 통해 상기 저장공간의 링크정보를 제공하고 사진을 분류하여 표시할 수 있다. 얼굴인식 사진 공유 시스템은 상기 사진 중에서 동일한 연락처가 획득되는 사진을 분류하여, 복수의 사진들을 동시에 표시하거나, 또는 상기 제2 단말의 선택에 따라 하나의 사진을 표시할 수 있다.
얼굴인식 사진 공유 시스템은 상기 사진에서 얼굴을 인식하고, 상기 인식된 얼굴이, 상기 제1 단말과 연관되는 주소록에 저장된 지인 사진의 얼굴과 일치하는지를 판단하여 지인 이름 '김태희', '원 빈'으로 저장된 2개의 연락처를 획득할 수 있다. 얼굴인식 사진 공유 시스템은 제1 단말에 보유되는 단말 주소록, 또는 상기 제1 단말로 소셜 네트워크 서비스(SNS)를 제공하는 서버의 서버 주소록을 참조할 수 있다.
얼굴인식 사진 공유 시스템은 상기 사진이 보관된 상기 저장공간에 관한 링크정보를 포함하여 메시지를 작성하고, 상기 연락처에 의해 식별되는 제2 단말로 상기 메시지를 전송한다. 이 때, 얼굴인식 사진 공유 시스템은 상기 제1단말에게 상기 링크정보를 전송할 사람이 제2단말의 사용자가 맞는지를 확인하고, 확인이 이루어진 제2단말에 한해 상기 링크정보를 포함하는 메시지가 전송되도록 할 수 있다.
얼굴인식 사진 공유 시스템은 제2 단말이 상기 링크정보에 대한 선택으로 상기 저장공간에 접속하면, 상기 제2 단말의 접속에 관한 방문 정보(340)를 제1 단말에게 알린다. 도 3(b)에서 얼굴인식 사진 공유 시스템은 방문 정보(340)로서, 방문 날짜를 알리는 것이 예시되고 있다. 또한, 얼굴인식 사진 공유 시스템은 상기 접속에 따라 방문 횟수를 증가시키고, 여러 개의 사진을 표시하면서 화면의 공간에 제약이 있을 때 방문 정보(340) 대신 상기 방문 횟수를 표시하여 알릴 수 있다.
얼굴인식 사진 공유 시스템은 제2 단말로부터의 요청에 따라, 상기 제2 단말로 상기 사진을 전송하고 다운로드 정보(360)를 제1 단말에게 알릴 수 있다.
얼굴인식 사진 공유 시스템은 제1 단말 및 제2 단말로부터 상기 사진에 대한 댓글(350)을 입력 받는다. 얼굴인식 사진 공유 시스템은 상기 텍스트를 입력 받을 수 있는 UI와 상기 텍스트를 댓글(350)로서 저장할 수 있는 UI를 상기 제1 단말 에 표시할 수 있다. 댓글(350)이 여러 개 입력됨에 따라 얼굴인식 사진 공유 시스템은 상기 제1 단말의 화면 중에서 사진을 제외한 영역에 상기 UI와 댓글(350)을 전환하여 표시할 수 있다.
예를 들어 도 3(b)에서 사진의 아래에 상기 UI가 먼저 표시되고, 사용자의 터치에 따라 댓글(350)이 입력된 순서대로 스크롤될 수 있다. 얼굴인식 사진 공유 시스템은 댓글(350)에 대한 정보로서 지인 이름(330), 방문 정보(340), 다운로드 정보(360)를 함께 표시한다.
도 4는 본 발명의 일실시예에 따른 제2 단말에서의 사진 공유를 설명하기 위한 도면이다.
도 4(a)는 제1 단말에서 구동되는 어플리케이션의 카메라 기능을 통해 사진이 생성된 후, 상기 사진으로 식별되는 제2 단말에서 상기 사진이 보관된 저장공간의 링크정보가 전송된 화면을 나타낸다.
얼굴인식 사진 공유 시스템은 상기 제1 단말로부터 사진을 수신하여 저장공간에 보관한다.
얼굴인식 사진 공유 시스템은 상기 사진에서 얼굴을 인식하고, 상기 인식된 얼굴이, 상기 제1 단말과 연관되는 주소록에 저장된 지인 사진의 얼굴과 일치하는지를 판단하여 제2 단말의 연락처를 획득한다.
얼굴인식 사진 공유 시스템은 상기 사진이 저장된 저장공간에 관한 링크정보를 포함하여 메시지(410)를 작성하고, 상기 연락처에 의해 식별되는 제2 단말로 메시지(410)를 전송한다.
메시지(410)는 상기 링크정보와 함께 제1 단말의 사용자가 사진을 공유하였음을 나타내는 문구, 예컨대 "서혜경님이 공유한 사진입니다. 아래 링크를 눌러 확인하세요"를 포함할 수 있다. 또한 얼굴인식 사진 공유 시스템은 메시지(410)에 상기 저장공간에 저장된 사진을 포함시킬 수 있다.
예를 들어 메시지(410)에는 상기 저장공간에 보관된 첫 번째 사진과 상기 저장공간에 관한 링크정보 또는 문구를 포함 함으로써, 제2 단말을 통해 메시지(410)를 수신한 지인으로 하여금 상기 링크정보를 선택하기 전에 어떤 사진인지 확인하거나 메시지(410)를 스팸메시지 또는 광고메시지와 구별하도록 지원 할 수 있다.
상기 제2 단말은 메시지(410)를 수신하고, 링크정보에 대한 선택에 의해, 상기 저장공간에 접속한다. 얼굴인식 사진 공유 시스템은 여러 개의 사진을 표시하기 위해 사진(420)을 축소하여 상기 제2 단말에게 시각화하여 도 4(b)와 같이 제공할 수 있다.
얼굴인식 사진 공유 시스템은 제2 단말로부터의 요청에 따라, 다운로드 기능을 제공할 수 있다. 도 4(b)에서 제2 단말은 '저장하기' 버튼을 클릭하여 상기 사진을 다운로드 할 수 있다. 얼굴인식 사진 공유 시스템은 다운로드 수가 설정된 수를 만족하면 상기 사진의 전송을 제한할 수 있다. 얼굴인식 사진 공유 시스템은 상기 다운로드 수가 상기 사진으로 식별되는 제2 단말의 수를 만족함에 따라 자동으로 상기 사진을 삭제할 수 있다.
또 다른 실시예로서 얼굴인식 사진 공유 시스템은 제2 단말이 상기 저장공간에 접속하면 제1 단말의 사용자와 채팅할 수 있는 기능을 제공할 수 있다. 제1 단말에서 구동되는 어플리케이션의 카메라 기능에 의해 사진이 생성되면, 상기 제1 단말의 사용자는 '채팅하기'를 선택할 수 있다. 상기 사용자가 '채팅하기'를 선택하면 얼굴인식 사진 공유 시스템은 상기 사진이 보관된 저장공간에 관한 링크정보와 채팅 접속을 안내하는 문구를 메시지를 통해 제2 단말로 전송할 수 있다. 상기 제2 단말에 의해 상기 링크정보가 선택되면 얼굴인식 사진 공유 시스템은 상기 사진과, 상기 제1 단말 및 제2 단말의 대화 내용, 대화를 입력할 수 있는 UI를 상기 제2 단말의 화면에 표시할 수 있다.
도 5는 본 발명의 또 다른 실시예에 따른 얼굴인식 사진 공유 방법의 흐름을 나타내는 도면이다.
도 5를 참조하면 얼굴인식 사진 공유 시스템은 제1 단말로부터 사진을 수신한다(510). 상기 사진은, 상기 제1 단말에서 구동되는 어플리케이션의 카메라 기능을 통해 생성된다. 얼굴인식 사진 공유 시스템은 상기 어플리케이션을 제어하여 카메라로 촬영하는 카메라 기능, 상기 사진을 조회하는 갤러리 기능을 제공할 수 있다.
얼굴인식 사진 공유 시스템은 상기 사진을 수신하여 저장공간에 보관한다(520). 상기 저장공간은 인터넷을 통해 상기 제1 단말에서 접근될 수 있다. 상기 저장공간은 다수의 사진을 저장하기 위한 필드 또는 폴더의 단위로 구성될 수 있다.
얼굴인식 사진 공유 시스템은 상기 사진에서 얼굴을 인식하고(530), 상기 인식된 얼굴이, 상기 제1 단말과 연관되는 주소록에 저장된 지인 사진의 얼굴과 일치하는지를 판단한다(540). 얼굴인식 사진 공유 시스템은 얼굴의 기하학적 특징점을 추출하여 일치 여부를 판단할 수 있다. 상기 주소록은 상기 제1 단말에 보유되는 단말 주소록, 또는 상기 제1 단말로 소셜 네트워크 서비스(SNS)를 제공하는 서버의 서버 주소록이다.
얼굴인식 사진 공유 시스템은 상기 얼굴이 일치하면 제2 단말의 연락처를 획득한다(550).
얼굴인식 사진 공유 시스템은 상기 사진이 보관된 상기 저장공간에 관한 링크정보를 포함하여 메시지를 작성하고, 상기 연락처로 전송한다(560). 상기 링크정보는 상기 저장공간의 위치를 나타내는 지정자가 될 수 있다. 일례로서, 복수의 사진들이 하나의 파일로 저장되는 경우, 얼굴인식 사진 공유 시스템은 상기 파일이 저장되는 저장공간에 접근할 수 있는 경로로서의 링크정보를 만들 수 있다. 상기 제1 단말 및 상기 제2 단말은 상기 링크정보를, 예를 들어 웹브라우저에 입력하면, 상기 사진이 보관되고 있는 저장공간에 접속할 수 있다.
실시예에 따라, 단계(560)의 구현 전에, 얼굴인식 사진 공유 시스템은 상기 제1단말에게 상기 메시지를 전송할 사람이 제2단말의 사용자가 맞는지 사전에 확인하고, 상기 제1 단말로부터 확인이 이루어진 이후에, 상기 메시지를 상기 제2 단말의 사용자에게 전송 함으로써, 정당한 사용자 만이 본인의 사진을 확인하게 위해 저장공간에 접근하도록 유도할 수 있다.
얼굴인식 사진 공유 시스템은 상기 메시지를 수신한 제2 단말에 의해 상기 저장공간이 접속되었는지 판단한다(570). 상기 저장공간이 접속되면 얼굴인식 사진 공유 시스템은 상기 사진을 시각화 하여 표시한다(580). 상기 제1 단말로 사진을 촬영한 지인은 상기 제2 단말을 통해 상기 링크정보를 포함하는 메시지를 수신하여 상기 저장공간에 접속할 수 있다. 이 경우, 얼굴인식 사진 공유 시스템은 방문 횟수를 증가시켜 상기 제2 단말의 접속에 관한 방문 정보와 함께 상기 제1 단말에게 알린다. 상기 제1 단말은 상기 어플리케이션의 갤러리 기능에 의한 뷰 이벤트의 발생에 따라, 상기 저장공간에 접속할 수 있다. 얼굴인식 사진 공유 시스템은 상기 갤러리 기능을 통해 상기 링크정보를 제공하고 사진을 분류하여 표시할 수 있다.
얼굴인식 사진 공유 시스템은 제2 단말로부터의 요청에 따라, 상기 제2 단말로 상기 사진을 전송하여 다운로드 수를 증가시키되, 상기 증가된 다운로드 수가 설정된 수를 만족하면 상기 사진의 전송을 제한한다. 얼굴인식 사진 공유 시스템은 상기 다운로드 수가 상기 사진으로 식별되는 제2 단말의 수를 만족하면 상기 사진의 전송을 제한하거나 상기 제1 단말의 선택에 의해 자동으로 상기 사진을 삭제할 수 있다.
얼굴인식 사진 공유 시스템은 제2 단말로부터 상기 사진에 대한 댓글을 입력 받아, 상기 제1 단말에서 구동되는 어플리케이션을 통해 표시한다. 상기 댓글은 지인의 이름, 방문 횟수, 방문 정보와 함께 상기 제1 단말의 화면에 표시될 수 있다.
이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.
200 : 얼굴인식 사진 공유 시스템
210: 제어부
220: 인식부
230: 전송부

Claims (18)

  1. 제1 단말로부터 사진을 수신하여 저장공간에 보관하는 제어부;
    상기 사진을 이용하여 연락처를 획득하는 인식부; 및
    상기 사진이 보관된 상기 저장공간에 관한 대한 링크정보를 포함하여 메시지를 작성하고, 상기 연락처에 의해 식별되는 제2 단말로 상기 메시지를 전송하는 전송부
    를 포함하는 얼굴인식 사진 공유 시스템.
  2. 제1항에 있어서,
    상기 메시지를 수신한 상기 제2 단말에서의 상기 링크정보에 대한 선택에 의해, 상기 제2 단말이 상기 저장공간에 접속하면,
    상기 제어부는,
    상기 제2 단말에게 상기 사진을 시각화하여 표시하고, 방문횟수를 증가시켜 상기 제2 단말의 접속에 관한 방문 정보와 함께 상기 제1 단말에게 알리는
    얼굴인식 사진 공유 시스템.
  3. 제2항에 있어서,
    상기 제어부는,
    상기 제2 단말로부터의 요청에 따라, 상기 제2 단말로 상기 사진을 전송하여 다운로드 수를 증가시키되, 상기 증가된 다운로드 수가 설정된 수를 만족하면 상기 사진의 전송을 제한하는
    얼굴인식 사진 공유 시스템.
  4. 제1항에 있어서,
    상기 인식부는,
    상기 사진에서 얼굴을 인식하고, 상기 인식된 얼굴이, 상기 제1 단말과 연관되는 주소록에 저장된 지인 사진의 얼굴과 일치하는지를 판단하여 상기 연락처를 획득하는
    얼굴인식 사진 공유 시스템.
  5. 제4항에 있어서,
    상기 주소록은,
    상기 제1 단말에 보유되는 단말 주소록, 또는 상기 제1 단말로 소셜 네트워크 서비스(SNS)를 제공하는 서버의 서버 주소록인
    얼굴인식 사진 공유 시스템.
  6. 제1항에 있어서,
    상기 사진은, 상기 제1 단말에서 구동되는 어플리케이션의 카메라 기능을 통해 생성되고,
    상기 제어부는,
    상기 사진의 생성에 연동하여 상기 제1 단말로부터 사진을 수신하고,
    상기 어플리케이션의 캘러리 기능에 의한 뷰 이벤트의 발생에 따라, 상기 보관된 사진을 상기 제1 단말에게 표시하는
    얼굴인식 사진 공유 시스템.
  7. 제1항에 있어서,
    상기 제어부는,
    상기 사진 중에서 동일한 연락처가 획득되는 사진을 분류하여, 상기 저장공간에 지정된 순서대로 보관하는
    얼굴인식 사진 공유 시스템.
  8. 제1항에 있어서,
    상기 제어부는,
    상기 제2 단말로부터 상기 사진에 대한 댓글을 입력 받아, 상기 제1 단말에서 구동되는 어플리케이션을 통해 표시하는
    얼굴인식 사진 공유 시스템.
  9. 구동되는 어플리케이션의 카메라 기능에 의해 사진이 생성 됨에 따라, 상기 사진을 서비스 서버로 전송하고,
    상기 사진이 보관되는 저장공간에 관한 대한 링크정보를 포함하는 메시지를, 상기 서비스 서버로부터 수신하며,
    상기 사진을 이용하여 획득된 연락처에 의해 식별되는 타단말로 상기 메시지를 전송하여, 상기 메시지를 수신한 상기 타단말에서의 상기 링크정보에 대한 선택에 의해, 상기 타단말이 상기 저장공간에 접속하도록 하는
    단말 장치.
  10. 제9항에 있어서,
    상기 어플리케이션의 캘러리 기능에 의한 뷰 이벤트의 발생에 따라, 상기 저장공간에 접속하여 보관된 사진을 표시하는
    단말 장치.
  11. 제1 단말로부터 사진을 수신하여 저장공간에 보관하는 단계;
    상기 사진을 이용하여 연락처를 획득하는 단계; 및
    상기 사진이 보관된 상기 저장공간에 관한 대한 링크정보를 포함하여 메시지를 작성하고, 상기 연락처에 의해 식별되는 제2 단말로 상기 메시지를 전송하는 단계
    를 포함하는 얼굴인식 사진 공유 방법.
  12. 제11항에 있어서,
    상기 메시지를 수신한 상기 제2 단말에서의 상기 링크정보에 대한 선택에 의해, 상기 제2 단말이 상기 저장공간에 접속하면,
    상기 제2 단말에게 상기 사진을 시각화하여 표시하고, 방문횟수를 증가시켜 상기 제2 단말의 접속에 관한 방문 정보와 함께 상기 제1 단말에게 알리는 단계
    를 더 포함하는 얼굴인식 사진 공유 방법.
  13. 제12항에 있어서,
    상기 제2 단말로부터의 요청에 따라, 상기 제2 단말로 상기 사진을 전송하여 다운로드 수를 증가시키되, 상기 증가된 다운로드 수가 설정된 수를 만족하면 상기 사진의 전송을 제한하는 단계
    를 더 포함하는 얼굴인식 사진 공유 방법.
  14. 제11항에 있어서,
    상기 연락처를 획득하는 단계는,
    상기 사진에서 얼굴을 인식하고, 상기 인식된 얼굴이, 상기 제1 단말과 연관되는 주소록에 저장된 지인 사진의 얼굴과 일치하는지를 판단하여 상기 연락처를 획득하는 단계
    를 포함하는 얼굴인식 사진 공유 방법.
  15. 제14항에 있어서,
    상기 주소록은,
    상기 제1 단말에 보유되는 단말 주소록, 또는 상기 제1 단말로 소셜 네트워크 서비스(SNS)를 제공하는 서버의 서버 주소록인
    얼굴인식 사진 공유 방법.
  16. 제11항에 있어서,
    상기 제1 단말에서 구동되는 어플리케이션의 카메라 기능을 통한, 상기 사진의 생성에 연동하여 상기 제1 단말로부터 사진을 수신하는 단계; 및
    상기 어플리케이션의 캘러리 기능에 의한 뷰 이벤트의 발생에 따라, 상기 보관된 사진을 상기 제1 단말에게 표시하는 단계
    를 더 포함하는 얼굴인식 사진 공유 방법.
  17. 제11항에 있어서,
    상기 사진을 저장공간에 보관하는 단계는,
    상기 사진 중에서 동일한 연락처가 획득되는 사진을 분류하여, 상기 저장공간에 지정된 순서대로 보관하는 단계
    를 포함하는 얼굴인식 사진 공유 방법.
  18. 제11항에 있어서,
    상기 제2 단말로부터 상기 사진에 대한 댓글을 입력 받아, 상기 제1 단말에서 구동되는 어플리케이션을 통해 표시하는 단계
    를 더 포함하는 얼굴인식 사진 공유 방법.
KR1020130055180A 2013-05-15 2013-05-15 얼굴인식 사진 공유 시스템 및 방법 Active KR102084564B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130055180A KR102084564B1 (ko) 2013-05-15 2013-05-15 얼굴인식 사진 공유 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130055180A KR102084564B1 (ko) 2013-05-15 2013-05-15 얼굴인식 사진 공유 시스템 및 방법

Publications (2)

Publication Number Publication Date
KR20140135320A true KR20140135320A (ko) 2014-11-26
KR102084564B1 KR102084564B1 (ko) 2020-03-04

Family

ID=52456104

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130055180A Active KR102084564B1 (ko) 2013-05-15 2013-05-15 얼굴인식 사진 공유 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR102084564B1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017005038A1 (zh) * 2015-07-09 2017-01-12 中兴通讯股份有限公司 一种联系人获取方法、装置及用户终端
KR20170006778A (ko) 2015-07-09 2017-01-18 송민호 얼굴매칭을 이용한 인물사진 자동전송 방법 및 시스템
US10318812B2 (en) 2016-06-21 2019-06-11 International Business Machines Corporation Automatic digital image correlation and distribution
CN113935001A (zh) * 2021-09-29 2022-01-14 广州炒米信息科技有限公司 电子相片共享方法、装置、存储介质及终端
KR102712645B1 (ko) 2024-03-14 2024-10-02 주식회사 구잉 얼굴 인식에 기반한 사진 공유 장치 및 방법

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060001902A (ko) * 2005-12-13 2006-01-06 김수영 장문메시지를 이용한 사진공유 및 무선홈페이지 서비스제공방법 및 시스템
KR20060122690A (ko) * 2005-05-27 2006-11-30 햄펙스 주식회사 이미지 기반의 컨텐츠 제공 시스템 및 그 방법
KR100785617B1 (ko) * 2006-06-12 2007-12-12 (주) 엘지텔레콤 멀티미디어메시징서비스를 이용한 사진 전송시스템 및 그방법
KR100796044B1 (ko) * 2007-02-08 2008-01-21 (주)올라웍스 인물 이미지에 대한 태깅 방법
KR100885772B1 (ko) * 2007-02-20 2009-02-26 야후! 인크. 제품 정보를 등록 및 검색하기 위한 방법 및 시스템
KR101005405B1 (ko) * 2007-12-03 2010-12-30 (주)드림투리얼리티 쿠폰 공유가 가능한 모바일 동적 생성 쿠폰시스템

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060122690A (ko) * 2005-05-27 2006-11-30 햄펙스 주식회사 이미지 기반의 컨텐츠 제공 시스템 및 그 방법
KR20060001902A (ko) * 2005-12-13 2006-01-06 김수영 장문메시지를 이용한 사진공유 및 무선홈페이지 서비스제공방법 및 시스템
KR100785617B1 (ko) * 2006-06-12 2007-12-12 (주) 엘지텔레콤 멀티미디어메시징서비스를 이용한 사진 전송시스템 및 그방법
KR100796044B1 (ko) * 2007-02-08 2008-01-21 (주)올라웍스 인물 이미지에 대한 태깅 방법
KR100885772B1 (ko) * 2007-02-20 2009-02-26 야후! 인크. 제품 정보를 등록 및 검색하기 위한 방법 및 시스템
KR101005405B1 (ko) * 2007-12-03 2010-12-30 (주)드림투리얼리티 쿠폰 공유가 가능한 모바일 동적 생성 쿠폰시스템

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017005038A1 (zh) * 2015-07-09 2017-01-12 中兴通讯股份有限公司 一种联系人获取方法、装置及用户终端
KR20170006778A (ko) 2015-07-09 2017-01-18 송민호 얼굴매칭을 이용한 인물사진 자동전송 방법 및 시스템
US10318812B2 (en) 2016-06-21 2019-06-11 International Business Machines Corporation Automatic digital image correlation and distribution
CN113935001A (zh) * 2021-09-29 2022-01-14 广州炒米信息科技有限公司 电子相片共享方法、装置、存储介质及终端
KR102712645B1 (ko) 2024-03-14 2024-10-02 주식회사 구잉 얼굴 인식에 기반한 사진 공유 장치 및 방법

Also Published As

Publication number Publication date
KR102084564B1 (ko) 2020-03-04

Similar Documents

Publication Publication Date Title
KR101773885B1 (ko) 이미지 인증을 이용한 증강현실 객체 제공 방법 및 제공 서버
JP6025991B2 (ja) 情報処理方法、装置、端末、およびサーバ
US20120086792A1 (en) Image identification and sharing on mobile devices
US8725718B2 (en) Content management apparatus, content management method, content management program, and integrated circuit
JP2013021680A (ja) 画像に関する処理支援システム、情報処理装置、及び画像に関する処理影支援方法
KR20170065506A (ko) 정보 상호 작용, 및 인간 생체 특징 데이터와 계정 간의 연관을 위한 방법 및 디바이스
KR20140135320A (ko) 얼굴인식 사진 공유 시스템 및 방법
US20150140974A1 (en) Supporting the provision of services
KR101567555B1 (ko) 이미지가 이용되는 소셜 네트워크 서비스 시스템 및 방법
WO2016161890A1 (zh) 一种数据上传的方法及其装置
CN108476152B (zh) 用于将由移动计算装置捕捉的媒体附加到电子文档的技术
JP6451207B2 (ja) 検索サーバー、検索システム、検索方法
JP2020013419A (ja) 情報処理方法、情報処理装置及びプログラム
JP5743017B2 (ja) 画像管理装置及びプログラム
CN104813273B (zh) 内容显示方法、内容显示系统以及计算机可读存储介质
JP7338935B2 (ja) 端末の表示方法、端末、端末のプログラム
US10009572B2 (en) Method for enhancing media content of a picture
KR20120080379A (ko) 디지털 카메라의 이미지 어노테이션 처리 방법 및 장치
JP2016038682A (ja) 情報処理装置及びその制御方法、サーバ装置及びその制御方法、コンピュータプログラム
KR20210047749A (ko) 시각적으로 코딩된 패턴 인식 방법 및 장치
US20240282108A1 (en) Method for operating an electronic device to browse a collection of images
US8712788B1 (en) Method of publicly displaying a person's relationship status
JP2020013418A (ja) 情報処理方法、情報処理装置及びプログラム
WO2022261800A1 (en) Method for operating an electronic device to browse a collection of images
JP2017021594A (ja) コンテンツ作成システムおよびその制御方法、情報処理装置およびその制御方法、並びに撮像装置およびその制御方法

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20130515

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20180321

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20130515

Comment text: Patent Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20190322

Patent event code: PE09021S01D

AMND Amendment
E601 Decision to refuse application
PE0601 Decision on rejection of patent

Patent event date: 20190918

Comment text: Decision to Refuse Application

Patent event code: PE06012S01D

Patent event date: 20190322

Comment text: Notification of reason for refusal

Patent event code: PE06011S01I

X091 Application refused [patent]
AMND Amendment
PX0901 Re-examination

Patent event code: PX09011S01I

Patent event date: 20190918

Comment text: Decision to Refuse Application

Patent event code: PX09012R01I

Patent event date: 20190516

Comment text: Amendment to Specification, etc.

PX0701 Decision of registration after re-examination

Patent event date: 20191203

Comment text: Decision to Grant Registration

Patent event code: PX07013S01D

Patent event date: 20191118

Comment text: Amendment to Specification, etc.

Patent event code: PX07012R01I

Patent event date: 20190918

Comment text: Decision to Refuse Application

Patent event code: PX07011S01I

Patent event date: 20190516

Comment text: Amendment to Specification, etc.

Patent event code: PX07012R01I

Patent event date: 20190918

Comment text: Decision to Refuse Application

Patent event code: PX09011S01I

Patent event date: 20190516

Comment text: Amendment to Specification, etc.

Patent event code: PX09012R01I

X701 Decision to grant (after re-examination)
GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20200227

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20200227

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PR1001 Payment of annual fee

Payment date: 20230106

Start annual number: 4

End annual number: 6