KR101610657B1 - Three-dimensional virtual entrance control and communicable disease control system and method based on entrance control data - Google Patents
Three-dimensional virtual entrance control and communicable disease control system and method based on entrance control data Download PDFInfo
- Publication number
- KR101610657B1 KR101610657B1 KR1020150162667A KR20150162667A KR101610657B1 KR 101610657 B1 KR101610657 B1 KR 101610657B1 KR 1020150162667 A KR1020150162667 A KR 1020150162667A KR 20150162667 A KR20150162667 A KR 20150162667A KR 101610657 B1 KR101610657 B1 KR 101610657B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- unit
- spatial information
- access
- mapping
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 208000035473 Communicable disease Diseases 0.000 title 1
- 208000015181 infectious disease Diseases 0.000 title 1
- 230000002265 prevention Effects 0.000 claims abstract description 25
- 238000013507 mapping Methods 0.000 claims description 218
- 238000001514 detection method Methods 0.000 claims description 29
- 230000036760 body temperature Effects 0.000 claims description 26
- 230000002159 abnormal effect Effects 0.000 claims description 15
- 230000008569 process Effects 0.000 claims description 15
- 238000001931 thermography Methods 0.000 claims description 2
- 238000007726 management method Methods 0.000 description 8
- 238000013500 data storage Methods 0.000 description 6
- 238000012544 monitoring process Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 201000010099 disease Diseases 0.000 description 5
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 238000013480 data collection Methods 0.000 description 4
- 230000002155 anti-virotic effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000001012 protector Effects 0.000 description 3
- 241000287107 Passer Species 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 208000025370 Middle East respiratory syndrome Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 230000010485 coping Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006806 disease prevention Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 208000024891 symptom Diseases 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19678—User interface
- G08B13/19682—Graphic User Interface [GUI] presenting system data to the user, e.g. information on a screen helping a user interacting with an alarm system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19654—Details concerning communication with a camera
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B3/00—Audible signalling systems; Audible personal calling systems
- G08B3/10—Audible signalling systems; Audible personal calling systems using electric transmission; using electromagnetic transmission
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
- H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Electromagnetism (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Alarm Systems (AREA)
Abstract
본 발명은 출입통제 시스템 및 방법에 관한 것으로, 보다 상세하게는 적어도 하나 이상의 보안구역을 포함하는 출입통제영역에서 보안구역의 출입 요청 발생 시 실제 출입통제영역과 동일한 구조로 구성되는 출입통제영역에 대한 3차원 공간정보 영상에, 해당 보안구역을 촬영하는 카메라로부터 획득되고 출입자를 포함하는 영상 및 출입통제 데이터를 매핑하여 관리자 화면에 표시하고, 미리 저장되어 있는 출입통제 데이터에 기반하여 출입을 통제하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템 및 방법에 관한 것이다.The present invention relates to an access control system and method. More particularly, the present invention relates to an access control area having a structure identical to that of an actual access control area in an access control area including at least one security area, The three-dimensional spatial information image is mapped to the image and the access control data acquired from the camera for photographing the security zone, including the accessing person, and displayed on the administrator screen, and access and control based on the previously stored access control data Dimensional spatial information access control and prevention system and method based on control data.
Description
본 발명은 출입통제 시스템 및 방법에 관한 것으로, 보다 상세하게는 적어도 하나 이상의 보안구역을 포함하는 출입통제영역에서 보안구역의 출입 요청 발생 시 실제 출입통제영역과 동일한 구조로 구성되는 출입통제영역에 대한 3차원 공간정보 모델링 영상(이하 "3차원 공간정보 영상"이라 함)에, 해당 보안구역을 촬영하는 카메라로부터 획득되고 출입자를 포함하는 영상 및 출입자의 체온 정보를 포함하는 출입통제 데이터를 매핑하여 저장 및 관리하고, 미리 저장되어 있는 출입통제 데이터에 기반하여 출입을 통제하고, 출입통제 데이터에 포함된 출입자 체온 정보에 의해 방역 기능을 수행하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템 및 방법에 관한 것이다.The present invention relates to an access control system and method. More particularly, the present invention relates to an access control area having a structure identical to that of an actual access control area in an access control area including at least one security area, Access control data including body image information of a passenger and a video including a passenger obtained from a camera capturing the security zone is mapped to a three-dimensional spatial information modeling image (hereinafter, referred to as a "three-dimensional spatial information image" And controlling access based on the access control data stored in advance, and performing access control data based on access control data, which performs access control function based on the entrance body temperature information included in the access control data, System and method.
전자기술, 통신기술, 영상기술 및 저장매체의 발달로, 보안을 필요로 하고 출입의 통제를 필요로 하는 건물 또는 공간들(이하 "출입통제영역"이라 함)을 CCTV 등과 같은 카메라를 통해 출입자들을 모니터링하고 모니터링되는 영상을 저장하는 디지털 영상관제시스템 기술 및 상기 출입통제영역에 존재하는 보안구역들로의 출입을 통제하기 위한 출입통제시스템 기술이 개발되어 적용되고 있다.With the development of electronic technologies, communication technologies, video technologies and storage media, buildings or spaces that need security and require access control (hereinafter referred to as "access control areas") can be accessed through cameras such as CCTV Digital video control system technology for storing images to be monitored and monitored and access control system technology for controlling access to security zones existing in the access control area have been developed and applied.
상기 디지털 영상관제시스템으로는 네트워크 비디오 레코더(Network Video Recorder: NVR) 시스템 등이 있으며, 상기 출입통제시스템으로는, 카드인증 출입통제시스템, 생체인식 출입통제시스템 등이 있다.The digital video monitoring system includes a network video recorder (NVR) system, and the access control system includes a card authentication access control system and a biometric access control system.
일반적으로, 종래 디지털 영상관제시스템은 방범 영역 중 방범에 꼭 필요한 공간에만 설치되는 영상 획득 장치(예: 카메라)에 의해 촬영되는 공간에 대한 영상을 표시 및 저장할 뿐이어서, 촬영되는 영상이 공간에서 어떤 부분인지 등을 파악하기 어려운 문제점이 있었다.2. Description of the Related Art Generally, a conventional digital video monitoring system only displays and stores an image of a space taken by an image acquisition device (e.g., a camera) installed only in a space required for crime prevention among crime prevention areas, It is difficult to grasp the partial recognition.
이를 판단하기 위해서 관리자는 카메라 식별정보와 카메라 식별정보에 의해 각 카메라가 전체 출입통제영역에서 어떤 위치의 보안구역을 촬영하고 있는지를 직접 기억해야만 하거나, 각 모니터링 화면 또는 제어스위치에 어떤 화면 또는 어떤 제어스위치가 어떤 출입통제영역의 어떤 위치의 보안구역에 대한 것인지를 기록해 놓아야만 한다.In order to determine this, the administrator must directly memorize which position the security zone of each camera is shooting in the entire access control area by the camera identification information and the camera identification information, It should be noted where the switch is for the security zone at which location in the access control area.
따라서 종래 디지털 영상관제시스템의 관리자는 카메라별로 어떤 위치를 촬영하고 있는지를 암기하여야 하거나 각 카메라를 통해 촬영되는 공간이 전체 방범 영역에서 어느 영역인지를 해당 공간의 객체들과 함께 기억하여야 하므로 번거롭고, 긴급 상황 시 임의의 카메라에 의해 촬영되는 영상의 해당 공간, 즉 영역이 빠르게 떠오르지 않아 대처가 늦어질 수 있는 문제점이 있었다. Therefore, the administrator of the conventional digital video monitoring system must memorize the position of each camera, or memorize the space taken by each camera in the entire security zone together with the objects of the corresponding space. There is a problem that the corresponding space of the image photographed by an arbitrary camera at the time of the situation, that is, the area does not rise quickly, and the coping may be delayed.
또한 카메라가 촬영하는 보안구역에 대한 정보를 해당 화면 및 해당 제어스위치에 기재하는 경우에도 긴급 상황 발생 시 빠르게 인지하기 어렵고, 매칭 화면 및 제어스위치가 변경되는 경우 일일이 기재된 정보도 변경해주어야 하므로 번거로운 문제점이 있었다.In addition, even when the information about the security zone photographed by the camera is written on the corresponding screen and the corresponding control switch, it is difficult to recognize quickly in case of an emergency, and when the matching screen and the control switch are changed, there was.
그리고 종래 출입통제장치는 출입통제영역의 보안구역으로 들어가고자 하는 출입자로부터 획득된 출입자 식별정보(카드정보, 생체정보 등)에 의한 인증에 성공하는 경우 해당 출입문을 개방하므로 보안 관리자는 보안구역 출입자의 얼굴을 확인할 수 없는 문제점이 있었다. 물론 출입통제장치는 보안구역의 출입문을 출입한 출입자들에 대한 출입자 식별정보 및 시간 등을 저장하여 기록하기는 하나, 출입한 출입자가 기록된 출입자와 동일인지 아닌지를 알 수 없는 문제점이 있다.When the conventional access control device succeeds in the authentication by the user identification information (card information, biometric information, etc.) obtained from the user who intends to enter the security area of the access control area, the corresponding door is opened. There was a problem that the face could not be confirmed. Of course, the access control device stores and records the access identification information and the time for accessing the entrance and exit of the access area of the security area, but there is a problem that it is not known whether or not the accessing party is the same as the accessing party.
출입자의 얼굴을 확인하기 위해서는 보안 관리자가 추후 디지털 영상관제시스템을 통해 해당 출입문을 출입하는 영상의 촬영시간과 출입 시간을 보고 확인하여야 하므로 많은 시간과 노력을 필요로 하는 문제점이 있었다.In order to confirm the face of the passenger, the security manager needs to check the shooting time and the access time of the entrance and exit of the door through the digital video control system, so that it takes a lot of time and effort.
또한, 종래 출입통제시스템은 보안구역의 적법한 출입자를 협박하여 출입문을 열도록 하는 경우, 이러한 상황을 인지할 수 없는 문제점이 있고, 이러한 상황을 인지하지 못함으로써 제3자의 보안구역 침입을 차단할 수 없으며, 출입자, 특히 여성 출입자의 생명이 위협당할 수 있는 문제점이 있었다.In addition, the conventional access control system can not recognize such situation when the door is opened by intimidating a legitimate passenger of the security zone, and the intrusion of the security zone of the third party can not be prevented by not recognizing such situation , There was a problem that the life of a passer-by, particularly a female passer-like person, could be threatened.
또한, 최근 메르스, 사스 등과 같은 전염 질병들이 빈번하게 발생되고 있으나, 개인적인 증상에 따른 자진 신고에만 의존할 뿐 이러한 질병들을 감시 및 추적할 수 있는 시스템이 없어 질병의 확산을 차단하기 어려운 문제점이 있었다. 따라서 이러한 질병에 대한 방역 기능을 갖는 출입통제시스템이 필요한 실정이다.In recent years, contagious diseases such as mers, sas, and the like have occurred frequently but only a self-reported self-reported symptom has occurred, and there is no system for monitoring and tracking such diseases, which makes it difficult to prevent the spread of diseases . Therefore, there is a need for an access control system having a function to prevent such diseases.
따라서 본 발명의 목적은 적어도 하나 이상의 보안구역을 포함하는 출입통제영역에서 보안구역의 출입 요청 발생 시 실제 출입통제영역과 동일한 구조로 구성되는 출입통제영역에 대한 3차원 공간정보 영상에, 해당 보안구역을 촬영하는 카메라로부터 획득되고 출입자를 포함하는 영상 및 출입통제 데이터를 매핑하여 관리자 화면에 표시하고, 미리 저장되어 있는 출입통제 데이터에 기반하여 출입을 통제하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템 및 방법을 제공함에 있다.Accordingly, an object of the present invention is to provide a three-dimensional spatial information image for an access control area having the same structure as an actual access control area when an access request for a security zone is generated in an access control area including at least one security zone, Which is obtained from a camera for photographing a user, displays the image and access control data including the accessing person on the manager screen, and displays the three-dimensional space information based on access control data for controlling access based on the access control data stored in advance And a system and method for access control and prevention.
상기와 같은 목적을 달성하기 위한 본 발명의 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템은: 출입통제영역의 보안구역 출입문에 설치되어 출입할 출입자의 출입자식별정보를 획득하여 출력하는 출입단말기를 포함하고, 상기 출입단말기로부터 출입자식별정보의 입력 시 출입인증 요청이 발생되었음을 통지한 후 상기 출입자식별정보에 의해 인증을 수행하고 인증 성공 시 상기 출입문을 개방하고 출입자 3D 공간정보 매핑 영상의 생성을 요청하는 출입통제부; 상기 출입통제부로부터 출입인증 요청 발생 통지 시 상기 보안구역을 촬영하는 적어도 하나 이상의 카메라를 포함하는 카메라 그룹을 검색하고, 검색된 카메라 그룹으로부터 수신되는 출입자 영상을 저장하고, 보안구역 출입자 영상 요청 발생 시 해당 보안구역의 출입자 영상을 제공하는 영상획득부; 상기 출입통제영역의 구조와 동일하게 모델링된 3차원 공간정보 영상을 구비하고, 3D 공간정보 매핑 영상 생성 요청 발생 시 상기 영상획득부로 상기 보안구역에 대한 출입자 영상을 요청하고, 이에 응답하여 상기 보안구역에 대한 출입자 영상이 수신되면 상기 출입자 영상을 상기 3차원 공간정보 영상의 해당 보안구역 영역에 매핑하여 3차원 공간정보 매핑 영상을 생성하여 저장하고, 보안구역에 대한 3차원 공간정보 매핑 영상을 전송하는 3D 영상 매핑부; 3차원 공간정보 매핑 영상을 디스플레이하는 디스플레이부를 포함하는 출력부; 및 출입자 3D 공간정보 매핑 영상 요청 이벤트의 발생 시 상기 3D 영상 매핑부로 3D 공간정보 매핑 영상을 요청하여 수신받아 상기 출력부를 통해 출력하는 3D 영상 통제 제어부를 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a three-dimensional spatial information access control and prevention system based on access control data of the present invention, comprising: And an entrance / exit terminal, wherein when the entrance / exit identification information is input, the entrance / exit terminal notifies that the entrance / exit authentication request has occurred, performs authentication based on the entrance identification information, releases the entrance / exit door upon successful authentication, An access control unit for requesting generation of the access control unit; A camera group including at least one camera that photographs the security zone when the entrance / exit authentication request occurrence notification is received from the access control unit, stores the entrance image received from the searched camera group, An image acquisition unit for providing an accessing image of a security zone; Dimensional spatial information image modeled in the same manner as the structure of the access control area. When a 3D spatial information mapping image generation request is generated, the image acquisition unit requests an entrance image for the security zone, Dimensional space information image to the corresponding security zone area of the 3D spatial information image to generate and store the 3D spatial information mapping image and transmit the 3D spatial information mapping image to the security zone A 3D image mapping unit; An output unit including a display unit for displaying a 3D spatial information mapping image; And a 3D image control unit for receiving a 3D spatial information mapping image from the 3D image mapping unit upon reception of a visitor 3D space information mapping video request event and outputting the received 3D spatial information mapping image through the output unit.
상기 출입통제부의 출입단말기는 출입자식별정보를 저장하는 매체로부터 출입자식별정보 획득 시 상기 매체를 제공하는 출입자를 촬영하는 출입단말기 카메라부를 더 포함하되, 상기 출입통제부는 상기 출입단말기 카메라부를 통해 획득된 출입자 영상을 상기 보안구역 정보와 함께 상기 영상획득부로 제공하며, 상기 영상획득부는 상기 출입단말기 카메라부를 상기 보안구역 정보에 대응하는 보안구역에 대한 카메라 그룹에 포함하여 상기 보안구역 출입자 영상 요청 발생 시 상기 출입단말기 카메라부를 통해 촬영된 출입자 영상을 함께 보내는 것을 특징으로 한다.The entrance / exit terminal of the access control unit may further include an entrance / exit terminal camera unit for photographing an entrance / exit providing the media when acquiring entrance identification information from a medium storing the entrance / exit identification information, wherein the entrance / And the image acquisition unit provides the image to the image acquisition unit together with the security zone information, and the image acquisition unit includes the access terminal camera unit in the camera group for the security zone corresponding to the security zone information, And transmits the photographed passenger image together through the terminal camera unit.
상기 3D 영상 매핑부는, 상기 영상획득부로부터 입력되는 상기 보안구역에 대한 출입자 영상으로부터 출입자 및 얼굴을 검출하고, 얼굴이 검출된 영상을 상기 3차원 공간정보 영상에 매핑하는 것을 특징으로 한다.The 3D image mapping unit detects an entrance and a face from an entrance image of the security zone input from the image acquisition unit, and maps a face-detected image to the 3D spatial information image.
상기 출력부는, 경보음을 발생시키는 경보음 발생부를 더 포함하되, 상기 3D 영상 매핑부는, 상기 영상들로부터 출입자가 검출되지 않으면 출입자 미검출 통지 신호를 상기 3D 영상 통제 제어부로 전송하고, 3D 영상 통제 제어부는, 상기 3D 영상 매핑부로부터 출입자 미검출 통지 신호가 수신되면 출력부의 디스플레이부에 표시되는 보안구역의 위치에 출입자 미검출 통지 메시지를 표시하거나 상기 경보음 발생부를 통해 경보음을 출력하여 상기 보안구역에서의 출입자 미검출을 경보하는 것을 특징으로 한다.Wherein the output unit further comprises an alarm sound generating unit for generating an alarm sound, wherein the 3D image mapping unit transmits a passenger non-detection notification signal to the 3D image control unit if no passenger is detected from the images, The control unit may display a visitor non-detection notification message at a position of the security zone displayed on the display unit of the output unit when the passenger non-detection notification signal is received from the 3D image mapping unit, or output a warning sound through the alarm sound generation unit, And alarming the detection of non-presence of a passenger in the area.
상기 3D 영상 매핑부는, 상기 영상획득부로부터 입력되는 출입자 영상이 셋 이상이면 상기 셋 이상의 영상들을 합성하여 출입자에 대한 3차원 가상 출입자 영상을 생성한 후 상기 3차원 공간정보 영상에 매핑하는 것을 특징으로 한다.Wherein the 3D image mapping unit synthesizes the three or more images when the entrance image input from the image acquisition unit is three or more, generates a three-dimensional virtual entrance image for the entrance, and maps the three-dimensional virtual entrance image to the three- do.
상기 3D 영상 매핑부는, 상기 영상획득부로부터 수신되는 출입자 영상이 둘 이상이면 상기 출입자 영상들 각각으로부터 출입자 및 출입자의 얼굴을 검출하고, 상기 출입자 영상 중 얼굴이 가장 명확하게 촬영된 출입자 영상을 3D 공간정보 영상에 매핑하는 것을 특징으로 한다.Wherein the 3D image mapping unit detects the faces of the passengers and the passengers from each of the passenger images when the passenger image received from the image acquisition unit is more than two and displays the passenger image in which the face is most clearly captured in the 3D space And maps it to an information image.
상기 출입통제부는, 상기 출입인증 요청 발생 시 출입통제 데이터를 더 수집하여 3D 영상 통제 제어부로 전송하고, 상기 3D 영상 통제 제어부는, 상기 출입인증 요청이 발생한 보안구역의 상기 출입통제 데이터와 상기 보안구역에 대한 출입자 영상을 영상획득부로부터 수신받고, 상기 출입통제 데이터에 보안구역에 대한 출입자 영상을 매핑하여 저장하는 것을 특징으로 한다.Wherein the access control unit further collects access control data when the access authentication request is generated and transmits the access control data to the 3D image control control unit, wherein the 3D image control control unit controls the access control data of the security zone in which the access authentication request is generated, The access image for the security zone is mapped to the access control data and is stored.
상기 3D 영상 통제 제어부는, 출입자들 각각에 대해 정상 출입자식별정보 및 비정상 출입자식별정보를 저장하여 등록하고 있으며, 상기 출입통제 데이터에 포함된 출입자 식별정보가 정상 출입자식별정보인지, 비정상 출입자식별정보인지를 판단하고, 비정상 출입자식별정보이면 출입자 상황 판단 결과 정보로 긴급상황 통지 신호를 출입통제부로 전송하고, 상기 출입통제부는, 상기 긴급상황 통지 신호의 수신 시 긴급모드를 설정한 후 문을 개방하지 않고 대기 요청을 수행하는 것을 특징으로 한다.The 3D image control control unit stores and registers normal accessor identification information and abnormal accessor identification information for each of the passengers. If the accessor identification information included in the access control data is normal accessor identification information or abnormal accessor identification information And transmits the emergency situation notification signal to the access control unit based on the accessory status determination result information if the accessing person identification information is abnormal. The access control unit sets the emergency mode upon receiving the emergency notification signal and does not open the door And performs a standby request.
상기 시스템은: 상기 출입통제부 및 영상획득부 중 적어도 하나는 적외선을 통해 출입자를 촬영하여 열화상 영상을 출력하는 열화상 카메라를 더 포함하되, 상기 3D 영상 통제 제어부는, 상기 출입통제부 및 영상획득부 중 적어도 하나로부터 출입자의 체온에 대한 출입자 체온 정보를 출입통제 데이터로서 수집하고, 수집된 출입자 체온 정보의 온도가 미리 설정된 기준 방역 온도를 초과하는지를 검사하고, 출입자의 체온이 상기 기준 방역 온도를 초과하거나, 평상 시 개인의 평균체온 데이터를 비교분석하여 상기 출입자를 방역 대상 출입허가 및 출입자 리스트에 등록하여 관리하는 것을 특징으로 한다.The system may further include: a thermal image camera, wherein at least one of the access control unit and the image acquisition unit captures an entrance through infrared rays and outputs a thermal image, wherein the 3D image control unit controls the entrance control unit And a control unit for collecting entrance body temperature information on the body temperature of a passenger from at least one of the acquisition units as access control data and inspecting whether the temperature of the collected accessory body temperature information exceeds a preset reference anti- And comparing and analyzing the average body temperature data of the individual at normal times, and registering and managing the person on the list of permission / denial of access to the object to be protected and the guest list.
상기와 같은 목적을 달성하기 위한 본 발명의 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 방법은: 출입통제부가 출입통제영역의 보안구역의 출입문에 설치된 출입단말기로부터 출입자 식별정보를 포함하는 출입인증 요청 발생 시 영상획득부로 출입인증 요청이 발생했음을 통지하는 출입인증 요청 발생 통지 과정; 영상획득부가 상기 출입통제부로부터 출입인증 요청 발생 통지 시 수신한 보안구역 정보의 보안구역을 촬영하는 적어도 하나 이상의 카메라를 통해 획득되는 출입자 영상을 상기 보안구역별로 저장하는 출입자 영상 저장 과정; 상기 출입통제부가 상기 출입인증 요청에 대해 수신된 출입자식별정보에 의한 인증을 수행하고 인증 성공 시 3D 영상 통제 제어부로 출입자 3D 공간정보 매핑 영상의 생성을 요청하는 3D 공간정보 매핑 영상 생성 요청 과정; 3D 영상 통제 제어부가 상기 출입통제부로부터 3D 공간정보 매핑 영상의 생성 요청 발생 시 상기 3D 영상 매핑부로 상기 보안구역에 대한 3D 공간정보 매핑 영상을 생성할 것을 요청하는 3D 공간정보 매핑 영상 생성 요청 과정; 상기 3D 영상 매핑부가 상기 3D 공간정보 매핑 영상의 생성 요청 발생 시 상기 보안구역에 대한 출입자 영상들을 영상획득부를 통해 획득하는 출입자 영상 획득 과정; 상기 3D 영상 매핑부가 3차원 공간정보 영상의 상기 보안구역의 위치에 상기 획득된 출입자 영상을 매핑하여 3D 공간정보 매핑 영상을 생성하여 3D 영상 통제 제어부로 제공하는 3D 공간정보 매핑 영상 생성 과정; 및 상기 3D 영상 통제 제어부가 상기 생성된 3D 공간정보 매핑 영상을 수신받아 출력부를 통해 출력하는 출력과정을 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a three-dimensional spatial information access control and prevention method based on access control data of an embodiment of the present invention, the access control unit including accessor identification information from an access terminal installed at a door of a security zone of an access control area An access authentication request occurrence notification process for notifying that an access authentication request has occurred to the image acquisition unit when an access authentication request is generated; An entrance image storage step of storing an entrance image obtained through at least one camera that captures a security zone of the security zone information received by the image acquisition unit in the entrance authentication request occurrence notification from the entrance control unit, A 3D spatial information mapping image generation request process in which the access control unit performs authentication based on the received entrance identification information received for the access authentication request and requests the 3D image control control unit to generate a 3D spatial information mapping image of a visitor when the authentication is successful; A 3D spatial information mapping image generation request requesting a 3D image control control unit to generate a 3D spatial information mapping image for the secure area from the access control unit when the 3D spatial information mapping image generation request is generated; A passenger image acquiring process for acquiring passenger images for the security zone through the image acquiring unit when the 3D image mapping unit generates a request for generation of the 3D spatial information mapping image; A 3D spatial information mapping image generation step of generating a 3D spatial information mapping image by mapping the acquired entrance image to a location of the secure zone of the 3D image mapping unit and providing the 3D spatial information mapping image to the 3D image control and control unit; And an outputting step of the 3D image control controller receiving the generated 3D spatial information mapping image and outputting the 3D spatial information mapping image through an output unit.
상기 출입인증 요청 발생 통지 과정은, 출입인증 요청 발생 시 출입단말기에 포함되어 있는 출입단말기 카메라부를 통해 출입인증을 요청한 출입자를 촬영한 출입자 영상을 획득하는 출입자 영상 획득 단계; 및 상기 출입인증 요청 발생 시 획득되는 보안구역 정보 및 상기 출입자 영상을 포함하는 출입인증 요청 발생 통지 정보를 영상획득부로 전송하는 출입인증 요청 발생 통지 단계를 포함하는 것을 특징으로 한다.Wherein the access authentication request occurrence notification process comprises: a passenger image acquiring step of acquiring a passenger image of a passenger who has requested access authentication through an access terminal camera unit included in the access terminal when an access authentication request is generated; And an access authentication request occurrence notification step of transmitting, to the image acquisition unit, security zone information obtained when the access authentication request is generated and access authentication request occurrence notification information including the entrance party image.
상기 출입자 영상 저장 과정은, 영상획득부가 상기 출입통제부로부터 출입인증 요청 발생 통지 시 수신한 보안구역 정보의 보안구역을 촬영하는 적어도 하나 이상의 카메라를 하나의 카메라 그룹으로 간주하여 상기 카메라 그룹별로 획득되는 출입자 영상을 상기 보안구역별로 저장하는 보안구역 출입자 영상 획득 단계; 상기 출입인증 요청 발생 통지 시 수신되는 보안구역 정보에 의해 보안구역을 식별하는 보안구역 식별 단계; 상기 출입인증 요청 발생 통지 정보에 포함된 출입자 영상을 상기 식별된 보안구역에 매핑하여 저장하는 보안구역별 영상 그룹 생성 단계를 포함하는 것을 특징으로 한다.The passenger image storage process is a process in which at least one camera for photographing a security zone of the security zone information received by the image acquisition unit from the access control unit upon receipt of the access authentication request occurrence notification is regarded as one camera group, A security zone visitor image acquisition step of storing an entrance visitor image for each security zone; A security zone identification step of identifying a security zone based on the security zone information received at the entrance authentication request occurrence notification; And a security zone-specific image group mapping step of mapping the entrance image included in the entrance authentication request occurrence notification information to the identified security zone and storing the mapped image.
상기 3D 공간정보 매핑 영상 생성 과정은, 상기 3D 영상 매핑부가 상기 3D 공간정보 매핑 영상의 생성 요청 발생 시 상기 보안구역에 대한 영상들을 영상획득부로부터 획득하는 영상 획득 단계; 상기 3D 영상 매핑부가 획득된 영상들로부터 출입자 및 출입자의 얼굴을 검출하는 출입자 얼굴 검출 단계; 및 상기 3D 영상 매핑부가 상기 검출된 출입자 얼굴 영상을 상기 보안구역의 위치에 대응하는 상기 3차원 공간정보 영상의 위치에 매핑하여 3D 공간정보 매핑 영상을 생성하는 영상 생성 단계를 포함하는 것을 특징으로 한다.The 3D spatial information mapping image generation step may include: an image acquisition step of, when the 3D image mapping unit generates the 3D spatial information mapping image, acquiring images of the secure zone from the image acquisition unit; An entrance face detection step of detecting faces of a passenger and a passenger from the images obtained by the 3D image mapping unit; And an image generating step of generating a 3D spatial information mapping image by mapping the detected face image of the user to the position of the 3D spatial information image corresponding to the location of the secure zone by the 3D image mapping unit .
상기 방법은: 상기 3D 영상 통제 제어부가 상기 3D 영상 매핑부로부터 출입자 미검출 통지 정보의 수신여부를 모니터링하고 상기 출입자 미검출 통지 정보의 수신 시 출력부를 통해 경보를 발생하는 출입자 미검출 경보 과정을 더 포함하되, 상기 3D 공간정보 매핑 영상 생성 과정은, 상기 출입자 얼굴 검출 단계에서 출입자가 검출되지 않으면 출입자 미검출 통지 정보를 3D 영상 통제 제어부로 통지하는 출입자 미검출 통지 단계를 더 포함하는 것을 특징으로 한다.The method may further include: an unidentified visitor alarming process in which the 3D image control control unit monitors whether or not the incoming / outgoing detection notification information is received from the 3D image mapping unit and generates an alarm through the output unit upon receiving the incoming / Wherein the 3D spatial information mapping image generation step further includes a passer non-detection notification step of notifying the 3D image control control unit of the passenger non-detection notification information if a passenger is not detected in the passenger face detection step .
상기 3D 공간정보 매핑 영상 생성 과정은, 상기 3D 영상 매핑부가 상기 3D 공간정보 매핑 영상의 생성 요청 발생 시 상기 보안구역에 대한 영상들을 영상획득부로부터 획득하는 영상 획득 단계; 상기 영상획득부로부터 획득된 출입자 영상이 둘 이상이면 상기 출입자 영상들 각각으로부터 출입자의 얼굴 및 얼굴 검출 비율을 검출하는 얼굴 검출 비율 검출 단계; 상기 출입자 영상 중 얼굴 검출 비율이 가장 높은 출입자 영상을 상기 보안구역의 위치에 대응하는 상기 3차원 공간정보 영상의 위치에 매핑하여 3D 공간정보 매핑 영상을 생성하는 영상 생성 단계를 포함하는 것을 특징으로 한다.The 3D spatial information mapping image generation step may include: an image acquisition step of, when the 3D image mapping unit generates the 3D spatial information mapping image, acquiring images of the secure zone from the image acquisition unit; A face detection ratio detection step of detecting a face and a face detection ratio of a user from each of the entrance images if the entrance image obtained from the image acquisition unit is more than two; And an image generating step of generating a 3D spatial information mapping image by mapping an entrance image having the highest face detection ratio among the entrance images to a position of the 3D spatial information image corresponding to the location of the security zone .
본 발명은 출입통제영역의 보안구역으로 출입하고자 하는 보안구역 출입 요청 발생 시마다 출입통제영역의 실제 구조와 동일하게 모델링된 3차원 공간정보 영상의 출입 요청된 보안구역의 위치에 상기 위치의 주변에 설치된 카메라로부터 촬영된 출입자의 영상을 매핑하여 표시하여 줌으로써 보안 관리자는 보안구역 출입 요청 발생 시마다 보안구역으로 출입하는 출입자의 얼굴을 실시간으로 한 눈에 확인할 수 있는 효과를 갖는다.The present invention is characterized in that, whenever a security zone access request for access to a security zone of an access control zone is made, the 3D zone information image modeled in the same manner as the actual structure of the access control zone is installed in the vicinity of the security zone By mapping the images of the passengers photographed from the camera and displaying them, the security manager can check the face of the passengers entering and leaving the security zone at a glance each time a security zone access request is made.
본 발명은 상술한 바와 같이 보안구역별 출입자들의 얼굴을 실시간 확인할 수 있으므로 출입통제영역의 보안성을 향상시킬 수 있는 효과를 갖는다.The present invention has the effect of improving the security of the access control area since the face of the passengers according to the security zone can be checked in real time as described above.
또한, 본 발명은 출입통제 데이터와 실시간 영상이 매핑되어 관리됨으로써 추후 이벤트(사건) 발생 시 출입통제 데이터 및 상기 출입통제 데이터와 매핑된 실시간 영상에 의해 상기 이벤트를 해결하기 위한 분석 및 추적을 용이하게 할 수 있는 효과를 갖는다.In addition, according to the present invention, access control data and a real-time video are mapped and managed, thereby facilitating analysis and tracking for resolving the event by a real-time image mapped with the access control data and the access control data in the event of an event .
또한, 본 발명은 모든 승인된 출입자에 대해 정상 출입 시 사용되는 정상 출입자 식별정보와, 협박에 의한 출입 등과 같이 비정상적인 출입 시 사용되는 비정상 통지 출입자 식별정보를 등록하여 비정상적인 상황 발생 시 제3자 모르게 비정상 상황임을 알릴 수 있도록 함으로써 상기 비정상적인 상황에 빠르게 대처할 수 있는 효과를 갖는다. 이와 같이 비정상적인 상황인 협박 상황 등에 빠르게 대처할 수 있으므로 보안구역의 제3자 침입을 차단할 수 있고, 출입자를 위험으로부터 빠르게 구출할 수 있는 효과를 갖는다. 특히, 본 발명은 여성들을 타겟으로 한 협박 등에 빠르게 대처하여 위기로부터 신속하게 구출할 수 있는 효과를 가질 것이다.In addition, the present invention registers all the authorized passengers with the normal passenger identification information used at the normal access and the abnormal passenger identification information used at the abnormal access such as the intrusion by the intimidation, Thereby making it possible to quickly cope with the abnormal situation. In this way, it is possible to quickly cope with an abnormal situation, such as an intimidation situation, so that it is possible to prevent a third party from intruding into a security zone and to quickly rescue a passenger from a risk. In particular, the present invention will have the effect of quickly responding to threats targeting women and quickly rescuing them from crises.
또한, 본 발명은 출입통제 데이터로서 출입자의 체온을 측정한 출입자 체온 정보를 수집하고, 수집된 출입자 체온 정보에 의해 사스, 메르스 등과 같은 질병 방역 기능을 수행할 수 있으므로 전염 질병 발생 시 질병의 확산을 방지하거나, 질병에 대한 빠른 대처를 할 수 있는 효과를 갖는다.In addition, the present invention collects entrance body temperature information that measures a body temperature of a passenger as access control data, and can perform a disease prevention function such as SARS and MERS by the acquired body temperature information of the passenger, , And it has an effect of being able to cope with a disease quickly.
도 1은 본 발명에 따른 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템의 구성을 나타낸 도면이다.
도 2는 본 발명의 일실시예에 따른 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템의 출입통제영역 전체에 대한 3차원 공간정보 영상을 나타낸 도면이다.
도 3은 본 발명의 일실시예에 따른 3차원 공간정보 영상에 보안구역 출입자 영상을 매핑하여 표시한 일예를 나타낸 도면이다.
도 4 및 도 5는 본 발명의 일실시예에 따른 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템의 출입자의 출입인증요청에 따른 보안구역 출입자 관리 (그래픽) 사용자 인터페이스 수단을 통한 3D 공간정보 영상 표시 예를 나타낸 도면이다.
도 6은 본 발명의 제1실시예에 따른 출입통제 데이터의 3D 공간정보 영상을 이용한 3차원 공간정보 출입통제 및 방역 방법을 나타낸 절차도이다.
도 7은 본 발명의 제2실시예에 따른 출입통제 데이터 기반의 3차원 공간정보 출입통제 및 방역 방법을 나타낸 절차도이다.
도 8은 본 발명의 제3실시예에 따른 출입통제 데이터의 출입자 체온 정보에 기반한 3차원 공간정보 출입통제 및 방역 방법을 나타낸 흐름도이다.FIG. 1 is a diagram illustrating a configuration of a three-dimensional spatial information access control and prevention system based on access control data according to the present invention.
2 is a view showing a three-dimensional spatial information image of an entire access control area of a three-dimensional spatial information access control and prevention system based on access control data according to an embodiment of the present invention.
FIG. 3 is a diagram illustrating an example of mapping a 3D zone information image according to an exemplary embodiment of the present invention to a security zone visitor image.
FIGS. 4 and 5 illustrate an example of a 3D space access control and prevention system based on access control data according to an exemplary embodiment of the present invention, 3 is a view showing an example of displaying a 3D spatial information image.
FIG. 6 is a flowchart illustrating a method for controlling and accessing three-dimensional spatial information using a 3D spatial information image of access control data according to a first embodiment of the present invention.
FIG. 7 is a flowchart illustrating a method for controlling access to and control of three-dimensional spatial information on the access control data according to the second embodiment of the present invention.
FIG. 8 is a flowchart illustrating a method for controlling access to and prevention of three-dimensional spatial information based on accessory body temperature information of access control data according to a third embodiment of the present invention.
이하 첨부된 도면을 참조하여 본 발명의 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템의 구성 및 동작을 설명하고, 그 시스템에서의 출입통제 및 방역 방법을 설명한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a configuration and operation of a three-dimensional spatial information access control and prevention system based on access control data of the present invention will be described with reference to the accompanying drawings, and a method of access control and prevention in the system will be described.
도 1은 본 발명에 따른 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템의 구성을 나타낸 도면이고, 도 2는 본 발명의 일실시예에 따른 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템의 출입통제영역 전체에 대한 3차원 공간정보 영상을 나타낸 도면이며, 도 3은 본 발명의 일실시예에 따른 3차원 공간정보 영상에 보안구역 출입자 영상을 매핑하여 표시한 일예를 나타낸 도면이고, 도 4 및 도 5는 본 발명의 일실시예에 따른 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템의 출입자의 출입인증요청에 따른 보안구역 출입자 관리 (그래픽) 사용자 인터페이스 수단을 통한 3D 공간정보 영상 표시 예를 나타낸 도면이다. 도면에 참조된 부호 1은 보안구역이고, 2는 보안구역을 출입하기 위한 출입문이다.FIG. 1 is a diagram illustrating a configuration of a three-dimensional spatial information access control and prevention system based on access control data according to an embodiment of the present invention. FIG. 2 is a block diagram of a three- FIG. 3 is a diagram illustrating a three-dimensional spatial information image according to an exemplary embodiment of the present invention by mapping a security zone visitor image to a three-dimensional spatial information image according to an exemplary embodiment of the present invention. FIGS. 4 and 5 are graphs illustrating a security zone visitor management according to an access authentication request of a visitor of a three-dimensional spatial information access control and anti-virus system based on access control data according to an embodiment of the present invention ) 3D spatial information image display through the user interface means.
도 1 내지 도 5를 참조하면, 본 발명에 따른 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템은 출입통제부(100), 영상획득부(200), 3D 영상 매핑부(300) 및 3D 영상 통제 제어부(400)를 포함하며, 실시예에 따라 입력부(500), 출력부(600) 및 방역 처리부(700)를 더 포함한다.1 to 5, a three-dimensional spatial information access control and prevention system based on access control data according to the present invention includes an
상기 출입통제부(100), 영상획득부(200), 3D 영상 매핑부(300) 및 3D 영상 통제 제어부(400)는 하나의 서버 형태로 구성될 수도 있고, 각각이 별도의 서버 형태로 구성되고 인터넷프로토콜(Internet Protocol: IP)망을 통해 연결되어 상호 데이터 통신을 수행하도록 구성될 수도 있을 것이다.The
입력부(500) 및 출력부(600) 또한 구성되는 형태에 따라 IP망으로 연결될 수도 있고, 범용직렬동기(Universal Serial Bus: USB) 프로토콜, DVI(Digital Video/Visual Interface) 등으로 연결되어 데이터 통신을 수행할 수도 있을 것이다.The
출입통제부(100)는 출입통제영역의 보안구역(1)을 출입하기 위한 출입문(2)에 설치되는 출입단말기(101)들과 연결되고, 연결된 출입단말기(101)들의 출입단말기 식별정보와 보안구역 정보를 매핑하여 저장하는 보안구역별 출입단말기 정보 DB(110)를 포함한다. 상기 보안구역 정보는 보안구역 식별정보, 출입통제영역 내에서 보안구역이 위치하는 층 정보, 해당 층에서의 위치정보 등이 포함될 것이다. 또한, 본 발명의 실시예에 따라 보안구역별 출입단말기 정보 DB(110)는 제1실시예에 따라 보안 구역별로 출입 가능한 출입자식별정보를 저장할 수도 있을 것이다. 상기 출입단말기 정보 DB(110)는 상기 출입자식별정보와 함께 출입자 정보를 더 저장하는 것이 바람직할 것이다. 출입자 정보는 출입자의 소속, 부서, 이름, 사번, 사진 등이 포함될 수 있을 것이다. 상기 출입단말기(101)는 출입단말기 카메라부(102)를 더 포함할 수 있으며, 상기 카메라부(102)는 일반 화상카메라 및 열화상 카메라 중 하나 이상을 포함할 수 있을 것이다. 상기 열화상 카메라는 출입자를 열적외선을 조사하여 출입자의 열화상 영상을 생성하여 출입자 단말기(101)를 통해 출입통제부(100)로 전송한다.The
출입통제부(100)는 출입단말기(101)를 통해 해당 보안구역(1)으로 입실하고자 하는 출입자로부터 출입자식별정보를 포함하는 출입인증 요청 정보를 수신하고, 출입자식별정보에 의한 인증을 수행한 후 인증 성공 시 출입문 자동 개폐장치(미도시)를 제어하여 상기 출입단말기(101)를 통해 출입문을 개방한다.The
특히, 출입통제부(100)는 출입단말기(101)로부터 출입인증 요청 정보의 수신 시 영상획득부(200)로 출입인증 요청이 발생했음을 통지하는 출입인증 요청 발생 통지 정보를 전송한다. 이때 상기 출입인증 요청 발생 통지 정보에는 보안구역 정보 및 출입자 정보가 포함될 수 있을 것이다. 상기 출입자정보는 상기 출입인증 요청 발생 통지 정보에 포함되지 않고 후술할 출입자 3D 공간정보 매핑 영상 생성 요청 정보에 포함되어 전송될 수도 있을 것이다.In particular, the
또한, 출입통제부(100)는 상기 인증 성공 시 출입자 3D 공간정보 매핑 영상을 생성할 것을 요청하는 3D 공간정보 매핑 영상 생성 요청 정보를 3D 영상 통제 제어부(400)로 출력한다. 이때 상기 3D 공간정보 매핑 영상 생성 요청 정보는 보안구역 정보를 포함할 것이다.Also, the
출입통제부(100)는 본 발명의 제2실시예에 따라 출입통제 데이터를 수집하고, 수집된 출입통제 데이터를 3D 영상 통제 제어부(400)로 제공한다. 상기 출입통제 데이터는 출입자식별정보, 출입단말기 식별정보, 보안구역 식별정보, 문 상태(열림, 닫힘, 강제 열림, 강제 닫힘), 열림 시간, 출입자 정보, 출입자 체온 정보 등을 포함할 수 있을 것이다.The
또한, 제2실시예에 따라 긴급상황 발생 시 출입통제부(100)는 긴급모드를 설정하고, 출입자에게 일정 시간 대기할 것을 요청한다.In addition, according to the second embodiment, the
출입통제부(100)는 긴급모드 해제 식별정보의 입력에 의한 긴급모드 해제 요청이 발생하는 경우 긴급모드를 해제한다. 상기 긴급모드 해제 식별정보는 관리자에 의해 입력될 수도 있고, 3D 영상 통제 제어부(400)로부터 수신될 수도 있을 것이다.The
출입단말기(101)에 출입단말기 카메라부(102)가 포함되어 있는 경우, 출입통제부(100)는 출입인증 요청 발생 시 출입단말기 카메라부(102)를 통해 출입자 방향을 촬영하여 출입자 영상 및 열화상 영상 입력 시 열화상 영상으로부터 출입자 체온 정보를 획득하고, 획득된 출입자 영상 및 보안구역 정보를 포함하는 출입인증 요청 발생 통지 정보를 영상획득부(200)로 제공하고, 상기 출입자 체온 정보를 포함하는 출입통제 데이터를 3D 영상 통제 제어부(400)로 제공한다. 상기 보안구역 정보는 영상 전송의 초기 프레임에만 포함되고 이후 프레임에는 출입자 영상만 포함되어 전송될 것이다. 이때, 전송되는 영상은 일반 영상 및 열화상 영상 중 하나 이상을 포함할 수 있을 것이다. 여기서는 출입통제부(100)가 열화상 영상으로부터 출입자의 체온을 검출하는 경우를 설명하였으나, 영상획득부(200)가 출입자의 체온을 검출하여 출입자 체온 정보를 생성한 후 출입통제부(100) 또는 직접 3D 영상 통제 제어부(400)로 전송할 수도 있을 것이다.When the
영상획득부(200)는 출입통제영역의 보안구역을 포함하는 다양한 위치에 설치되어 해당 위치의 주변을 촬영하는 카메라(201)들과 연결되고, 카메라(201)로부터 촬영된 영상을 수신받아 저장하여 관리한다.The
영상획득부(200)는 카메라(201)들로부터 수신되는 영상을 보안구역별로 그룹화하여 저장하기 위해 각 보안구역의 보안구역 정보와 매핑하여 카메라 정보를 저장하고 있는 보안구역별 카메라 정보 DB(210)를 포함한다.The
다시 설명하면, 저장되는 영상들은 보안구역의 위치정보와 함께 관리되나, 도 1에서와 같이 보안구역(1)을 촬영하는 적어도 하나 이상의 카메라(201-1, 201-2, 201-3)는 해당 보안구역(1)의 보안구역 정보와 매핑되어 하나의 그룹으로서 관리된다. 또한, 상기 하나의 그룹으로 지정된 카메라를 통해 촬영된 출입자 영상들 또한 하나의 해당 보안구역에 대해 하나의 그룹으로써 관리될 것이다.1, the at least one camera 201-1, 201-2, and 201-3, which captures the
영상획득부(200)는 출입통제부(100)로부터 출입자 영상이 수신되는 경우, 함께 전송되는 보안구역 정보에 대응하는 그룹에 출입자 영상을 저장하여 관리한다.When the entrance image is received from the
영상획득부(200)는 제1실시예에 따른 3D 영상 매핑부(300)로부터 보안구역 정보를 포함하는 출입 요청 보안구역 영상 요청 정보의 수신 시 또는 제2실시예에 따른 출입인증 요청 통지 정보 입력 시 포함된 보안구역 정보에 대응하는 그룹에 저장된 적어도 하나 이상의 출입자 영상들을 3D 영상 매핑부(300)로 제공한다.The
3D 영상 매핑부(300)는 도 2와 같이 출입통제영역 전체 구조에 대해 동일하게 모델링된 3D 공간정보 영상을 저장하고 있으며, 상기 3D 공간정보 영상의 실제 보안구역의 위치에 대응하는 위치에 보안구역 정보, 즉 보안구역의 위치정보가 매핑되어 저장되어 있을 것이다. 도 2 및 도 3에서는 출입통제영역이 건물인 경우를 나타내었으나, 건물 이외의 산 등과 같은 특정 영역이 될 수도 있을 것이다. 3D 공간정보 영상은 도 2 및 도 3에서 보이는 바와 같이 전체 출입통제영역에 대해 모델링된 영상을 포함하고, 도 3과 같이 각 층에 대해 모델링된 부분 3차원 공간정보 영상들을 포함하며, 각 층의 각 보안구역에 대해 모델링된 부분 3차원 공간정보 영상들을 포함할 것이다. The 3D
3D 영상 매핑부(300)는 3D 영상 통제 제어부(400)로부터 출입자 3D 공간정보 매핑 영상 생성 요청 정보가 수신되면 포함된 보안구역 정보에 대응하는 출입자 영상들을 영상획득부(200)로부터 제공받아 도 3과 같이 상기 보안구역 정보의 보안구역 위치에 대응하는 상기 3D 공간정보 영상의 위치에 상기 출입자 영상들 중 하나 이상을 매핑하여 3D 공간정보 매핑 영상을 생성한 후 3D 영상 통제 제어부(400)로 전송한다.The 3D
3D 영상 매핑부(300)에 의해 3D 공간정보 영상에 매핑되는 출입자 영상은 2D 영상으로 동영상 및 정지영상 중 하나 이상이 될 수 있을 것이다.The entrance image mapped to the 3D spatial information image by the 3D
그러나 해당 보안구역을 서로 다른 방향에서 촬영하는 카메라가 3개 이상인 경우, 3개 이상의 출입자 영상을 합성하여 3D 출입자 영상을 생성하고, 3D 출입자 영상을 3D 공간정보 영상에 매핑하여 3D 공간정보 매핑 영상을 생성할 수도 있을 것이다.However, if there are more than three cameras shooting the security area in different directions, it is possible to create a 3D viewer image by combining three or more viewer images and map the 3D viewer information image to the 3D space information image, You can also create it.
또한, 3D 영상 매핑부(300)는 영상획득부(200)로부터 수신되는 출입자 영상이 둘 이상인 경우(보안구역 촬영 카메라가 둘 이상인 경우) 출입자 영상들 각각에서 출입자 및 출입자의 얼굴을 검출하고, 얼굴 패턴에 의해 얼굴이 명확하게 인식되는 출입자 영상을 3D 공간정보 영상에 매핑하여 3D 공간정보 매핑 영상을 생성하도록 구성될 수도 있을 것이다.The 3D
또한, 3D 영상 매핑부(300)는 출입자 영상으로부터 얼굴 검출 시 검출된 얼굴 이미지만을 3D 공간정보 영상에 매핑하여 3D 공간정보 매핑 영상을 생성하도록 구성될 수도 있을 것이다. 그리고 3D 영상 매핑부(300)는 출입자 영상이 둘 이상인 경우 출입자 영상으로부터 얼굴 검출 시 검출된 얼굴과 미리 가지고 있는 얼굴 패턴에 의해 촬영된 영상이 얼굴 전체 구성 요소 중 몇 %나 가지고 있는지를 나타내는 얼굴 검출 비율을 검출하고, 얼굴 검출 비율이 높은 출입자 영상을 최적의 출입자 영상으로 간주하여 3D 공간정보 영상에 매핑하도록 구성될 수도 있을 것이다.In addition, the 3D
3D 영상 통제 제어부(400)는 출입통제 데이터 수집부(401), 출입통제 데이터 저장부(402), 3D 공간정보 영상 생성부(403), 긴급상황 판단부(404) 및 출입자 방역부(405)를 포함하여 영상 출입통제시스템의 전반적인 동작을 제어한다.The 3D image control and
3D 영상 통제 제어부(400)의 3D 공간정보 영상 생성부(403)는 제1실시예에 따라 출입통제부(100)로부터 3D 공간정보 매핑 영상 생성 요청 정보의 수신 시 3D 영상 매핑부(300)로 3D 공간정보 매핑 영상 생성 요청 정보를 전송하여 3D 공간정보 매핑 영상의 생성을 요청하고, 이에 대해 생성된 3D 공간정보 매핑 영상을 상기 3D 영상 매핑부(300)로부터 수신받아 출력부(600)를 통해 출력한다.The 3D spatial information
출입통제 데이터 저장부(402)는 출입자별로 출입자 식별정보 및 출입자 정보를 저장하고, 출입자 식별정보별, 즉 출입자별로 출입통제 데이터를 저장하여 관리한다.The access control
또한, 3D 공간정보 영상 생성부(403)는 입력부(500)를 통해 관리자가 도 4의 미니맵 표시부(602)에 표시된 미니맵에서 임의의 보안구역에 대한 출입문이 클릭되는 경우, 클릭된 보안구역에 대응하는 3D 공간정보 매핑 영상을 3D 영상 매핑부(300)로부터 수신받아 출력부(600)를 통해 표시한다.In addition, the 3D spatial information
그리고 3D 영상 통제 제어부(400)의 출입통제 데이터 수집부(401)는 제2실시예에 따라 출입통제부(100)로부터 보안구역별 출입통제 데이터를 수신받고, 영상획득부(200)로부터 수신되는 영상들 중 동일한 보안구역에 대한 영상과 매핑하여 출입통제 데이터 저장부(402)에 저장한다.The access control
출입통제 데이터 저장부(402)는 출입자식별정보를 저장하되, 정상적인 출입 시 사용되는 정상 출입자식별정보와 협박을 당하고 있는 상황 등과 같은 비정상 상황에서 사용되어 현재 비정상 상황임을 통지하기 위해 사용되는 비정상 통지 출입자 식별정보를 출입자별로 저장하여 관리한다.The access control
긴급상황 판단부(404)는 수신된 출입통제 데이터의 출입자 식별정보와 미리 저장되어 있는 정상 출입자식별정보 및 비정상 통지 출입자식별정보들을 비교하여 수신된 출입자식별정보가 정상 출입자식별정보인지, 비정상 통지 출입자식별정보인지를 판단하고, 그 판단에 따른 정보를 포함하는 출입자 상황 판단 결과를 출입통제부(100)로 제공한다.The emergency
그러면 출입통제부(100)는 상술한 바와 같이 정상 모드에서 획득되어 있는 출입자식별정보에 대한 인증을 수행하고 그 결과에 따라 출입통제를 수행하거나, 3D 영상 통제 제어부(400)로부터 수신되는 상기 출입자 상황 판단 결과 정보에 따라 출입통제를 수행한다.Then, the
또한, 3D 영상 통제 제어부(400)의 3D 공간정보 영상 생성부(403)는 도 4 및 도 5와 같은 보안구역 출입자 관리 (그래픽) 사용자 인터페이스 수단을 통해 3D 공간정보 매핑 영상을 표시한다. 상기 보안구역 출입자 관리 사용자 인터페이스 수단은 도 4 및 도 5에서 보이는 바와 같이 3D 공간정보 매핑 영상 표시부(601), 미니맵 표시부(602), 출입자 정보 표시부(603) 및 출입통제 데이터 표시부(604)를 포함한다. 3D 공간정보 매핑 영상 표시부(601)는 3D 공간정보 매핑 영상이 표시되고, 상기 미니맵 표시부(602)는 선택된 출입통제 영역의 선택 층에 대한 미니맵이 표시되며, 출입자 정보 표시부(603)는 출입자 이름, 부서, 사원코드 등과 같은 출입자 정보가 표시되며, 출입통제 데이터 표시부(604)는 출입통제 데이터가 표시된다.In addition, the 3D spatial information
3D 공간정보 영상 생성부(403)는 도 4 및 도 5에서 보이는 바와 같이 3D 공간정보 매핑 영상의 출입이 요청된 보안구역 출입문에 대응하는 위치에 해당 출입자에 대한 출입이력정보 표시수단(605)을 더 표시한다. 상기 출입이력정보는 출입문의 열림 및 닫힘 상태 정보, 출입문이 열려 있는 시간에 대한 시간정보, 일정 기간 단위의 출입차의 해당 출입문 출입 횟수 등의 정보를 포함하고, 이러한 정보를 출입이력정보 표시수단(605)을 통해 표시한다.4 and 5, the 3D spatial information
또한, 상기 3D 영상 매핑부(300)가 출입자 영상으로부터 출입자 및 얼굴을 검출하는 경우, 3D 공간정보 영상 생성부(403)는 상기 3D 영상 매핑부(300)로부터 출입자 영상으로부터 출입자 및 얼굴이 검출되지 않았음을 알리는 출입자 미검출 신호의 수신 시 출력부(600)를 통해 경보를 발생하도록 구성될 수도 있을 것이다. 상기 경보는 디스플레이의 점멸이 될 수도 있고, 경고음이 될 수도 있을 것이다.In addition, when the 3D
출입자 방역부(405)는 출입통제 데이터 수집부(401)를 통해 수집되는 출입통제 데이터로부터 출입자 식별정보 및 출입자 체온 정보를 검출하고, 검출된 출입자 체온 정보와 미리 설정되어 있는 기준 방역 온도와 비교하여 출입자 체온 정보의 온도가 기준 방역 온도보다 높으면 상기 출입자식별정보의 출입자를 방역대상으로 간주하여 방역 대상 출입허가 및 출입자 리스트에 등록한다.The
출입자 방역부(405)는 방역 대상 출입허가 및 출입자 리스트에 등록된 출입자에 대해 출입자 단말부(101)를 통해 특정 장소로 이동하도록 요청하거나 보안구역을 출입하지 못하도록 할 수도 있을 것이다. The entrance
출력부(600)는 상기 3D 영상 통제 제어부(400)로부터 3D 공간정보 매핑 표시 영상을 수신받아 출력하는 디스플레이 장치가 될 수도 있고, 보안 관리자의 컴퓨터 단말기가 될 수도 있을 것이다. 또한, 출력부(600)는 경고음, 경고음성 등을 출력하는 오디오 출력장치를 더 포함할 수도 있을 것이다.The
입력부(500)는 키보드, 조그셔틀, 마우스 등과 같은 입력장치가 될 수도 있고, 상기 IP망을 통해 연결되는 보안 관리자의 컴퓨터 단말기가 될 수도 있을 것이다.The
상기 입력부(500) 및 출력부(600)는 하나의 관리자 컴퓨터일 수 있을 것이다.The
도 5는 본 발명에 따른 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 방법을 나타낸 절차도이다. FIG. 5 is a flowchart illustrating a method for controlling and accessing three-dimensional spatial information based on access control data according to the present invention.
도 5를 참조하면, 우선 출입통제부(100)는 출입단말기(101)로부터 출입인증 요청 정보의 수신에 의한 출입인증 요청이 발생되는지를 검사한다(S111). 상기 출입인증 요청 정보에는 출입자 식별정보를 포함할 것이다. 상기 출입자 식별정보는 출입자별로 고유하게 할당된 카드번호, 사번 등의 일련번호, 홍채, 지문, 맥박 등의 생체정보 등이 될 수 있을 것이다. Referring to FIG. 5, the
출입인증 요청이 발생되면 출입통제부(100)는 출입단말기(101)가 출입단말기 카메라부(102)를 포함하고 있으면 출입단말기(101)로부터 수신되는 출입자 영상 및 보안구역 정보를 포함하는 출입자 영상정보를 포함하는 출입인증 요청 발생 통지 정보를 영상획득부(200)로 전송한다(S113).When the access authentication request is generated, the
출입통제부(100)는 수신된 출입자 식별정보와 미리 등록되어 있는 출입자 식별정보를 비교하여 인증을 수행하고(S115), 인증 수행결과가 성공인지를 판단한다(S117).The
인증 수행 결과가 실패이면 출입통제부(100)는 출입단말기(101)로 인증실패를 통지하고(S119), 인증 성공이면 해당 보안구역의 상기 출입단말기(101)를 통해 또는 직접 출입문 자동 개폐 장치(미도시)를 제어하여 출입문을 개방한다(S121).If the authentication result is not successful, the
상기 출입문의 개방 후, 출입통제부(100)는 출입자 3D 공간정보 매핑 영상 생성 요청 정보를 3D 영상 통제 제어부(400)로 전송한다(S123).After the door is opened, the
영상획득부(200)는 보안구역별 카메라 그룹(적어도 하나 이상의 카메라)으로부터 수신되는 출입자 영상을 보안구역별로 구분하여 저장 및 관리한다(S211). 이때, 출입통제부(100)로부터 출입자 영상 및 보안구역 정보를 포함하는 출입인증 요청 발생 통지 정보가 수신되면 포함된 보안구역 정보의 보안구역에 대응하는 출입자 영상 그룹에 상기 출입인증 요청 발생 통지 정보에 포함되어 있는 출입자 영상을 저장한다.The
영상획득부(200)는 출입자 영상이 보안구역별로 구분되어 저장되기 시작하면 3D 영상 매핑부(300)로부터 출입 요청 보안구역 영상 요청 정보의 수신에 의한 영상 요청이 발생되는지를 모니터링한다(S213).The
3D 영상 통제 제어부(400)는 출입통제부(100)로부터 출입자 3D 공간정보 영상 생성 요청 정보의 수신에 의한 출입자 3D 공간정보 매핑 영상 생성 요청이 발생되는지를 검사한다(S311).The 3D image control and
3D 공간정보 매핑 영상 생성 요청이 발생되면 3D 영상 통제 제어부(400)는 출입자 3D 공간정보 매핑 영상 생성 요청 정보를 3D 영상 매핑부(300)로 전송한다(S313).When the 3D spatial information mapping image generation request is generated, the 3D image control and
3D 영상 매핑부(300)는 구동되면 3D 영상 통제 제어부(400)로부터 3D 공간정보 매핑 영상 생성 요청 정보가 수신되는지를 검사하여 3D 공간정보 매핑 영상 생성 요청의 발생 여부를 모니터링한다(S411).When the 3D
상기 모니터링 중 3D 공간정보 매핑 영상 생성 요청 정보의 수신에 의한 요청이 발생되면 3D 영상 매핑부(300)는 3D 공간정보 매핑 영상 생성 요청 정보에 포함된 보안구역 정보를 검출하고, 검출한 보안구역 정보를 포함하는 출입 요청 보안구역 영상 요청 정보를 생성하여 영상 획득부(200)로 전송한다(S413). 도 2에서는 3D 영상 매핑부(300)가 3D 영상 통제 제어부(400)로부터 3D 공간정보 매핑 영상 생성 요청 정보를 수신하는 경우만을 나타내었으나, S123에서 출입통제부(100)로부터 직접 3D 공간정보 매핑 영상 생성 요청 정보를 수신받을 수도 있을 것이다.When a request is received by receiving the 3D spatial information mapping image generation request information during the monitoring, the 3D
상기 출입 요청 보안구역 영상 요청 정보의 전송 후 3D 영상 매핑부(300)는 도 2에서 나타낸 바와 같이 보안구역 정보에 포함된 층 정보에 대응하는 3D 공간정보 영상을 로드한다(S415).After the transmission of the entrance request security zone image request information, the 3D
상기 3D 공간정보 영상의 로드 후 3D 영상 매핑부(300)는 영상획득부(200)로부터 요청된 보안구역 영상이 수신되는지를 모니터링한다(S417).After loading the 3D spatial information image, the 3D
영상획득부(200)는 상기 영상 요청 모니터링 중에 3D 영상 매핑부(300)로부터 출입 요청 보안구역 영상 요청 정보가 수신되면 출입 요청 보안구역 영상 요청 정보에 포함된 보안구역 정보 대응하여 저장되어 있는 출입자 영상들을 로드하고, 상기 출입자 영상들을 포함하는 출입 요청 보안구역 영상을 3D 영상 매핑부(300)로 전송한다(S215).When the access request security zone image request information is received from the 3D
3D 영상 매핑부(300)는 상기 보안구역 영상의 수신 여부 모니터링 중 보안구역 출입자 영상이 수신되면 도 3에 나타낸 바와 같이 상기 로드된 3D 공간정보 영상의 상기 출입자 3D 공간정보 매핑 영상 생성 요청 정보에 포함된 보안구역 정보의 해당 보안구역 위치에 수신된 보안구역 출입자 영상을 매핑하여 3D 공간정보 매핑 영상을 생성한 후 저장한다(S419). 상기 수신되는 보안구역 출입자 영상은 둘 이상이 될 수도 있을 것이다. 이 경우, 3D 영상 매핑부(300)는 출입자 영상으로부터 출입자 및 출입자의 얼굴을 검출하고, 얼굴이 보다 명확하게 나온 출입자 영상을 3D 공간정보 영상에 매핑하는 것이 바람직할 것이다. 3, the 3D
생성된 3D 공간정보 매핑 영상은 3D 영상 통제 제어부(400)로 전송된다(S421).The generated 3D spatial information mapping image is transmitted to the 3D image control and control unit 400 (S421).
상기 설명에서는 3D 영상 매핑부(300)가 생성되는 3D 공간정보 매핑 영상을 3D 영상 통제 제어부(400)로 전송하는 경우를 설명하였다.In the above description, the case where the 3D
그러나 3D 영상 매핑부(300)는 3D 영상 통제 제어부(400)로부터 출입자 3D 공간정보 매핑 영상 출력 요청 발생 시 3D 공간정보 매핑 영상을 제공하도록 구성될 수도 있을 것이다(S315, S317). 상기 3D 공간정보 매핑 영상 출력 요청은 입력부(500)를 통한 관리자에 의해 발생될 수 있을 것이다.However, the 3D
3D 영상 통제 제어부(400)는 상기 출입통제부(100)로부터의 출입자 3D 공간정보 매핑 영상 생성 요청에 의한 출입자 3D 공간정보 매핑 영상 생성 요청 후, 또는 입력부(500)로부터 출입자 3D 공간정보 매핑 영상 출력 요청에 의한 3D 공간정보 매핑 영상 요청 후 3D 영상 매핑부(300)로부터 3D 공간정보 매핑 영상이 수신되는지를 검사한다(S319).After the 3D image control and
3D 영상 통제 제어부(400)는 상기 3D 공간정보 매핑 영상의 요청에 의해 3D 공간정보 매핑 영상이 수신되면 상기 3D 공간정보 매핑 영상 또는 3D 공간정보 매핑 표시 영상을 출력부(600)로 출력하여 표시시킨다(S321). 상기 3D 공간정보 매핑 표시 영상은 도 4 및 도 5와 같이 표시화면에 표시될 수 있도록 그래픽 사용자 인터페이스를 통해 표시되는 영상이 될 수 있을 것이다. The 3D image control and
3D 영상 통제 제어부(400)는 보안구역 출입자 관리 사용자 인터페이스 수단을 통해 도 4 및 도 5에서 보이는 바와 같이 3D 공간정보 매핑 영상뿐만 아니라, 보안구역 출입자 관리 사용자 인터페이스 수단의 미니맵 표시부(602)를 통해 해당 층의 평면 지도 및 현재 출입인증 요청이 발생된 위치를 표시하는 미니맵을 표시하고 출입자 정보 표시부(603)를 통해 출입자 정보를 표시한다. 상기 출입자 정보는 상술한 바와 같이 출입통제부(100)로부터 직접 수신할 수도 있고, 출입통제부(100), 영상획득부(200) 및 3D 영상 매핑부(300)를 거쳐 수신할 수도 있을 것이다.The 3D
한 층의 여러 보안구역들(1-1, 1-2)에서 동시에 출입인증 요청이 발생되면 3D 영상 매핑부(300)는 도 3과 같이 하나의 3D 공간정보 영상에 복수의 출입자 영상을 매핑하여 3D 영상 통제 제어부(400)로 제공할 수도 있을 것이다.When an access authentication request is simultaneously generated in several security zones 1-1 and 1-2 of one layer, the 3D
또한, 여러 층에서 출입인증 요청이 발생되면 3D 영상 매핑부(300)는 복수의 층을 포함하는 3D 공간정보 영상을 로드하고, 로드된 3D 공간정보 영상의 해당 보안구역 위치에 출입 요청을 한 출입자 영상을 매핑하여 3D 공간정보 매핑 영상을 생성할 것이다. 복수의 층을 포함하는 3D 공간정보 매핑 영상이 생성되는 경우 입력부(500)를 통해 입력되는 관리자의 제어정보에 따라 선택된 층에 대응하는 부분적인 3D 공간정보 매핑 표시 영상을 생성하여 3D 영상 통제 제어부(400)를 거쳐 출력부(600)를 통해 표시하도록 구성될 수도 있을 것이다. When an access authentication request is generated from multiple layers, the 3D
또한, 3D 영상 통제 제어부(400)는 입력부(500)를 통해 출력부(600)에 표시된 도 3의 3D 공간정보 매핑 영상에서 임의의 보안구역(1)이 선택되면 도 4와 같이 보안구역 출입자 관리 (그래픽) 사용자 인터페이스 수단을 표시하고, 보안구역 출입자 관리 (그래픽) 사용자 인터페이스를 통해 선택된 보안구역에 대응하는 출입자 정보, 상기 출입자 정보의 출입자가 출입을 요청한 보안구역의 위치에 출입자 영상이 매핑된 3D 공간정보 매핑 영상을 표시하도록 구성될 수도 있을 것이다. 상기 출입자 정보는 3D 영상 통제 제어부(400)에서 관리될 수도 있고, 3D 영상 매핑부(300)에서 관리될 수도 있을 것이다. 출입자 인식은 상기 획득된 출입자 영상으로부터 획득된 출입자의 얼굴과 미리 등록되어 있는 출입자들의 얼굴 사진을 비교하여 수행될 수 있을 것이다. 3, when a
도 7은 본 발명의 제2실시예에 따른 출입통제 데이터 기반의 3차원 공간정보 출입통제 및 방역 방법을 나타낸 절차도이다.FIG. 7 is a flowchart illustrating a method for controlling access to and control of three-dimensional spatial information on the access control data according to the second embodiment of the present invention.
도 7을 참조하면, 출입통제부(100)는 출입단말기(101)로부터 출입인증 요청 정보의 수신에 의한 출입인증 요청이 발생되는지를 검사한다(S511).Referring to FIG. 7, the
출입인증 요청이 발생되면 출입통제부(100)는 출입인증 요청 발생 통지 정보를 영상획득부(200)로 전송하기 시작한다(S513). 상기 출입인증 요청 발생 통지 정보는 보안구역 정보만 포함하하는 경우 한번만 전송되나, 출입단말기(101)에 카메라를 구비하여 출입자 영상이 획득되는 경우 지속적으로 전송될 것이다.When the access authentication request is generated, the
영상획득부(200)는 구동되는 순간부터 보안구역별로 설정된 카메라들로부터 수신되는 영상을 수신받아 보안구역별로 저장하여 관리한다(S611).In operation S611, the
상기 보안구역별 영상들의 저장 및 관리 중에 출입통제부(100)로부터 출입인증 요청 발생 통지 신호가 들어오면 영상획득부(200)는 출입인증 요청 발생 통지 신호가 수신된 보안구역에 대응하는 영상을 3D 영상 통제 제어부(400)로 전송하기 시작한다(S613).When an access authentication request occurrence notification signal is received from the
출입통제부(100)는 상기 출입인증 요청 발생 통지 정보의 송신 후 출입자식별정보를 포함하는 출입통제 데이터를 3D 영상 통제 제어부(400)로 전송한다(S515).The
출입통제 데이터를 수신한 3D 영상 통제 제어부(400)는 출입통제 데이터를 저장한(S711) 후, 상기 출입통제 데이터에 포함된 출입자식별정보가 정상 출입자식별정보인지 비정상 통지 출입자식별정보인지를 판단하여, 상기 출입통제 데이터를 전송한 보안구역의 상황이 긴급상황인지를 판단한다(S713).After the
판단결과, 수신된 출입자식별정보가 정상 출입자식별정보이면 3D 영상 통제 제어부(400)는 3D 영상 매핑부(300)와 연동하여 상술한 3D 공간정보 매핑 영상 출력 루틴을 수행한다(S719).If the received visitor identification information is the normal visitor identification information, the 3D image control and
반면, 수신된 출입자식별정보가 비정상 통지 출입자식별정보이면 3D 영상 통제 제어부(400)는 출입자 상황 판단 결과를 출입통제부(100)으로 전송한 후, 출입통제 데이터에 포함된 보안구역 식별정보의 보안구역에 대응하여 영상획득부(200)로부터 수신되는 영상을 팝업하여 출력부(600)를 통해 디스플레이한다(S715).On the other hand, if the received passenger identification information is the abnormal notification passenger identification information, the 3D image control and
상기 영상의 팝업 표시 후 3D 영상 통제 제어부(400)는 경보를 발생하고, 경찰서, 보안업체 등의 기관으로 침입 통지를 수행한다(S717).After the pop-up of the image is displayed, the 3D image control and
출입통제부(100)는 상기 출입통제 데이터의 전송 후, 상기 출입자 상황 판단 결과가 수신되면 상기 출입자 상황 판단 결과를 분석하여 정상 출입인지를 판단한다(S517).After the entrance control data is transmitted, the
판단결과, 정상출입이면 출입통제부(100)는 상기 출입자 상환 판단 결과를 출입 허가로 인지하여 해당 보안구역 도어를 열도록 구성될 수도 있고(S525), 도 6과 동일하게 보안 구역별 출입단말기 정보 DB(110)에 포함된 출입자 식별정보와 비교하여 인증을 수행하고(S519), 인증 성공 여부를 판단하여(S521), 해당 보안구역의 도어를 열도록 구성될 수도 있을 것이다(S525).As a result of the determination, the
반면, 출입통제부(100)는 출입자 상황 판단 결과의 분석 결과 비정상 출입이면 긴급모드를 설정하고 출입단말기(101)를 통해 출입자에게 대기를 요청하는 텍스트 및 음성 중 하나 이상의 메시지를 출력한다(S529).On the other hand, the
상기 출입통제부(100)는 긴급모드의 설정 후 긴급모드가 해제 요청이 발생되는지를 검사하고(S531), 긴급모드 해제 요청이 발생되는 경우 긴급모드 해제 신호를 3D 영상 통제 제어부(400)로 전송한다(S533). 그러면 3D 영상 통제 제어부(400)는 경보를 종료할 것이다.The
도 8은 본 발명의 제3실시예에 따른 출입통제 데이터의 출입자 체온 정보에 기반한 3차원 공간정보 출입통제 및 방역 방법을 나타낸 흐름도이다.FIG. 8 is a flowchart illustrating a method for controlling access to and prevention of three-dimensional spatial information based on accessory body temperature information of access control data according to a third embodiment of the present invention.
도 8을 참조하면 3D 영상 통제 제어부(400)의 출입자 방역부(405)는 출입통제 데이터 수집부(401)를 통해 출입통제 데이터가 수신되는지를 검사하고(S811), 출입통제 데이터가 수신되면 출입통제 데이터로부터 출입자 체온 정보를 검출한다(S813).8, the
출입자 체온 정보가 검출되면 출입자 방역부(405)는 출입자 체온 정보의 온도가 기준 방역 온도를 초과하는지를 검사한다(S815).When the entrance body temperature information is detected, the
판단결과, 출입자의 체온이 기준 방역 온도를 초과하면 출입자 방역부(405)는 담당자에게 출입자 정보 및 출입자 체온 정보를 포함하는 방역 대상 통지 정보를 담당자에게 제공하고 이상 여부를 판정해 줄 것을 요청한다(S816).If it is determined that the body temperature of the passenger exceeds the reference anti-virus temperature, the
상기 출입자 이상 여부 판정 요청 후 출입자 방역부(405)는 담당자에 의해 출입자 이상 판정이 이루어지는지를 검사하고(S817), 출입자 이상 판정이 이루어지면 해당 출입자를 방역 대상 출입허가 및 출입자 리스트에 등록한다(S819).After the request for judging whether or not the passenger is present, the passer-by-verifying
반면, 출입자의 체온이 정상이거나 담당자에 의해 정상 판정을 받는 경우, 출입자 방역부(405)는 상기 출입자의 출입을 승인한다(S825).On the other hand, if the body temperature of the passenger is normal or a normal person is judged by the person in charge, the
상기 출입자가 방역 대상 출입허가 및 출입자 리스트에 등록되면 출입자 방역부(405)는 방역 처리부(700)로 출입자 정보 및 출입자 체온 정보를 포함하는 방역 대상 통지 정보를 제공한다(S821).When the passenger is registered in the prohibited access admission and guest list, the
또한, 출입자 방역부(405)는 출입자 상황 판단 결과 정보를 출입통제부(100)로 전송한다(S823). 그러면 출입통제부(100)는 출입자에게 행동 요령을 안내할 것이다.In addition, the
또한, 상기 출입자 상황 판단 결과 정보를 수신한 출입통제부(100) 또는 3D 영상 통제 제어부(400)의 3D 공간정보 영상 생성부(403)는 해당 출입자의 열적외선 영상을 표시할 수도 있으며, 상기 방역 대상 출입허가 및 출입자 리스트에 등록된 출입자들에 대한 출입을 차단하도록 구성될 수도 있을 것이다.The 3D spatial information
한편, 본 발명은 전술한 전형적인 바람직한 실시예에만 한정되는 것이 아니라 본 발명의 요지를 벗어나지 않는 범위 내에서 여러 가지로 개량, 변경, 대체 또는 부가하여 실시할 수 있는 것임은 당해 기술분야에서 통상의 지식을 가진 자라면 용이하게 이해할 수 있을 것이다. 이러한 개량, 변경, 대체 또는 부가에 의한 실시가 이하의 첨부된 특허청구범위의 범주에 속하는 것이라면 그 기술사상 역시 본 발명에 속하는 것으로 보아야 한다.While the present invention has been described with reference to exemplary embodiments, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, is intended to cover various modifications and equivalent arrangements included within the spirit and scope of the appended claims. It will be easily understood. It is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, it is intended to cover various modifications within the scope of the appended claims.
1: 보안구역 2: 출입문
100: 출입통제부 101: 출입단말기
102: 출입단말기 카메라부 110: 보안구역별 출입단말기 정보 DB
200: 영상획득부 201: 보안카메라
210: 보안구역별 카메라 정보 DB 300: 3D 영상 매핑부
400: 3D 영상 통제 제어부 500: 입력부
600: 출력부1: security zone 2: entrance
100: access control unit 101: access terminal
102: access terminal camera unit 110: access terminal information DB by security zone
200: image acquiring unit 201: security camera
210:
400: 3D image control control unit 500: Input unit
600: Output section
Claims (15)
상기 출입통제부로부터 출입인증 요청 발생 통지 시 상기 보안구역을 촬영하는 적어도 하나 이상의 카메라를 포함하는 카메라 그룹을 검색하고, 검색된 카메라 그룹으로부터 수신되는 출입자 영상을 저장하고, 보안구역 출입자 영상 요청 발생 시 해당 보안구역의 출입자 영상을 제공하는 영상획득부;
상기 출입통제영역의 구조와 동일하게 모델링된 3차원 공간정보 영상을 구비하고, 3D 공간정보 매핑 영상 생성 요청 발생 시 상기 영상획득부로 상기 보안구역에 대한 출입자 영상을 요청하고, 이에 응답하여 상기 보안구역에 대한 출입자 영상이 수신되면 상기 출입자 영상을 상기 3차원 공간정보 영상의 해당 보안구역 영역에 매핑하여 3차원 공간정보 매핑 영상을 생성하여 저장하고, 보안구역에 대한 3차원 공간정보 매핑 영상을 전송하는 3D 영상 매핑부;
3차원 공간정보 매핑 영상을 디스플레이하는 디스플레이부 및 경보음을 발생시키는 경보음 발생부를 포함하는 출력부; 및
출입자 3D 공간정보 매핑 영상 요청 이벤트의 발생 시 상기 3D 영상 매핑부로 3D 공간정보 매핑 영상을 요청하여 수신받아 상기 출력부를 통해 출력하는 3D 영상 통제 제어부를 포함하되,
상기 3D 영상 매핑부는,
상기 영상획득부로부터 입력되는 상기 보안구역에 대한 출입자 영상으로부터 출입자 및 얼굴을 검출하고, 얼굴이 검출된 영상을 상기 3차원 공간정보 영상에 매핑하고, 상기 영상들로부터 출입자가 검출되지 않으면 출입자 미검출 통지 신호를 상기 3D 영상 통제 제어부로 전송하고,
3D 영상 통제 제어부는,
상기 3D 영상 매핑부로부터 출입자 미검출 통지 신호가 수신되면 출력부의 디스플레이부에 표시되는 보안구역의 위치에 출입자 미검출 통지 메시지를 표시하거나 상기 경보음 발생부를 통해 경보음을 출력하여 상기 보안구역에서의 출입자 미검출을 경보하는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템.
And an access terminal installed at a door of the security zone of the access control area to obtain and output access identification information of an accessing person to access and notify that the access authentication request is generated when the accessing person identification information is input from the accessing terminal, An entrance control unit for performing authentication based on the identification information, opening the door at the time of successful authentication, and requesting creation of a 3D spatial information mapping image of a visitor;
A camera group including at least one camera that photographs the security zone when the entrance / exit authentication request occurrence notification is received from the access control unit, stores the entrance image received from the searched camera group, An image acquisition unit for providing an accessing image of a security zone;
Dimensional spatial information image modeled in the same manner as the structure of the access control area. When a 3D spatial information mapping image generation request is generated, the image acquisition unit requests an entrance image for the security zone, Dimensional space information image to the corresponding security zone area of the 3D spatial information image to generate and store the 3D spatial information mapping image and transmit the 3D spatial information mapping image to the security zone A 3D image mapping unit;
An output unit including a display unit for displaying a three-dimensional spatial information mapping image and an alarm sound generating unit for generating an alarm sound; And
And a 3D image control unit for receiving a 3D spatial information mapping image from the 3D image mapping unit upon receiving a 3D spatial information mapping video request event and outputting the received 3D spatial information mapping image through the output unit,
Wherein the 3D image mapping unit comprises:
A face detection unit for detecting an entrance and a face from an entrance image of the security zone input from the image acquisition unit, mapping an image in which a face is detected to the three-dimensional spatial information image, and if no entrance is detected from the images, Transmits a notification signal to the 3D image control unit,
The 3D image control < RTI ID =
When a passenger non-detection notification signal is received from the 3D image mapping unit, a passenger non-detection notification message is displayed at a location of the security zone displayed on the display unit of the output unit or an alarm sound is output through the alarm sound generation unit, Wherein the alarming means notifies the user that the passenger is not detected.
상기 출입통제부의 출입단말기는 출입자식별정보를 저장하는 매체로부터 출입자식별정보 획득 시 상기 매체를 제공하는 출입자를 촬영하는 출입단말기 카메라부를 더 포함하되,
상기 출입통제부는 상기 출입단말기 카메라부를 통해 획득된 출입자 영상을 상기 보안구역에 대한 보안구역 정보와 함께 상기 영상획득부로 제공하며,
상기 영상획득부는 상기 출입단말기 카메라부를 상기 보안구역 정보에 대응하는 보안구역에 대한 카메라 그룹에 포함하여 상기 보안구역 출입자 영상 요청 발생 시 상기 출입단말기 카메라부를 통해 촬영된 출입자 영상을 함께 보내는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템.
The method according to claim 1,
The entrance / exit terminal of the access control unit may further include an entrance / exit terminal camera unit for photographing a user who provides the medium when acquiring entrance identification information from a medium storing the entrance identification information,
The access control unit provides the entrance image obtained through the access terminal camera unit to the image acquisition unit together with the security zone information for the security zone,
Wherein the image acquiring unit includes the entrance and exit camera unit as a camera group for a security zone corresponding to the security zone information and sends an image of a passenger photographed through the entrance terminal camera unit when the security zone visitor image request is made, 3 - D spatial information access control and prevention system based on access control data.
상기 출입통제부로부터 출입인증 요청 발생 통지 시 상기 보안구역을 촬영하는 적어도 하나 이상의 카메라를 포함하는 카메라 그룹을 검색하고, 검색된 카메라 그룹으로부터 수신되는 출입자 영상을 저장하고, 보안구역 출입자 영상 요청 발생 시 해당 보안구역의 출입자 영상을 제공하는 영상획득부;
상기 출입통제영역의 구조와 동일하게 모델링된 3차원 공간정보 영상을 구비하고, 3D 공간정보 매핑 영상 생성 요청 발생 시 상기 영상획득부로 상기 보안구역에 대한 출입자 영상을 요청하고, 이에 응답하여 상기 보안구역에 대한 출입자 영상이 수신되면 상기 출입자 영상을 상기 3차원 공간정보 영상의 해당 보안구역 영역에 매핑하여 3차원 공간정보 매핑 영상을 생성하여 저장하고, 보안구역에 대한 3차원 공간정보 매핑 영상을 전송하는 3D 영상 매핑부;
3차원 공간정보 매핑 영상을 디스플레이하는 디스플레이부를 포함하는 출력부; 및
출입자 3D 공간정보 매핑 영상 요청 이벤트의 발생 시 상기 3D 영상 매핑부로 3D 공간정보 매핑 영상을 요청하여 수신받아 상기 출력부를 통해 출력하는 3D 영상 통제 제어부를 포함하되,
상기 3D 영상 매핑부는,
상기 영상획득부로부터 입력되는 출입자 영상이 셋 이상이면 상기 셋 이상의 영상들을 합성하여 출입자에 대한 3차원 가상 출입자 영상을 생성한 후 상기 3차원 공간정보 영상에 매핑하는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템.
And an access terminal installed at a door of the security zone of the access control area to obtain and output access identification information of an accessing person to access and notify that the access authentication request is generated when the accessing person identification information is input from the accessing terminal, An entrance control unit for performing authentication based on the identification information, opening the door at the time of successful authentication, and requesting creation of a 3D spatial information mapping image of a visitor;
A camera group including at least one camera that photographs the security zone when the entrance / exit authentication request occurrence notification is received from the access control unit, stores the entrance image received from the searched camera group, An image acquisition unit for providing an accessing image of a security zone;
Dimensional spatial information image modeled in the same manner as the structure of the access control area. When a 3D spatial information mapping image generation request is generated, the image acquisition unit requests an entrance image for the security zone, Dimensional space information image to the corresponding security zone area of the 3D spatial information image to generate and store the 3D spatial information mapping image and transmit the 3D spatial information mapping image to the security zone A 3D image mapping unit;
An output unit including a display unit for displaying a 3D spatial information mapping image; And
And a 3D image control unit for receiving a 3D spatial information mapping image from the 3D image mapping unit upon receiving a 3D spatial information mapping video request event and outputting the received 3D spatial information mapping image through the output unit,
Wherein the 3D image mapping unit comprises:
Wherein the three-dimensional virtual viewer image is generated by combining the three or more images when the viewer image input from the image acquisition unit is three or more, and then mapping the three-dimensional virtual viewer image to the three-dimensional spatial information image, 3 - D spatial information access control and prevention system.
상기 출입통제부로부터 출입인증 요청 발생 통지 시 상기 보안구역을 촬영하는 적어도 하나 이상의 카메라를 포함하는 카메라 그룹을 검색하고, 검색된 카메라 그룹으로부터 수신되는 출입자 영상을 저장하고, 보안구역 출입자 영상 요청 발생 시 해당 보안구역의 출입자 영상을 제공하는 영상획득부;
상기 출입통제영역의 구조와 동일하게 모델링된 3차원 공간정보 영상을 구비하고, 3D 공간정보 매핑 영상 생성 요청 발생 시 상기 영상획득부로 상기 보안구역에 대한 출입자 영상을 요청하고, 이에 응답하여 상기 보안구역에 대한 출입자 영상이 수신되면 상기 출입자 영상을 상기 3차원 공간정보 영상의 해당 보안구역 영역에 매핑하여 3차원 공간정보 매핑 영상을 생성하여 저장하고, 보안구역에 대한 3차원 공간정보 매핑 영상을 전송하는 3D 영상 매핑부;
3차원 공간정보 매핑 영상을 디스플레이하는 디스플레이부를 포함하는 출력부; 및
출입자 3D 공간정보 매핑 영상 요청 이벤트의 발생 시 상기 3D 영상 매핑부로 3D 공간정보 매핑 영상을 요청하여 수신받아 상기 출력부를 통해 출력하는 3D 영상 통제 제어부를 포함하되,
상기 3D 영상 매핑부는,
상기 영상획득부로부터 수신되는 출입자 영상이 둘 이상이면 상기 출입자 영상들 각각으로부터 출입자 및 출입자의 얼굴을 검출하고, 상기 출입자 영상 중 얼굴이 가장 명확하게 촬영된 출입자 영상을 3D 공간정보 영상에 매핑하는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템.
And an access terminal installed at a door of the security zone of the access control area to obtain and output access identification information of an accessing person to access and notify the user that the access authentication request has occurred upon inputting the accessing person identification information from the accessing terminal, An entrance control unit for performing authentication based on the identification information, opening the door at the time of successful authentication, and requesting creation of a 3D spatial information mapping image of a visitor;
A camera group including at least one camera that photographs the security zone when the entrance / exit authentication request occurrence notification is received from the access control unit, stores the entrance image received from the searched camera group, An image acquisition unit for providing an accessing image of a security zone;
Dimensional spatial information image modeled in the same manner as the structure of the access control area. When a 3D spatial information mapping image generation request is generated, the image acquisition unit requests an entrance image for the security zone, Dimensional space information image to the corresponding security zone area of the 3D spatial information image to generate and store the 3D spatial information mapping image and transmit the 3D spatial information mapping image to the security zone A 3D image mapping unit;
An output unit including a display unit for displaying a 3D spatial information mapping image; And
And a 3D image control unit for receiving a 3D spatial information mapping image from the 3D image mapping unit upon receiving a 3D spatial information mapping video request event and outputting the received 3D spatial information mapping image through the output unit,
Wherein the 3D image mapping unit comprises:
A face of a passenger and a passenger is detected from each of the passenger images when the passenger image received from the image acquiring unit is more than two and the passenger image of which face is captured most clearly is mapped to the 3D spatial information image 3D spatial information access control and prevention system based on access control data.
상기 출입통제부로부터 출입인증 요청 발생 통지 시 상기 보안구역을 촬영하는 적어도 하나 이상의 카메라를 포함하는 카메라 그룹을 검색하고, 검색된 카메라 그룹으로부터 수신되는 출입자 영상을 저장하고, 보안구역 출입자 영상 요청 발생 시 해당 보안구역의 출입자 영상을 제공하는 영상획득부;
상기 출입통제영역의 구조와 동일하게 모델링된 3차원 공간정보 영상을 구비하고, 3D 공간정보 매핑 영상 생성 요청 발생 시 상기 영상획득부로 상기 보안구역에 대한 출입자 영상을 요청하고, 이에 응답하여 상기 보안구역에 대한 출입자 영상이 수신되면 상기 출입자 영상을 상기 3차원 공간정보 영상의 해당 보안구역 영역에 매핑하여 3차원 공간정보 매핑 영상을 생성하여 저장하고, 보안구역에 대한 3차원 공간정보 매핑 영상을 전송하는 3D 영상 매핑부;
3차원 공간정보 매핑 영상을 디스플레이하는 디스플레이부를 포함하는 출력부; 및
출입자 3D 공간정보 매핑 영상 요청 이벤트의 발생 시 상기 3D 영상 매핑부로 3D 공간정보 매핑 영상을 요청하여 수신받아 상기 출력부를 통해 출력하는 3D 영상 통제 제어부를 포함하되,
상기 출입통제부는,
상기 출입인증 요청 발생 시 출입통제 데이터를 더 수집하여 3D 영상 통제 제어부로 전송하고,
상기 3D 영상 통제 제어부는,
상기 출입인증 요청이 발생한 보안구역의 상기 출입통제 데이터와 상기 보안구역에 대한 출입자 영상을 영상획득부로부터 수신받고, 상기 출입통제 데이터에 보안구역에 대한 출입자 영상을 매핑하여 저장하는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템.
And an access terminal installed at a door of the security zone of the access control area to obtain and output access identification information of an accessing person to access and notify that the access authentication request is generated when the accessing person identification information is input from the accessing terminal, An entrance control unit for performing authentication based on the identification information, opening the door at the time of successful authentication, and requesting creation of a 3D spatial information mapping image of a visitor;
A camera group including at least one camera that photographs the security zone when the entrance / exit authentication request occurrence notification is received from the access control unit, stores the entrance image received from the searched camera group, An image acquisition unit for providing an accessing image of a security zone;
Dimensional spatial information image modeled in the same manner as the structure of the access control area. When a 3D spatial information mapping image generation request is generated, the image acquisition unit requests an entrance image for the security zone, Dimensional space information image to the corresponding security zone area of the 3D spatial information image to generate and store the 3D spatial information mapping image and transmit the 3D spatial information mapping image to the security zone A 3D image mapping unit;
An output unit including a display unit for displaying a 3D spatial information mapping image; And
And a 3D image control unit for receiving a 3D spatial information mapping image from the 3D image mapping unit upon receiving a 3D spatial information mapping video request event and outputting the received 3D spatial information mapping image through the output unit,
The access control unit,
When the access authentication request is generated, the access control data is further collected and transmitted to the 3D image control controller,
The 3D image control control unit,
Wherein the entrance control data of the security zone in which the access authentication request is generated and the entrance image of the security zone are received from the image acquisition unit and the entrance image of the security zone is mapped and stored in the access control data, A 3D spatial information access control and prevention system based on control data.
상기 3D 영상 통제 제어부는,
출입자들 각각에 대해 정상 출입자식별정보 및 비정상 출입자식별정보를 저장하여 등록하고 있으며,
상기 출입통제 데이터에 포함된 출입자 식별정보가 정상 출입자식별정보인지, 비정상 출입자식별정보인지를 판단하고,
비정상 출입자식별정보이면 출입자 상황 판단 결과 정보로 긴급상황 통지 신호를 출입통제부로 전송하고,
상기 출입통제부는,
상기 긴급상황 통지 신호의 수신 시 긴급모드를 설정한 후 문을 개방하지 않고 대기 요청을 수행하는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역시스템.
8. The method of claim 7,
The 3D image control control unit,
For each of the passengers, the normal passenger identification information and the abnormal passenger identification information are stored and registered.
Judges whether the access identification information included in the access control data is normal accessor identification information or abnormal accessor identification information,
If the abnormal accessor identification information is received, the emergency situation notification signal is transmitted to the access control unit from the accessory status determination result information,
The access control unit,
And a waiting request is performed without opening the door after setting the emergency mode upon receiving the emergency notification signal, wherein the waiting request is performed based on access control data.
상기 출입통제부 및 영상획득부 중 적어도 하나는 적외선을 통해 출입자를 촬영하여 열화상 영상을 출력하는 열화상 카메라를 더 포함하되,
상기 3D 영상 통제 제어부는,
상기 출입통제부 및 영상획득부 중 적어도 하나로부터 출입자의 체온에 대한 출입자 체온 정보를 출입통제 데이터로서 수집하고, 수집된 출입자 체온 정보의 온도가 미리 설정된 기준 방역 온도를 초과하는지를 검사하고, 출입자의 체온이 상기 기준 방역 온도를 초과하면 상기 출입자를 방역 대상 출입허가 및 출입자 리스트에 등록하여 관리하는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역 시스템.
8. The method of claim 7,
At least one of the access control unit and the image acquiring unit further includes a thermal imaging camera that photographs a passenger through infrared rays and outputs a thermal image,
The 3D image control control unit,
Wherein the access control unit collects accessor's body temperature information corresponding to the body temperature of the accessor from at least one of the access control unit and the image acquisition unit as access control data and inspects whether the temperature of the collected accessor body temperature information exceeds a predetermined reference anti- Wherein the access control unit registers and manages the accessing party in the access prohibited access list and the accessing party list when the temperature exceeds the reference protection temperature.
영상획득부가 상기 출입통제부로부터 출입인증 요청 발생 통지 시 수신한 보안구역 정보의 보안구역을 촬영하는 적어도 하나 이상의 카메라를 통해 획득되는 출입자 영상을 상기 보안구역별로 저장하는 출입자 영상 저장 과정;
상기 출입통제부가 상기 출입인증 요청에 대해 수신된 출입자식별정보에 의한 인증을 수행하고 인증 성공 시 3D 영상 통제 제어부로 출입자 3D 공간정보 매핑 영상의 생성을 요청하는 3D 공간정보 매핑 영상 생성 요청 과정;
3D 영상 통제 제어부가 상기 출입통제부로부터 3D 공간정보 매핑 영상의 생성 요청 발생 시 상기 3D 영상 매핑부로 상기 보안구역에 대한 3D 공간정보 매핑 영상을 생성할 것을 요청하는 3D 공간정보 매핑 영상 생성 요청 과정;
상기 3D 영상 매핑부가 상기 3D 공간정보 매핑 영상의 생성 요청 발생 시 상기 보안구역에 대한 출입자 영상들을 영상획득부를 통해 획득하는 출입자 영상 획득 과정;
상기 3D 영상 매핑부가 3차원 공간정보 영상의 상기 보안구역의 위치에 상기 획득된 출입자 영상을 매핑하여 3D 공간정보 매핑 영상을 생성하여 3D 영상 통제 제어부로 제공하는 3D 공간정보 매핑 영상 생성 과정; 및
상기 3D 영상 통제 제어부가 상기 생성된 3D 공간정보 매핑 영상을 수신받아 출력부를 통해 출력하는 출력과정을 포함하는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역방법.
An access authentication request occurrence notification process for notifying that an access authentication request has occurred to an image acquisition unit when an access authentication request including access identification information is generated from an access terminal installed at a door of a security zone of an access control area of an access control area;
An entrance image storage step of storing an entrance image obtained through at least one camera that captures a security zone of the security zone information received by the image acquisition unit in the entrance authentication request occurrence notification from the entrance control unit,
A 3D spatial information mapping image generation request process in which the access control unit performs authentication based on the received entrance identification information received for the access authentication request and requests the 3D image control control unit to generate a 3D spatial information mapping image of a visitor when the authentication is successful;
A 3D spatial information mapping image generation request requesting a 3D image control control unit to generate a 3D spatial information mapping image for the secure area from the access control unit when the 3D spatial information mapping image generation request is generated;
A passenger image acquiring process for acquiring passenger images for the security zone through the image acquiring unit when the 3D image mapping unit generates a request for generation of the 3D spatial information mapping image;
A 3D spatial information mapping image generation step of generating a 3D spatial information mapping image by mapping the acquired entrance image to a location of the secure zone of the 3D image mapping unit and providing the 3D spatial information mapping image to the 3D image control and control unit; And
And outputting the 3D spatial information mapping image generated by the 3D image control and control unit through the output unit.
상기 출입인증 요청 발생 통지 과정은,
출입인증 요청 발생 시 출입단말기에 포함되어 있는 출입단말기 카메라부를 통해 출입인증을 요청한 출입자를 촬영한 출입자 영상을 획득하는 출입자 영상 획득 단계; 및
상기 출입인증 요청 발생 시 획득되는 보안구역 정보 및 상기 출입자 영상을 포함하는 출입인증 요청 발생 통지 정보를 영상획득부로 전송하는 출입인증 요청 발생 통지 단계를 포함하는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역방법.
11. The method of claim 10,
The access authentication request occurrence notification process includes:
A passenger image acquiring step of acquiring a passenger image of a passenger who has requested access authentication through an access terminal camera unit included in the access terminal when an access authentication request is generated; And
And an access authentication request occurrence notification step of transmitting, to the image acquisition unit, the access authentication request occurrence notification information including the security zone information obtained at the occurrence of the access authentication request and the entrance party image, 3 - D spatial information access control and prevention method.
상기 출입자 영상 저장 과정은,
영상획득부가 상기 출입통제부로부터 출입인증 요청 발생 통지 시 수신한 보안구역 정보의 보안구역을 촬영하는 적어도 하나 이상의 카메라를 하나의 카메라 그룹으로 간주하여 상기 카메라 그룹별로 획득되는 출입자 영상을 상기 보안구역별로 저장하는 보안구역 출입자 영상 획득 단계;
상기 출입인증 요청 발생 통지 시 수신되는 보안구역 정보에 의해 보안구역을 식별하는 보안구역 식별 단계;
상기 출입인증 요청 발생 통지 정보에 포함된 출입자 영상을 상기 식별된 보안구역에 매핑하여 저장하는 보안구역별 영상 그룹 생성 단계를 포함하는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역방법.
12. The method of claim 11,
The passenger image storage process includes:
The image acquiring unit regards at least one camera that captures a security zone of the security zone information received at the access authentication request occurrence notification from the access control unit as one camera group and stores the entrance image acquired for each camera group in the security zone A security zone accessing person image acquisition step;
A security zone identification step of identifying a security zone based on the security zone information received at the entrance authentication request occurrence notification;
And a security zone-based image group creation step of mapping the entrance image included in the access authentication request occurrence notification information to the identified security zone and storing the mapped image group. And prevention methods.
상기 3D 공간정보 매핑 영상 생성 과정은,
상기 3D 영상 매핑부가 상기 3D 공간정보 매핑 영상의 생성 요청 발생 시 상기 보안구역에 대한 영상들을 영상획득부로부터 획득하는 영상 획득 단계;
상기 3D 영상 매핑부가 획득된 영상들로부터 출입자 및 출입자의 얼굴을 검출하는 출입자 얼굴 검출 단계; 및
상기 3D 영상 매핑부가 상기 검출된 출입자 얼굴 영상을 상기 보안구역의 위치에 대응하는 상기 3차원 공간정보 영상의 위치에 매핑하여 3D 공간정보 매핑 영상을 생성하는 영상 생성 단계를 포함하는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역방법.
12. The method of claim 11,
The 3D spatial information mapping image generation process includes:
An image acquiring step of acquiring images of the secure zone from the image acquiring unit when the 3D image mapping unit generates a request for generating the 3D spatial information mapping image;
An entrance face detection step of detecting faces of a passenger and a passenger from the images obtained by the 3D image mapping unit; And
And an image generating step of generating a 3D spatial information mapping image by mapping the detected entrance face image to a position of the 3D spatial information image corresponding to the location of the security zone, 3 - D spatial information access control and prevention method based on control data.
상기 3D 영상 통제 제어부가 상기 3D 영상 매핑부로부터 출입자 미검출 통지 정보의 수신여부를 모니터링하고 상기 출입자 미검출 통지 정보의 수신 시 출력부를 통해 경보를 발생하는 출입자 미검출 경보 과정을 더 포함하되,
상기 3D 공간정보 매핑 영상 생성 과정은,
상기 출입자 얼굴 검출 단계에서 출입자가 검출되지 않으면 출입자 미검출 통지 정보를 3D 영상 통제 제어부로 통지하는 출입자 미검출 통지 단계를 더 포함하는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역방법.
14. The method of claim 13,
The 3D image control unit monitors whether the 3D image control unit receives the incoming / non-detection notification information from the 3D image mapping unit, and generates an alarm through the output unit upon reception of the incoming visitor detection notification information,
The 3D spatial information mapping image generation process includes:
And a passenger non-detection notification step of notifying the passenger non-detection notification information to the 3D image control control unit if the passenger is not detected in the passenger face detection step. And prevention methods.
상기 3D 공간정보 매핑 영상 생성 과정은,
상기 3D 영상 매핑부가 상기 3D 공간정보 매핑 영상의 생성 요청 발생 시 상기 보안구역에 대한 영상들을 영상획득부로부터 획득하는 영상 획득 단계;
상기 영상획득부로부터 획득된 출입자 영상이 둘 이상이면 상기 출입자 영상들 각각으로부터 출입자의 얼굴 및 얼굴 검출 비율을 검출하는 얼굴 검출 비율 검출 단계;
상기 출입자 영상 중 얼굴 검출 비율이 가장 높은 출입자 영상을 상기 보안구역의 위치에 대응하는 상기 3차원 공간정보 영상의 위치에 매핑하여 3D 공간정보 매핑 영상을 생성하는 영상 생성 단계를 포함하는 것을 특징으로 하는 출입통제 데이터를 기반으로 하는 3차원 공간정보 출입통제 및 방역방법.12. The method of claim 11,
The 3D spatial information mapping image generation process includes:
An image acquiring step of acquiring images of the secure zone from the image acquiring unit when the 3D image mapping unit generates a request for generating the 3D spatial information mapping image;
A face detection ratio detection step of detecting a face and a face detection ratio of a user from each of the entrance images if the entrance image obtained from the image acquisition unit is more than two;
And an image generating step of generating a 3D spatial information mapping image by mapping the entrance image having the highest face detection rate among the entrance images to the position of the 3D spatial information image corresponding to the location of the security zone Access control and prevention method based on access control data.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150118861 | 2015-08-24 | ||
KR20150118861 | 2015-08-24 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR101610657B1 true KR101610657B1 (en) | 2016-04-08 |
Family
ID=55908079
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020150162667A Expired - Fee Related KR101610657B1 (en) | 2015-08-24 | 2015-11-19 | Three-dimensional virtual entrance control and communicable disease control system and method based on entrance control data |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101610657B1 (en) |
Cited By (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107341430A (en) * | 2016-04-28 | 2017-11-10 | 鸿富锦精密电子(天津)有限公司 | Monitoring device, monitoring method and counting method |
KR101880100B1 (en) | 2018-03-26 | 2018-07-19 | 주식회사 큐앤에스시스템 | CCTV System for detecting Object |
WO2018230922A1 (en) * | 2017-06-13 | 2018-12-20 | 주식회사 파이브지티 | Door robot having security function and method for monitoring security using same |
KR102135633B1 (en) * | 2020-04-20 | 2020-08-26 | 김승호 | An access inspection system that is checking ID Card and body temperature of a person for entering the building |
US10818114B2 (en) | 2017-12-28 | 2020-10-27 | Shinhwa Co., Ltd. | Access right management method of access control system, and computer-readable recording medium recording program performing the method |
KR102205560B1 (en) | 2020-04-01 | 2021-01-20 | 최민영 | Security control device for health in school, system including it and its method |
KR102224014B1 (en) | 2020-09-10 | 2021-03-08 | 주식회사 다비스 | The door control device using the body temperature information |
KR102231505B1 (en) * | 2020-06-19 | 2021-03-24 | 김인근 | Isolation system for suspected infectious agents in train station |
CN112583902A (en) * | 2020-12-05 | 2021-03-30 | 众源科技(广东)股份有限公司 | Wisdom garden management and control system based on AR technique |
KR20210055473A (en) * | 2019-11-07 | 2021-05-17 | 정찬욱 | Identification system of accessor by management area and its operation method |
KR102284694B1 (en) * | 2021-02-08 | 2021-08-03 | 주식회사 마루에이치알 | System for providing concierge service using self-driving robot |
KR20220006849A (en) | 2020-07-09 | 2022-01-18 | 주식회사 유시스 | Access control system and method using quarantine scanner |
KR102353709B1 (en) * | 2020-08-24 | 2022-01-20 | (주)퀀텀봇 | Method for access control using quarantine information and access control system using the same |
KR20220023593A (en) | 2020-08-21 | 2022-03-02 | 주식회사 유시스 | Access control system with quarantine mode |
KR20220000856U (en) | 2020-10-12 | 2022-04-19 | 워크브레인(주) | Cat toilet interior cover and cat toilet with cover inside |
KR20220095736A (en) * | 2020-12-30 | 2022-07-07 | (주) 경성테크놀러지 | Cloud-based non-face-to-face heating element automatic detection system |
KR102422440B1 (en) * | 2021-01-29 | 2022-07-18 | 한화테크윈 주식회사 | Prevention Virus Spread Using Sensor |
KR20220107526A (en) * | 2021-01-25 | 2022-08-02 | 주식회사 포스코건설 | Apparatus and method for controlling access with measurement for body heat |
KR102495959B1 (en) * | 2022-06-07 | 2023-02-06 | 정재호 | Blocking system for preventing human resource accidents |
KR102520581B1 (en) * | 2022-08-29 | 2023-04-12 | 주식회사 심시스글로벌 | System for management space based on thumbnail using virtual camera view in digital twin environment |
KR20230077538A (en) * | 2021-11-25 | 2023-06-01 | 주식회사 조인트리 | Multi-use facility visitor image processing system for epidemiological investigation |
KR102658852B1 (en) * | 2023-10-31 | 2024-04-19 | 주식회사 베스트디지탈 | Access control system based on facial recognition |
KR102663258B1 (en) * | 2023-12-04 | 2024-05-03 | 김명기 | Entry and location management system and method using facial and behavior recognition |
EP4264579A4 (en) * | 2020-12-21 | 2024-10-30 | Smartcone Technologies Inc. | MULTIFACTOR AUTHENTICATION WITH A PORTABLE MOBILE DEVICE AND ACCESS CONTROL SYSTEMS |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101387628B1 (en) * | 2013-02-13 | 2014-04-24 | (주)금성보안 | Entrance control integrated video recorder |
KR101549599B1 (en) | 2014-06-02 | 2015-09-02 | 고권태 | Entrance Warning System of Restricted Areas Capable of Verification and Tracking Using Face Image Recognition and Tag Recognition |
-
2015
- 2015-11-19 KR KR1020150162667A patent/KR101610657B1/en not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101387628B1 (en) * | 2013-02-13 | 2014-04-24 | (주)금성보안 | Entrance control integrated video recorder |
KR101549599B1 (en) | 2014-06-02 | 2015-09-02 | 고권태 | Entrance Warning System of Restricted Areas Capable of Verification and Tracking Using Face Image Recognition and Tag Recognition |
Cited By (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107341430B (en) * | 2016-04-28 | 2021-01-29 | 鸿富锦精密电子(天津)有限公司 | Monitoring device, monitoring method and counting method |
CN107341430A (en) * | 2016-04-28 | 2017-11-10 | 鸿富锦精密电子(天津)有限公司 | Monitoring device, monitoring method and counting method |
WO2018230922A1 (en) * | 2017-06-13 | 2018-12-20 | 주식회사 파이브지티 | Door robot having security function and method for monitoring security using same |
US10818114B2 (en) | 2017-12-28 | 2020-10-27 | Shinhwa Co., Ltd. | Access right management method of access control system, and computer-readable recording medium recording program performing the method |
KR101880100B1 (en) | 2018-03-26 | 2018-07-19 | 주식회사 큐앤에스시스템 | CCTV System for detecting Object |
KR20210055473A (en) * | 2019-11-07 | 2021-05-17 | 정찬욱 | Identification system of accessor by management area and its operation method |
KR102298761B1 (en) * | 2019-11-07 | 2021-09-03 | 정찬욱 | Identification system of accessor by management area and its operation method |
KR102205560B1 (en) | 2020-04-01 | 2021-01-20 | 최민영 | Security control device for health in school, system including it and its method |
KR102135633B1 (en) * | 2020-04-20 | 2020-08-26 | 김승호 | An access inspection system that is checking ID Card and body temperature of a person for entering the building |
KR102231505B1 (en) * | 2020-06-19 | 2021-03-24 | 김인근 | Isolation system for suspected infectious agents in train station |
KR20220006849A (en) | 2020-07-09 | 2022-01-18 | 주식회사 유시스 | Access control system and method using quarantine scanner |
KR20220023593A (en) | 2020-08-21 | 2022-03-02 | 주식회사 유시스 | Access control system with quarantine mode |
KR102353709B1 (en) * | 2020-08-24 | 2022-01-20 | (주)퀀텀봇 | Method for access control using quarantine information and access control system using the same |
KR102224014B1 (en) | 2020-09-10 | 2021-03-08 | 주식회사 다비스 | The door control device using the body temperature information |
KR20220000856U (en) | 2020-10-12 | 2022-04-19 | 워크브레인(주) | Cat toilet interior cover and cat toilet with cover inside |
CN112583902A (en) * | 2020-12-05 | 2021-03-30 | 众源科技(广东)股份有限公司 | Wisdom garden management and control system based on AR technique |
EP4264579A4 (en) * | 2020-12-21 | 2024-10-30 | Smartcone Technologies Inc. | MULTIFACTOR AUTHENTICATION WITH A PORTABLE MOBILE DEVICE AND ACCESS CONTROL SYSTEMS |
KR20220095736A (en) * | 2020-12-30 | 2022-07-07 | (주) 경성테크놀러지 | Cloud-based non-face-to-face heating element automatic detection system |
KR102497445B1 (en) * | 2020-12-30 | 2023-02-08 | (주) 경성테크놀러지 | Cloud-based non-face-to-face heating element automatic detection system |
KR20220107526A (en) * | 2021-01-25 | 2022-08-02 | 주식회사 포스코건설 | Apparatus and method for controlling access with measurement for body heat |
KR102586615B1 (en) * | 2021-01-25 | 2023-10-06 | (주)포스코이앤씨 | Apparatus and method for controlling access with measurement for body heat |
KR102422440B1 (en) * | 2021-01-29 | 2022-07-18 | 한화테크윈 주식회사 | Prevention Virus Spread Using Sensor |
KR102284694B1 (en) * | 2021-02-08 | 2021-08-03 | 주식회사 마루에이치알 | System for providing concierge service using self-driving robot |
KR20230077538A (en) * | 2021-11-25 | 2023-06-01 | 주식회사 조인트리 | Multi-use facility visitor image processing system for epidemiological investigation |
KR102673221B1 (en) * | 2021-11-25 | 2024-06-10 | 주식회사 조인트리 | Multi-use facility visitor image processing system for epidemiological investigation |
KR102495959B1 (en) * | 2022-06-07 | 2023-02-06 | 정재호 | Blocking system for preventing human resource accidents |
KR102520581B1 (en) * | 2022-08-29 | 2023-04-12 | 주식회사 심시스글로벌 | System for management space based on thumbnail using virtual camera view in digital twin environment |
KR102658852B1 (en) * | 2023-10-31 | 2024-04-19 | 주식회사 베스트디지탈 | Access control system based on facial recognition |
KR102663258B1 (en) * | 2023-12-04 | 2024-05-03 | 김명기 | Entry and location management system and method using facial and behavior recognition |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101610657B1 (en) | Three-dimensional virtual entrance control and communicable disease control system and method based on entrance control data | |
TWI684923B (en) | Liveness detection for antispoof face recognition | |
US9779614B2 (en) | System and method of alerting CMS and registered users about a potential duress situation using a mobile application | |
CA2713320C (en) | Method and apparatus for detecting behavior in a monitoring system | |
KR101492799B1 (en) | Entrance control integrated video recording system and method thereof | |
KR102012672B1 (en) | Anti-crime system and method using face recognition based people feature recognition | |
KR102467814B1 (en) | Integrated security system for apartment complexes based on artificial intelligence image analysis | |
US10419728B2 (en) | Monitoring system having personal information protection function and method thereof | |
JP5550974B2 (en) | Suspicious person detection device | |
EP3828837B1 (en) | Frictionless security processing | |
CN111127824A (en) | Early warning method, device and system | |
KR20240136898A (en) | Method for detecting anomalous behavior using deep learning based on de-identified data | |
KR102345479B1 (en) | Building entrance control system | |
KR20170013597A (en) | Method and Apparatus for Strengthening of Security | |
JP5524250B2 (en) | Abnormal behavior detection device, monitoring system, abnormal behavior detection method and program | |
EP3109837A1 (en) | System and method of smart incident analysis in control system using floor maps | |
WO2010137801A2 (en) | Crime prevention system and method using monitor | |
JP2015079472A (en) | Security system for architectural structure | |
KR101042368B1 (en) | Security system and control method | |
JP5611729B2 (en) | Monitoring device | |
US20240087388A1 (en) | Camera with in-built access control | |
KR101053474B1 (en) | Access control system and method | |
KR20170073904A (en) | Household security system using home network | |
US20240331388A1 (en) | Method, apparatus, and program for processing video information | |
US20250139976A1 (en) | Image processing apparatus, image processing method, and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20151119 |
|
PA0201 | Request for examination | ||
PA0302 | Request for accelerated examination |
Patent event date: 20151124 Patent event code: PA03022R01D Comment text: Request for Accelerated Examination Patent event date: 20151119 Patent event code: PA03021R01I Comment text: Patent Application |
|
E902 | Notification of reason for refusal | ||
PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20160308 Patent event code: PE09021S01D |
|
E701 | Decision to grant or registration of patent right | ||
PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20160401 |
|
GRNT | Written decision to grant | ||
PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20160404 Patent event code: PR07011E01D |
|
PR1002 | Payment of registration fee |
Payment date: 20160404 End annual number: 3 Start annual number: 1 |
|
PG1601 | Publication of registration | ||
FPAY | Annual fee payment |
Payment date: 20190329 Year of fee payment: 4 |
|
PR1001 | Payment of annual fee |
Payment date: 20190329 Start annual number: 4 End annual number: 4 |
|
PR1001 | Payment of annual fee |
Payment date: 20200331 Start annual number: 5 End annual number: 5 |
|
PC1903 | Unpaid annual fee |
Termination category: Default of registration fee Termination date: 20230115 |