KR101634242B1 - 블랙박스의 유휴시간을 활용한 차량용 블랙박스 및 그 제어방법 - Google Patents

Abstract

본 발명은 영상데이터를 분석하여 차량용 블랙박스의 저장부의 저장공간을 확함으로써 영상 녹화시간을 증대시킬 수 있는 블랙박스의 유휴시간을 활용한 차량용 블랙박스 및 그 제어방법에 관한 것이다. 본 발명의 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스는 차량의 주변환경을 촬영하여 영상데이터를 취득하는 카메라부; 상기 카메라부에서 취득된 영상데이터를 저장하는 저장부; 및 상기 차량의 주차모드 또는 주행모드 중 어느 하나를 선택하고, 상기 주차모드가 선택될 경우 상기 저장부에 저장된 상기 영상데이터를 재가공하여 다시 상기 저장부로 저장시키는 컨트롤러부를 포함한다. 따라서, 컨트롤러부가 최소한으로 동작하는 주차모드시에, 부가기능인 이벤트 관련 영상데이터 추출, 암호화, 모자이크 처리, 해상도 변환, 및 화질 보정과 같은 부가기능을 수행함으로써 부가기능 작업 처리의 신속성과 정확성을 향상시킬 수 있으며, 블랙박스의 과부하를 방지할 수 있다. 또한, 상시 녹화를 수행하는 주행모드시 영상처리와 같은 부가 작업을 수행하지 않기 때문에 작은 용량의 메인콘트롤러부 등 블랙박스 용량을 최소화 할 수 있다. 또한, 차량의 주차모드와 같은 블랙박스의 유휴시간 때에 차량의 주행모드시 저장된 영상데이터를 추출하여 분석하고 영상데이터 용량을 축소하기 위한 데이터 재가공 작업을 수행하여 영상 녹화 저장 공간을 증대시킬 수 있다.

Description

블랙박스의 유휴시간을 활용한 차량용 블랙박스 및 그 제어방법{Black box for car using the idle time of the black box and its control method}

본 발명은 차량용 블랙박스 저장부에 저장된 영상데이터를 재가공하여 저장공간을 확보함으로써 영상 녹화시간을 증대시킬 수 있는 블랙박스의 유휴시간을 활용한 차량용 블랙박스 및 그 제어방법에 관한 것이다.

일반적으로 차량용 영상기록 장치(자동차용 영상 사고기록장치, Video Event Data Recorder; VEDR)는 충돌 전후의 사고를 기록해 사고 정황 파악에 필요한 정보를 제공한다.

차량용 블랙박스는 카메라를 이용하여 차량 주변을 촬영한 영상 데이터를 기록 저장하는 방식이 주를 이루고 있다.

최근 차량용 블랙박스는 카메라 기기의 발전에 따라 4채널(전, 후, 및 측방향)카메라가 장착되거나, HD급 또는 FULL HD급의 고화질 영상을 출력하는 카메라가 장착된 차량용 블랙박스가 출시되고 있는데, 차량 주변의 모든 화면이 고화질 영상을 제공하여 사고 발생상황에서 더욱 정확한 정황을 판별할 수 있는 영상데이터를 제공할 수 있다.

또한, 차량용 블랙박스는 차량 주변을 상시 녹화하면서 가속도 센서 및 영상데이터의 모션 분석 등을 통한 이벤트 감지를 하고 있으며, 이벤트 감지와 관련된 영상데이터 추출, 암호화, 해상도 변환 및 압축, 화질보정과 같은 부가기능을 추가로 수행하는 것이 필요하지만 용량이 큰 메인콘트롤러가 요구되어 부가기능을 사용할 수 없는 문제점이 있다.

그리고, 차량용 블랙박스의 카메라가 4채널이거나 지능화된 고화질의 영상을 저장할 경우, 영상데이터가 저장부의 저장공간을 많이 차지하게 되어 결국 저장공간 부족으로 영상 녹화시간이 단축되는 문제점이 있었다.

대한민국공개특허 제10-2013-0017497호(공개일자 2013.02.20.)

본 발명은 전술한 문제점들을 해결하기 위한 것으로서, 본 발명이 해결하고자 하는 과제는 주행모드에서 이벤트 감지 및 상시 녹화 기능만 수행하도록 하고, 부가기능인 이벤트 발생 시점의 추출, 이벤트 감지와 관련된 영상데이터 추출, 암호화, 해상도 변환 및 화질보정, 압축 저장 등은 블랙박스의 유휴시간인 주차모드에서 원활하게 수행할 수 있는 차량용 블랙박스를 제공하는 것이다.

또한 주차 모드에서 부가기능 수행 시 영상분석을 통해 의미 없는 정보는 더 낮은 해상도로 재압축하여 저장함으로서 더 많은 저장 공간을 확보할 수 있다.

상기한 과제를 달성하기 위한 본 발명의 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스는 차량의 주변환경을 촬영하여 영상데이터를 취득하는 카메라부; 상기 카메라부에서 취득된 영상데이터를 저장하는 저장부; 및 상기 차량의 주차모드 또는 주행모드 중 어느 하나를 선택하고, 상기 주차모드가 선택될 경우 상기 저장부에 저장된 상기 영상데이터를 재가공하여 다시 상기 저장부로 저장시키는 컨트롤러부를 포함한다.

상기 영상 데이터를 재가공하여 다시 상기 저장부로 저장되는 영상데이터는 재가공 이전보다 더 작은 저장용량인 것을 포함할 수 있다.

상기 영상데이터의 재가공은 주차모드시에 저장된 영상데이터로부터 이벤트 발생이 감지된 시점을 태깅할 수 있다.

상기 영상데이터의 재가공은 주차모드시에 저장된 영상데이터로부터 이벤트 발생에 관련한 영상 데이터를 선택적으로 추출하여 해상도를 변환할 수 있다.

상기 영상데이터의 재가공은 상기 저장부에 저장된 영상데이터로 프라이버시 정보를 암호화하는 것을 포함할 수 있다.

상기 영상데이터의 재가공은 주차모드시에 저장된 영상데이터로 개인 신상 정보를 암호화할 수 있다.

상기 컨트롤러부는 상기 영상데이터에서 이벤트 발생이 감지된 시점을 전,후로 미리 설정된 시간 동안만 이벤트 발생과 관련된 정보를 상기 영상데이터에서 추출할 수 있다.

상기 컨트롤러부는 상기 영상데이터에서 이벤트 발생이 감지된 시점을 기준으로 미리 설정된 시간 동안을 제외한 나머지 영상데이터는 초기에 취득된 해상도 보다 낮은 해상도로 변환할 수 있다.

상기 컨트롤러부는 상기 영상데이터에서 이벤트 발생을 감지한 시점을 기준으로 미리 설정된 시간 동안의 영상데이터는 선명한 화질을 제공하도록 화질을 보정할 수 있다.

상기 영상데이터의 재가공은 주차모드시에 저장된 영상데이터로부터 이벤트 발생에 관련한 영상 데이터를 선택적으로 추출하여 해상도를 변환함에 있어, 화상 프레임의 일부인 관심 영역은 고해상도로 변환하고, 비관심영역은 저해상도로 변환할 수 있다.

상기 카메라부는 ISP부를 포함하며, ISP부는 실시간 입력되는 디지털 영상데이터를 임시 저장하는 버퍼 메모리, 상기 버퍼 메모리에 시간적 전?후 관계에서 먼저 저장된 디지털 영상데이터와 나중에 입력되는 차기 디지털 영상데이터의 비교에 기초하여 이벤트 발생여부를 판단하는 비교기, 및 상기 디지털 영상데이터를 이미지 신호처리 하는 ISP를 더 포함할 수 있다.

상기 비교기는 이벤트가 발생하는 것으로 판단하는 경우, 차단신호를 발생시켜 상기 컨트롤러부로 전달하며, 상기 비교기로부터 차단신호를 전달받은 상기 컨트롤러부는, 상기 디지털 영상데이터를 재가공하는 것을 중단하고, 상기 카메라부를 제어하여 이벤트 발생과 관련된 영상을 취득할 수 있다.

상기 비교기가 이벤트 발생이 없는 경우로 판단하는 차단신호 미 발생 기간 동안에 실시간 입력되는 디지털 영상데이터는 버퍼메모리 또는 임시 저장부에 저장될 수 있다.

상기 컨트롤러부는 상기 영상데이터의 재가공이 완료될 경우 상기 컨트롤러부의 전력 소모량이 감소되도록 슬립 모드로 전환될 수 있다.

본 발명의 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 제어방법은 차량의 주변환경을 촬영하여 영상테이터를 취득하는 취득단계; 상기 차량의 상태를 감지하는 감지단계; 상기 감지단계에서 감지된 정보에 따라 주차모드 또는 주행모드 중 어느 하나를 선택하는 선택단계; 상기 차량의 이벤트가 감지된 경우, 상기 영상데이터를 컨트롤러부에서 처리하는 처리단계; 상기 영상데이터를 저장부에 저장하는 저장단계; 및 상기 주차모드가 선택될 경우, 상기 저장부에 저장된 상기 영상데이터를 재가공하여 다시 상기 저장부로 저장시키는 재가공단계를 포함한다.

상기 재가공단계는 상기 저장부에 저장된 영상데이터로부터 이벤트 발생이 감지된 시점을 태깅하는 단계를 포함할 수 있다.

상기 재가공단계는 상기 저장부에 저장된 영상데이터로부터 이벤트 발생에 관련한 영상 데이터를 선택적으로 추출한 후, 해상도를 변환하는 단계를 포함할 수 있다.

상기 재가공단계는 상기 저장부에 저장된 영상데이터에서 개인 신상 정보를 암호화하는 단계를 포함할 수 있다.

상기 재가공단계는 상기 영상데이터에서 이벤트 발생이 감지된 시점을 전,후로 미리 설정된 시간 동안만 이벤트 발생과 관련된 정보를 상기 영상데이터에서 추출하는 단계를 포함할 수 있다.

상기 재가공단계는 상기 영상데이터에서 이벤트 발생이 감지된 시점을 기준으로 미리 설정된 시간 동안을 제외한 나머지 영상데이터는 초기에 취득된 해상도 보다 낮은 해상도로 변환하는 단계를 포함할 수 있다.

상기 컨트롤러부는 이벤트 발생을 감지한 시점을 기준으로 미리 설정된 시간 동안의 영상데이터는 선명한 화질을 제공하도록 화질을 보정하는 단계를 포함할 수 있다.

상기 재가공단계는 상기 저장부에 저장된 영상데이터로부터 이벤트 발생에 관련한 영상 데이터를 선택적으로 추출한 후, 해상도를 변환함에 있어, 촬영된 영상의 화상프레임의 일부인 관심 영역은 고해상도 변환하고, 화상프레임의 다른 일부인 비관심영역은 저해상도로 변환하는 단계를 포함할 수 있다.

상기 재가공단계는 상기 비교기가 이벤트 발생여부를 감지하는 단계를 더 포함할 수 있다.

상기 재가공단계는 상기 비교기로부터 차단신호가 상기 컨트롤러부로 전달되면, 디지털 영상데이터를 재가공하는 것을 중단하고, 상기 카메라부를 제어하여 영상을 취득할 수 있다.

상기 프라이버시 정보는 사람의 얼굴, 차량의 번호판일 수 있다.

본 발명에 따르면, 컨트롤러부가 최소한으로 동작하는 주차모드시에, 부가기능인 이벤트 관련 영상데이터 추출, 암호화, 모자이크 처리, 해상도 변환, 및 화질 보정과 같은 부가기능을 수행함으로써 부가기능 작업 처리의 신속성과 정확성을 향상시킬 수 있으며, 블랙박스의 과부하를 방지할 수 있다.

또한, 상시 녹화를 수행하는 주행모드시 영상처리와 같은 부가 작업을 수행 하지 않기 때문에 작은 용량의 컨트롤러부 등 블랙박스 용량을 최소화할 수 있다.

또한, 차량의 주차모드와 같은 블랙박스의 유휴시간 때에 차량의 주행모드시 저장된 영상데이터를 추출하여 분석하고 영상데이터 용량을 축소하기 위한 데이터 재가공 작업을 수행하여 영상 녹화 저장 공간을 증대시킬 수 있다.

도 1의 (a)는 본 발명의 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 개략적인 구성을 도시한 블럭도이다.
도 1의 (b)는 본 발명의 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 구성이 주차모드에서 구동하는 것을 개략적인 나타낸 블럭도이다 .
도 2는 본 발명의 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 구성요소인 카메라부의 개략적인 구성을 도시한 블록도 이다.
도 3은 본 발명의 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스 제어방법을 개략적으로 도시한 순서도이다.
도 4는 본 발명의 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스 제어방법의 백그라운드 코딩 작업을 개략적으로 도시한 도면이다.
도 5는 본 발명의 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스 제어방법의 영상데이터분석 단계를 개략적으로 도시한 순서도이다.
도 6은 본 발명의 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스 제어방법에서 재가공단계의 일례를 도시한 도면이다.

이하 본 발명의 실시예를 첨부된 도면을 참조하여 설명한다.

[ 실시예1 ]

먼저, 본 발명의 제1 실시예에 따른 블랙박스의 유휴시간은 하기에 설명될 센서부(200)에 의해 주차모드로 변경되어 주차모드를 유지하는 시간을 의미한다.

도 1에 도시된 바와 같이, 본 발명의 제1 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스는 카메라부(100)를 포함할 수 있다.

이 카메라부(100)는 차량의 주변환경을 촬영하여 영상데이터를 취득할 수 있고, CIS(CMOS Image Sensor, 110), 및 ISP부(Image Signal Processor, 120)를 포함하여 구성될 수 있다.

CIS(110)는 카메라부(100)의 렌즈를 통해 들어오는 이미지 광을 감지해서 그 세기의 정도를 아날로그 전기신호 및 디지털 영상데이터로 변환할 수 있다.

한편, CIS(110)는 빛을 전기신호로 변환해 주는 이미지 센서(Image Sensor)의 종류 중 CCD 이미지 센서(Charge-coupled Device Image Sensor)로 대치하여 구성될 수도 있다.

그리고, ISP부(120)는 CIS(110)에서 변환된 디지털 영상 데이터를 처리 한 후 컨트롤러부(300)에 영상데이터를 제공할 수 있다.

한편, ISP부(120)는 CIS(110)와 하나의 반도체 칩으로 구현될 수 있다.

본 발명의 제1 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스는 센서부(200)를 포함할 수 있다.

이 센서부(200)는 차량의 상태를 감지할 수 있도록 차량에 장착된 적어도 하나 이상의 센서가 센서신호를 발생시켜 하기에 설명될 컨트롤러부(300)에 제공할 수 있다.

센서부(200)는 인체감지센서, 거리센서, 속도센서, 가속도센서, 충돌감지센서 중에서 어느 하나 또는 둘 이상으로 구성될 수 있으며, 인체감지, 거리감지, 속도감지, 가속도감지, 충격감지의 기능을 수행하기 위해, 레이저, 초음파, GPS 위성신호 등이 이용될 수도 있다.

인체감지센서는 적외선으로 차량 주변에 있는 인체, 동물 등 사물의 움직임을 감지하면 센서신호를 발생할 수 있다.

거리센서는 적외선, 초음파 등을 이용하여 차량과 피측정물체 간의 거리를 측정하여 센서신호를 발생할 수 있다.

속도감지는 GPS 위성신호가 이용될 수 있다.

가속도센서는 이동하는 차량의 가속도나 충격의 세기를 측정하여 센서신호를 발생할 수 있다.

또한, 가속도센서는 가속도를 적분함으로써 속도를 얻을 수도 있기 때문에 가속도센서를 이용하여 속도를 측정할 수도 있다.

충격감지센서는 차량에 외부로부터 물리적 파괴나 충격이 가해지는 것을 감지하여 센서신호를 발생할 수 있다. 물론 가속도 센서를 활용할 수도 있다.

한편, 센서부(200)는 카메라부(100)에 의해 구현될 수도 있다.

예컨대, 카메라부(100)는 카메라부(100)가 촬영한 영상에서 사물의 움직임에 의한 픽셀 값의 변화를 판단한 정보를 기초로 센서신호를 발생하는 형태로 센서부(200)의 기능을 수행할 수도 있다.

본 발명의 제1 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스는 컨트롤러부(300)를 포함할 수 있다.

이 컨트롤러부(300)는 프로세서(320)와 메모리(330)로 구성될 수 있으며, 메모리(330)에 저장된 영상을 처리하는 프로그램에 의해 영상데이터를 처리할 수 있다.

예컨대, 컨트롤러부(300)는 영상데이터를 컴퓨터에서 읽을 수 있는 영상으로 코딩 또는 디코딩하거나, 영상데이터의 화질을 보정하는 공지된 알고리즘을 통해 영상을 처리할 수 있다.

그리고, 컨트롤러부(300)는 센서부(200)에서 감지된 정보에 따라 주행모드와 주차모드를 선택할 수 있다.

예컨대, 컨트롤러부(300)는 차량의 속도가 0인 상태가 미리 설정된 시간 이상이 되면 주차모드를 선택하고, 차량의 속도가 0을 초과하면 주행모드를 선택할 수 있다.

또한, 컨트롤러부(300)는 차량의 시동이 꺼진 경우를 센서부(200)가 감지하여 주차모드를 선택할 수도 있다.

한편, 컨트롤러부(300)가 주행모드를 선택하면 프로세서(320)가 수신된 영상신호를 처리할 수 있도록 CODEC(310)이 영상신호를 디지털신호로 변환 압축하고, 영상처리부(340)는 센서부(200)가 감지한 센서정보에 따라 영상데이터에 이벤트 발생을 감지한 시점의 메타데이터를 포함시키는 형태로 처리하여, 하기에 설명될 저장부(400)에 저장할 수 있다.

그리고 컨트롤러부(300)는 이벤트의 발생여부를 판단할 수 있다.

즉, 센서부(200)에 의해 차량의 주변에 움직임이 감지되거나, 충격이 감지되어 센서신호가 발생되면, 컨트롤러부(300)가 움직임 정도나 충격의 정도에 따라 이벤트 발생여부를 판단할 수 있다.

한편, 컨트롤러부(300)에서 이벤트가 발생 되었다고 판단되면, 이벤트가 발생된 시점을 기준으로 전, 후로의 미리 설정된 시간 동안의 영상데이터는 저장부에서 삭제되지 않도록 영상데이터를 처리할 수 있다.

따라서, 차량의 사고 발생시 더욱 정확한 정보를 확보할 수 있도록 이벤트가 발생한 시점을 전,후로 미리 설정된 시간 동안만 이벤트 발생과 관련된 정보를 영상데이터에서 추출할 수 있다.

예컨대, 미리 설정된 시간을 30초로 설정하면, 컨트롤러부(300)는 이벤트 발생을 감지한 시점을 기준으로 30초 전, 30초 후 총 60초 동안의 영상데이터에서 이벤트 발생과 관련된 정보를 메타데이터의 검색을 통해서도 쉽게 추출할 수 있다.

이때, 메타데이터에 의해 검색 가능한 것은 영상데이터에 취득된 차량의 번호판, 사람의 얼굴, 이정표, 인접 간판의 전화번호, 상호 등이 될 수 있다.

본 발명의 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스는 저장부(400)를 포함할 수 있다.

이 저장부(400)는 컨트롤러부(300)가 처리한 영상데이터를 임시적 또는 영구적으로 저장할 수 있다.

이때, 저장부(400)는 컨트롤러부(300)에 영상데이터를 저장하기 위해 별도로 구비된 메모리, 또는 네트워크 통신으로 저장하는 네트워크저장매체(NAS), 또는 슬롯에 탈착 가능한 메모리카드, HDD 등과 같은 외부저장매체, 또는 DVD, BLUE-RAY 등과 같은 미디어저장매체 등으로 구현될 수 있다.

이하, 본 발명의 제1 실시예에 따른 차량용 블랙박스의 제어방법을 설명한다.

도 2 및 도 3에 도시된 바와 같이, 일반적으로 차량용 블랙박스는 주행 모드에서 모션 감지 및 충격감지와 같은 이벤트 감지, 상시 녹화와 같은 기본 기능을 수행한다. 주차 모드시에는 모션 감지 및 충격감지와 같은 이벤트 감지 기능만 수행할 뿐 상시 녹화를 하지 않으며, 이벤트 발생시에만 녹화를 수행한다. 그러므로 이벤트가 발생하지 않는 한 컨트롤러부(300)는 유휴(idle) 상태에 놓여 있다.

통상 차량용 블랙박스의 경우 하루에 약 2시간 정도만 주행 모드가 되고, 나머지 22시간은 주차 모드로 동작 한다.

그러나, 종래에는 주차 모드시에 모션 감지 및 충격감지와 같은 이벤트 감지 기능만 수행할 뿐 상시 녹화를 하지 않는데도, 카메라부(100) 및 컨트롤러부는 온 상태에 놓여 있어 주행 모드에 비해 상당한 전력소모를 하고 있다.

따라서, 실질적인 전력소모에 큰 차이가 없는 주차시에 영상처리와 같은 부가작업을 수행하면 동일한 블랙박스 용량으로도 주요한 부가 기능들을 수행할 수 있는 이점이 있다.

또한, 주차 모드시에 여유 있는 컨트롤러부(300)를 활용하여, 주행 모드시에 저장된 영상을 분석하여 사건 발생시점을 추출한 후 거기에 태깅(Tagging)을 하거나, 움직이는 물체 검출 및 검출 시각, 움직이는 물체 궤적, 물체 색깔, 물체 형태, 물체 변화 여부 등에 대한 영상을 분석하고 자동추출하여 MPEG-7 메타데이터 또는 일반적인 XML 메타데이터 등 다양한 공지기술을 활용하여 기술한다.

컨트롤러부(300)의 메모리(330)에 저장된 영상 감지 및 인식 알고리즘은 카메라부(100)가 촬영한 영상의 분석을 통해 차량, 사람, 도로, 차선, 건널목과 같은 물체의 종류에 대한 구분 감지 및 인식, 그리고 차량간 거리, 사람과 차량간 거리, 차선 이탈 감지 및 인식, 사람의 차량 전용차선 진입, 전진, 후진, 차선 변경 등 물체의 움직임 궤적의 불규칙 인식, 도로에 굴러다니는 물체 탐지, 영상 이미지를 수치화한 번호판 인식, 신호 위반 차량 감지 및 인식할 수 있다. 또한, 카메라부(100)의 영상 촬영 시간, 촬영 위치 정보도 물론, 센서부(200)에서 감지한 이벤트의 발생시점을 분석하는 것도 포함한다.

따라서, 전체 영상 중에서 의미 있는 이벤트 발생 관련 정보를 태그나 메타데이터 검색어로 쉽고 빠르게 검색하여 추출할 수 있다.

영상 감지 및 인식 알고리즘 등의 영상분석을 통해 추적된 차량의 충돌 등 특이한 사건 발생 시점을 추출하여 메타데이터 형태로 태깅하고, 메타데이터의 검색을 통해 이벤트 발생 시간에 녹화된 영상의 차량 충돌과정, 차량 번호판 및 이정표, 위치 인식 등을 통해 전체적으로 의미 있는 정보를 추출할 수 있다.

다음으로, 영상의 가공은 충돌 이벤트, 번호판, 이정표 등 의미 있는 영상을 초기의 해상도 이상으로 보정하여 재압축한 후 저장하며, 불필요한 영상은 해상도를 낮추어 재압축하여 저장하므로써, 영상 녹화시간을 확대할 수 있도록 재가공 한다.

이와 같이 데이터 처리 부하가 적은 주차모드 시에 저장된 데이터를 불러내서 영상정보 감지 및 인식, 이벤트 발생시점 등 특정 정보를 추출하여 태깅 등 사건의 태깅, 이벤트 발생 관련 정보 추출, 및, 암호화 또는 모자이크 처리, 압축 저장 등을 수행하는 백그라운드 코딩작업을 수행한다.

즉, 주행모드 시에는 동적인 영상으로 인해 영상데이터를 분석할 량이 방대해져 컨트롤러부(300)에 과부하가 발생하기 때문에, 정적인 영상데이터가 많이 취득되어 상대적으로 영상데이터를 분석할 량이 적은 주차모드인 때 영상데이터를 분석하는 백그라운드 코딩작업을 수행함으로써, 블랙박스를 효율적으로 운용할 수 있다.

이러한, 백그라운드 코딩작업은 저장부(400)에 저장된 영상데이터를 컨트롤러부(300)가 불러들여 영상데이터를 분석 한 후, 다시 저장부(400)로 저장시키는 형태로 수행될 수 있다.

도 4에 도시된 바와 같이, 백그라운드 코딩작업을 구체적으로 살펴보면, 사건의 태깅 작업을 포함할 수 있다.

사건의 태깅은 저장부(400)에 저장되어 있던 영상데이터에서 이벤트 발생이 감지된 시점을 추출하는 형태로 수행될 수 있다.

예컨대, 영상데이터에 포함된 센서부(200)에 의해 발생된 이벤트의 발생시점을 추출하거나, 저장된 영상데이터를 분석하여 센서부(200)에서 발생된 이벤트의 발생시점 외의 다른 이벤트의 발생시점을 추출할 수 있다.

여기서, 센서부(200)에서 발생된 이벤트와는 다른 이벤트는 센서신호에 의한 이벤트가 아닌, 객체정보를 분석하여 판단되는 이벤트 예컨대, 영상데이터에서 임의의 객체가 일정 시간 동안 차량의 주변에서 이동하지 않거나, 갑자기 객체가 이동하는 등과 같이, 영상데이터에 녹화된 객체정보를 분석하여 판단되는 이벤트일 수 있다.

이때, 컨트롤러부(300)는 영상 분석을 통하여 충돌, 번호판, 사람 등을 파악하고, 이를 기초로 이벤트가 발생한 시점을 태깅하며, 이벤트 발생과 관련된 정보에 쉽게 접근하도록 이벤트 발생 정보를 메터데이터로 표현할 수 있다.

여기서, 태깅은 시간, 공간, 인물, 사물에 대한 정보를 태그(tag)를 사용하여 데이터를 분류하거나 통합 관리하는 공지된 기술이다. 상술한 바와 같은 태그는 데이터에 대한 신속한 접근 또는 검색을 하기 위해 디지털 데이터에 부착되는 메타데이터(meatdata)가 될 수 있다. 이러한 메타데이터와 같은 태그 정보는 주로 공간에 대한 태그, 인물에 관한 태그, 사물에 관한 태그, 시간에 관한 태그 등으로 구분되어 있다. 본 발명에서는 충돌 시점, 번호판 인식 시점 등과 같은 사건이 발생한 시점에 대해 태그를 사용하여 분류한다.

백그라운드 코딩작업은 이벤트 발생 관련 정보 추출 작업을 포함할 수 있다.

이벤트 발생 관련 정보 추출 작업은 이벤트와 연관된 의미 있는 정보들을 추출할 수 있다. 한편, 이벤트 발생 관련 정보 추출은 상기한 사건의 태깅 후에 태깅된 메타데이터를 기초로 사건이 발생한 단서 또는 추적을 위한 정보를 제공할 수 있다.

한편, 이벤트 발생 관련 정보 추출은 번호판, 이정표 인식, 주변 전화번호, 이미지, 음성 등을 인식하고, 이 정보들을 메모리에 저장된 데이터베이스 또는 검색엔진을 갖춘 서버로 제공하여 데이터베이스와 일치된 정보를 또는 검색엔진에서 검색된 정보들을 제공하는 형태로 이벤트 발생 관련 정보를 제공할 수 있다.

백그라운드 코딩작업은 암호화 또는 모자이크 처리 작업을 포함할 수 있다.

이 암호화 작업은 영상데이터에서 저장부에 저장된 영상데이터에서 프라이버시 정보가 표시되는 부분을 암호화 처리할 수 있다.

여기서, 프라이버시 정보는 사람의 얼굴, 차량의 번호판 등과 같은 개인의 프라이버시를 침해할 수 있는 정보이며, 영상데이터에 프라이버시 정보가 표시되는 부분을 암호화 처리함으로써 개인의 신상 정보를 보호할 수 있다.

모자이크 처리는 사람의 얼굴 등 개인의 프라이버시 침해 방지를 위해 모자이크를 처리하는 방법으로, 추출된 얼굴 영역에 인접한 픽셀을 섞어서 영상의 해상도를 낮추거나, 추출된 얼굴 영역의 픽셀 수를 조절하여 모자이크 처리하는 방식, 얼굴 영역에 대한 블록을 지정하고 블록 내의 픽셀의 위치를 소정의 기준에 따라 변경하는 방식 등이 이용될 수 있다.

암호화하는 방법은 영상데이터를 일정 알고리즘을 이용하여 비트의 순서를 섞는 방법이나 데이터 단위를 블록화하는 방법 등이 사용될 수 있으며, 공지된 데이터 암호화 방법을 사용할 수 있다.

또한, 상술한 모자이크 처리 외에 얼굴에 대한 모자이크 처리를 위해서 다양한 이미지 처리 로직이 적용될 수 있다.

그리고, 개인의 신상 정보를 보호하도록 영상데이터에 프라이버시 정보가 표시되는 부분을 블러링(blurring), 인버팅(inverting), 왜곡(distortion), 암흑화(blinding or darkening) 등의 방법이 다양하게 적용될 수도 있다.

이때, 이벤트 발생과 관련된 정보는 모자이크 처리 또는 암호화되는 부분에서 제외될 수도 있다.

백그라운드 코딩작업은 압축 저장 작업을 포함할 수 있다.

압축 저장 작업은 컨트롤러부(300)가 저장부(400)의 저장공간을 확보하여 영상의 녹화시간을 증대시킬 수 있도록, 이벤트가 발생한 시점을 전,후로 미리 설정된 시간 동안의 영상데이터, 및 미리 설정된 시간 이전 및 이후 영상데이터의 해상도를 변환시킬 수 있다.

예컨대, 미리 설정된 시간을 30초 설정하면, 컨트롤러부(300)는 이벤트 발생을 추출한 시점기준으로 30초 전, 30초 후 총 60초 동안의 영상데이터는 초기에 취득된 해상도가 FULL HD(1920*1080)라면 이를 유지하거나 더 높은 해상도로 변환시키고, 미리 설정된 시간 이전 및 이후 즉, 상기한 60초를 제외한 영상데이터는 초기에 취득된 해상도 보다 낮은 해상도인 VGA 또는 QVGA 등으로 변환할 수 있다.

트랜스 코딩의 예로서 OPLT(Open Loop Transcoder)가 공지되어 있으며, 상기 OPLT의 구조는 지금까지 제안된 트랜스코더 중에서 가장 간단한 구조이다.

그리고, 해상도를 변환시킨 뒤 사람의 눈에 자연스러운 영상을 제공할 수 있도록 영상데이터를 압축하여 저장부(400)에 저장할 수 있다.

영상데이터의 압축은 H.264, MPEG, JPEG 등 표준화된 기술을 사용하는 것을 포함한다.

이렇듯, 컨트롤러부(300)가 이벤트 발생을 감지한 시점의 전,후 일정한 시간 동안의 영상데이터는 중요성이 있는 데이터로써 고해상도로 저장되어 차량의 사고 발생시 더욱 정확한 정보를 제공할 수 있고, 미리 설정된 시간 이전 및 이후의 영상데이터는 중요성이 떨어지는 데이터로써 저해상도로 저장되어 저장부(400)의 저장공간을 미리 확보함으로써, 카메라부(100)가 취득한 영상의 녹화시간을 증대시킬 수 있다.

여기서, 컨트롤러부(300)는 이벤트 발생에 따른 더욱 정확한 정보를 제공할 수 있도록 이벤트 발생을 감지한 시점을 전,후로 미리 설정된 시간 동안의 영상데이터는 선명한 화질을 제공하도록 화질을 보정처리 할 수 있다. 해상도를 변환시킨 뒤 사람의 눈에 자연스러운 영상을 제공할 수 있도록 영상데이터를 압축하여 저장부(400)에 저장할 수 있다.

이러한 구성의 본 발명의 제1 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 제어방법은 먼저, 카메라부(100)가 차량의 주변환경을 촬영하여 영상데이터를 취득하여 영상신호를 컨트롤러부(300)에 전달한다(S100).

그리고, 센서부(200)의 각종 센서가 차량의 상태를 센싱하여 감지한 센서신호를 컨트롤러부(300)에 전달한다.

그리고, 컨트롤러부(300)는 센서부(200)가 감지한 센서신호의 정보에 따라 차량의 상태를 감지한다(S200).

또한, 컨트롤러부(300)는 센서부(200)에 감지되는 센서신호에 따라 주차모드와 주행모드 중 어느 하나를 선택한다(S300).

한편, 컨트롤러부(300)가 주행모드를 선택하면, 차량이 주행하는 도중 이벤트 발생이 감지된 경우 컨트롤러부(300)가 영상데이터를 처리한다(S400).

이때, 컨트롤러부(300)는 센서부(200)가 감지한 정보에 따라 이벤트가 발생 되었다고 판단되면, 영상데이터에 이벤트 발생을 감지한 시점의 정보를 영상데이터에 포함하여 영상데이터를 처리한다.

예컨대, 피감지체가 센서부(200)에 의해 감지되면 센서부(200)는 감지된 센서신호를 컨트롤러부(300)에 전달하고, 컨트롤러부(300)가 이벤트 발생을 감지한 시점의 데이터를 영상데이터에 포함하는 형태로 영상데이터를 처리할 수 있다.

그리고, 카메라부(100)에서 취득되는 영상데이터는 컨트롤러부(300)에 영상처리되어 저장부(400)에 저장될 수 있다(S500).

한편, 컨트롤러부(300)가 주차모드를 선택할 경우, 컨트롤러부(300)는 저장부(400)에 저장된 영상데이터를 불러들여 재가공, 즉 백그라운드 코딩작업으로 분석하고, 분석이 완료된 영상데이터를 다시 저장부(400)로 저장시킨다(S600).

여기서, 컨트롤러부(300)에서의 백그라운드 코딩작업으로 인한 제어방법을 설명하기로 한다(도 5 참조).

컨트롤러부(300)는 최초 저장부(400)에 저장되었던 영상데이터에서 이벤트 발생이 감지된 시점을 추출한다(S610).

이때 영상 분석을 통하여 충돌, 번호판 인식 등과 같은 사건이 발생한 시점에 대한 태깅을 수행한다. 또한 물체의 움직임 변화 등을 기초로 이벤트 발생을 검색하기 위한 메타 데이터도 생성시킬 수 있다. 그리고 압축하여 저장할 수 있다.

이벤트 발생이 감지된 시점을 전,후로 미리 설정된 시간 동안만 이벤트 발생과 관련된 정보를 영상데이터에서 추출한다(S620).

즉, 컨트롤러부(300)는 차량의 사고 발생시 더욱 정확한 정보를 확보할 수 있도록 미리 설정된 시간이 30초이면 이벤트 발생을 감지한 시점기준으로 30초 전, 30초 후 총 60초 동안 이벤트 발생과 관련된 정보인 차량의 번호판, 사람의 얼굴, 이정표, 차량과 충돌한 물체를 영상데이터에서 추출할 수 있다.

이것은 태킹과 같은 메타데이터의 검색을 통해 전체 영상데이터 중에서 의미 있는 정보를 추출하는 것이다.

특히, 이정표에 대한 정보를 이용하여 이벤트가 발생된 지점의 위치를 파악할 수가 있다.

한편, 영상데이터에서 이벤트 정보가 취득되면 컨트롤러부(300)는 영상데이터에서 프라이버시 정보가 표시되는 부분을 암호화 또는 모자이크 처리한다(S630).

즉, 영상데이터에서 이벤트 발생과 관계없는 사람의 얼굴, 차량의 번호판과 같은 개인의 신상을 알 수 있는 정보를 분석하여 암호화 또는 모자이크 처리를 함으로써 이벤트 발생과 관계없는 개인의 신상을 보호할 수 있다.

그리고, 이벤트 발생이 감지된 시점을 전,후로 미리 설정된 시간 동안의 영상데이터는 초기에 취득된 해상도를 유지하거나 더 높은 해상도로 변환시키고, 미리 설정된 시간 이전 및 이후의 영상데이터는 초기에 취득된 영상데이터의 해상도 보다 낮은 해상도로 변환시킨다(S640).

예컨대, 미리 설정된 시간을 30초 설정하면, 컨트롤러부(300)는 이벤트 발생을 감지한 시점기준으로 30초 전, 30초 후 총 60초 동안의 영상데이터는 의미 있는 영상데이터에 해당하므로 초기에 취득된 해상도가 FULL HD(1920*1080) 라면 이를 유지하거나 더 높은 해상도로 변환시키고, 미리 설정된 시간 이전 및 이후의 영상데이터는 의미 없는 영상데이터에 해당하므로 초기에 취득된 해상도 보다 낮은 해상도인 VGA 또는 QVGA로 변환하여 압축한 후에 저장할 수 있다.

이렇듯, 컨트롤러부(300)가 이벤트 발생을 감지한 시점을 전,후 일정한 시간 동안의 영상데이터는 고해상도로 저장되어 차량의 사고 발생시 더욱 정확한 정보를 제공할 수 있고, 미리 설정된 시간 이전 및 이후의 영상데이터는 저해상도로 압축한 후 저장되어 저장부(400)의 저장공간을 확보하여 차량의 주행중 또는 주차 중 카메라부(100)가 취득한 영상의 녹화시간을 증대시킬 수 있다.

그리고, 컨트롤러부(300)는 이벤트 발생에 따른 더욱 정확한 정보를 제공할 수 있도록 이벤트 발생을 감지한 시점을 전,후로 미리 설정된 시간 동안의 영상데이터는 선명한 화질을 제공하도록 화질을 보정처리 하여 저장부(400)에 저장할 수 있다(S650). 물론 저장은 H.264, MPEG, JPEG 등 표준화된 압축기술을 활용할 수 있다.

지금까지는 이벤트 발생 시에 특정 시간의 구간 영상에 대하여 차등적으로 해상도를 재가공하여 압축하였지만 다음부터는 디스플레이되는 영상 프레임(예: 사진 1장, 디스플레이 화상영역) 영역을 기준으로 관심영역(ROI)과 비관심 영역으로 구분한 다음, 관심영역은 고해상도 저장하고 비관심 영역은 저해상도 저장하는 것을 설명한다.

이벤트 주행 중이나 주차 시 이벤트가 발생하면 녹화를 수행하게 되는데 이 이벤트 발생 여부에 따라 촬영된 영상에서 필요한 관심 영역과 비관심 영역 등 관심영역별로 차등하여 압축 저장함에 의해 저장공간을 확보할 수 있다. 즉, 차량 번호판과 같은 중요사항을 관심영역으로 식별하여 고해상도로 변환하여 압축하며, 이의 검색을 위해 메타 데이터로서 저장한다. 도 5에 도시된 바와 같이, 이벤트가 발생하면 차량 부분은 유휴시간에 번호판 등 관심 영역의 추출작업을 수행 후 고해상도로 변환 보정하며, 건물의 경우는 저해상도 압축을 수행할 수 있다.

따라서, 차량의 주차모드와 같이 블랙박스의 유휴시간 때에 차량의 주행모드시 저장된 영상데이터를 분석하여 재처리함으로써 영상데이터의 용량을 감소시켜 저장부(400)의 저장공간을 확보하고, 영상의 녹화시간을 증대시킬 수 있다.

또한, 블랙박스의 유휴시간 때에 이벤트 감지, 이벤트 감지와 관련된 영상데이터 추출, 암호화, 모자이크 처리, 해상도 변환, 및 화질 보정과 같은 부가기능을 수행함으로써 부가기능 작업 처리의 신속성과 정확성을 향상시킬 수 있으며, 블랙박스의 과부하를 방지할 수 있다.

[ 실시예 2]

제2 실시예에서는 제1 실시예와 동일한 구성에 대한 상세한 설명은 생략한다.

ISP부(120)는 주차모드 시 이벤트 발생을 감지할 수 있도록, ISP(129)에 더하여 버퍼 메모리(130)와 비교기(140)를 더 포함할 수 있다.

여기서 ISP부(120)은 전체를 하나의 반도체 칩으로 구현할 수도, ISP(129)와 비교기(140)만을 반도체 칩으로 구현하고 버퍼메모리(130)는 외부에 둘 수도 있다.

ISP(129)는 비교기(140)로부터 전달되는 디지털 영상데이터를 보간(interpolation), 색 보정(color correction), 감마 보정(gamma correction), 노이즈 저감(noise suppression), 디모자이크(demosaic) 등으로 이미지 신호 처리(Image Signal Processing; ISP)하는 구성요소로서 적어도 하나 이상의 이미지 처리 모듈을 포함하여 구성할 수 있다.

주차모드에서, 버퍼 메모리(130)는 CIS(110)에서 획득된 시간적으로 전·후 관계에 있는 디지털 영상데이터를 저 용량(예를 들면 1 프레임)으로 임시 저장한다. 그리고 시간적 전·후 관계의 두 디지털 영상데이터를 비교기(140)로 비교하여 이벤트 발생 여부를 판단한다.

비교기(140)를 통한 이벤트 발생여부 판단은 1 프레임 단위로도 가능하므로 상기 버퍼 메모리(130)는 SRAM과 같이 가격이 높더라도 고속이며 저 용량인 메모리를 사용하는 것이 바람직하다. 물론 DRAM을 사용하여도 무방하다.

그리고 2개의 프레임을 비교하는 것보다는 다수개의 프레임을 비교하는 것이 이벤트 감지의 정확도가 더 높다. 그러므로 특별히 제조비용 등에 문제가 없다면 버퍼 메모리(130)의 용량은 다수 개의 프레임을 저장할 수 있는 용량으로 선택될 수 있다.

비교기(140)는 CIS(110)로부터 새로운 1 프레임의 디지털 영상데이터(T)가 전달되면, 버퍼 메모리(130)에 이미 저장된 디지털 영상데이터(T-1)와 현재 전달되고 있는 차기(next term) 디지털 영상데이터(T)와 비교하여 양 디지털 영상데이터간의 변화, 즉 이벤트 발생으로 볼 수 있는 변화가 발생했는지 여부를 판단한다.

이때 이벤트 발생으로 판단되는 경우 차단 신호(Interrupt Signal)를 생성하여 컨트롤러부(300) 및 ISP(129)로 전달하고, 상기 차기 디지털 영상데이터(T)는 뒤이어 새로이 들어오는 또 다른 차기 디지털 영상데이터(T+1)와 비교를 위해 버퍼 메모리(130)에 저장되고, 이때 기존에 저장되어 있던 디지털 영상데이터(T-1)에 저장될 수 있다.

비교기(140)와 버퍼 메모리(130)은 직렬 연결된 ISP(129)의 전단에 연결된 것으로 도시되어 있으나, 시스템의 응용, 허용되는 에너지 소모량, 이벤트 감지의 정확도 등을 고려하여 ISP(129)의 후단에 또는 제1 ISP(121) 및 제3 ISP(125) 사이의 중간에 연결될 수도 있다.

버퍼 메모리(130) 및 비교기(140)가 ISP(129)의 말단 즉, 제3 ISP(125)에 연결될 경우, 비교기(140)는 이미지 신호 처리과정을 거친 디지털 영상데이터를 이용하여 이벤트 감지를 수행한다.

한편, 주차모드에서 차량 사고 등 이벤트 발생을 비교기(140)를 포함한 ISP부(120)가 감지한 경우 차단 신호를 발생하게 되는데, 그 차단신호는 컨트롤러부(300)에 전달된다.

예컨대, 도2에 도시된 바와 같이 ISP부(120)로부터의 차단 신호가 OR게이트(150)에 입력되고, OR게이트(150)의 출력이 차단 신호로서 컨트롤러부(300) 로 전달될 수 있다.

이렇듯, ISP부(120)는 주차모드에서 디지털 영상데이터를 비교하여 이벤트 발생으로 판단되지 않는 경우, 즉 차단신호가 발생하지 않는 경우 버퍼 메모리(130) 또는 다른 임시 저장부(127)로 디지털 영상데이터를 전달하여 저장한다.

물론 임시저장부(127)은 이벤트 발생 감지 전 후 미리 설정된 시간 동안의 영상을 저장할 수 있다. 물론, 이벤트 발생 감지 전 후 미리 설정된 시간 동안의 영상을 버퍼 메모리(130)에 저장할 수도 있다

여기서 비교기(140) 및 버퍼메모리(130)를 ISP(129) 전단에 구성하면 디지털 영상데이터를 ISP(129) 전달하지 않으며, 결국 ISP(129)에서 데이터 프로세싱을 하지 않는 만큼 전력소모를 감소시킬 수 있다. 물론 비교기(140) 및 버퍼메모리(130)를 ISP(129)의 후단에 구성하면 ISP(129)는 데이터 프로세싱을 하게 된다.

한편, 컨트롤러부(300)는 ISP부(120)로부터 차단 신호를 전달받으면 백그라운드 코딩작업을 중지하고, 카메라부(100)를 제어하여 카메라부(100)가 이벤트 발생 전후 미리 설정된 시간 동안의 이벤트 발생 영상을 녹화하는 액티브 모드(Active Mode)로 전환될 수 있다.

또한, 컨트롤러부(300)는 컨트롤러부(300)가 재가공 작업 즉, 백그라운드 코딩작업을 완료하면, 컨트롤러부(300)에서 백그라운드 코딩작업을 하지 않는 만큼 전력소모량을 감소시키도록 컨트롤러부(300) 가 백그라운드 코딩작업을 수행하지 않는 슬립 모드(Sleep Mode)로 전환될 수 있다.

물론, 컨트롤러부(300)은 슬립 모드 시 ISP부(120)가 이벤트 발생을 감지하면 차단신호를 발생시켜 액티브 모드로 전환된다.

이하, 본 발명의 제2 실시예 따른 차량용 블랙박스의 제어방법을 설명한다.

도 1, 2에 도시된 바와 같이 주차모드 시에, ISP부(120)는 이벤트 감지를 수행하고, 컨트롤러부(300)는 백그라운드 코딩작업을 수행한다. 그러던 중 ISP부(120)가 이벤트를 감지하면 차단신호를 발생시켜 컨트롤러부(300)에 차단신호를 전달한다.

차단신호가 컨트롤러부(300)로 전달되면, 컨트롤러부(300)는 백그라운드 코딩작업을 중지하고, 카메라부(100)를 제어하여 카메라부(100)가 이벤트 발생 전후 미리 설정된 시간 동안의 이벤트 발생 영상을 녹화하는 액티브 모드로 전환된다.

액티브 모드 시, 컨트롤러부(300)는 이벤트 발생과 관련된 영상을 저장부(400)에 저장할 수 있다.

그리고, 액티브 모드가 종료되면 컨트롤러부(300)는 다시 백그라운드 코딩을 시작한다.

한편, 주차 모드인 상태에서 컨트롤러부(300)가 백그라운드 코딩작업을 완료하면, 컨트롤러부(300)는 슬립 모드(Sleep Mode)로 전환되어 백그라운드 코딩작업을 하지 않은 만큼 전력소모량을 감소시킬 수 있다.

이하, 본 발명의 제2 실시예에 따른 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 제어과정을 설명한다.

영상취득 단계(S100), 차량상태감지 단계(S200), 모드선택 단계(S300), 영상데이터처리 단계(S400), 저장단계(S500)는 제1 실시예와 동일하다.

제1 실시예와의 차이점은 재가공 단계(S600)에서 컨트롤러부(300)는 ISP부(120)를 제어하여 백그라운드 코딩작업 중 ISP부(120)가 이벤트 발생을 감지하면, 컨트롤러부(300)는 백그라운드 코딩작업을 중지하고 카메라부(100)가 이벤트 발생에 대한 영상을 취득할 수 있도록 카메라부(100)를 제어한다.

그리고, 컨트롤러부(300)는 미리 설정된 시간 동안 이벤트 발생과 관련된 영상을 취득한 뒤, 미리 설정된 시간이 지나면 다시 백그라운드 코딩작업을 시작한다(S700).

또한, 컨트롤러부(300)는 백그라운드 코딩작업을 완료하면, 슬립 모드로 전환되어 백그라운드 코딩작업이 없는 동안 전력소모를 감소시킬 수 있다.

상기 과정은 상기 순서대로 수행될 수도, 개별적으로, 필요에 따라 복수의 과정이 함께 수행될 수도 있다.

이상에서 본 발명의 실시예를 설명하였으나, 본 발명의 권리범위는 이에 한정되지 아니하며 본 발명의 실시예로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 용이하게 변경되어 균등한 것으로 인정되는 범위의 모든 변경 및 수정을 포함한다.

100 : 카메라부 110 : CIS
120 : ISP부 200 : 센서부
300 : 컨트롤러부 310 : CODEC
320 : 프로세서 330 : 메모리
340 : 영상처리부 400 : 저장부

Claims (25)

1. 차량의 주변환경을 촬영하여 영상데이터를 취득하는 카메라부;
   상기 카메라부에서 취득된 영상데이터를 저장하는 저장부; 및
   상기 차량의 주차모드 또는 주행모드 중 어느 하나를 선택하고, 상기 주차모드가 선택될 경우 상기 저장부에 저장된 상기 영상데이터를 재가공하여 다시 상기 저장부로 저장시키는 컨트롤러부를 포함하며,
   상기 영상데이터의 재가공은 디스플레이되는 화상 프레임 영역을 기준으로 화상 프레임의 일부인 관심 영역은 고해상도로 변환하고, 상기 관심 영역을 제외한 화상 프레임의 일부인 비관심영역은 저해상도로 변환하여 차등하여 압축 저장함으로써 차량의 주차모드와 같이 블랙박스의 유휴시간 때에 차량의 주행모드시 저장된 영상데이터를 분석하여 재가공함으로써 영상데이터의 용량을 감소시켜 저장부의 저장공간을 확보하고, 영상의 녹화시간을 증대시키는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스.
2. 청구항 1에 있어서,
   상기 영상 데이터를 재가공하여 다시 상기 저장부로 저장되는 영상데이터는 재가공 이전보다 더 작은 저장용량인 것을 포함하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스.
3. 청구항 1에 있어서,
   상기 영상데이터의 재가공은 상기 저장부에 저장된 영상데이터로부터 이벤트 발생이 감지된 시점을 태깅하는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스.
4. 청구항 1에 있어서,
   상기 영상데이터의 재가공은 상기 저장부에 저장된 영상데이터로부터 이벤트 발생에 관련한 영상 데이터를 선택적으로 추출하여 해상도를 변환하는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스.
5. 청구항 1에 있어서,
   상기 영상데이터의 재가공은 상기 저장부에 저장된 영상데이터로 프라이버시 정보를 암호화하는 것을 포함하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스.
6. 청구항 5에 있어서, 상기 프라이버시 정보는 사람의 얼굴, 차량의 번호판인 것을 특징으로 하는 유휴시간을 활용한 차량용 블랙박스.
7. 청구항 1에 있어서,
   상기 컨트롤러부는 상기 저장부에 저장된 영상데이터에서 이벤트 발생이 감지된 시점을 전,후로 미리 설정된 시간 동안만 이벤트 발생과 관련된 정보를 상기 영상데이터에서 추출하는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스.
8. 청구항 1에 있어서,
   상기 컨트롤러부는 상기 저장부에 저장된 영상데이터에서 이벤트 발생이 감지된 시점을 기준으로 미리 설정된 시간 동안을 제외한 나머지 영상데이터는 초기에 취득된 해상도 보다 낮은 해상도로 변환하는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스.
9. 청구항 1에 있어서,
   상기 컨트롤러부는 상기 영상데이터에서 이벤트 발생을 감지한 시점을 기준으로 미리 설정된 시간 동안의 영상데이터는 선명한 화질을 제공하도록 화질을 보정하는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스.
10. 삭제
11. 차량의 주변환경을 촬영하여 영상데이터를 취득하는 카메라부;
    상기 카메라부에서 취득된 영상데이터를 저장하는 저장부; 및
    상기 차량의 주차모드 또는 주행모드 중 어느 하나를 선택하고, 상기 주차모드가 선택될 경우 상기 저장부에 저장된 상기 영상데이터를 재가공하여 다시 상기 저장부로 저장시키는 컨트롤러부를 포함하며,
    상기 카메라부는 실시간 입력되는 디지털 영상데이터를 임시 저장하는 버퍼 메모리, 상기 버퍼 메모리에 시간적 전·후 관계에서 먼저 저장된 디지털 영상데이터와 나중에 입력되는 차기 디지털 영상데이터의 비교에 기초하여 이벤트 발생여부를 판단하는 비교기를 더 포함하고,
    상기 비교기는 이벤트가 발생하는 것으로 판단하는 경우, 차단신호를 발생시켜 상기 컨트롤러부로 전달하며, 상기 비교기로부터 차단신호를 전달받은 상기 컨트롤러부는 상기 디지털 영상데이터를 재가공하는 것을 중단하고, 상기 카메라부를 제어하여 이벤트 발생과 관련된 영상을 취득하는 것을 특징으로 하며;
    주차모드에서 이벤트 발생을 감지할 수 있도록 ISP부를 더 구비하며;
    상기 ISP부는 비교기로부터 전달되는 디지털 영상데이터를 입력받아 이미지 신호 처리하는 구성요소로서 적어도 하나 이상의 이미지 처리 모듈을 포함하여 구성되고;
    주차모드에서 버퍼 메모리는 시간적으로 전·후 관계에 있는 디지털 영상데이터를 저 용량으로 임시 저장하고, 비교기는 새로운 1프레임의 디지털 영상데이터가 전달되면, 버퍼 메모리에 이미 저장된 디지털 영상데이터와 현재 전달되고 있는 차기 디지털 영상데이터와 비교하여 이벤트 발생으로 볼 수 있는 양 디지털 영상데이터 간의 변화가 발생했는지 여부를 판단하며, 이벤트 발생으로 판단되는 경우 차단 신호를 생성하여 컨트롤러부 및 ISP로 전달하고, 상기 차기 디지털 영상데이터는 뒤이어 새로이 들어오는 또 다른 차기 디지털 영상데이터와 비교를 위해 버퍼 메모리에 저장되고;
    주차모드에서 디지털 영상데이터를 비교하여 이벤트 발생으로 판단되지 않는 경우 버퍼 메모리 또는 다른 임시 저장부로 디지털 영상데이터를 전달하여 저장되도록 하며, 비교기 및 버퍼메모리를 ISP 전단에 구성함으로써 디지털 영상데이터를 ISP부에 전달하지 않으며, ISP부에서 데이터 프로세싱을 하지 않는 만큼 전력소모를 감소시킬 수 있는 것을 특징으로 하는 유휴시간을 활용한 차량용 블랙박스.
12. 삭제
13. 청구항 11에 있어서,
    상기 비교기가 이벤트 발생이 없는 경우로 판단하는 차단신호 미발생 기간 동안에 실시간 입력되는 디지털 영상데이터는 버퍼메모리 또는 임시 저장부에 저장되는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스.
14. 청구항 1에 있어서,
    상기 컨트롤러부는
    상기 영상데이터의 재가공이 완료될 경우 상기 컨트롤러부의 전력 소모량이 감소되도록 슬립 모드로 전환되는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스.
15. 차량의 주변환경을 촬영하여 영상데이터를 취득하는 취득단계;
    상기 차량의 상태를 감지하는 감지단계;
    상기 감지단계에서 감지된 정보에 따라 주차모드 또는 주행모드 중 어느 하나를 선택하는 선택단계;
    상기 차량의 이벤트가 감지된 경우, 상기 영상데이터를 컨트롤러부에서 처리하는 처리단계;
    상기 영상데이터를 저장부에 저장하는 저장단계; 및
    상기 주차모드가 선택될 경우, 상기 저장부에 저장된 상기 영상데이터를 재가공하여 다시 상기 저장부로 저장시키는 재가공단계를 포함하며,
    상기 재가공단계에서 영상데이터의 재가공은 디스플레이되는 화상 프레임 영역을 기준으로 화상 프레임의 일부인 관심 영역은 고해상도로 변환하고, 상기 관심 영역을 제외한 화상 프레임의 일부인 비관심영역은 저해상도로 변환하여 차등하여 압축 저장함으로써 차량의 주차모드와 같이 블랙박스의 유휴시간 때에 차량의 주행모드시 저장된 영상데이터를 분석하여 재가공함으로써 영상데이터의 용량을 감소시켜 저장부의 저장공간을 확보하고, 영상의 녹화시간을 증대시키는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 제어방법.
16. 청구항 15에 있어서,
    상기 재가공단계는 상기 저장부에 저장된 영상데이터로부터 이벤트 발생이 감지된 시점을 태깅하는 단계를 포함하는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 제어방법.
17. 청구항 15에 있어서,
    상기 재가공단계는 상기 저장부에 저장된 영상데이터로부터 이벤트 발생에 관련한 영상 데이터를 선택적으로 추출한 후, 해상도를 변환하는 단계를 포함하는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 제어방법.
18. 청구항 15에 있어서,
    상기 재가공단계는 상기 저장부에 저장된 영상데이터에서 프라이버시 정보를 암호화하는 단계를 포함하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 제어방법.
19. 청구항 15에 있어서,
    상기 재가공단계는 상기 저장부에 저장된 영상데이터에서 이벤트 발생이 감지된 시점을 전·후로 미리 설정된 시간 동안만 이벤트 발생과 관련된 정보를 상기 영상데이터에서 추출하는 단계를 포함하는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 제어방법.
20. 청구항 15에 있어서,
    상기 재가공단계는 상기 저장부에 저장된 영상데이터에서 이벤트 발생이 감지된 시점을 기준으로 미리 설정된 시간 동안을 제외한 나머지 영상데이터는 초기에 취득된 해상도 보다 낮은 해상도로 변환하는 단계를 포함하는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 제어방법.
21. 청구항 15에 있어서,
    상기 컨트롤러부는 이벤트 발생을 감지한 시점을 기준으로 미리 설정된 시간 동안의 영상데이터는 선명한 화질을 제공하도록 화질을 보정하는 단계를 포함하는 것을 특징으로 하는 블랙박스의 유휴시간을 활용한 차량용 블랙박스의 제어방법.
22. 삭제
23. 청구항 15에 있어서, 상기 재가공단계는 비교기가 이벤트 발생여부를 감지하는 단계를 더 포함하는 것을 특징으로 하는 유휴시간을 활용한 차량용 블랙박스의 제어방법.
24. 차량의 주변환경을 촬영하여 영상데이터를 취득하는 취득단계;
    상기 차량의 상태를 감지하는 감지단계;
    상기 감지단계에서 감지된 정보에 따라 주차모드 또는 주행모드 중 어느 하나를 선택하는 선택단계;
    상기 차량의 이벤트가 감지된 경우, 상기 영상데이터를 컨트롤러부에서 처리하는 처리단계;
    상기 영상데이터를 저장부에 저장하는 저장단계; 및
    상기 주차모드가 선택될 경우, 상기 저장부에 저장된 상기 영상데이터를 재가공하여 다시 상기 저장부로 저장시키는 재가공단계를 포함하며,
    주차모드에서 버퍼 메모리는 시간적으로 전·후 관계에 있는 디지털 영상데이터를 저 용량으로 임시 저장하고, 비교기는 새로운 1프레임의 디지털 영상데이터가 전달되면, 버퍼 메모리에 이미 저장된 디지털 영상데이터와 현재 전달되고 있는 차기 디지털 영상데이터와 비교하여 이벤트 발생으로 볼 수 있는 양 디지털 영상데이터 간의 변화가 발생했는지 여부를 판단하며, 이벤트 발생으로 판단되는 경우 차단 신호를 생성하여 컨트롤러부 및 ISP로 전달하고, 상기 차기 디지털 영상데이터는 뒤이어 새로이 들어오는 또 다른 차기 디지털 영상데이터와 비교를 위해 버퍼 메모리에 저장되고;
    주차모드에서 디지털 영상데이터를 비교하여 이벤트 발생으로 판단되지 않는 경우 버퍼 메모리 또는 다른 임시 저장부로 디지털 영상데이터를 전달하여 저장되도록 하며, 비교기 및 버퍼메모리를 ISP 전단에 구성함으로써 디지털 영상데이터를 ISP부에 전달하지 않으며, ISP부에서 데이터 프로세싱을 하지 않는 만큼 전력소모를 감소시킬 수 있는 것을 특징으로 하는 유휴시간을 활용한 차량용 블랙박스의 제어방법.
25. 청구항 18에 있어서,
    상기 프라이버시 정보는
    사람의 얼굴, 차량의 번호판인 것을 특징으로 하는 유휴시간을 활용한 차량용 블랙박스의 제어방법.

Images