[go: up one dir, main page]

KR20140102443A - 카메라를 이용한 물체 추적 방법 및 이를 위한 카메라 시스템 - Google Patents

카메라를 이용한 물체 추적 방법 및 이를 위한 카메라 시스템 Download PDF

Info

Publication number
KR20140102443A
KR20140102443A KR20130015722A KR20130015722A KR20140102443A KR 20140102443 A KR20140102443 A KR 20140102443A KR 20130015722 A KR20130015722 A KR 20130015722A KR 20130015722 A KR20130015722 A KR 20130015722A KR 20140102443 A KR20140102443 A KR 20140102443A
Authority
KR
South Korea
Prior art keywords
subject
tracking
unit
priority
subjects
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
KR20130015722A
Other languages
English (en)
Inventor
강태훈
김종선
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR20130015722A priority Critical patent/KR20140102443A/ko
Priority to EP14151584.1A priority patent/EP2768214A3/en
Priority to US14/178,457 priority patent/US20140226858A1/en
Priority to CN201410048384.4A priority patent/CN103997598A/zh
Publication of KR20140102443A publication Critical patent/KR20140102443A/ko
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32—Means for focusing
    • G03B13/34—Power focusing
    • G03B13/36—Autofocus systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

복수 개의 물체를 추적할 때 효율적으로 초점을 조절하는 물체 추적 방법 및 이를 위한 카메라 시스템을 제안한다.
복수 개의 물체를 추적할 때 가장 움직임이 없는 피사체를 중심으로 촬영을 유도하여 사용자가 촬영 시 관심 피사체가 가장 잘 나온 영상을 얻도록 도와준다. 또한 하나의 피사체에 대한 트랙킹이 아닌 복수 개의 관심 피사체를 미리 선택하여 후보군으로 등록함으로써 피사체를 여러 번 재선택하고 선택된 피사체에 대하여 다시 초점을 조절하는 번거로움을 피할 수 있게 된다.

Description

카메라를 이용한 물체 추적 방법 및 이를 위한 카메라 시스템{OBJECT TRACKING METHOD USING CAMERA AND CAMERA SYSTEM FOR OBJECT TRACKING}
본 발명은 디지털 카메라를 이용한 물체 추적 방법에 관한 것으로, 더욱 상세하게는 복수 개의 물체를 추적할 때 효율적으로 초점을 조절하는 물체 추적 방법 및 이를 위한 카메라 시스템에 관한 것이다.
디지털 카메라의 보급에 따라 많은 사람이 손쉽게 다양한 영상을 촬영할 수 있게 되었다. 이러한 디지털 카메라는 자동 모드 기능을 갖추고 있어 초보자도 손쉽게 촬영 가능하게 하였고, 일반 사용자로 하여금 보다 편리하게 고화질의 영상을 획득할 수 있게 하였다. 고화질의 영상을 획득하기 위해서는 프리뷰 화면 내에서 피사체의 위치 및 조도 상태를 파악해야 하며, 초점(AF; Automatic Focusing)을 정확하게 조절해야 한다.
초점을 정확히 조절하기 위해서는 피사체의 위치를 파악하고 지속적으로 추적하는 물체 추적(Object Tracking) 알고리즘이 필요하다. 물체 추적(Object Tracking) 알고리즘을 이용하여 초점을 조절하는 방법 중 하나로 연속 자동 초점 조절 방법(CAF; Continuous Auto Focusing)이 있다.
연속 자동 초점 조절 방법은 하나의 관심 피사체(물체)에 대한 패턴을 읽어서 그 패턴을 지속적으로(일정 주기) 추적하는 싱글 트랙킹(single tracking) 기능을 가진다. 디지털 카메라는 이러한 싱글 트랙킹(single tracking) 기능을 이용하여 관심 피사체의 움직임을 추적하고 초점을 조절한다. 또한, 피사체의 움직임을 검출하여 피사체의 움직임 여부에 따라 초점을 재설정하고 다시 고정하는 방법을 사용한다.
이와 같이, 디지털 카메라를 이용한 물체 추적은 연속 자동 초점 조절 방법(CAF; Continuous Auto Focusing)을 연동시켜 지속적으로 트랙킹을 하고 있지만, 하나의 물체만을 추적하는 싱글 트랙킹으로 복수 개의 물체를 추적할 때 어떤 물체에 초점 조절을 할 것인지에 대한 대책이 없으며, 하나의 물체를 트랙킹한 후 다시 트랙킹을 동작시킬 물체를 재선택해야 하는 불편함이 있다.
복수 개의 물체를 추적할 때, 어떤 물체에 우선순위를 줄 것인가 결정하여 초점 조절을 효율적으로 수행할 수 있는 카메라를 이용한 물체 추적 방법 및 이를 위한 카메라 시스템을 제안하고자 한다.
이를 위해 본 발명의 일 측면은 카메라를 이용한 물체 추적 방법에 있어서, 프리뷰 영상을 카메라 화면에 표시하는 단계; 프리뷰 영상에서 복수 개의 관심 피사체를 선택하는 단계; 선택된 복수 개의 관심 피사체를 트랙킹하여 우선순위를 결정하는 단계; 및 우선순위가 가장 높은 피사체를 중심으로 초점 조절을 수행하는 단계를 포함한다.
또한, 본 발명의 일 측면에 의한 카메라를 이용한 물체 추적 방법은, 적어도 하나 이상의 피사체를 등록하는 단계를 더 포함하고, 선택 단계는, 등록된 하나 이상의 피사체 중에서 복수 개의 관심 피사체를 선택하는 것이다.
결정 단계는, 피사체의 움직임, 거리 및 크기를 고려하여 복수 개의 피사체 중 어떤 피사체에 우선순위를 줄 것인가 결정하는 것이다.
또한, 본 발명의 일 측면에 의한 카메라를 이용한 물체 추적 방법은, 피사체의 움직임을 검출하는 단계를 더 포함하고, 결정 단계는, 피사체의 움직임 여부에 따라 우선순위를 결정하는 것이다.
또한, 결정 단계는, 복수 개의 관심 피사체 중 움직임이 적은 피사체의 우선순위를 높이고, 움직임이 빠른 피사체의 우선순위를 낮추어 우선순위를 결정하는 것이다.
또한, 결정 단계는, 복수 개의 관심 피사체 중 움직임이 가장 적은 피사체를 메인 피사체로 지정하는 것이다.
초점 조절 단계는, 메인 피사체를 중심으로 초점 조절을 수행하는 것이다.
또한, 본 발명의 일 측면에 의한 카메라를 이용한 물체 추적 방법은, 촬영하고자 하는 촬영 거리를 선택하는 단계를 더 포함하고, 결정 단계는, 선택된 촬영 거리 내에 있는 피사체에 우선순위를 주는 것이다.
또한, 본 발명의 일 측면에 의한 카메라를 이용한 물체 추적 방법은, 피사체의 크기를 검출하는 단계를 더 포함하고, 결정 단계는, 피사체의 크기가 큰 것에 우선순위를 주는 것이다.
또한, 본 발명의 일 측면에 의한 카메라를 이용한 물체 추적 방법은, 복수 개의 관심 피사체의 특징들을 저장하는 단계와, 카메라 화면 밖으로 피사체가 벗어날 경우, 저장된 특징들을 중심으로 피사체의 트랙킹을 재시도하는 단계를 더 포함한다.
그리고, 본 발명의 일 측면에 의한 카메라 시스템은, 프리뷰 영상을 카메라 화면에 표시하는 표시부; 프리뷰 영상에서 복수 개의 관심 피사체를 선택하는 입력부; 선택된 복수 개의 관심 피사체를 트랙킹하는 피사체 추적부; 선택된 복수 개의 관심 피사체 중 어떤 피사체에 우선순위를 줄 것인가 결정하는 피사체 결정부; 및 우선순위가 가장 높은 피사체를 중심으로 초점 조절을 수행하는 초점 조절부를 포함한다.
또한, 본 발명의 일 측면에 의한 카메라 시스템은, 적어도 하나 이상의 피사체를 등록하는 피사체 등록부를 더 포함하고, 입력부는 등록된 하나 이상의 피사체 중에서 복수 개의 관심 피사체를 선택한다.
피사체 추적부는 복수 개의 관심 피사체를 트랙킹할 경우, 우선순위가 가장 높은 피사체를 중심으로 트랙킹을 수행한다.
또한, 본 발명의 일 측면에 의한 카메라 시스템은, 복수 개의 피사체를 트랙킹하기 위한 피사체의 특징들을 저장하는 저장부를 더 포함하고, 피사체 추적부는 카메라 화면 밖으로 피사체가 벗어날 경우, 저장된 특징들을 중심으로 트랙킹을 재시도한다.
피사체 결정부는 상기 피사체의 움직임, 거리 및 크기를 고려하여 복수 개의 피사체 중 어떤 피사체에 우선순위를 줄 것인가 결정한다.
또한, 본 발명의 일 측면에 의한 카메라 시스템은, 피사체의 움직임을 검출하는 움직임 감지부를 더 포함하고, 피사체 결정부는 복수 개의 관심 피사체 중 움직임이 적은 피사체의 우선순위를 높이고, 움직임이 빠른 피사체의 우선순위를 낮춘다.
또한, 피사체 결정부는 촬영하고자 하는 촬영 거리 내에 있는 피사체에 우선순위를 준다.
또한, 피사체 결정부는 피사체의 크기가 큰 것에 우선순위를 준다.
또한, 제안된 카메라를 이용한 물체 추적 방법 및 이를 위한 카메라 시스템에 의하면, 복수 개의 물체를 추적할 때 가장 움직임이 없는 피사체를 중심으로 촬영을 유도하여 사용자가 촬영 시 관심 피사체가 가장 잘 나온 영상을 얻도록 도와준다. 또한 하나의 피사체에 대한 트랙킹이 아닌 복수 개의 관심 피사체를 미리 선택하여 후보군으로 등록함으로써 피사체를 여러 번 재선택하고 선택된 피사체에 대하여 다시 초점을 조절하는 번거로움을 피할 수 있게 된다.
도 1은 본 발명의 일 실시예에 의한 카메라 시스템의 구성을 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 의한 복수 개의 피사체 선택 화면을 나타낸 도면이다.
도 3은 본 발명의 일 실시예에 의한 피사체와의 거리를 나타낸 도면이다.
도 4는 본 발명의 일 실시예에 의한 카메라 시스템에서 복수 개의 물체를 추적하기 위한 제어방법을 나타낸 동작 순서도이다.
도 5는 본 발명의 일 실시예에 의한 카메라 시스템에서 피사체의 우선순위를 결정하는 화면의 예를 나타낸 도면이다.
도 6은 본 발명의 일 실시예에 의한 카메라 시스템에서 피사체의 우선순위를 결정하는 다른 화면의 예를 나타낸 도면이다.
도 7은 본 발명의 일 실시예에 의한 카메라 시스템에서 피사체의 우선순위를 결정하는 또 다른 화면의 예를 나타낸 도면이다.
이하, 본 발명에 의한 일 실시예를 첨부된 도면을 참조하여 상세히 설명한다.
도 1은 본 발명의 일 실시예에 의한 카메라 시스템의 구성을 나타낸 도면이다.
도 1에서, 본 발명의 일 실시예에 의한 카메라 시스템(100)은 통상적인 디지털 카메라, 카메라(또는 카메라 모듈)을 구비한 이동 단말 등일 수 있다.
카메라 시스템(100)은 촬영부(110), 표시부(120), 입력부(130), 저장부(140) 및 제어부(150)를 포함한다.
촬영부(110)는 피사체에 대한 촬영을 통하여 영상 데이터를 출력하는 것으로, 피사체의 광학 영상을 형성하고, 형성된 광학 영상을 디지털 영상 데이터 즉, 원 영상 데이터(image raw data))로 검출한다. 이를 위해, 촬영부(110)는 적어도 하나의 렌즈를 구비하여 피사체의 광학 영상을 형성하는 렌즈계와, 렌즈계에 의해 형성된 광학 영상을 디지털 영상 데이터로 검출하는 CCD(charge-coupled device) 영상 센서, CMOS(complementary metal-oxide semiconductor) 영상 센서 등과 같은 영상 센서를 포함할 수 있다.
또한, 촬영부(110)는 통상의 영상 신호 처리부(image signal processor: ISP)를 포함하고, 촬영부(110)는 미리 설정된 프리뷰 설정 파라미터(해상도, 노이즈 필터링, 에지 개선 등)에 따라 원 영상 데이터로부터 프리뷰 영상 데이터를 생성하여 출력한다. 원 영상 데이터는 이미지 센서가 지원하는 풀 해상도를 가지면서 후처리(필터링 등)를 거치지 않은 영상 데이터를 말하고, 프리뷰 영상 데이터는 원 영상 데이터보다 낮은 해상도를 갖는 후처리된 영상 데이터를 말한다. 또한, 원 영상 데이터 및 프리뷰 영상 데이터는 각각 연속적인 영상 프레임들로 이루어진다.
표시부(120)는 촬영부(110)로부터 출력된 프리뷰 영상 데이터를 사용자에게 표시한다. 이러한 표시부(120)로는 액정표시장치(LCD, Liquid Crystal Display), 유기 발광 다이오드(OLED, Organic Light Emitting Diodes), 능동형 유기 발광 다이오드(AMOLED, Active Matrix Organic Light Emitting Diodes) 등을 사용할 수 있다.
또한, 표시부(120)는 디지털 카메라의 메뉴, 입력된 데이터, 기능 설정 정보 및 기타 다양한 정보를 사용자에게 시각적으로 제공한다.
또한, 표시부(120)는 디지털 카메라의 부팅 화면, 대기 화면, 메뉴 화면, 기타 프리뷰 화면을 출력하는 기능을 수행한다.
또한, 표시부(120)는 입력부(130)에 의해 선택된 복수 개의 피사체를 트랙킹하는 것을 표시한다.
입력부(130)는 관심 피사체 내의 하나 이상의 포인트를 선택하거나 또는 관심 피사체가 속하는 일정한 영역을 선택하여 복수 개의 피사체를 선택한다. 이러한 선택은 디지털 카메라에 부착된 5key 동작, 터치 스크린 등을 이용할 수 있다.
5key 동작을 이용한 피사체 선택 방법은 방향 버튼을 이용하여 화살표, 창, 점 등을 피사체에 위치한 후 선택 버튼을 누른다. 또는 방향 버튼을 사용하여 화살표를 어느 한 지점에 위치한 후 선택 버튼을 누르고, 다시 화살표를 다른 지점에 위치시킨 후 버튼을 누르면, 처음과 나중에 지정된 두 개의 위치를 바탕으로 사각형의 윈도우가 설정되고 윈도우 내에 관심 피사체 전 영역 또는 일부 영역이 포함된다.
또한, 터치 스크린을 이용한 피사체 선택 방법은 손 또는 펜 등으로 프리뷰 화면 상에 피사체가 위치하고 있는 영역을 누른다. 또는 손 또는 펜 등을 프리뷰 화면 상에서 누른 상태로 움직이면 시작과 끝의 지점을 꼭지점으로 갖는 사각형 윈도우가 설정되고, 윈도우 내에 관심 피사체 전 영역 또는 일부 영역이 포함된다.
한편, 본 발명의 일 실시예에서는 피사체 선택 방법에 있어서 사각형의 윈도우를 이용하여 선택하는 방법을 예로써 설명하였지만 모든 형태의 닫힌 모양의 도형의 윈도우를 적용할 수 있음은 물론이다. 예를 들어, 선택 버튼을 누른 상태에서 선택하고자 하는 피사체의 형태에 맞도록 임의의 윈도우 모양으로 설정할 수 있다.
또한, 입력부(130)는 영상 촬영 시, 초점 영역 설정 또는 촬영 개시를 위한 사용자 입력을 선택할 수 있다.
저장부(140)는 복수 개의 물체를 추적하기 위한 어플리케이션과 이와 관련된 그래픽 사용자 인터페이스(graphical user interface: GUI)를 제공하기 위한 영상들, 사용자 정보, 문서 등과 관련된 데이터베이스들, 카메라 시스템(100)을 구동하는데 필요한 배경 영상들(메뉴 화면, 대기 화면 등) 또는 운영 프로그램들 등을 저장할 수 있다.
저장부(140)는 촬영부(110)로부터 출력된 영상 데이터를 수신하여 저장하며, 복수 개의 물체를 추적하기 위한 데이터를 저장하는 메모리(DRAM)이다. 예를 들어, 프리뷰 화면 밖으로 피사체가 벗어날 경우 추적하던 피사체의 특징들을 저장부(140)에 저장하고, 프리뷰 화면 안으로 피사체가 다시 들어올 경우 저장부(140)에 저장하고 있던 피사체의 특징들을 추출하여 다시 트랙킹을 수행할 수 있도록 한다.
또한, 저장부(140)는 카메라 시스템(100)의 동작에 필요한 프로그램 및 데이터를 저장하는 역할을 수행하며, 프로그램 영역과 데이터 영역으로 구분될 수 있다. 프로그램 영역은 카메라 시스템(100)의 전반적인 동작을 제어하는 프로그램 및 카메라 시스템(100)을 동작시키는 운영체제(OS, Operating System), 멀티미디어 컨텐츠 재생 등에 필요한 응용 프로그램, 휴대 단말기(100)의 기타 옵션 기능, 예컨대, 카메라 기능, 소리 재생 기능, 이미지 또는 동영상 재생 기능에 필요한 응용 프로그램 등을 저장할 수 있다. 데이터 영역은 카메라 시스템(100)의 사용에 따라 발생하는 데이터가 저장되는 영역으로서, 이미지, 동영상, 폰 북 등을 저장할 수 있다.
제어부(150)는 카메라 시스템(100)의 각 구성 요소에 대한 전반적인 동작을 제어한다. 특히, 제어부(150)는 초점 영역 내에서 발생하는 피사체의 움직임만을 고려하여 초점을 조절하는 일련의 과정을 제어할 수 있으며, 이를 위해 피사체 등록부(151), 영역 추출부(152), 초점 조절부(153), 움직임 감지부(154), 피사체 결정부(155) 및 피사체 추적부(156)를 더 포함한다.
피사체 등록부(151)는 사용자가 미리 다수의 관심 피사체를 등록한다. 여기서, 피사체는 촬영하고자 하는 대상이 되는 물체를 의미하며, 하나 이상의 피사체를 등록할 수 있다. 예를 들어, 디지털 카메라 등에 저장된 사진 속에서 사용자가 촬영하고자 하는 물체를 다양한 카메라 인터페이스, 예를 들면 5key 동작, 터치 스크린 등을 이용하여 등록한다.
한편, 본 발명의 일 실시예에서는 제어부(150)에 피사체 등록부(151)를 포함하는 것으로 설명하였으나, 선택적으로 외부의 장치, 예를 들면 외부의 서버 또는 PC 등에서 관심 피사체를 등록하고, 이를 제어부(150)로 다운로드 받아 추적하는 경우 피사체 등록부(151)는 제외하여 구성할 수도 있다.
영역 추출부(152)는 입력부(130)에 의해 선택된 포인트 또는 선택된 영역을 기초로 피사체의 영역을 추출한다. 여기서, 피사체 영역은 관심 피사체의 주요한 일부 영역, 관심 피사체의 전체 영역 또는 관심 피사체를 포함하는 영역을 포함한다.
또한, 영역 추출부(152)는 촬영부(110)로부터 출력된 영상 데이터를 수신하는 경우, 표시부(120)에 표시되는 프리뷰 화면을 미리 설정된 크기로 분할한다. 분할된 영역은 피사체의 움직임을 계산하기 위한 영역으로서, 프리뷰 화면을 가로 m, 세로 n으로 나누어 전체 'm x n' 개의 영역으로 분할한다. 분할되는 영역의 개수는 디지털 카메라의 사양에 따라 가변적으로 변할 수 있다. 분할되는 영역이 많아질수록 한 개 영역의 크기는 작아지며, 피사체의 작은 움직임에도 초점 재조절 동작을 수행할 수 있다.
예를 들어, 프리뷰 화면의 가로는 a0부터 am까지 모두 m개로 분할되고, 세로는 b0부터 bn까지 모두 n개로 분할됨을 확인할 수 있다. 이하에서 기술되는 본 발명의 실시예에서는 'm x n' 개 각각의 영역을 트래킹 영역(Tracking Area)라고 칭할 수 있다. 그리고 피사체에 대한 초점이 조절되는 영역을 초점 영역으로 칭하고, 초점 영역을 포함하는 트래킹 영역을 활성 트래킹 영역(Active Tracking Area)으로 칭할 수 있다.
트래킹 영역은 영역 추출부(152)에 의해 임의로 분할되는 영역으로서, 사용자 선택에 의해 프리뷰 화면에 표시되거나 표시되지 않을 수 있다.
초점 조절부(153)는 촬영부(110)와 피사체와의 거리를 고려하여 선명한 영상을 촬영하기 위해 포커스를 수행한다. 이 경우, 초점을 조절하는 영역은 원, 사각형, 격자 등 그래픽적으로 표시할 수 있다. 본 발명의 실시예에 의하면, 초점 조절부(153)는 사용자로부터 초점 영역 선택을 위한 입력을 수신하면, 해당 영역을 초점 영역으로 선택한다. 반면, 초점 조절부(153)는 사용자의 초점 영역 선택을 위한 입력이 수신되지 않으면, 카메라 시스템(100)에 기본으로 설정된 영역을 초점 영역으로 선택한다.
그리고, 초점 조절부(153)는 초점 조절 후, 움직임 감지부(154)로부터 피사체의 움직임 감지 신호를 수신하면 초점 영역을 중심으로 초점을 재조절한다. 초점이 재조절되는 횟수는 1회일 수 있다. 복수 회에 걸쳐 초점을 재조절하면, 불필요하게 전류가 소모될 수 있기 때문이다.
본 발명의 일 실시예에 의한 초점 조절부(153)는 복수 개의 물체를 추적하기 위하여 AF(Auto Focusing) 또는 CAF(Continuous Auto Focusing)의 수행 시, 피사체의 움직임 정보를 함께 이용하여 포커스 수행 여부를 결정한다.
움직임 감지부(154)는 초점 조절부(153)가 초점 조절 동작 완료 후, 피사체의 움직임이 발생하는지 여부를 감지한다. 이 경우, 움직임 감지부(154)는 피사체의 움직임 발생 여부를 판단하기 위한 기준 영상을 저장하고, 기준 영상과 현재 영상의 데이터 값이 상이한 경우, 피사체의 움직임이 발생한 것으로 감지할 수 있다. 만약, 피사체의 움직임이 발생하면 움직임 감지 신호를 발생시켜 초점 조절부(153)로 출력한다. 그러면 초점 조절부(153)는 움직임 감지 신호를 수신하여 초점 영역을 중심으로 초점을 재조절한다.
움직임 감지부(154)는 촬영부(110)로부터 출력된 프리뷰 영상 데이터를 수신하여 피사체(즉, 물체)의 움직임 여부를 감지한다.
또한, 움직임 감지부(154)는 현재 영상 프레임과 이전 영상 프레임을 비교하여 현재 영상 프레임과 이전 영상 프레임의 차 즉, 연속된 두 영상 프레임의 차로 피사체의 움직임 여부를 검출한다.
피사체 결정부(155)는 사용자가 복수 개의 피사체를 선택한 경우, 피사체의 움직임, 거리 및 크기를 고려하여 어떤 피사체에 우선순위(priority)를 줄 것인가를 결정하고 메인 피사체를 결정한다. 피사체의 우선순위를 결정하는 구체적인 방법에 대해서는 도 2 및 도 3을 참조하여 이후에 설명한다.
피사체 결정부(155)는 촬영부(110)로부터 입력된 영상에서 피사체 등록부(151)에 등록된 피사체를 검출한다. 현재 촬영하고자 하는 장면, 예를 들면 디지털 카메라의 프리뷰 화면을 통해 사용자가 볼 수 있는 입력 영상에서 피사체 등록부(151)에 등록된 피사체가 있는지 판단한다. 여기서, 판단 방법은 입력 영상과 피사체 영상에서 각각 특징을 추출하여 유사한지 여부를 판단하는데, 특징 추출은 SIFT(Scale Invariant Feature Transform) 특징 추출, 에지 특징 추출, 또는 컬러 특징 추출 등을 사용할 수 있다. SIFT는 영상의 크기 변화와 회전 변화에 강인한 특징점을 추출하는 알고리즘이고, 에지 특징 추출은 영상에서 에지 영상을 추출하고, 추출된 에지의 평균값을 이용하여 특징을 추출하고, 컬러 특징은 영상의 비주얼 특징 중 가장 두드러진 특징 중의 하나이며 영상의 컬러 히스토그램을 많이 사용하고, 컬러 영상의 밝기 값(intensity values)을 히스토그램으로 계산하여 컬러 특징을 추출하여 유사도를 비교한다.
피사체 추적부(156)는 피사체 결정부(155)에서 결정된 피사체를 중심으로 물체 추적(Object Tracking) 알고리즘을 사용하여 피사체의 움직임을 파악하고 지속적으로 추적한다. 여기서 추적 방법은 공지의 파티클 필터(Particle filter), 평균 시프트(mean shift) 또는 LKT(Lucas, Kanade & Tomasi) 등을 포함하는 물체 추적(Object Tracking) 알고리즘을 사용한다.
또한, 피사체 추적부(156)는 복수 개의 피사체를 추적할 경우, 피사체 결정부(155)에서 결정된 메인 피사체를 중심으로 복수 개의 피사체에 대한 물체 추적(Object Tracking)을 수행한다.
다음에는, 피사체 결정부(155)에서 사용자가 미리 선택한 복수 개의 피사체 중에서 어떤 피사체에 우선순위를 줄 것인가 결정하는 방법을 도 2 및 도 3을 참조하여 이후에 설명한다.
도 2는 본 발명의 일 실시예에 의한 복수 개의 피사체 선택 화면을 나타낸 도면이고, 도 3은 본 발명의 일 실시예에 의한 피사체와의 거리를 나타낸 도면이다.
(1) 피사체의 상하좌우 움직임 정도에 따라 우선순위를 결정하는 방법
먼저, 디지털 카메라의 프리뷰 화면 즉, 표시부(120)에서 입력부(130)를 통해 관심 피사체(121, 122)를 2개 이상 선택한다(도 2 참조).
본 발명의 일 실시예에서는 터치를 설명하지만, 터치가 아닌 반셔터를 누르거나 다른 선택 버튼(예를 들어, 5key)을 눌러 관심 피사체(121, 122)를 선택할 수 있다.
선택된 피사체(121, 122)는 물체 추적(Object Tracking) 알고리즘이 수행되며, 프리뷰 화면(120) 내에 보여진다면 계속 트랙킹하고, 프리뷰 화면(120) 밖으로 벗어나더라도 저장부(140)에서 기억하고 있던 피사체의 특징들을 중심으로 트랙킹을 다시 시도할 수 있다.
이후, 미리 선택된 복수 개의 피사체(121, 122)를 중심으로 트랙킹을 하고, 동시에 각 피사체들(121, 122)의 움직임을 움직임 감지부(154)에서 감지한다.
따라서, 프리뷰 화면(120) 밖으로 벗어난 피사체(121 또는 122)는 우선순위(priority)를 가장 낮게 주고, 움직임이 빠른 피사체(121, 122) 순서대로 프리뷰 화면(120)에 표시한다. 프리뷰 화면(120)에 표시하는 방법은 예를 들어, 트랙킹 박스 색상(tracking box color) 등으로 사용자에게 보여 주며, 움직임이 없는 피사체(121 또는 122)에 자동으로 카메라 시스템(100)은 초점 조절을 수행한다. 혹은 반 셔터를 누르는 동작으로 초점 조절을 수행할 수 있다.
피사체(121, 122)가 이전 영상 프레임의 초점 평면 상에서 상하좌우로 움직이게 되면, 현재 영상 프레임의 피사체(121, 122) 크기가 이전 영상 프레임의 피사체(121, 122) 크기와 동일하다. 따라서, 이러한 피사체(121, 122)의 상하좌우 움직임 정도에 따라 우선순위를 결정하고 촬영을 수행하면 가장 움직임이 없는 피사체(121 또는 122)를 중심으로 촬영을 유도하여 사용자가 촬영 시, 관심 피사체(121, 122)가 가장 잘 나온 사진을 얻을 수 있게 된다. 그리고 한 피사체의 트랙킹이 아닌 복수 개의 관심 피사체(121, 122)를 미리 선택하여 후보군으로 둠으로써 피사체(121, 122)를 여러 번 재선택 및 선택된 피사체(121, 122)를 다시 초점 조절하는 번거로움을 피할 수 있게 된다.
(2) 피사체와의 거리에 따라 우선순위를 결정하는 방법
먼저, 디지털 카메라의 프리뷰 화면(120)에서 입력부(130)를 통해 관심 피사체(121, 122)를 2개 이상 선택한다(도 2 참조).
다음, 촬영하고자 하는 촬영 거리를 미리 선택한다. 이때, 초점 스텝(focus step)을 보여 주고 사용자가 범위 내에서 선택할 수 있도록 한다.
선택된 피사체(121, 122)는 물체 추적(Object Tracking) 알고리즘이 수행되며, 프리뷰 화면(120) 내에 보여진다면 계속 트랙킹하고, 프리뷰 화면(120) 밖으로 벗어나더라도, 저장부(140)에서 기억하고 있던 피사체(121, 122)의 특징들을 중심으로 트랙킹을 다시 시도할 수 있다.
이후, 미리 선택된 범위 내에 피사체(121 또는 122)가 위치한다면, 우선순위(priority)를 준다.
도 3에서, 중앙에 있는 숫자가 피사체(121, 122)와의 거리를 나타내며, 거리 10m에 있는 사물에 초점을 맞춘 것을 의미한다. 거리계의 정보는 렌즈마다 다르며, 망원에서 보다 정확한 거리 측정이 용이하다.
이와 같이, 피사체(121 또는 122)와의 거리에 따라 우선순위를 결정하고 촬영을 수행하면 관심 피사체(121, 122)가 가장 잘 나온 사진을 얻을 수 있게 된다. 그리고 한 피사체의 트랙킹이 아닌 복수 개의 관심 피사체(121, 122)를 미리 선택하여 후보군으로 둠으로써 피사체(121, 122)를 여러 번 재선택 및 선택된 피사체(121, 122)를 다시 초점 조절하는 번거로움을 피할 수 있게 된다.
(3) 앞뒤로 움직이는 피사체의 크기 변화에 따라 우선순위를 결정하는 방법
먼저, 디지털 카메라의 프리뷰 화면(120)에서 입력부(130)를 통해 관심 피사체(121, 122)를 2개 이상 선택한다(도 2 참조).
이때, 피사체(121, 122)를 선택할 시 초점 조절을 수행하고 트랙킹을 시도하면서 피사체(121, 122)와의 거리를 우선적으로 판단한다.
다음, 피사체(121 또는 122)가 앞으로 다가오거나 뒤로 멀어질 경우 트랙킹 박스 크기는 커지거나 작아진다. 박스 크기가 변할 경우 움직인 피사체(121 또는 122)의 우선순위를 낮추고 피사체(121 또는 122)에 초점 조절을 다시 시도한다.
즉, 피사체(121 또는 122)가 앞뒤로 움직일 경우, 초점이 흐려질 확률이 높아지므로 우선순위를 낮춘다.
피사체(121, 122)가 이전 영상 프레임의 초점 평면 상에서 앞뒤로 움직이게 되면, 현재 영상 프레임의 피사체(121, 122) 크기가 이전 영상 프레임의 피사체(121, 122) 크기와 달라진다. 따라서, 이러한 피사체(121, 122)의 크기 변화에 따라 우선순위를 결정하고 촬영을 수행하면 가장 움직임이 없는 피사체(121 또는 122)를 중심으로 촬영을 유도하여 사용자가 촬영 시, 관심 피사체(121, 122)가 가장 잘 나온 사진을 얻을 수 있게 된다. 그리고 한 피사체의 트랙킹이 아닌 복수 개의 관심 피사체(121, 122)를 미리 선택하여 후보군으로 둠으로써 피사체(121, 122)를 여러 번 다시 선택하거나 또는 선택된 피사체(121, 122)를 다시 초점 조절하는 번거로움을 피할 수 있게 된다.
이하, 본 발명의 일 실시예에 의한 카메라를 이용한 물체 추적 방법의 동작 과정 및 작용 효과를 설명한다.
도 4는 본 발명의 일 실시예에 의한 카메라 시스템에서 복수 개의 물체를 추적하기 위한 제어방법을 나타낸 동작 순서도이고, 도 5는 본 발명의 일 실시예에 의한 카메라 시스템에서 피사체의 우선순위를 결정하는 화면의 예를 나타낸 도면이다.
도 4에서, 본 발명의 카메라 시스템은 복수 개의 물체를 추적하기에 앞서, 먼저 피사체 등록부(151)를 통해 다수의 관심 피사체(123, 124)를 등록한다(200). 여기서, 피사체(123, 124)는 촬영하고자 하는 대상이 되는 물체를 의미하며, 하나 이상의 피사체(123, 124)를 등록할 수 있다.
촬영부(110)는 피사체(123, 124)에 대한 촬영을 통하여 영상 데이터를 출력하며, 표시부(120)는 촬영부(110)로부터 출력된 프리뷰 영상 데이터를 화면을 통해 사용자에게 표시한다.
따라서, 사용자는 표시부(120)의 프리뷰 화면에서 관심 피사체(123, 124) 내의 하나 이상의 포인트를 선택하거나 또는 관심 피사체(123, 124)가 속하는 일정한 영역을 선택하여 도 5에 도시한 바와 같이, 복수 개의 피사체(123, 124; 예를 들어, 2개의 공)를 선택한다(202). 이러한 선택은 디지털 카메라에 부착된 5key 동작, 터치 스크린 등을 이용할 수 있다.
복수 개의 관심 피사체(123, 124)가 선택되면, 피사체 추적부(156)는 물체 추적 알고리즘을 동작시키고(204), 움직임 감지부(154)는 피사체(123, 124)의 움직임 여부를 계산하기 위해 픽셀 연산을 수행한다(206).
즉, 움직임 감지부(154)는 현재 영상 프레임과 이전 영상 프레임을 비교하여 현재 영상 프레임과 이전 영상 프레임의 차 즉, 연속된 두 영상 프레임의 차로 피사체(123, 124)의 움직임 여부를 판단한다.
예를 들어, 현재 영상 프레임과 이전 영상 프레임 간의 차를 계산하여 차가 작다면 피사체(123, 124)의 움직임이 작다는 것을 의미하고, 차가 크다면 피사체(123, 124)의 움직임이 크다는 것을 의미한다.
또한, 이전 영상 프레임의 피사체가 현재 영상 프레임에서 어떻게 움직였는가를 판단한다. 이러한 움직임의 정도는 움직임 벡터로 표현된다. 이러한 움직임 판단 방법은 공지된 기술이므로 그 상세한 설명을 생략한다.
움직임 감지부(154)를 통해 피사체(123, 124)의 움직임이 있는가를 판단하여(208), 피사체(123, 124)의 움직임이 없으면 피사체 결정부(155)는 우선순위가 높은 메인 피사체(123 또는 124)로 결정한다(210).
단계 208의 판단 결과, 피사체(123, 124)의 움직임이 있으면 피사체 결정부(155)는 우선순위가 낮은 후보 피사체(123 또는 124)로 등록하고 단계 204로 피드백하여 이후의 동작을 진행한다.
한편, 피사체(124)의 움직임이 있는 박스는 레드(red) 색상으로, 피사체(123)의 움직임이 없는 박스는 그린(green) 색상으로 표시하여 우선순위가 높은 피사체가 어떤 물체인지 쉽게 확인할 수 있도록 한다.
메인 피사체(123)가 결정되면, 초점 조절부(153)는 움직임이 없는 피사체(123; 구체적으로, 그린 박스의 공)를 중심으로 초점 조절을 수행한다.
즉, 그린 박스는 멈춰 있는 공이므로 그린 박스의 공을 중심으로 초점 조절을 수행하고, 움직이는 레드 박스의 공은 관심 피사체(124) 후보 영역으로 등록해둔다.
따라서, 촬영을 수행하면 가장 움직임이 없는 피사체(123)를 기준으로 선명한 결과 이미지를 얻을 수 있게 된다.
또한, 움직임이 있는 피사체(124)에 우선순위를 주지만, 관심 피사체(123, 124)를 변경하고 싶은 경우 터치 스크린 상의 화살표 또는 5key를 이용하여 관심 피사체(123, 124)를 변경할 수 있다. 이때 변경된 피사체(123, 124) 중심의 초점 조절 동작 및 촬영을 수행한다.
다음에는 피사체와의 거리에 따라 우선순위를 결정하는 방법을 도 6을 참조하여 설명한다.
도 6은 본 발명의 일 실시예에 의한 카메라 시스템에서 피사체의 우선순위를 결정하는 다른 화면의 예를 나타낸 도면이다.
도 6에서, 본 발명의 카메라 시스템(100)은 복수 개의 물체를 추적하기에 앞서, 먼저 피사체 등록부(151)를 통해 다수의 관심 피사체(121, 122)를 등록한다.
촬영부(110)는 피사체(121, 122)에 대한 촬영을 통하여 영상 데이터를 출력하며, 표시부(120)는 촬영부(110)로부터 출력된 프리뷰 영상 데이터를 화면을 통해 사용자에게 표시한다.
따라서, 사용자는 표시부(120)의 프리뷰 화면에서 관심 피사체(121, 122) 내의 하나 이상의 포인트를 선택하거나 또는 관심 피사체(121, 122)가 속하는 일정한 영역을 선택하여 복수 개의 피사체(121, 122; 예를 들어, 컵과 음료)를 선택한다. 이러한 선택은 디지털 카메라에 부착된 5key 동작, 터치 스크린 등을 이용할 수 있다.
피사체(121, 122) 선택 시, 초점 조절(Auto Focusing)을 1회 수행하여 AF 정보(거리 정보)를 저장부(140)에 저장하여 거리 판단에 이용한다.
다음, 촬영하고자 하는 촬영 거리를 미리 선택한다. 이때, 매크로(macro) 범위를 보여 주고 사용자가 범위 내에서 선택할 수 있도록 한다.
선택된 매크로 범위 내에 피사체(121)가 위치한다면, 매크로(macro) 범위의 영역에 있는 피사체(121)에 우선순위를 높게 설정한다.
저장부(140)에 저장된 피사체(121, 122) 저장 거리를 비교하여 매크로 범위 내에 있는 피사체(121)에 우선순위를 주어 매크로 영역 내의 피사체(121)를 중심으로 초점 조절을 수행한다.
따라서, 촬영을 수행하면 매크로 범위 내에 있는 피사체(121)를 기준으로 선명한 결과 이미지를 얻을 수 있게 된다.
다음에는 동일한 포커스 거리에서 피사체의 크기 변화에 따라 우선순위를 결정하는 방법을 도 7을 참조하여 설명한다.
도 7은 본 발명의 일 실시예에 의한 카메라 시스템에서 피사체의 우선순위를 결정하는 또 다른 화면의 예를 나타낸 도면이다.
도 7에서, 본 발명의 카메라 시스템(100)은 복수 개의 물체를 추적하기에 앞서, 먼저 피사체 등록부(151)를 통해 다수의 관심 피사체(125, 126)를 등록한다.
촬영부(110)는 피사체(125, 126)에 대한 촬영을 통하여 영상 데이터를 출력하며, 표시부(120)는 촬영부(110)로부터 출력된 프리뷰 영상 데이터를 화면을 통해 사용자에게 표시한다.
따라서, 사용자는 표시부(120)의 프리뷰 화면에서 관심 피사체(125, 126) 내의 하나 이상의 포인트를 선택하거나 또는 관심 피사체(125, 126)가 속하는 일정한 영역을 선택하여 복수 개의 피사체(125, 126; 예를 들어, 2개의 과일)를 선택한다. 이러한 선택은 디지털 카메라에 부착된 5key 동작, 터치 스크린 등을 이용할 수 있다.
도 7에서 보듯이, 2개의 과일 중에서 그린 박스의 과일이 레드 박스의 과일에 비해 박스 크기가 크다.
따라서, 박스 크기가 큰 피사체(125)에 우선순위를 준다.
이와 같이, 동일 포커스 거리에서 박스 크기가 큰 것에 우선순위를 주고, 레드 박스의 과일이 급격히 앞으로 오거나 뒤로 멀어진다면, 박스는 동일 위치에서 크기가 급격히 변한다. 즉, 일정 임계값(threshold) 이상의 박스 크기가 변한다면 움직이지 않는 피사체(126)에 비해 우선순위가 상대적으로 낮아진다.
이에 따라, 박스 크기만을 고려하여 우선순위를 크게 하지 않고 박스 크기가 급격히 변화하는 피사체(125)에 대해서는 우선순위를 상대적으로 낮게 함으로써 초점 조절 및 촬영을 수행할 수 있도록 한다.
100 : 카메라 시스템 110 : 촬영부
120 : 표시부 130 : 입력부
140 : 저장부 150 : 제어부
151 : 피사체 등록부 152 : 영역 추출부
153 : 초점 조절부 154 : 움직임 감지부
155 : 피사체 결정부 156 : 피사체 추적부

Claims (18)

  1. 카메라를 이용한 물체 추적 방법에 있어서,
    프리뷰 영상을 상기 카메라 화면에 표시하는 단계;
    상기 프리뷰 영상에서 복수 개의 관심 피사체를 선택하는 단계;
    상기 선택된 복수 개의 관심 피사체를 트랙킹하여 우선순위를 결정하는 단계; 및
    상기 우선순위가 가장 높은 피사체를 중심으로 초점 조절을 수행하는 단계를 포함하는 카메라를 이용한 물체 추적 방법.
  2. 제1항에 있어서,
    적어도 하나 이상의 피사체를 등록하는 단계를 더 포함하고,
    상기 선택 단계는,
    상기 등록된 하나 이상의 피사체 중에서 복수 개의 관심 피사체를 선택하는 카메라를 이용한 물체 추적 방법.
  3. 제1항에 있어서,
    상기 결정 단계는,
    상기 피사체의 움직임, 거리 및 크기를 고려하여 상기 복수 개의 피사체 중 어떤 피사체에 우선순위를 줄 것인가 결정하는 카메라를 이용한 물체 추적 방법.
  4. 제3항에 있어서,
    상기 피사체의 움직임을 검출하는 단계를 더 포함하고,
    상기 결정 단계는,
    상기 피사체의 움직임 여부에 따라 우선순위를 결정하는 카메라를 이용한 물체 추적 방법.
  5. 제4항에 있어서,
    상기 결정 단계는,
    상기 복수 개의 관심 피사체 중 상기 움직임이 적은 피사체의 우선순위를 높이고, 상기 움직임이 빠른 피사체의 우선순위를 낮추는 카메라를 이용한 물체 추적 방법.
  6. 제5항에 있어서,
    상기 결정 단계는,
    상기 복수 개의 관심 피사체 중 상기 움직임이 가장 적은 피사체를 메인 피사체로 지정하는 카메라를 이용한 물체 추적 방법.
  7. 제6항에 있어서,
    상기 초점 조절 단계는,
    상기 메인 피사체를 중심으로 초점 조절을 수행하는 카메라를 이용한 물체 추적 방법.
  8. 제3항에 있어서,
    촬영하고자 하는 촬영 거리를 선택하는 단계를 더 포함하고,
    상기 결정 단계는,
    상기 선택된 촬영 거리 내에 있는 피사체에 우선순위를 주는 카메라를 이용한 물체 추적 방법.
  9. 제3항에 있어서,
    상기 피사체의 크기를 검출하는 단계를 더 포함하고,
    상기 결정 단계는,
    상기 피사체의 크기가 큰 것에 우선순위를 주는 카메라를 이용한 물체 추적 방법.
  10. 제1항에 있어서,
    상기 복수 개의 관심 피사체의 특징들을 저장하는 단계와,
    상기 카메라 화면 밖으로 피사체가 벗어날 경우, 상기 저장된 특징들을 중심으로 트랙킹을 재시도하는 단계를 더 포함하는 카메라를 이용한 물체 추적 방법.
  11. 프리뷰 영상을 카메라 화면에 표시하는 표시부;
    상기 프리뷰 영상에서 복수 개의 관심 피사체를 선택하는 입력부;
    상기 선택된 복수 개의 관심 피사체를 트랙킹하는 피사체 추적부;
    상기 선택된 복수 개의 관심 피사체 중 어떤 피사체에 우선순위를 줄 것인가 결정하는 피사체 결정부; 및
    상기 우선순위가 가장 높은 피사체를 중심으로 초점 조절을 수행하는 초점 조절부를 포함하는 카메라 시스템.
  12. 제11항에 있어서,
    적어도 하나 이상의 피사체를 등록하는 피사체 등록부를 더 포함하고,
    상기 입력부는 상기 등록된 하나 이상의 피사체 중에서 복수 개의 관심 피사체를 선택하는 카메라 시스템.
  13. 제11항에 있어서,
    상기 피사체 추적부는 상기 복수 개의 관심 피사체를 트랙킹할 경우, 상기 우선순위가 가장 높은 피사체를 중심으로 트랙킹을 수행하는 카메라 시스템.
  14. 제11항에 있어서,
    상기 복수 개의 피사체를 트랙킹하기 위한 피사체의 특징들을 저장하는 저장부를 더 포함하고,
    상기 피사체 추적부는 상기 카메라 화면 밖으로 피사체가 벗어날 경우, 상기 저장된 특징들을 중심으로 트랙킹을 재시도하는 카메라 시스템.
  15. 제11항에 있어서,
    상기 피사체 결정부는 상기 피사체의 움직임, 거리 및 크기를 고려하여 상기 복수 개의 피사체 중 어떤 피사체에 우선순위를 줄 것인가 결정하는 카메라 시스템.
  16. 제15항에 있어서,
    상기 피사체의 움직임을 검출하는 움직임 감지부를 더 포함하고,
    상기 피사체 결정부는 상기 복수 개의 관심 피사체 중 상기 움직임이 적은 피사체의 우선순위를 높이고, 상기 움직임이 빠른 피사체의 우선순위를 낮추는 카메라 시스템.
  17. 제15항에 있어서,
    상기 피사체 결정부는 촬영하고자 하는 촬영 거리 내에 있는 피사체에 우선순위를 주는 카메라 시스템.
  18. 제15항에 있어서,
    상기 피사체 결정부는 상기 피사체의 크기가 큰 것에 우선순위를 주는 카메라 시스템.
KR20130015722A 2013-02-14 2013-02-14 카메라를 이용한 물체 추적 방법 및 이를 위한 카메라 시스템 Ceased KR20140102443A (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR20130015722A KR20140102443A (ko) 2013-02-14 2013-02-14 카메라를 이용한 물체 추적 방법 및 이를 위한 카메라 시스템
EP14151584.1A EP2768214A3 (en) 2013-02-14 2014-01-17 Method of tracking object using camera and camera system for object tracking
US14/178,457 US20140226858A1 (en) 2013-02-14 2014-02-12 Method of tracking object using camera and camera system for object tracking
CN201410048384.4A CN103997598A (zh) 2013-02-14 2014-02-12 使用相机追踪对象的方法和用于对象追踪的相机系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20130015722A KR20140102443A (ko) 2013-02-14 2013-02-14 카메라를 이용한 물체 추적 방법 및 이를 위한 카메라 시스템

Publications (1)

Publication Number Publication Date
KR20140102443A true KR20140102443A (ko) 2014-08-22

Family

ID=50070292

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20130015722A Ceased KR20140102443A (ko) 2013-02-14 2013-02-14 카메라를 이용한 물체 추적 방법 및 이를 위한 카메라 시스템

Country Status (4)

Country Link
US (1) US20140226858A1 (ko)
EP (1) EP2768214A3 (ko)
KR (1) KR20140102443A (ko)
CN (1) CN103997598A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018147570A1 (en) * 2017-02-10 2018-08-16 Lg Electronics Inc. Terminal and method of controlling therefor
KR20180124981A (ko) * 2016-06-03 2018-11-21 구글 엘엘씨 광 흐름 기반 자동 초점
KR20210102144A (ko) * 2019-11-19 2021-08-19 주식회사 쓰리아이 사용자 단말기 및 단말기 거치대의 제어방법

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10511649B2 (en) * 2012-11-20 2019-12-17 Pelco, Inc. Method and apparatus for efficiently prioritizing elements in a video stream for low-bandwidth transmission
US9554030B2 (en) * 2014-09-29 2017-01-24 Yahoo! Inc. Mobile device image acquisition using objects of interest recognition
CN104503696B (zh) * 2014-12-30 2017-08-29 广东欧珀移动通信有限公司 一种相机预览界面的物体追踪方法及系统
US10038836B2 (en) * 2015-03-17 2018-07-31 Mediatek Inc. Automatic image capture during preview and image recommendation
KR102429427B1 (ko) * 2015-07-20 2022-08-04 삼성전자주식회사 촬영 장치 및 그 동작 방법
EP3347789B1 (en) 2015-09-11 2021-08-04 SZ DJI Technology Co., Ltd. Systems and methods for detecting and tracking movable objects
EP3465085B1 (en) * 2016-06-06 2021-12-29 SZ DJI Osmo Technology Co., Ltd. Carrier-assisted tracking
CN106488124A (zh) * 2016-10-20 2017-03-08 努比亚技术有限公司 一种跟踪锁定微距拍摄方法及终端
US10432853B2 (en) 2017-02-27 2019-10-01 Sony Corporation Image processing for automatic detection of focus area
JP6991746B2 (ja) * 2017-06-09 2022-01-13 キヤノン株式会社 撮像装置
US10304207B2 (en) * 2017-07-07 2019-05-28 Samsung Electronics Co., Ltd. System and method for optical tracking
CN107580181A (zh) * 2017-08-28 2018-01-12 努比亚技术有限公司 一种对焦方法、设备和计算机可读存储介质
CN108364683B (zh) * 2018-02-12 2020-05-19 珠海市万瑙特健康科技有限公司 目标对象的触发方法、装置、计算机设备和存储介质
CN109308778B (zh) * 2018-09-11 2020-08-18 深圳市智美达科技股份有限公司 移动侦测告警方法、装置、采集设备和存储介质
CN109194916B (zh) * 2018-09-17 2022-05-06 东莞市丰展电子科技有限公司 一种具有图像处理模块的可移动拍摄系统
CN109274888B (zh) * 2018-09-27 2020-08-11 惠州Tcl移动通信有限公司 一种拍照的方法、存储介质及移动终端
US20210303830A1 (en) * 2018-12-18 2021-09-30 Rovi Guides, Inc. Systems and methods for automated tracking using a client device
CN110049234B (zh) * 2019-03-05 2021-08-24 努比亚技术有限公司 一种成像方法、移动终端及存储介质
CN110149482B (zh) * 2019-06-28 2021-02-02 Oppo广东移动通信有限公司 对焦方法、装置、电子设备和计算机可读存储介质
JP7450371B2 (ja) * 2019-11-21 2024-03-15 キヤノン株式会社 被写体追尾装置及びその制御方法、プログラム、並びに記憶媒体
CN110913132B (zh) * 2019-11-25 2021-10-26 维沃移动通信有限公司 对象跟踪方法及电子设备
KR102131377B1 (ko) * 2020-04-17 2020-07-08 주식회사 파블로항공 감시를 위한 무인 이동체 및 이를 포함하는 시스템
JP2022137760A (ja) * 2021-03-09 2022-09-22 オリンパス株式会社 焦点調節装置および焦点調節方法
CN113473007B (zh) * 2021-06-24 2023-04-18 维沃移动通信（杭州）有限公司 拍摄方法及装置
CN114143450B (zh) * 2021-11-19 2024-04-12 惠州Tcl移动通信有限公司 移动终端对焦处理方法、装置、移动终端及存储介质
CN118555478A (zh) * 2023-02-27 2024-08-27 荣耀终端有限公司 一种拍摄方法和电子设备
WO2025079897A1 (en) * 2023-10-11 2025-04-17 Samsung Electronics Co., Ltd. A method and system for optimizing auto-focus functionality for capturing a multimedia content
US20250200875A1 (en) * 2023-12-15 2025-06-19 Adeia Guides Inc. Methods and systems for scanning objects

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5179407A (en) * 1989-06-19 1993-01-12 Nikon Corporation Automatic focusing device
US5937216A (en) * 1996-05-24 1999-08-10 Nikon Corporation Focal adjustment apparatus for a camera
US6901110B1 (en) * 2000-03-10 2005-05-31 Obvious Technology Systems and methods for tracking objects in video sequences
US6766035B1 (en) * 2000-05-03 2004-07-20 Koninklijke Philips Electronics N.V. Method and apparatus for adaptive position determination video conferencing and other applications
US20040207743A1 (en) * 2003-04-15 2004-10-21 Nikon Corporation Digital camera system
EP1601189A2 (en) * 2004-05-26 2005-11-30 Fujinon Corporation Autofocus system
JP2006113265A (ja) * 2004-10-14 2006-04-27 Fujinon Corp オートフォーカスシステム
JP4338047B2 (ja) * 2006-07-25 2009-09-30 富士フイルム株式会社 撮像装置
US7916897B2 (en) * 2006-08-11 2011-03-29 Tessera Technologies Ireland Limited Face tracking for controlling imaging parameters
JP4264663B2 (ja) * 2006-11-21 2009-05-20 ソニー株式会社 撮影装置、画像処理装置、および、これらにおける画像処理方法ならびに当該方法をコンピュータに実行させるプログラム
US8264545B2 (en) * 2006-12-11 2012-09-11 Nikon Corporation Electronic camera
US8965042B2 (en) * 2007-03-20 2015-02-24 International Business Machines Corporation System and method for the measurement of retail display effectiveness
JP5053731B2 (ja) * 2007-07-03 2012-10-17 キヤノン株式会社 画像表示制御装置及び画像表示制御方法及びプログラム及び記録媒体
JP4958659B2 (ja) * 2007-07-03 2012-06-20 キヤノン株式会社 画像表示制御装置及び画像表示制御方法及びプログラム及び記録媒体
JP4961282B2 (ja) * 2007-07-03 2012-06-27 キヤノン株式会社 表示制御装置及びその制御方法
JP5082631B2 (ja) * 2007-07-06 2012-11-28 株式会社ニコン 撮影装置
JP2009109839A (ja) * 2007-10-31 2009-05-21 Nikon Corp 画像追尾装置、撮像装置
US8218012B2 (en) * 2008-03-18 2012-07-10 Bae Systems Information And Electronic Systems Integration Inc. Multi-window/multi-target tracking (MW/MT tracking) method and system for point source objects
EP2104338A3 (en) * 2008-03-19 2011-08-31 FUJIFILM Corporation Autofocus system
US20090237554A1 (en) * 2008-03-19 2009-09-24 Atsushi Kanayama Autofocus system
EP2104337A3 (en) * 2008-03-19 2011-04-27 Fujinon Corporation Autofocus system
JP5134476B2 (ja) * 2008-09-16 2013-01-30 キヤノン株式会社 撮像装置及びその制御方法
JP2010096962A (ja) * 2008-10-16 2010-04-30 Fujinon Corp Ａｆ枠自動追尾機能を備えたオートフォーカスシステム
US8134597B2 (en) * 2008-12-05 2012-03-13 Sony Ericsson Mobile Communications Ab Camera system with touch focus and method
JP4784678B2 (ja) * 2009-04-22 2011-10-05 カシオ計算機株式会社 撮像装置、撮像方法及びプログラム
JP5361528B2 (ja) * 2009-05-15 2013-12-04 キヤノン株式会社 撮像装置およびプログラム
JP2011027847A (ja) * 2009-07-22 2011-02-10 Fujifilm Corp Ａｆ枠自動追尾システム
US8648959B2 (en) * 2010-11-11 2014-02-11 DigitalOptics Corporation Europe Limited Rapid auto-focus using classifier chains, MEMS and/or multiple object focusing
JP5705883B2 (ja) * 2011-02-07 2015-04-22 富士フイルム株式会社 レンズ装置
JP2012205037A (ja) * 2011-03-25 2012-10-22 Olympus Imaging Corp 画像処理装置および画像処理方法
JP2013070164A (ja) * 2011-09-21 2013-04-18 Olympus Imaging Corp 撮像装置及び撮像方法
CN103988227B (zh) * 2011-12-16 2017-08-04 诺基亚技术有限公司 用于图像捕获目标锁定的方法和装置
US9077888B2 (en) * 2011-12-29 2015-07-07 Verizon Patent And Licensing Inc. Method and system for establishing autofocus based on priority
US8941722B2 (en) * 2012-01-03 2015-01-27 Sony Corporation Automatic intelligent focus control of video
JP2014081420A (ja) * 2012-10-15 2014-05-08 Olympus Imaging Corp 追尾装置及びその方法
US20140253785A1 (en) * 2013-03-07 2014-09-11 Mediatek Inc. Auto Focus Based on Analysis of State or State Change of Image Content

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180124981A (ko) * 2016-06-03 2018-11-21 구글 엘엘씨 광 흐름 기반 자동 초점
WO2018147570A1 (en) * 2017-02-10 2018-08-16 Lg Electronics Inc. Terminal and method of controlling therefor
US10573011B2 (en) 2017-02-10 2020-02-25 Lg Electronics Inc. Terminal and method of controlling therefor
KR20210102144A (ko) * 2019-11-19 2021-08-19 주식회사 쓰리아이 사용자 단말기 및 단말기 거치대의 제어방법

Also Published As

Publication number Publication date
CN103997598A (zh) 2014-08-20
EP2768214A2 (en) 2014-08-20
US20140226858A1 (en) 2014-08-14
EP2768214A3 (en) 2016-03-16

Similar Documents

Publication Publication Date Title
KR20140102443A (ko) 카메라를 이용한 물체 추적 방법 및 이를 위한 카메라 시스템
US11172133B2 (en) Zoom control device, control method of zoom control device, and recording medium
KR101822655B1 (ko) 카메라를 이용한 물체 인식 방법 및 이를 위한 카메라 시스템
US8988529B2 (en) Target tracking apparatus, image tracking apparatus, methods of controlling operation of same, and digital camera
US9154697B2 (en) Camera selection based on occlusion of field of view
US8379934B2 (en) Estimating subject motion between image frames
US8472671B2 (en) Tracking apparatus, tracking method, and computer-readable storage medium
US9679394B2 (en) Composition determination device, composition determination method, and program
AU2015319023B2 (en) Method for capturing image and image capturing apparatus
US8428308B2 (en) Estimating subject motion for capture setting determination
TWI425826B (zh) 影像選擇裝置、影像選擇方法
US8934040B2 (en) Imaging device capable of setting a focus detection region and imaging method for imaging device
WO2019071613A1 (zh) 一种图像处理方法及装置
US9195880B1 (en) Interactive viewer for image stacks
US20130141604A1 (en) Image capturing device and method for capturing details of entire shooting scene
US20110242395A1 (en) Electronic device and image sensing device
US20170374246A1 (en) Image capturing apparatus and photo composition method thereof
CN107493407B (zh) 拍照装置及拍照方法
JP2010226558A (ja) 画像処理装置、画像処理方法、及び、プログラム
US20130202163A1 (en) Subject determination apparatus that determines whether or not subject is specific subject
KR20150078275A (ko) 움직이는 피사체 촬영 장치 및 방법
JP2014050022A (ja) 画像処理装置、撮像装置、およびプログラム
US20150015771A1 (en) Image-capturing devices and methods
CN106488128B (zh) 一种自动拍照的方法及装置
TWI424738B (zh) The method of adjusting the resolution

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20130214

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20171222

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20130214

Comment text: Patent Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20190214

Patent event code: PE09021S01D

E601 Decision to refuse application
PE0601 Decision on rejection of patent

Patent event date: 20190730

Comment text: Decision to Refuse Application

Patent event code: PE06012S01D

Patent event date: 20190214

Comment text: Notification of reason for refusal

Patent event code: PE06011S01I