[go: up one dir, main page]

KR101641240B1 - Image display method and apparatus thereof - Google Patents

Image display method and apparatus thereof Download PDF

Info

Publication number
KR101641240B1
KR101641240B1 KR1020090126367A KR20090126367A KR101641240B1 KR 101641240 B1 KR101641240 B1 KR 101641240B1 KR 1020090126367 A KR1020090126367 A KR 1020090126367A KR 20090126367 A KR20090126367 A KR 20090126367A KR 101641240 B1 KR101641240 B1 KR 101641240B1
Authority
KR
South Korea
Prior art keywords
image
user voice
voice
photographed
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
KR1020090126367A
Other languages
Korean (ko)
Other versions
KR20110069577A (en
Inventor
최성림
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020090126367A priority Critical patent/KR101641240B1/en
Priority to PCT/KR2010/007612 priority patent/WO2011074776A2/en
Publication of KR20110069577A publication Critical patent/KR20110069577A/en
Application granted granted Critical
Publication of KR101641240B1 publication Critical patent/KR101641240B1/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/91Television signal processing therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N2007/145Handheld terminals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00Still video cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/907Television signal recording using static stores, e.g. storage tubes or semiconductor memories

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Telephone Function (AREA)
  • Navigation (AREA)
  • Television Signal Processing For Recording (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명은 동영상 파일(또는 스틸 영상)로부터 사용자가 원하는 영상을 신속하고 용이하게 검색 및 표시할 수 있는 영상 표시 장치 및 그 방법에 관한 것이다. 본 발명의 실시예들에 따른 영상 표시 장치는, 영상을 촬영하는 카메라 모듈과; 상기 촬영된 영상을 표시하는 표시부와; 영상을 검색하기 위한 입력이 수신되었을 때 사용자 음성을 수신하고, 상기 사용자 음성이 수신된 시점에 대응하는 상기 촬영된 영상의 촬영 시점과, 상기 촬영된 영상의 저장 위치와 상기 수신된 사용자 음성을 함께 저장부에 저장하는 제어부로 구성된다.The present invention relates to an image display apparatus and method that can promptly and easily search and display an image desired by a user from a moving image file (or a still image). An image display apparatus according to embodiments of the present invention includes a camera module for photographing an image; A display unit for displaying the photographed image; And a control unit for receiving a user's voice when an input for searching for an image has been received and storing the photographed point of time of the photographed image corresponding to the time point at which the user's voice was received, And a control unit for storing the information in the storage unit.

동영상 파일, 영상 검색 Video file, image search

Description

영상 표시 방법 및 그 장치{IMAGE DISPLAY METHOD AND APPARATUS THEREOF}[0001] IMAGE DISPLAY METHOD AND APPARATUS THEREOF [0002]

본 발명은 영상 표시 방법 및 그 장치에 관한 것이다.The present invention relates to a video display method and apparatus.

일반적으로, 영상(동영상 및 스틸 영상)을 촬영 및 표시하는 카메라는 영상을 촬영하고, 그 촬영된 영상을 표시부에 표시하지만, 그 촬영된 많은 영상들 중에서 사용자가 원하는 영상을 찾기 위해 모든 영상을 검색하거나 모든 동영상 파일을 재생하여야 하였다.2. Description of the Related Art Generally, a camera that captures and displays images (moving images and still images) captures images and displays the captured images on a display unit. However, in order to search for a desired image among many captured images, Or to play all video files.

본 발명의 목적은, 동영상 파일(또는 스틸 영상)로부터 사용자가 원하는 영상을 신속하고 용이하게 검색 및 표시할 수 있는 영상 표시 장치 및 그 방법을 제공하는 데 있다.It is an object of the present invention to provide an image display apparatus and method that can quickly and easily search and display an image desired by a user from a moving image file (or a still image).

본 발명의 실시예들에 따른 영상 표시 장치는, 영상을 촬영하는 카메라 모듈과; 상기 촬영된 영상을 표시하는 표시부와; 영상을 검색하기 위한 키가 선택되었을 때 사용자 음성을 수신하고, 상기 사용자 음성이 수신된 시점에 대응하는 상기 촬영된 영상의 촬영 시점과, 상기 촬영된 영상의 저장 위치와 상기 수신된 사용자 음성을 함께 저장부에 저장하는 제어부로 구성된다.An image display apparatus according to embodiments of the present invention includes a camera module for photographing an image; A display unit for displaying the photographed image; A user's voice is received when a key for searching an image is selected, and the user's voice is stored together with the photographing time point of the photographed image corresponding to the time point at which the user's voice is received, And a control unit for storing the information in the storage unit.

본 발명의 실시예들에 따른 영상 표시 장치는, 동영상을 촬영하는 카메라 모듈과; 상기 촬영된 동영상을 표시하는 표시부와; 상기 동영상을 검색하기 위한 키가 선택되었을 때 사용자 음성을 수신하고, 상기 수신된 사용자 음성을 문자로 변환하고, 상기 사용자 음성이 수신된 시점에 대응하는 상기 촬영된 동영상의 촬영 시점을 검출하고, 상기 촬영된 동영상의 저장 위치를 검출하고, 상기 변환된 문자에 상기 촬영 시점과 상기 저장 위치를 포함시키는 제어부로 구성된다.A video display device according to embodiments of the present invention includes a camera module for capturing a moving image; A display unit for displaying the photographed moving image; The method comprising the steps of: receiving a user's voice when a key for searching for the moving image is selected; converting the received user's voice to a character; detecting a photographing time point of the photographed moving image corresponding to a time point at which the user's voice is received; And a controller for detecting a storage position of the photographed moving image and including the shooting time and the storage position in the converted character.

본 발명의 실시예들에 따른 영상 표시 방법은, 영상을 촬영하는 단계와; 상기 촬영된 영상을 표시부에 표시하는 단계와; 영상을 검색하기 위한 키가 선택되었을 때 사용자 음성을 수신하는 단계와; 상기 사용자 음성이 수신된 시점에 대응하 는 상기 촬영된 영상의 촬영 시점과, 상기 촬영된 영상의 저장 위치와 상기 수신된 사용자 음성을 함께 저장부에 저장하는 단계로 이루어진다.According to an embodiment of the present invention, there is provided an image display method including: capturing an image; Displaying the photographed image on a display unit; Receiving a user voice when a key for searching an image is selected; And storing the taken time of the photographed image corresponding to the time when the user voice is received, the storage location of the photographed image, and the received user voice in a storage unit.

본 발명의 실시예들에 따른 영상 표시 방법은, 동영상을 촬영하는 단계와; 상기 촬영된 동영상을 표시부에 표시하는 단계와; 상기 동영상을 검색하기 위한 키가 선택되었을 때 사용자 음성을 수신하는 단계와; 상기 수신된 사용자 음성을 문자로 변환하는 단계와; 상기 사용자 음성이 수신된 시점에 대응하는 상기 촬영된 동영상의 촬영 시점을 검출하는 단계와; 상기 촬영된 동영상의 저장 위치를 검출하는 단계와; 상기 변환된 문자에 상기 촬영 시점과 상기 저장 위치를 포함시키는 단계로 이루어진다.According to embodiments of the present invention, there is provided a method of displaying an image, comprising: capturing a moving image; Displaying the photographed moving image on a display unit; Receiving a user voice when a key for searching the moving picture is selected; Converting the received user voice into a character; Detecting a photographing time point of the photographed moving picture corresponding to a time point at which the user voice is received; Detecting a storage position of the photographed moving image; And including the shooting time and the storage location in the converted character.

본 발명의 실시예들에 따른 영상 표시 장치 및 그 방법은, 영상을 검색하기 위한 키가 선택되었을 때 사용자 음성을 수신하고, 상기 사용자 음성이 수신된 시점에 대응하는 촬영된 영상의 촬영 시점과, 상기 촬영된 영상의 저장 위치와 상기 수신된 사용자 음성을 함께 저장부에 저장함으로써, 동영상 파일로부터 사용자가 원하는 영상을 신속하고 용이하게 검색 및 표시할 수 있는 효과가 있다.According to embodiments of the present invention, there is provided an image display apparatus and a method thereof, which are configured to receive a user's voice when a key for searching for an image is selected, The storage location of the photographed image and the received user voice are stored together in the storage unit, so that the user can quickly and easily search and display the desired image from the moving image file.

본 발명의 실시예들에 따른 영상 표시 장치 및 그 방법은, 영상을 검색하기 위한 키가 선택되었을 때 사용자 음성을 수신하고, 상기 사용자 음성이 수신된 시점에 대응하는 촬영된 스틸 영상의 저장 위치와 상기 수신된 사용자 음성을 함께 저장부에 저장함으로써, 스틸 영상 파일을 신속하고 용이하게 검색 및 표시할 수 있는 효과가 있다.The video display apparatus and method according to embodiments of the present invention include: receiving a user's voice when a key for searching for an image is selected, storing a storage position of a still image corresponding to a time point at which the user's voice is received, And storing the received user voice in the storage unit, the still image file can be quickly and easily searched and displayed.

이하에서는, 동영상 파일(또는 스틸 영상)로부터 사용자가 원하는 영상을 신속하고 용이하게 검색 및 표시할 수 있는 영상 표시 장치 및 그 방법의 바람직한 실시예들을 도1 내지 도11을 참조하여 상세히 설명한다. Hereinafter, preferred embodiments of an image display apparatus and method capable of searching and displaying a desired image from a moving image file (or a still image) quickly and easily will be described in detail with reference to FIG. 1 to FIG.

도1은 본 발명의 실시예를 설명하기 위한 이동 통신 단말기(100)의 구성을 나타낸 블록도 이다. 이동 통신 단말기(이동 전화기)(100)는 다양한 형태로 구현될 수 있다. 예를 들면, 이동 통신 단말기(100)는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등이 있다. 1 is a block diagram showing a configuration of a mobile communication terminal 100 for explaining an embodiment of the present invention. The mobile communication terminal (mobile phone) 100 may be implemented in various forms. For example, the mobile communication terminal 100 includes a mobile phone, a smart phone, a notebook computer, a digital broadcasting terminal, a PDA (Personal Digital Assistants), and a PMP (Portable Multimedia Player).

도1에 도시한 바와 같이, 이동 통신 단말기(100)는 무선 통신부(110), A/V(Audio/Video) 입력부(120), 사용자 입력부(130), 센싱부(140), 출력부(150), 메모리(160), 인터페이스부(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도1에 도시된 이동 통신 단말기(100)의 구성요소 모두가 필수 구성요소인 것은 아니며, 도1에 도시된 구성요소보다 많은 구성요소에 의해 이동 통신 단말기(100)가 구현될 수도 있고, 그보다 적은 구성요소에 의해서도 이동 통신 단말기(100)가 구현될 수도 있다.1, the mobile communication terminal 100 includes a wireless communication unit 110, an A / V (audio / video) input unit 120, a user input unit 130, a sensing unit 140, an output unit 150 A memory 160, an interface unit 170, a control unit 180, a power supply unit 190, and the like. All of the components of the mobile communication terminal 100 shown in FIG. 1 are not essential components, and the mobile communication terminal 100 may be implemented by more components than the components shown in FIG. 1, The mobile communication terminal 100 may be implemented by a component.

상기 무선 통신부(110)는 이동 통신 단말기(100)와 무선 통신 시스템 간의 무선 통신 또는 이동 통신 단말기(100)와 그 이동 통신 단말기(100)가 위치한 네트워크간의 무선 통신을 수행하게 하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들면, 무선 통신부(110)는 방송 수신 모듈(111), 이동 통신 모듈(112), 무선 인 터넷 모듈(113), 근거리 통신 모듈(114) 및 위치 정보 모듈(115) 등을 포함할 수 있다.The wireless communication unit 110 may include at least one component for performing wireless communication between the mobile communication terminal 100 and the wireless communication system or wireless communication between the mobile communication terminal 100 and a network on which the mobile communication terminal 100 is located . For example, the wireless communication unit 110 may include a broadcast receiving module 111, a mobile communication module 112, a wireless Internet module 113, a short range communication module 114, a location information module 115, have.

상기 방송 수신 모듈(111)은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 미리 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 이동 통신 단말기(100)에 송신하는 서버를 의미할 수 있다. 상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다.The broadcast receiving module 111 receives broadcast signals and / or broadcast-related information from an external broadcast management server through a broadcast channel. The broadcast channel may include a satellite channel and a terrestrial channel. The broadcast management server may be a server for generating and transmitting broadcast signals and / or broadcast-related information, or a server for receiving previously generated broadcast signals and / or broadcast-related information and transmitting the broadcast signals and / or broadcast- related information to the mobile communication terminal 100 . The broadcast-related information may refer to a broadcast channel, a broadcast program, or information related to a broadcast service provider. The broadcast signal may include a TV broadcast signal, a radio broadcast signal, a data broadcast signal, and a broadcast signal in which a data broadcast signal is combined with a TV broadcast signal or a radio broadcast signal.

한편, 상기 방송 관련 정보는, 이동 통신망을 통하여도 제공될 수 있으며, 이러한 경우에는 상기 이동 통신 모듈(112)에 의해 수신될 수 있다. 상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들면, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.Meanwhile, the broadcast related information may be provided through a mobile communication network, and in this case, it may be received by the mobile communication module 112. The broadcast-related information may exist in various forms. For example, an EPG (Electronic Program Guide) of DMB (Digital Multimedia Broadcasting) or an ESG (Electronic Service Guide) of Digital Video Broadcast-Handheld (DVB-H).

상기 방송 수신 모듈(111)은, 각종 방송 시스템을 이용하여 방송 신호를 수신하는데, 특히, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 방송 신호를 제공하는 모든 방송 시스템에 적합하도록 구성된다. 방송 수신 모듈(111)을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리(160)에 저장될 수 있다.The broadcast receiving module 111 receives broadcasting signals using various broadcasting systems. In particular, the broadcasting receiving module 111 may be a Digital Multimedia Broadcasting-Terrestrial (DMB-T), a Digital Multimedia Broadcasting-Satellite (DMB-S) Only Digital Broadcast-Handheld (DVB-H), Integrated Services Digital Broadcast-Terrestrial (ISDB-T), and the like. Of course, the broadcast receiving module 111 is configured to be suitable for all broadcasting systems that provide broadcasting signals as well as the digital broadcasting system described above. The broadcast signal and / or broadcast related information received through the broadcast receiving module 111 may be stored in the memory 160.

상기 이동 통신 모듈(112)은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기서, 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 및/또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다. The mobile communication module 112 transmits and receives radio signals to at least one of a base station, an external terminal, and a server on a mobile communication network. Here, the wireless signal may include various types of data related to transmission and reception of a voice call signal, a video call signal, and / or a text / multimedia message.

상기 무선 인터넷 모듈(113)은 무선 인터넷 접속을 위한 모듈을 의미하는 것으로, 상기 무선 인터넷 모듈(113)은 이동 통신 단말기(100)에 내장되거나 외장될 수 있다. 여기서, 무선 인터넷 기술로는 WLAN(Wireless LAN), 와이 파이(Wi-Fi), 와이브로(Wireless Broadband : Wibro), 와이맥스(World Interoperability for Microwave Access : Wimax), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다.The wireless Internet module 113 refers to a module for wireless Internet access, and the wireless Internet module 113 can be embedded in the mobile communication terminal 100 or externally. Here, the wireless Internet technology includes a wireless LAN (WLAN), a Wi-Fi, a wireless broadband (Wibro), a WiMAX, a high speed downlink packet access (HSDPA) Can be used.

상기 근거리 통신 모듈(114)은 근거리 통신을 위한 모듈을 의미한다. 근거리 통신 기술로서 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.The short-range communication module 114 means a module for short-range communication. Bluetooth, radio frequency identification (RFID), infrared data association (IrDA), ultra wideband (UWB), ZigBee, etc. may be used as the short distance communication technology.

상기 위치 정보 모듈(115)은 이동 단말기의 위치(이동 단말기가 차량에 장착되었을 때 차량의 위치 확인 가능)를 확인하거나 얻기 위한 모듈이다. 일례로 GPS(Global Position System) 모듈이 있다. GPS 모듈은 복수 개의 인공위성으로부터 위치 정보를 수신한다. 여기서, 위치 정보는 위도 및 경도로 표시되는 좌표 정보를 포함할 수 있다. 예를 들면, GPS 모듈은, 3개 이상의 위성으로부터 정확한 시간과 거리를 측정하여 3개의 각각 다른 거리를 삼각 방법에 따라서 현 위치를 정확히 계산할 수 있다. 3개의 위성으로부터 거리와 시간 정보를 얻고 1개 위성으로 오차를 수정하는 방법이 사용될 수 있다. 특히, GPS 모듈은 위성으로부터 수신한 위치 정보로부터, 위도, 경도, 고도의 위치뿐만 아니라 3차원의 속도 정보와 함께 정확한 시간까지 얻을 수 있다. 상기 위치 정보 모듈(115)로서 와이파이 위치추적 시스템(Wi-Fi Positioning System) 및/또는 하이브리드 위치추적 시스템(Hybrid Positioning System)이 적용될 수도 있다. The position information module 115 is a module for confirming or obtaining the position of the mobile terminal (capable of checking the position of the vehicle when the mobile terminal is mounted on the vehicle). One example is the GPS (Global Position System) module. The GPS module receives position information from a plurality of satellites. Here, the location information may include coordinate information indicated by latitude and longitude. For example, the GPS module can accurately calculate the current position according to the triangle method by measuring the precise time and distance from three or more satellites and measuring three different distances. A method of obtaining distance and time information from three satellites and correcting the error by one satellite may be used. In particular, the GPS module can acquire latitude, longitude and altitude as well as three-dimensional velocity information and accurate time from the position information received from the satellite. A Wi-Fi Positioning System and / or a Hybrid Positioning System may be applied as the location information module 115.

상기 A/V(Audio/Video) 입력부(120)는 오디오 신호 또는 비디오 신호를 입력하기 위한 것으로서, 상기 A/V(Audio/Video) 입력부(120)에는 카메라(121)와 마이크(122) 등이 포함될 수 있다. 상기 카메라(121)는 화상 통화모드 또는 촬영 모드에서 이미지 센서에 의해 얻어지는 정지영상 또는 동영상 등의 화상 프레임을 처리한다. 상기 처리된 화상 프레임은 디스플레이부(151)에 표시될 수 있다.The A / V input unit 120 is for inputting an audio signal or a video signal. The A / V input unit 120 includes a camera 121 and a microphone 122, . The camera 121 processes an image frame such as a still image or a moving image obtained by the image sensor in the video communication mode or the photographing mode. The processed image frame can be displayed on the display unit 151. [

상기 카메라(121)에서 처리된 화상 프레임은 메모리(160)에 저장되거나 무선 통신부(110)를 통하여 외부로 전송될 수 있다. 상기 카메라(121)는 이동 단말기의 구성 형태에 따라 2개 이상이 구성될 수도 있다. The image frame processed by the camera 121 may be stored in the memory 160 or transmitted to the outside through the wireless communication unit 110. [ The camera 121 may be composed of two or more according to the configuration of the mobile terminal.

상기 마이크(122)는 통화 모드 또는 녹음 모드, 음성인식 모드 등에서 마이크로폰(Microphone)에 의해 외부의 음향 신호를 수신하여 전기적인 음성 데이터로 처리한다. 상기 통화 모드일 때, 상기 처리된 음성 데이터는 이동 통신 모듈(112)을 통하여 이동 통신 기지국으로 송신 가능한 형태로 변환되어 출력될 수 있다. 상기 마이크(122)는 외부의 음향 신호를 입력받는 과정에서 발생되는 잡음을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다. The microphone 122 receives an external sound signal by a microphone in a communication mode, a recording mode, a voice recognition mode, and the like, and processes it as electrical voice data. In the call mode, the processed voice data can be converted into a form that can be transmitted to the mobile communication base station through the mobile communication module 112 and output. The microphone 122 may be implemented with various noise reduction algorithms for eliminating noise generated in the process of receiving an external sound signal.

상기 사용자 입력부(130)는 사용자가 이동 단말기의 동작 제어를 위한 입력 데이터를 발생시킨다. 사용자 입력부(130)는 키 패드(key pad) 돔 스위치 (dome switch), 터치 패드(정압/정전), 조그 휠, 조그 스위치 등으로 구성될 수 있다. 특히, 터치 패드가 상기 디스플레이부(151)와 상호 레이어 구조를 이룰 경우, 이를 터치 스크린이라 부를 수 있다.The user input unit 130 generates input data for a user to control the operation of the mobile terminal. The user input unit 130 may include a key pad dome switch, a touch pad (static / static), a jog wheel, a jog switch, and the like. Particularly, when the touch pad has a mutual layer structure with the display unit 151, it can be called a touch screen.

상기 센싱부(140)는 이동 통신 단말기(100)의 개폐 상태, 이동 통신 단말기(100)의 위치, 사용자 접촉 유무, 이동 통신 단말기(100)의 방위, 이동 통신 단말기(100)의 가속/감속 등과 같이 이동 통신 단말기(100)의 현 상태를 감지하여 이동 통신 단말기(100)의 동작을 제어하기 위한 센싱 신호를 발생시킨다. 예를 들면, 이동 통신 단말기(100)가 슬라이드 폰 형태인 경우 슬라이드 폰의 개폐 여부를 센싱할 수 있다. 또한, 상기 센싱부(140)는 전원 공급부(190)의 전원 공급 여부, 인터페이스부(170)의 외부 기기 결합 여부 등과 관련된 센싱 기능을 담당한다.The sensing unit 140 senses the position of the mobile communication terminal 100 in the open / close state, the position of the mobile communication terminal 100, the presence of the user, the orientation of the mobile communication terminal 100, The mobile communication terminal 100 senses the current state of the mobile communication terminal 100 and generates a sensing signal for controlling the operation of the mobile communication terminal 100. For example, when the mobile communication terminal 100 is in the form of a slide phone, it is possible to sense whether the slide phone is opened or closed. The sensing unit 140 senses whether the power supply unit 190 is powered on, whether the interface unit 170 is connected to an external device, and the like.

상기 인터페이스부(170)는 이동 통신 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 한다. 예를 들면, 상기 인터페이스부(170)는 유/무선 헤드 셋 포트(Headset port), 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등으로 구성될 수 있다. 여기서, 식별 모듈은 이동 통신 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module; 'UIM'), 가입자 인증 모듈(Subscriber Identify Module; 'SIM'), 범용 사용자 인증 모듈(Universal Subscriber Identity Module; 'USIM') 등을 포함할 수 있다. 또한, 상기 식별 모듈이 구비된 장치(이하 '식별 장치')는, 스마트 카드(smart card) 형식으로 제작될 수 있다. 따라서, 상기 식별 모듈은 포트를 통하여 이동 통신 단말기(100)와 연결될 수 있다. 이와 같은 인터페이스부(170)는 외부 기기로부터 데이터를 수신하거나 전원을 수신하여 이동 통신 단말기(100) 내부의 각 구성 요소에 전달하거나 이동 통신 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다.The interface unit 170 serves as an interface with all external devices connected to the mobile communication terminal 100. For example, the interface unit 170 includes a port for connecting a device equipped with a wired / wireless headset port, an external charger port, a wired / wireless data port, a memory card port, , An audio I / O port, a video I / O port, and an earphone port. Here, the identification module is a chip that stores various information for authenticating the usage right of the mobile communication terminal 100, and includes a user identification module (UIM), a subscriber identity module (SIM) ), A Universal Subscriber Identity Module (" USIM "), and the like. In addition, an apparatus (hereinafter, referred to as 'identification device') having the identification module may be manufactured in a smart card format. Accordingly, the identification module can be connected to the mobile communication terminal 100 through the port. The interface unit 170 receives data from an external device or receives power from the external device and transmits the received data to each component in the mobile communication terminal 100 or transmits data in the mobile communication terminal 100 to an external device.

상기 출력부(150)는 오디오 신호 또는 비디오 신호 또는 알람(alarm) 신호의 출력을 위한 것으로서, 상기 출력부(150)에는 디스플레이부(151)과 음향 출력 모듈(152), 알람부(153) 등이 포함될 수 있다.The output unit 150 is for outputting an audio signal, a video signal, or an alarm signal. The output unit 150 includes a display unit 151, an audio output module 152, an alarm unit 153, May be included.

상기 디스플레이부(151)는 이동 통신 단말기(100)에서 처리되는 정보를 표시하여 출력한다. 예를 들면, 이동 통신 단말기(100)가 통화 모드인 경우 통화와 관련된 UI(User Interface) 또는 GUI(Graphic User Interface)를 표시한다. 그리고 이동 통신 단말기(100)가 화상 통화 모드 또는 촬영 모드인 경우 촬영 또는/및 수신된 영상 또는 UI, GUI를 표시한다. The display unit 151 displays information to be processed by the mobile communication terminal 100 and outputs the information. For example, when the mobile communication terminal 100 is in the call mode, a UI (User Interface) or a GUI (Graphic User Interface) associated with a call is displayed. When the mobile communication terminal 100 is in the video communication mode or the photographing mode, the displayed image or the UI or GUI is displayed.

상기 디스플레이부(151)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다. 그리고 이동 통신 단말기(100)의 구현 형태에 따라 디스플레이부(151)가 2개 이상 존재할 수도 있다. 예를 들면, 이동 통신 단말기(100)에 외부 디스플레이부(도시하지 않음)와 내부 디스플레이부(도시하지 않음)가 동시에 구비될 수 있다.The display unit 151 may be a liquid crystal display, a thin film transistor-liquid crystal display, an organic light-emitting diode, a flexible display, a three-dimensional display (3D display). There may be two or more display units 151 according to the embodiment of the mobile communication terminal 100. For example, the mobile communication terminal 100 may be provided with an external display unit (not shown) and an internal display unit (not shown) at the same time.

상기 디스플레이부(151)와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 상기 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.(Hereinafter, referred to as a 'touch screen') has a mutual layer structure with the display unit 151 and a sensor (hereinafter, referred to as 'touch sensor' It can also be used as an input device in addition to the device. The touch sensor may have the form of, for example, a touch film, a touch sheet, a touch pad, or the like.

또한, 상기 터치 센서는, 상기 디스플레이부(151)의 특정 부위에 가해진 압력 또는 디스플레이부(151)의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 상기 터치 센서는, 터치되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. 상기 터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기(도시하지 않음)로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부(180)에 전송한다. 이로써, 상기 제어부(180)는, 상기 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.The touch sensor may be configured to convert a change in a pressure applied to a specific portion of the display unit 151 or a capacitance generated in a specific portion of the display unit 151 into an electrical input signal. The touch sensor can be configured to detect not only the position and area to be touched but also the pressure at the time of touch. If there is a touch input to the touch sensor, the corresponding signal (s) is sent to a touch controller (not shown). The touch controller processes the signal (s) and transmits the corresponding data to the control unit 180. Thus, the control unit 180 can know which area of the display unit 151 is touched or the like.

이하에서는, 이동 통신 단말기(100)의 근접 센서(141)를 도2를 참조하여 설 명한다.Hereinafter, the proximity sensor 141 of the mobile communication terminal 100 will be described with reference to FIG.

도2는 이동 통신 단말기(100)의 근접 터치 과정을 나타낸 도이다. 본 발명에서 근접 터치(proximity-touch)는, 포인터(pointer)가 화면에 실제로 터치는 되지 않고, 화면으로부터 소정 거리 떨어져 접근되는 것을 의미한다. 2 is a diagram illustrating a process of proximity touching of the mobile communication terminal 100. Referring to FIG. In the present invention, the proximity-touch means that the pointer is not actually touched on the screen but approaches a predetermined distance from the screen.

상기 근접 센서(141)는, 터치 스크린에 의해 감싸지는 이동 통신 단말기(100)의 내부 영역 또는 상기 터치 스크린의 근처에 배치될 수 있다. 상기 근접 센서(141)는, 소정의 검출 면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 상기 근접 센서(141)는, 접촉식 센서보다는 그 수명이 길며 그 활용도 또한 높다.The proximity sensor 141 may be disposed in an inner region of the mobile communication terminal 100 or in the vicinity of the touch screen, which is surrounded by the touch screen. The proximity sensor 141 refers to a sensor that detects the presence of an object approaching a predetermined detection surface or an object existing in the vicinity thereof without mechanical contact by using electromagnetic force or infrared rays. The proximity sensor 141 has a longer lifetime and higher utilization than the contact-type sensor.

상기 근접 센서(141)의 예로는, 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 상기 터치 스크린이 정전식인 경우에는 상기 포인터의 근접에 따른 전계의 변화로 상기 포인터의 근접을 검출하도록 구성된다. 이 경우 상기 터치 스크린(터치 센서)은 근접 센서로 분류될 수도 있다.Examples of the proximity sensor 141 include a transmission type photoelectric sensor, a direct reflection type photoelectric sensor, a mirror reflection type photoelectric sensor, a high frequency oscillation type proximity sensor, a capacitive proximity sensor, a magnetic proximity sensor, and an infrared proximity sensor. And to detect the proximity of the pointer by the change of the electric field along the proximity of the pointer when the touch screen is electrostatic. In this case, the touch screen (touch sensor) may be classified as a proximity sensor.

이하에서는 설명의 편의를 위해, 상기 터치 스크린 상에 포인터가 접촉되지 않으면서 근접되어 상기 포인터가 상기 터치 스크린 상에 위치함이 인식되도록 하는 행위를 "근접 터치(Proximity Touch)"라고 칭하고, 상기 터치 스크린 상에 포인터가 실제로 접촉되는 행위를 "접촉 터치(Contact Touch)"라고 칭한다. 상기 터치 스크린 상에서 포인터로 근접 터치가 되는 위치는, 상기 포인터가 근접 터치될 때 상기 포인터가 상기 터치 스크린에 대해 수직으로 대응되는 위치를 의미한다.Hereinafter, for convenience of explanation, the act of recognizing that the pointer is positioned on the touch screen while the pointer is not in contact with the touch screen is referred to as "proximity touch" The act of actually touching the pointer on the screen is called "Contact Touch ". A position where the pointer is proximally touched on the touch screen means a position where the pointer corresponds to the touch screen vertically when the pointer is touched.

또한, 상기 근접 센서(141)는, 근접 터치와, 근접 터치 패턴(예를 들어, 근접 터치 거리, 근접 터치 방향, 근접 터치 속도, 근접 터치 시간, 근접 터치 위치, 근접 터치 이동 상태 등)을 감지한다. 상기 감지된 근접 터치 동작 및 근접 터치 패턴에 상응하는 정보는 상기 터치 스크린 상에 출력될 수 있다.Further, the proximity sensor 141 detects a proximity touch and a proximity touch pattern (for example, a proximity touch distance, a proximity touch direction, a proximity touch speed, a proximity touch time, a proximity touch position, do. Information corresponding to the detected proximity touch operation and the proximity touch pattern may be output on the touch screen.

상기 음향 출력 모듈(152)은 호 신호 수신, 통화 모드 또는 녹음 모드, 음성 인식 모드, 방송 수신 모드 등에서 무선 통신부(110)로부터 수신되거나 메모리(160)에 저장된 오디오 데이터를 출력한다. 또한, 음향 출력 모듈(152)은 이동 통신 단말기(100)에서 수행되는 기능(예를 들면, 호신호 수신음, 메시지 수신음 등)과 관련된 음향 신호를 출력한다. 이러한 음향 출력 모듈(152)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.The sound output module 152 outputs audio data received from the wireless communication unit 110 or stored in the memory 160 in a call signal reception mode, a call mode or a recording mode, a voice recognition mode, and a broadcast reception mode. The sound output module 152 outputs sound signals related to functions (e.g., call signal reception sound, message reception sound, etc.) performed in the mobile communication terminal 100. The sound output module 152 may include a speaker, a buzzer, and the like.

상기 알람부(153)는 이동 통신 단말기(100)의 이벤트 발생을 알리기 위한 신호를 출력한다. 이동 단말기에서 발생되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력 등이 있다. 상기 알람부(153)는 오디오 신호나 비디오 신호 이외에 다른 형태로 이벤트 발생을 알리기 위한 신호를 출력할 수도 있다. 예를 들면, 진동 형태로 신호를 출력할 수 있다. 호 신호가 수신되거나 메시지가 수신될 때, 이를 알리기 위해 알람부(153)는 진동 수단을 통해 이동 단말기를 진동시킬 수 있다. 또는, 상기 알람부(153)는, 키 신호가 입력된 경우, 그 키 신호 입력에 대한 피드백으로 진동 수단을 통해 이동 통신 단말기(100)를 진동시킬 수 있다. 상기와 같은 진동을 통해 사용자는 이벤트 발생을 인지할 수 있다. 물론 이벤트 발생 알림 을 위한 신호는 디스플레이부(151)이나 음성 출력 모듈(152)을 통해서도 출력될 수 있다.The alarm unit 153 outputs a signal for notifying the occurrence of an event of the mobile communication terminal 100. Examples of events that occur in the mobile terminal include receiving a call signal, receiving a message, and inputting a key signal. The alarm unit 153 may output a signal for notifying the occurrence of an event in a form other than an audio signal or a video signal. For example, it is possible to output a signal in a vibration mode. When the call signal is received or the message is received, the alarm unit 153 can vibrate the mobile terminal through the vibration means to inform it. Alternatively, when the key signal is input, the alarm unit 153 may vibrate the mobile communication terminal 100 through the vibration means with the feedback of the key signal input. Through the above-described vibration, the user can recognize the occurrence of the event. Of course, a signal for notifying the occurrence of an event may also be output through the display unit 151 or the audio output module 152.

햅틱 모듈(haptic module)(154)은 사용자가 느낄 수 있는 다양한 촉각 효과를 발생시킨다. 햅틱 모듈(154)이 발생시키는 촉각 효과의 대표적인 예로는 진동이 있다. 햅택 모듈(154)이 발생하는 진동의 세기와 패턴 등은 제어가능하다. 예를 들어, 서로 다른 진동을 합성하여 출력하거나 순차적으로 출력할 수도 있다. The haptic module 154 generates various tactile effects that the user can feel. A typical example of the haptic effect generated by the haptic module 154 is vibration. The intensity and pattern of the vibration generated by the hit module 154 can be controlled. For example, different vibrations may be synthesized and output or sequentially output.

상기 햅틱 모듈(154)은, 진동 외에도, 접촉 피부면에 대해 수직 운동하는 핀 배열, 분사구나 흡입구를 통한 공기의 분사력이나 흡입력, 피부 표면에 대한 스침, 전극(eletrode)의 접촉, 정전기력 등의 자극에 의한 효과와, 흡열이나 발열 가능한 소자를 이용한 냉온감 재현에 의한 효과 등 다양한 촉각 효과를 발생시킬 수 있다. In addition to vibration, the haptic module 154 may include a pin arrangement vertically moving with respect to the contact skin surface, a spraying force or suction force of air through the injection port or the suction port, a spit on the skin surface, contact with an electrode, And various effects of tactile effect such as effect of reproducing the cold sensation using the heat absorbing or heatable element can be generated.

상기 햅틱 모듈(154)은 직접적인 접촉을 통해 촉각 효과의 전달할 수 있을 뿐만 아니라, 사용자가 손가락이나 팔 등의 근 감각을 통해 촉각 효과를 느낄 수 있도록 구현할 수도 있다. 햅틱 모듈(154)은 텔레매틱스 단말기의 구성 태양에 따라 2개 이상이 구비될 수 있다. 햅틱 모듈(154)은 차량에서 사용자와의 접촉이 빈번한 곳에 구비될 수 있다. 예를 들어, 조향 휠, 변속 기어 레버, 좌석 시트 등에 구비될 수 있다.The haptic module 154 can transmit a tactile effect through direct contact, and the tactile effect can be felt by a user through a muscular sense such as a finger or an arm. At least two haptic modules 154 may be provided according to the configuration of the telematics terminal. The haptic module 154 may be provided in a place where frequent contact with a user is frequent in the vehicle. For example, a steering wheel, a shift gear lever, a seat, and the like.

상기 메모리(160)는 제어부(180)의 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 입/출력되는 데이터들(예를 들어, 지도 데이터, 폰북, 메시지, 정지영상, 동영상 등)의 임시 저장을 위한 기능을 수행할 수도 있다. The memory 160 may store a program for processing and controlling the controller 180 and temporarily store the input / output data (e.g., map data, a phone book, a message, a still image, For example.

상기 메모리(160)는 플래시 메모리 타입(flash memory type), 하드디스크 타 입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들면, SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory) 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 이동 통신 단말기(100)는 인터넷(internet)상에서 메모리(150)의 저장 기능을 수행하는 웹 스토리지(web storage)를 운영할 수도 있다.The memory 160 may be a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory, etc.) ), A random access memory (SRAM), a read only memory (ROM), an electrically erasable programmable read-only memory (EEPROM), a programmable read-only memory (PROM) A magnetic disk, and / or an optical disk. In addition, the mobile communication terminal 100 may operate a web storage that performs a storage function of the memory 150 on the Internet.

상기 인터페이스부(170)는 이동 단말기(100)에 연결되는 모든 외부기기와의 인터페이스 역할을 한다. 예를 들면, 상기 인터페이스부(170)는 유/무선 헤드셋 포트(Headset Port), 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(Memory Card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 I/O(Input/Output) 포트, 비디오 I/O(Input/Output) 포트, 이어폰 포트 등으로 구성될 수 있다. 여기서, 식별 모듈은 이동 단말기(100)의 사용 권한을 인증하기 위한 각종 정보를 저장한 칩으로서, 사용자 인증 모듈(User Identify Module: UIM), 가입자 인증 모듈(Subscriber Identify Module: SIM), 범용 사용자 인증 모듈(Universal Subscriber Identity Module: USIM) 등을 포함할 수 있다. 또한, 상기 식별 모듈이 구비된 장치(이하 '식별 장치'라 한다)는, 스마트 카드(Smart Card) 형식으로 제작될 수 있다. 따라서, 상기 식별 모듈은 포트를 통하여 이동 단말기(100)와 연결될 수 있다. 이와 같은 인터페이스부(170)는 외부 기기로부터 데이터를 수신하거나 전 원을 수신하여 이동 단말기(100) 내부의 각 구성 요소에 전달하거나 이동 단말기(100) 내부의 데이터가 외부 기기로 전송되도록 한다.The interface unit 170 serves as an interface with all external devices connected to the mobile terminal 100. For example, the interface unit 170 may include a headset port, an external charger port, a wired / wireless data port, a memory card port, a port for connecting a device having an identification module, An audio input / output (I / O) port, a video I / O (input / output) port, and an earphone port. Here, the identification module is a chip that stores various information for authenticating the use right of the mobile terminal 100, and includes a user identification module (UIM), a subscriber identity module (SIM) A Universal Subscriber Identity Module (USIM), and the like. In addition, the device having the identification module (hereinafter, referred to as 'identification device') can be manufactured in a smart card format. Accordingly, the identification module can be connected to the mobile terminal 100 through the port. The interface unit 170 receives data from an external device or receives power from the external device and transmits the received data to each component in the mobile terminal 100 or transmits data in the mobile terminal 100 to an external device.

상기 인터페이스부(170)는 이동 단말기(100)가 외부 크래들(Cradle)과 연결될 때 상기 크래들로부터의 전원이 상기 이동 단말기(100)에 공급되는 통로가 되거나, 사용자에 의해 상기 크래들에서 입력되는 각종 명령 신호가 상기 이동 단말기(100)로 전달되는 통로가 될 수 있다. 상기 크래들로부터 입력되는 각종 명령 신호 또는 상기 전원은 상기 이동 단말기(100)가 상기 크래들에 정확히 장착되었음을 인지하기 위한 신호로 동작될 수도 있다.When the mobile terminal 100 is connected to an external cradle, the interface unit 170 may be a path through which power from the cradle is supplied to the mobile terminal 100, or various commands A signal may be transmitted to the mobile terminal 100. The various command signals or the power source inputted from the cradle may be operated as a signal for recognizing that the mobile terminal 100 is correctly mounted on the cradle.

상기 제어부(180)는 통상적으로 이동 통신 단말기(100)의 전반적인 동작을 제어한다. 예를 들면, 상기 제어부(180)는 음성 통화, 데이터 통신, 화상 통화 등을 위한 관련된 제어 및 처리를 수행한다. 또한, 상기 제어부(180)는 멀티 미디어 재생을 위한 멀티미디어 모듈(181)을 구비할 수도 있다. 상기 멀티미디어 모듈(181)은 상기 제어부(180) 내에 구현될 수도 있고, 상기 제어부(180)와 별도로 구현될 수도 있다.The controller 180 typically controls the overall operation of the mobile communication terminal 100. For example, the control unit 180 performs related control and processing for voice call, data communication, video call, and the like. In addition, the controller 180 may include a multimedia module 181 for multimedia playback. The multimedia module 181 may be implemented in the control unit 180 or may be implemented separately from the control unit 180.

상기 제어부(180)는 터치 스크린 상에서 행해지는 필기 입력 또는 그림 그리기 입력을 각각 문자 및 이미지로 인식할 수 있는 패턴 인식 처리를 행할 수 있다.The control unit 180 can perform a pattern recognition process for recognizing handwriting input or drawing input performed on the touch screen as characters and images, respectively.

상기 전원 공급부(190)는 상기 제어부(180)의 제어에 의해 외부의 전원, 내부의 전원을 수신하여 각 구성요소들의 동작에 필요한 전원을 공급한다.The power supply unit 190 receives an external power source and an internal power source under the control of the controller 180 and supplies power required for operation of the respective components.

상기 이동 통신 단말기(100)에 적용된 구성 요소의 기능은 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터로 읽을 수 있는 기록매체 내에서 구현될 수도 있다. 하드웨어적인 구현에 의하면, ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessors), 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 그러한 실시예들이 제어부(180)에 의해 구현될 수 있다. 소프트웨어적인 구현에 의하면, 절차나 기능과 같은 실시예들은 적어도 하나의 기능 또는 작동을 수행하게 하는 별개의 소프트웨어 모듈과 함께 구현될 수 있다. 소프트웨어 코드는 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션에 의해 구현될 수 있다. 또한, 소프트웨어 코드는 메모리(160)에 저장되고, 제어부(180)에 의해 실행될 수도 있다. The functions of the components applied to the mobile communication terminal 100 may be implemented in a computer-readable recording medium using software, hardware, or a combination thereof. According to a hardware implementation, an application specific integrated circuit (ASIC), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays (FPGAs) controllers may be implemented using at least one of micro-controllers, microprocessors, and electrical units for performing functions. In some cases, such embodiments may be implemented by the controller 180 In accordance with a software implementation, embodiments such as procedures or functions may be implemented with separate software modules that perform at least one function or operation. The software code may be stored in a software application written in a suitable programming language The software code may be stored in the memory 160, May also be performed by the < / RTI >

상기 음성 인식 모듈(182)은 사용자에 의해 발성된 음성을 인식하고, 그 인식된 음성 신호에 따라 해당 기능을 수행한다.The voice recognition module 182 recognizes a voice uttered by a user and performs a corresponding function according to the recognized voice signal.

상기 이동 통신 단말기(100)에 적용된 내비게이션 세션(session)(300)은 지도 데이터 상에 주행 경로를 표시한다.A navigation session 300 applied to the mobile communication terminal 100 displays a traveling route on the map data.

도3은 본 발명의 실시예를 설명하기 위한 차량 내비게이션 시스템을 나타낸 블록도 이다. 3 is a block diagram showing a vehicle navigation system for explaining an embodiment of the present invention.

도3에 도시한 바와 같이, 차량 내비게이션 시스템은, 교통 정보 및 각종 데이터(예를 들면, 프로그램, 실행 파일 등)를 제공하는 정보 제공 센터(30)와; 차량 내에 장착되고, 원거리 무선 통신망(20) 및/또는 근거리 무선 통신망을 통해 교통 정보를 수신하고, 인공위성(10)을 통해 수신된 GPS 신호 및 상기 교통 정보를 근거로 길 안내 서비스를 제공하는 텔래매틱스 단말기(200)로 구성된다.3, the vehicle navigation system includes an information providing center 30 for providing traffic information and various data (for example, programs, executable files, etc.); A telematics service system, which is installed in a vehicle and receives traffic information through a long-range wireless communication network 20 and / or a short-range wireless communication network, and provides a guidance service based on GPS signals received through the satellite 10 and the traffic information, And a terminal 200.

이하에서는, 본 발명의 실시예를 설명하기 위한 텔레매틱스 단말기(200)의 구성을 도4를 참조하여 설명한다.Hereinafter, the configuration of a telematics terminal 200 for explaining an embodiment of the present invention will be described with reference to FIG.

도4는 본 발명의 실시예를 설명하기 위한 텔레매틱스 단말기(200)의 구성을 나타낸 블록도 이다.4 is a block diagram showing a configuration of a telematics terminal 200 for explaining an embodiment of the present invention.

도4에 도시한 바와 같이, 텔레매틱스 단말기(200)는 텔레매틱스 단말기(200)를 전체적으로 제어하는 제어부(예를 들면, 중앙 처리 장치, CPU)(212)와, 각종 정보를 저장하는 메모리(213)와, 각종 키 신호를 제어하는 키 제어부(211)와, LCD(liquid crystal display)를 제어하는 LCD 제어부(214)를 내장한 메인 보드(210)로 구성된다.4, the telematics terminal 200 includes a control unit (for example, a central processing unit (CPU)) 212 for controlling the telematics terminal 200 as a whole, a memory 213 for storing various types of information, A key controller 211 for controlling various key signals, and an LCD controller 214 for controlling a liquid crystal display (LCD).

상기 메모리(213)는 길 안내 정보를 디지털 지도상에 표시하기 위한 지도 정보(지도 데이터)를 저장한다. 또한, 상기 메모리(213)는 차량이 현재 주행하는 도로 상황에 따른 교통 정보를 입력할 수 있도록 하는 교통 정보 수집 제어 알고리즘 및 상기 알고리즘의 제어를 위한 정보를 저장한다.The memory 213 stores map information (map data) for displaying the route guidance information on the digital map. In addition, the memory 213 stores traffic information collection control algorithms for allowing the vehicle to input traffic information according to the current road conditions, and information for controlling the algorithms.

상기 메인 보드(210)는 고유의 기기번호가 부여되어 차량에 내장된 이동 통신 단말기인 CDMA(code division multiple access) 모듈(206), 차량의 위치 안내, 출발지부터 목적지까지의 주행 경로 추적 등을 위한 GPS 신호를 수신하거나 사용자에 의해서 수집된 교통정보를 GPS(Global Positioning System) 신호로 송신하는 GPS 모듈(207), CD(compact disk)에 기록된 신호를 재생하기 위한 CD 데크(CD Deck)(208), 자이로 센서(gyro sensor)(209) 등으로 구성된다. 상기 CDMA 모듈(206), GPS 모듈(207)은 안테나(204, 205)를 통해서 신호를 송신/수신한다. The main board 210 is provided with a code division multiple access (CDMA) module 206, which is a mobile communication terminal built in a vehicle to which a unique device number is assigned, guidance for the location of the vehicle, A GPS module 207 for receiving a GPS signal or transmitting traffic information collected by a user as a Global Positioning System (GPS) signal, a CD deck 208 for reproducing a signal recorded on a CD (compact disc) A gyro sensor 209, and the like. The CDMA module 206 and the GPS module 207 transmit / receive signals through the antennas 204 and 205, respectively.

또한, 방송 수신 모듈(222)은 상기 메인 보드(210)에 연결되고, 안테나(223)를 통해서 방송 신호를 수신한다. 상기 메인보드(210)에는 인터페이스 보드(203)를 통해서 상기 LCD 제어부(214)의 제어를 받는 표시부(LCD)(201)와, 키 제어부(211)의 제어를 받는 프론트 보드(202)와 차량의 내부 및/또는 외부를 촬영하는 카메라(227)가 연결된다. 상기 표시부(201)는, 각종 비디오 신호, 문자 신호를 표시하고, 상기 프론트 보드(202)는 각종 키 신호 입력을 위한 버튼을 구비하고, 사용자 선택이 이루어진 버튼에 해당하는 키 신호를 메인 보드(210)에 제공한다. 또한, 상기 표시부(201)는 도2의 근접 센서 및 터치 센서(터치 스크린)을 포함한다.The broadcast receiving module 222 is connected to the main board 210 and receives a broadcast signal through the antenna 223. The main board 210 includes a display unit (LCD) 201 under the control of the LCD control unit 214 through an interface board 203, a front board 202 under the control of the key control unit 211, A camera 227 for photographing the inside and / or the outside is connected. The display unit 201 displays various video signals and character signals. The front board 202 includes buttons for inputting various key signals, and a key signal corresponding to a user-selected button is transmitted to the main board 210 ). In addition, the display unit 201 includes the proximity sensor and the touch sensor (touch screen) of FIG.

상기 프론트 보드(202)는 교통정보를 직접 입력하기 위한 메뉴 키를 구비하며, 상기 메뉴 키는 키 제어부(211)의 제어를 받도록 구성될 수 있다.The front board 202 may have a menu key for directly inputting traffic information, and the menu key may be controlled by the key controller 211.

상기 오디오 보드(217)는 상기 메인 보드(210)와 연결되고, 각종 오디오 신호를 처리한다. 상기 오디오 보드(217)는 오디오 보드(217)의 제어를 위한 마이크로컴퓨터(219), 라디오 신호를 수신하는 튜너(218), 상기 마이크로컴퓨터(219)에 전원을 공급하는 전원부(216), 각종 음성 신호를 처리하는 신호 처리부(215)로 구성된다.The audio board 217 is connected to the main board 210 and processes various audio signals. The audio board 217 includes a microcomputer 219 for controlling the audio board 217, a tuner 218 for receiving a radio signal, a power source 216 for supplying power to the microcomputer 219, And a signal processing unit 215 for processing a signal.

또한, 상기 오디오 보드(217)는 라디오 신호를 수신하기 위한 라디오 안테나(220)와, 오디오 테이프를 재생하기 위한 테이프 데크(221)로 구성된다. 상기 오디오 보드(217)는 상기 오디오 보드(217)에서 신호 처리된 음성 신호를 출력하기 위한 음성 출력부(예를 들면, 앰프)(226)를 더 구성할 수도 있다. The audio board 217 includes a radio antenna 220 for receiving radio signals and a tape deck 221 for reproducing audio tapes. The audio board 217 may further comprise a voice output unit (for example, an amplifier) 226 for outputting a voice signal processed by the audio board 217.

상기 음성 출력부(앰프)(226)는 차량 인터페이스(224)에 연결된다. 즉, 상기 오디오 보드(217)와 메인 보드(210)는 상기 차량 인터페이스(224)에 연결된다. 상기 차량 인터페이스(224)는 음성 신호를 입력하는 핸즈프리(225a), 탑승자 안전을 위한 에어백(225b), 차량의 속도를 검출하기 위한 속도 센서(225c) 등이 연결될 수도 있다. 상기 속도 센서(225c)는 차량 속도를 산출하고, 그 산출된 차량 속도 정보를 상기 중앙 처리 장치(212)에 제공한다. The audio output unit (amplifier) 226 is connected to the vehicle interface 224. That is, the audio board 217 and the main board 210 are connected to the vehicle interface 224. The vehicle interface 224 may be connected to a handsfree 225a for inputting a voice signal, an air bag 225b for occupant safety, a speed sensor 225c for detecting the speed of the vehicle, and the like. The speed sensor 225c calculates the vehicle speed and provides the calculated vehicle speed information to the central processing unit 212. [

상기 텔레매틱스 단말기(200)에 적용된 내비게이션 세션(300)은, 지도 데이터 및 차량 현재 위치 정보를 근거로 길 안내 정보를 발생하고, 그 발생된 길 안내 정보를 사용자에게 통지한다. The navigation session 300 applied to the telematics terminal 200 generates route guidance information based on the map data and the current vehicle location information, and notifies the user of the generated route guidance information.

상기 표시부(201)는 근접 센서를 통해 표시창 내에서 근접 터치를 감지한다. 예를 들면, 상기 표시부(201)는 포인터(예를 들면, 손가락 또는 스타일러스 팬(stylus pen))가 근접 터치될 때 그 근접 터치의 위치를 검출하고, 그 검출된 위치에 대응하는 위치 정보를 상기 제어부(212)에 출력한다.The display unit 201 senses the proximity touch in the display window through the proximity sensor. For example, the display unit 201 may detect the position of the proximity touch when a pointer (e.g., a finger or a stylus pen) is touched in proximity, and transmit position information corresponding to the detected position And outputs it to the control unit 212.

음성 인식 장치(또는 음성 인식 모듈)(301)는 사용자에 의해 발성된 음성을 인식하고, 그 인식된 음성 신호에 따라 해당 기능을 수행한다.The speech recognition device (or speech recognition module) 301 recognizes the speech uttered by the user and performs the corresponding function according to the recognized speech signal.

상기 텔레매틱스 단말기(200)에 적용된 내비게이션 세션(session)(300)은, 지도 데이터 상에 주행 경로를 표시하고, 상기 이동 통신 단말기(100)의 위치가 상기 주행 경로에 포함된 사각지대로부터 미리설정된 거리 이내일 때 무선 통신(예를 들면,근거리 무선 통신망)을 통해 주변 차량에 장착된 단말기(예를 들면, 차량 내 비게이션 장치) 및/또는 주변 보행자가 휴대하고 있는 이동 통신 단말기와 자동으로 무선 네트워크를 형성함으로써 상기 주변 차량에 장착된 단말기로부터 그 주변 차량의 위치 정보를 수신하고, 주변 보행자가 휴대하고 있는 이동 통신 단말기로부터 상기 주변 보행자의 위치 정보를 수신한다. A navigation session 300 applied to the telematics terminal 200 displays a traveling route on the map data and displays the location of the mobile communication terminal 100 at a predetermined distance from a blind spot included in the traveling route. (For example, an in-vehicle navigation device) mounted on a nearby vehicle and / or a mobile communication terminal carried by a nearby pedestrian by wireless communication (for example, a local area wireless communication network) So as to receive positional information of the peripheral vehicle from the terminal mounted on the peripheral vehicle and receive the positional information of the peripheral pedestrian from the mobile communication terminal carried by the peripheral pedestrian.

한편, 상기 방송 수신 모듈(222)은 안테나(223)를 통해 TPEG 포맷의 교통정보를 포함하는 방송신호를 방송국으로부터 수신할 수도 있다. 상기 방송신호는 지상파 또는 위성 디지털 멀티미디어 방송(DMB), 디지털 오디오 방송(DAB), 디지털 비디오 방송(DVB-T, DVB-H) 등 각종 규격에 따른 비디오와 오디오 데이터 뿐만 아니라, 교통정보(TPEG) 서비스, BIFS(Binary Format for Scene) 데이터 서비스에 따른 교통정보 및 각종 부가 데이터와 같은 부가 정보를 포함한다. 또한, 상기 방송 수신 모듈(222)은 교통정보가 제공되는 신호 대역을 동조하고 동조된 신호를 복조하여 TPEG 디코더(제어부(407)에 포함됨)로 출력한다.Meanwhile, the broadcast receiving module 222 may receive a broadcast signal including traffic information in the TPEG format from the broadcasting station through the antenna 223. The broadcast signal may include not only video and audio data according to various standards such as terrestrial or satellite digital multimedia broadcasting (DMB), digital audio broadcasting (DAB), digital video broadcasting (DVB-T, DVB- Service, traffic information according to a Binary Format for Scene (BIFS) data service, and various additional data. In addition, the broadcast receiving module 222 tunes a signal band provided with traffic information, demodulates the tuned signal, and outputs the demodulated signal to a TPEG decoder (included in the controller 407).

상기 TPEG 디코더는 TPEG 포맷의 교통정보를 복호화하여, 교통정보에 포함된 신호등 정보를 비롯한 각종 정보를 제어부(212)에 제공한다.The TPEG decoder decodes traffic information in the TPEG format and provides various information including traffic signal information included in the traffic information to the control unit 212.

이하에서는, TPEG 정보의 포맷을 도5를 참조하여 설명한다.Hereinafter, the format of the TPEG information will be described with reference to FIG.

도 5는 TPEG 정보의 포맷을 도시한 도면이다.5 is a diagram showing the format of the TPEG information.

도 5을 참조하면, TPEG 정보는 메시지 세그먼트(이하, 'TPEG 메시지'라 함)의 시퀀스(sequence)로 구성된다.Referring to FIG. 5, the TPEG information is composed of a sequence of a message segment (hereinafter referred to as a TPEG message).

상기 메시지 세그먼트들은 각각 서로 다른 응용에 적용될 수 있다. 일 예로서, 각각의 TPEG 메시지는, 혼잡 교통 정보 응용(TPEG-Congestion and Travel-Time information Application), 도로 교통 메시지 응용(TPEG-Road Traffic Message Application), 대중 교통 정보 응용(TPEG-Public Transport Information Application), 멀티미디어 기반 교통 및 여행 정보 응용(TPEG-Multimedia Based Traffic and Travel Information Application), 기타 다른 응용들 중 어느 하나의 응용에 적용될 수 있다. 신호등 정보는 상술한 응용들 중 어느 응용에도 적용될 수 있다.The message segments may be applied to different applications. As an example, each TPEG message may be a Congestion and Travel-Time Information Application (TPEG), a Road Traffic Message Application (TPEG), a Public Transport Information Application (TPEG) ), Multimedia based traffic and travel information application (TPEG), and other applications. The traffic light information may be applied to any of the applications described above.

각각의 TPEG 응용마다 응용 식별자(AID: Application Identification)라고 불리는 고유의 식별번호가 할당된다. 응용 식별자는 수신한 TPEG 메시지를 가장 적합한 응용 복호기를 사용하여 복호하는데 이용된다.Each TPEG application is assigned a unique identification number called an Application Identification (AID). The application identifier is used to decode the received TPEG message using the most appropriate application decoder.

상기 도로 교통 메시지 응용에는 식별자 0001(hex), TPEG 혼잡 교통 정보 응용(TPEG-CTT)에는 응용 식별자0010(hex), 멀티미디어 기반 교통 및 여행 정보 응용에는 응용 식별자 0008(hex) 등이 할당되어 있다.An application identifier 0010 (hex) is assigned to the TPEG-CTT, and an application identifier 0008 (hex) is assigned to the multimedia-based traffic and travel information application.

상기 TPEG 메시지는 메시지 관리 컨테이너(Message Management Container), 응용 상태 컨테이너(Application Status Container), 및 TPEG 위치 컨테이너(TPEG-Location Container)를 포함한다.The TPEG message includes a Message Management Container, an Application Status Container, and a TPEG-Location Container.

상기 응용 상태 컨테이너는 TPEG 메시지 응용의 종류에 따라 그 내용이 달라진다. 신호등 정보는 응용 상태 컨테이너에 포함되어 전송될 수 있다. 일 예로, TPEG 메시지가 TPEG 혼잡 교통 정보 메시지 응용(TPEGCTT)인 경우, 신호등 정보는 응용 상태 컨테이너인 TPEG-CTT 컨테이너에 포함되어 전송된다. 이 경우, TPEG-CTT 컨테이너는 혼잡도 및 통행시간 상태(congestion and travel time status) 정보, 혼잡도 및 통행시간 상태 예측(prediction of congestion and travel time status) 정보, 추가 정보(additional information), 및 신호등 정보를 포함할 수 있다.The contents of the application state container vary depending on the type of the TPEG message application. Traffic light information can be included in the application state container and transmitted. For example, if the TPEG message is a TPEG congested traffic information message application (TPEGCTT), the traffic light information is included in the TPEG-CTT container, which is an application status container. In this case, the TPEG-CTT container may be configured to provide information such as congestion and travel time status information, congestion and travel time status information, additional information, .

상기 혼잡도 및 통행시간 상태 정보는, 구간 평균 속도(average link speed), 구간 통과 시간(travel time), 구간 지체 시간(link delay), 및 혼잡 유형(congestion type)에 관한 정보를 포함한다.The congestion and travel time status information includes information about an average link speed, a travel time, a link delay, and a congestion type.

상기 혼잡도 및 통행시간 상태 예측 정보는, 구간 평균 속도 예측(prediction of average speed), 구간 통과 시간 예측(prediction of travel time), 혼잡도 추이(congestion tendency)에 관한 정보를 포함한다.The congestion and travel time state prediction information includes information on prediction of average speed, prediction of travel time, and congestion tendency.

상기 추가 정보는 혼잡도 및 통행시간 정보와 관련된 부가적인 정보나 보조 정보 등을 텍스트 형식으로 기술한다. The additional information describes additional information or auxiliary information related to congestion and travel time information in text format.

상기 TPEG 디코더는 방송신호에 포함된 TPEG 메시지를 디코딩하여, TPEG 메시지에 포함된 신호등 정보, 도로 정보, 각종 교통 정보들을 추출한다. The TPEG decoder decodes the TPEG message included in the broadcast signal, and extracts traffic light information, road information, and various traffic information included in the TPEG message.

이하에서는, 본 발명의 실시예들에 따른 영상 표시 장치 및 그 방법을 도6 내지 도11을 참조하여 설명한다. 여기서, 본 발명의 실시예들에 따른 영상 표시 장치 및 그 방법은 카메라가 장착된 이동 통신 단말기(100), 텔레매틱스 단말기(200), 내비게이션 장치(400)뿐만 아니라 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), PDA(Personal Digital Assistants), PMP(Portable Multimedia Player)와 같이 카메라가 장착된 다양한 단말기에 적용될 수도 있다. Hereinafter, an image display apparatus and a method thereof according to embodiments of the present invention will be described with reference to FIGS. 6 to 11. FIG. Here, the image display apparatus and method according to embodiments of the present invention may be applied to a mobile phone 100, a telematics terminal 200, a navigation device 400, a smart phone, a notebook computer, a notebook computer, a PDA (Personal Digital Assistants), and a portable multimedia player (PMP).

도6은 본 발명의 실시예들에 따른 영상 표시 장치의 구성을 나타낸 블록도 이다. 6 is a block diagram illustrating a configuration of an image display apparatus according to embodiments of the present invention.

도6에 도시한 바와 같이, 본 발명의 실시예에 따른 영상 표시 장치(400)는, 사용자의 요청에 따라 동영상을 촬영하는 카메라 모듈(402)과; 사용자에 의해 북마크키(예를 들면, 동영상 파일의 특정 부분을 검색하기 위한 키)가 선택되었을 때 마이크(405)를 통해 사용자 음성을 수신하고, 상기 사용자 음성을 문자로 변환하고, 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점을 검출하고, 상기 동영상의 저장 위치를 검출하는 제어부(401)와; 상기 동영상을 표시하는 표시부(403)와; 상기 사용자 음성에 대응하는 문자, 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점, 상기 동영상의 저장 위치를 저장하는 저장부(404)로 구성된다. As shown in FIG. 6, the video display device 400 according to the embodiment of the present invention includes a camera module 402 for capturing a moving image at the request of a user; When a bookmark key (e.g., a key for searching a specific portion of a moving picture file) is selected by the user, the user's voice is received via the microphone 405, the user's voice is converted into characters, A control unit (401) for detecting a photographing time point of the moving picture corresponding to the received time point and detecting a storage position of the moving picture; A display unit (403) for displaying the moving picture; A storing unit 404 for storing a character corresponding to the user voice, a photographing time point of the moving picture corresponding to the time when the user voice is received, and a storage position of the moving picture.

상기 제어부(401)는 상기 사용자 음성에 대응하는 문자를 상기 동영상 파일(동영상)에 링크시키며, 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점과 상기 동영상의 저장 위치를 갖는 상기 사용자 음성에 대응하는 문자를 상기 저장부(404)의 제1 폴더에 저장하고, 상기 동영상 파일 자체는 제1 폴더와 다른 위치에 있는 상기 저장부(404)의 제2 폴더에 저장한다. 즉, 상기 제어부(401)는 상기 저장부(404)의 제 1폴더에 존재하는 문자들 중에서 원하는 문자가 사용자에 의해 선택되었을 때 그 선택된 문자에 링크된 동영상을 검색하고, 그 검색된 동영상을 그 선택된 문자에 포함된 촬영 시점부터 재생한다. 따라서, 사용자는 문자만을 선택함으로써 원하는 영상을 신속하고 용이하게 검색 및 확인할 수 있다.The control unit 401 links the character corresponding to the user voice to the moving picture file (moving picture), and controls the user voice having the moving picture pick-up time and the moving picture storage position corresponding to the time when the user voice is received Stores the corresponding character in the first folder of the storage unit 404 and stores the moving picture file itself in the second folder of the storage unit 404 at a different position from the first folder. That is, when a desired character among the characters existing in the first folder of the storage unit 404 is selected by the user, the control unit 401 searches for a video linked to the selected character, Playback starts from the shooting time included in the character. Accordingly, the user can quickly and easily search and confirm a desired image by selecting only characters.

또한, 상기 제어부(401)는 상기 카메라 모듈(402)을 통해 스틸 영상이 촬영되고, 사용자에 의해 북마크키(예를 들면, 스틸 영상 파일을 검색하기 위한 키)가 선택되었을 때 마이크(405)를 통해 사용자 음성을 수신하고, 상기 사용자 음성을 문자로 변환하고, 상기 스틸 영상의 촬영 시점을 검출하고, 상기 스틸 영상의 저장 위치를 검출하고, 상기 문자에 상기 스틸 영상의 촬영 시점과, 상기 스틸 영상의 저장 위치를 포함시킬 수도 있다.When the still image is shot through the camera module 402 and a bookmark key (for example, a key for searching for a still image file) is selected by the user, the controller 401 controls the microphone 405 And a control unit that detects a shooting position of the still image, detects a storage position of the still image, and displays a still image of the still image, May be included in the storage location.

이하에서는, 동영상 파일로부터 사용자가 원하는 영상을 신속하고 용이하게 검색 및 표시할 수 있는 영상 표시 방법을 도6 및 도7을 참조하여 설명한다.Hereinafter, an image display method capable of quickly and easily searching and displaying a desired image from a moving image file will be described with reference to FIGS. 6 and 7. FIG.

도7은 본 발명의 제1 실시예에 따른 영상 표시 방법을 나타낸 흐름도이다. 7 is a flowchart illustrating an image display method according to the first embodiment of the present invention.

먼저, 상기 제어부(401)는 사용자에 의해 카메라 모드가 선택되었을 때 상기 카메라 모듈(402)을 통해 동영상을 촬영한다(S11). 이때, 상기 표시부(403)는 상기 촬영되는 동영상을 실시간 화면상에 표시한다. First, the controller 401 photographs a moving picture through the camera module 402 when a camera mode is selected by the user (S11). At this time, the display unit 403 displays the moving image to be photographed on a real time screen.

상기 제어부(401)는 상기 카메라 모듈(402)에 의해 동영상이 촬영될 때 사용자에 의해 북마크키(예를 들면, 동영상 파일의 특정 부분을 검색하기 위한 키)가 선택되었는지를 판단한다. 예를 들면, 상기 제어부(401)는 상기 카메라 모듈(402)에 의해 동영상이 촬영되는 중에 사용자에 의해 상기 촬영되는 동영상의 특정 영상 구간을 검색(즐겨찾기)하기 위한 북마크키(예를 들면, 동영상 또는 스틸 영상 파일의 특정 부분을 검색하기 위한 아이콘)가 선택되었는지를 판단한다(S12).The control unit 401 determines whether a bookmark key (for example, a key for searching a specific portion of a moving picture file) is selected by the user when the moving picture is photographed by the camera module 402. For example, the control unit 401 may include a bookmark key for searching (favorite) a specific video segment of a moving image to be photographed by the user while a moving image is being photographed by the camera module 402 Or an icon for searching a specific portion of the still image file) is selected (S12).

상기 제어부(401)는 상기 촬영되는 동영상의 특정 영상 구간을 검색(즐겨찾기)하게 위한 북마크키(또는 북마크 아이콘)가 선택되었을 때 상기 마이크(405)를 통해 사용자 음성을 수신한다(S13). 상기 제어부(401)는 사용자에 의해 상기 북마크키가 선택되고 있는 시간 동안 상기 사용자 음성을 수신하거나 미리설정된 시간 (예를 들면, 3초~5초) 동안 상기 사용자 음성을 수신할 수도 있다.The controller 401 receives a user's voice through the microphone 405 when a bookmark key (or a bookmark icon) for searching a specific video section of the moving picture to be photographed is selected (S13). The control unit 401 may receive the user's voice for a time period during which the bookmark key is selected by the user or may receive the user's voice for a predetermined time (for example, 3 seconds to 5 seconds).

상기 제어부(401)는 상기 촬영되는 동영상의 특정 영상 구간을 검색(즐겨찾기)하기 위한 북마크키(또는 북마크 아이콘)가 선택되었을 때 상기 마이크(405)를 통해 수신된 사용자 음성을 상기 동영상의 저장 위치와 다른 독립된 폴더에 저장한다. 즉, 상기 제어부(401)는 상기 촬영되는 동영상의 특정 영상 구간을 검색(즐겨찾기)하기 위한 북마크키(또는 북마크 아이콘)가 선택되었을 때 상기 마이크(405)를 통해 수신된 사용자 음성을 상기 동영상의 저장 위치와 다른 독립된 폴더에 저장함으로써, 사용자 음성만을 포함하는 폴더만을 사용자가 검색하여 사용자 음성에 대응하는 영상을 쉽고 빠르게 검색할 수도 있다.When the bookmark key (or the bookmark icon) for searching a specific video section of the moving picture to be photographed is selected, the controller 401 controls the user voice received through the microphone 405 to be stored in the moving picture storage location And other independent folders. That is, when the bookmark key (or the bookmark icon) for searching (or bookmarking) a specific video section of the moving picture to be photographed is selected, the control unit 401 displays the user voice received through the microphone 405, By storing the folder in an independent folder different from the storage location, only the folder containing only the user voice can be searched by the user and the image corresponding to the user voice can be searched easily and quickly.

상기 제어부(401)는 상기 저장부의 폴더에 저장된 상기 사용자 음성을 문자로 변환한다(S14). 예를 들면, 상기 제어부(401)는 음성을 문자로 변환하는 프로그램을 통해 상기 저장부의 폴더에 저장된 사용자 음성을 문자로 변환한다. The control unit 401 converts the user voice stored in the folder of the storage unit into characters (S14). For example, the control unit 401 converts a user's voice stored in a folder of the storage unit into a character through a program for converting a voice to a character.

상기 제어부(401)는 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점을 검출한다(S15). 예를 들면, 상기 제어부(401)는 상기 북마크 키가 사용자에 의해 선택되었을 때(상기 사용자 음성이 수신된 시점) 그 북마크 키가 선택된 시점에 대응하는 동영상의 촬영 시점을 검출한다.The control unit 401 detects the shooting time point of the moving picture corresponding to the time when the user voice is received (S15). For example, when the bookmark key is selected by the user (when the user's voice is received), the control unit 401 detects the shooting time point of the moving picture corresponding to the selected time point of the bookmark key.

상기 제어부(401)는 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점을 검출하고, 상기 동영상의 저장 위치를 검출한다(S16).The control unit 401 detects the shooting time point of the moving picture corresponding to the time when the user voice is received, and detects the storing position of the moving picture (S16).

상기 제어부(401)는 상기 사용자 음성에 대응하는 문자, 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점, 상기 동영상의 저장 위치를 상기 저 장부(404)에 저장한다(S17). 여기서, 상기 제어부(401)는 상기 사용자 음성에 대응하는 문자를 상기 동영상 파일(동영상)에 링크시키며, 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점과 상기 동영상의 저장 위치를 갖는 상기 사용자 음성에 대응하는 문자를 상기 저장부(404)의 제1 폴더에 저장하고, 상기 동영상 파일 자체는 제1 폴더와 다른 위치에 있는 상기 저장부(404)의 제2 폴더에 저장한다. The control unit 401 stores the character corresponding to the user's voice, the shooting time point of the moving picture corresponding to the time when the user's voice is received, and the storage position of the moving picture in the storage unit 404 (S17). Here, the control unit 401 links the character corresponding to the user's voice to the moving picture file (moving picture), and controls the user having the moving picture pick-up time corresponding to the time when the user's voice is received, Stores the character corresponding to the voice in the first folder of the storage unit 404 and stores the moving picture file itself in the second folder of the storage unit 404 at a position different from the first folder.

이후, 상기 제어부(401)는 상기 저장부(404)의 제 1폴더에 존재하는 문자들 (문장)중에서 제1 문자(문장)가 사용자에 의해 선택되었는지를 판단한다(S18).In step S18, the control unit 401 determines whether the first character (sentence) among the characters (sentences) existing in the first folder of the storage unit 404 is selected by the user.

상기 제어부(401)는 상기 저장부(404)의 제 1폴더에 존재하는 문자들(문장) 중에서 제1 문자(문장)가 사용자에 의해 선택되었을 때 그 선택된 문자에 링크된 동영상을 검색한다(S19).When the first character (sentence) among the characters (sentences) existing in the first folder of the storage unit 404 is selected by the user, the control unit 401 searches for a moving picture linked to the selected character (S19 ).

상기 제어부(401)는 상기 선택된 문자에 링크된 동영상을 검색하고, 동영상 재생 프로그램을 실행하고, 상기 선택된 문자에 포함된 촬영 시점을 근거로 상기 검색된 동영상을 상기 동영상 재생 프로그램(동영상 재생기)을 통해 상기 동영상의 촬영 시점부터 재생한다(S20). 반면, 상기 제어부(401)는 상기 사용자 음성을 문자로 변환하지 않고, 상기 수신된 사용자 음성에 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점과 상기 동영상의 저장 위치를 포함(링크)시킨 후, 현재 사용자 음성이 수신되면 그 수신된 현재 사용자 음성과 저장된 사용자 음성을 비교함으로써 현재 사용자 음성과 동일한 사용자 음성을 검색하고, 그 검색한 사용자 음성에 링크된 동영상을 검색하고, 상기 검색된 사용자 음성에 포함된 촬영 시 점을 근거로 상기 검색된 동영상을 상기 동영상 재생 프로그램(동영상 재생기)을 통해 상기 동영상의 촬영 시점부터 재생할 수도 있다. The control unit 401 searches for a moving picture linked to the selected character, executes a moving picture reproducing program, and displays the retrieved moving picture on the basis of the photographing time point included in the selected character through the moving picture reproducing program (S20). On the other hand, the control unit 401 does not convert the user's voice into a character but includes the user's voice at the time of receiving the user's voice and the storage position of the moving picture Then, if the current user voice is received, the received user voice is compared with the stored user voice to search for the same user voice as the current user voice, search for the moving picture linked to the retrieved user voice, The retrieved moving picture may be reproduced from the moving picture shooting time point through the moving picture reproducing program (moving picture reproducing device) on the basis of the included photographing point.

따라서, 사용자는 상기 저장부(404)의 제 1폴더에 저장된 문자만을 선택함으로써 원하는 영상을 신속하고 용이하게 검색 및 확인할 수 있다.Accordingly, the user can quickly and easily search and confirm a desired image by selecting only the characters stored in the first folder of the storage unit 404.

도8 내지 도10은 본 발명의 제1 실시예에 따라 저장된 문자를 선택했을 때 동영상 재생기를 통해 재생된 영상을 나타낸 예시도이다. 8 to 10 are views illustrating an example of an image reproduced through a moving picture player when a character stored according to the first embodiment of the present invention is selected.

도8에 도시한 바와 같이, 상기 제어부(401)는 상기 카메라 모듈(402)에 의해 동영상이 촬영될 때 사용자에 의해 북마크키(예를 들면, 동영상 파일의 특정 부분을 검색하기 위한 키)가 선택되면, 상기 마이크(405)를 통해 사용자 음성(예를 들면, 해변가 모습)을 수신 및 저장한다. 상기 제어부(401)는 상기 저장된 사용자 음성(예를 들면, 해변가 모습)을 문자로 변환한다. 8, the controller 401 selects a bookmark key (for example, a key for searching a specific portion of a moving image file) by the user when the moving image is captured by the camera module 402 The microphone 405 receives and stores user voice (e.g., a beach view). The control unit 401 converts the stored user voice (for example, a beach view) into characters.

상기 제어부(401)는 상기 사용자 음성(예를 들면, 해변가 모습)이 수신된 시점에 대응하는 동영상의 촬영 시점(예를 들면, 동영상이 처음 촬영된 시점부터 1분14초가 경과한 시점이 사용자 음성이 수신된 시점임)을 검출한다. 상기 제어부(401)는 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점을 검출하고, 상기 동영상의 저장 위치를 검출한다.The control unit 401 controls the display unit to display the moving picture of the moving picture corresponding to the time when the user's voice (for example, beach view) is received (for example, Is received). The control unit 401 detects the shooting time point of the moving picture corresponding to the time when the user's voice is received, and detects the storing position of the moving picture.

상기 제어부(401)는 상기 사용자 음성에 대응하는 문자(예를 들면, 해변가 모습), 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점(예를 들면, 동영상이 처음 촬영된 시점부터 1분14초가 경과한 시점), 상기 동영상의 저장 위치를 상기 저장부(404)의 북마크 리스트에 저장한다. The control unit 401 receives a character corresponding to the user's voice (for example, a beach view), a shooting time point of a moving picture corresponding to a time point at which the user's voice is received (for example, The storage location of the moving picture is stored in the bookmark list of the storage unit 404.

예를 들면, 상기 제어부(401)는 상기 동영상을 촬영할 때 동영상이 처음 촬영된 시점부터 1분14초가 경과한 시점에 사용자가 상기 북마크키를 선택함과 동시에 "해변가 모습"이라고 발화하면 그 발화된 사용자 음성을 문자로 변환하고, 상기 변환된 문자(예를 들면, 해변가 모습)에 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점(예를 들면, 동영상이 처음 촬영된 시점부터 1분14초가 경과한 시점), 상기 동영상의 저장 위치를 포함시킨다.For example, when the moving picture is photographed, when the user selects the bookmark key at the time point when 1 minute and 14 seconds have elapsed from the time when the moving picture was first photographed, (For example, 1 minute 14 minutes from the time when the moving picture is first photographed) corresponding to the time point at which the user voice is received at the converted character The storage position of the moving picture is included.

상기 제어부(401)는 상기 동영상을 촬영할 때 동영상이 처음 촬영된 시점부터 10분25초가 경과한 시점에 사용자가 상기 북마크키를 선택함과 동시에 "바닷가에 예쁜 모습"이라고 발화하면 그 발화된 사용자 음성을 문자로 변환하고, 상기 변환된 문자(예를 들면, 바닷가에 예쁜 모습)에 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점(예를 들면, 동영상이 처음 촬영된 시점부터 10분25초가 경과한 시점), 상기 동영상의 저장 위치를 포함시킨다.When the user selects the bookmark key at the time point when 10 minutes and 25 seconds have elapsed from the time when the moving picture was first photographed at the time of photographing the moving picture, the control unit 401, when the user utters "pretty picture on the beach" (For example, 10 minutes 25 minutes from the time when the moving image is first photographed) corresponding to the time point at which the user voice is received at the converted character (for example, The storage position of the moving picture is included.

상기 제어부(401)는 상기 동영상을 촬영할 때 동영상이 처음 촬영된 시점부터 11분45초가 경과한 시점에 사용자가 상기 북마크키를 선택함과 동시에 "활공하는 갈매기"이라고 발화하면 그 발화된 사용자 음성을 문자로 변환하고, 상기 변환된 문자(예를 들면, 활공하는 갈매기)에 상기 사용자 음성이 수신된 시점에 대응하는 동영상의 촬영 시점(예를 들면, 동영상이 처음 촬영된 시점부터 11분45초가 경과한 시점), 상기 동영상의 저장 위치를 포함시킨다.When the user selects the bookmark key at the time when 11 minutes and 45 seconds have elapsed from the time when the moving image is first photographed when the moving image is photographed, the control unit 401 displays the ignited user voice (For example, 11 minutes 45 seconds from the time when the moving picture was first photographed) corresponding to the time point at which the user voice was received at the converted character (for example, gliding gliding) One point in time), and stores the moving picture storage position.

이후, 상기 제어부(401)는 상기 북마크 리스트에 포함된 문자들(1. 해변가 모습 2. 바닷가에서 예쁜 모습 3. 활공하는 갈매기) 중에서 제1 문자(1. 해변가 모 습)가 사용자에 의해 선택되면 상기 제1 문자에 포함된 동영상 저장 위치를 근거로 상기 동영상(동영상 파일)을 검색하고, 동영상 재생 프로그램을 통해 상기 동영상을 상기 1분14초가 경과한 시점부터 재생함으로써 상기 "해변가 모습"을 재생한다.Thereafter, when the first character (1. beachfront view) among the characters included in the bookmark list (1. beach appearance 2. beautiful appearance at the beach 3. gliding gliding) is selected by the user (Movie file) on the basis of the moving picture storage position included in the first character, and plays back the "beachfront view" by playing back the moving picture from the point of time when the moving picture has lapsed by 1 minute and 14 seconds .

도9에 도시한 바와 같이, 상기 제어부(401)는 상기 북마크 리스트에 포함된 문자들(1. 해변가 모습 2. 바닷가에서 예쁜 모습 3. 활공하는 갈매기) 중에서 제2 문자(2. 바닷가에서 예쁜 모습)가 사용자에 의해 선택되면 상기 제2 문자에 포함된 동영상 저장 위치를 근거로 상기 동영상(동영상 파일)을 검색하고, 동영상 재생 프로그램을 통해 상기 동영상을 상기 10분25초가 경과한 시점부터 재생함으로써 상기 "바닷가에서 예쁜 모습"을 재생한다.As shown in FIG. 9, the control unit 401 reads the characters included in the bookmark list (1. beach appearance 2. beautiful appearance at the beach 3. gull gliding) ) Is selected by the user, the moving picture (moving picture file) is searched based on the moving picture storage position included in the second character, and the moving picture is reproduced from the time point when the moving picture has lapsed by 10 minutes and 25 seconds "Play a pretty picture at the beach".

도10에 도시한 바와 같이, 상기 제어부(401)는 상기 북마크 리스트에 포함된 문자들(1. 해변가 모습 2. 바닷가에서 예쁜 모습 3. 활공하는 갈매기) 중에서 제3 문자(3. 활공하는 갈매기)가 사용자에 의해 선택되면 상기 제3 문자에 포함된 동영상 저장 위치를 근거로 상기 동영상(동영상 파일)을 검색하고, 동영상 재생 프로그램을 통해 상기 동영상을 상기 11분45초가 경과한 시점부터 재생함으로써 상기 "바닷가에서 예쁜 모습"을 재생한다.As shown in FIG. 10, the control unit 401 reads the characters included in the bookmark list (1. beach appearance 2. beautiful appearance at the beach, 3. gliding gliding) (Moving picture file) based on the moving picture storage position included in the third character and playing the moving picture from the time when the moving picture has lapsed by 11 minutes 45 seconds through the moving picture reproducing program, Pretty look at the beach ".

이하에서는, 사용자가 원하는 스틸 영상을 신속하고 용이하게 검색 및 표시할 수 있는 영상 표시 방법을 도6 및 도11을 참조하여 설명한다.Hereinafter, an image display method capable of quickly and easily searching and displaying a desired still image will be described with reference to FIGS. 6 and 11. FIG.

도11은 본 발명의 제2 실시예에 따른 영상 표시 방법을 나타낸 흐름도이다. 11 is a flowchart illustrating a video display method according to a second embodiment of the present invention.

먼저, 상기 제어부(401)는 사용자에 의해 카메라 모드가 선택되었을 때 상기 카메라 모듈(402)을 통해 스틸 영상을 촬영한다(S21). 이때, 상기 표시부(403)는 상기 촬영된 스틸 영상을 화면상에 표시한다. First, the controller 401 captures a still image through the camera module 402 when the camera mode is selected by the user (S21). At this time, the display unit 403 displays the photographed still image on the screen.

상기 제어부(401)는 상기 카메라 모듈(402)에 의해 스틸 영상이 촬영되고, 사용자에 의해 북마크키(예를 들면, 스틸 영상 파일을 검색하기 위한 키)가 선택되었는지를 판단한다. 예를 들면, 상기 제어부(401)는 상기 카메라 모듈(402)에 의해 스틸 영상을 검색(즐겨찾기)하기 위한 북마크키(예를 들면, 스틸 영상 파일을 검색하기 위한 아이콘)가 선택되었는지를 판단한다(S22).The control unit 401 determines whether a still image is captured by the camera module 402 and a bookmark key (for example, a key for searching for a still image file) is selected by the user. For example, the control unit 401 determines whether a bookmark key (e.g., an icon for searching for a still image file) for searching (favorite) a still image by the camera module 402 is selected (S22).

상기 제어부(401)는 상기 촬영된 스틸 영상을 검색(즐겨찾기)하게 위한 북마크키(또는 북마크 아이콘)가 선택되었을 때 상기 마이크(405)를 통해 사용자 음성을 수신한다(S23). 상기 제어부(401)는 사용자에 의해 상기 북마크키가 선택되고 있는 시간 동안 상기 사용자 음성을 수신하거나 미리설정된 시간(예를 들면, 3초~5초) 동안 상기 사용자 음성을 수신할 수도 있다.The controller 401 receives the user's voice through the microphone 405 when a bookmark key (or a bookmark icon) for searching (photographing) the photographed still image is selected (S23). The control unit 401 may receive the user's voice for a time period during which the bookmark key is selected by the user or may receive the user's voice for a predetermined time (for example, 3 seconds to 5 seconds).

상기 제어부(401)는 상기 촬영된 스틸 영상을 검색(즐겨찾기)하기 위한 북마크키(또는 북마크 아이콘)가 선택되었을 때 상기 마이크(405)를 통해 수신된 사용자 음성을 상기 스틸 영상의 저장 위치와 다른 독립된 폴더에 저장한다. 즉, 상기 제어부(401)는 상기 촬영된 스틸 영상을 검색(즐겨찾기)하기 위한 북마크키(또는 북마크 아이콘)가 선택되었을 때 상기 마이크(405)를 통해 수신된 사용자 음성을 상기 스틸 영상의 저장 위치와 다른 독립된 폴더에 저장함으로써, 사용자 음성(사용자 음성에 대응하는 문자)만을 포함하는 폴더만을 사용자가 검색하여 사용자 음성에 대응하는 영상을 쉽고 빠르게 검색할 수도 있다.When the bookmark key (or the bookmark icon) for searching (picking up) the still image photographed is selected, the control unit 401 stores the user voice received through the microphone 405 as the storage position of the still image Save to an independent folder. That is, when the bookmark key (or the bookmark icon) for searching (picking up) the still image photographed is selected, the control unit 401 stores the user voice received through the microphone 405 in the storage position of the still image So that only a folder containing only the user voice (character corresponding to the user voice) can be searched by the user and the user can easily and quickly search the video corresponding to the user voice.

상기 제어부(401)는 상기 저장부의 폴더에 저장된 상기 사용자 음성을 문자 로 변환한다(S24). 예를 들면, 상기 제어부(401)는 음성을 문자로 변환하는 프로그램을 통해 상기 저장부의 폴더에 저장된 사용자 음성을 문자로 변환한다. The control unit 401 converts the user's voice stored in the folder of the storage unit into a character (S24). For example, the control unit 401 converts a user's voice stored in a folder of the storage unit into a character through a program for converting a voice to a character.

상기 제어부(401)는 상기 사용자 음성이 수신된 시점에 대응하는 스틸 영상의 저장 위치를 검출한다(S25).The control unit 401 detects the storage position of the still image corresponding to the time when the user voice is received (S25).

상기 제어부(401)는 상기 사용자 음성에 대응하는 문자를 상기 스틸 영상의 저장 위치와 함께 상기 저장부(404)에 저장한다(S26). 여기서, 상기 제어부(401)는 상기 사용자 음성에 대응하는 문자를 상기 스틸 영상(스틸 영상 파일)에 링크시키며, 상기 사용자 음성에 대응하는 문자를 상기 저장부(404)의 제1 폴더에 저장하고, 상기 스틸 영상 파일 자체는 제1 폴더와 다른 위치에 있는 상기 저장부(404)의 제2 폴더에 저장한다. The control unit 401 stores the character corresponding to the user voice in the storage unit 404 together with the storage location of the still image (S26). Here, the control unit 401 links the character corresponding to the user voice to the still image (still image file), stores the character corresponding to the user voice in the first folder of the storage unit 404, The still image file itself is stored in the second folder of the storage unit 404 at a different position from the first folder.

이후, 상기 제어부(401)는 상기 저장부(404)의 제 1폴더에 존재하는 문자들 (문장)중에서 제1 문자(문장)가 사용자에 의해 선택되었는지를 판단한다(S27).Thereafter, the control unit 401 determines whether the first character (sentence) among the characters (sentences) existing in the first folder of the storage unit 404 is selected by the user (S27).

상기 제어부(401)는 상기 저장부(404)의 제 1폴더에 존재하는 문자들(문장) 중에서 제1 문자(문장)가 사용자에 의해 선택되었을 때 그 선택된 문자에 링크된 스틸 영상을 검색한다(S28).When the first character (sentence) among the characters (sentences) existing in the first folder of the storage unit 404 is selected by the user, the control unit 401 searches the still image linked to the selected character (sentence) S28).

상기 제어부(401)는 상기 선택된 문자에 링크된 스틸 영상을 검색하고, 그 검색된 스틸 영상을 표시한다(S29).The control unit 401 searches for a still image linked to the selected character and displays the retrieved still image (S29).

반면, 상기 제어부(401)는 상기 사용자 음성을 문자로 변환하지 않고, 상기 수신된 사용자 음성에 상기 사용자 음성이 수신된 시점에 대응하는 스틸 영상을 링크시킨 후, 현재 사용자 음성이 수신되면 그 수신된 현재 사용자 음성과 상기 저장 된 사용자 음성을 비교함으로써 현재 사용자 음성과 동일한 사용자 음성을 검색하고, 그 검색한 사용자 음성에 링크된 스틸 영상을 검색하고, 상기 검색된 스틸 영상을 상기 표시부(403)에 표시한다.On the other hand, the controller 401 does not convert the user voice into a character, links the still image corresponding to the received user voice to the received user voice, and if the current user voice is received, The current user voice is compared with the stored user voice to retrieve the same user voice as the current user voice, retrieves the still image linked to the retrieved user voice, and displays the retrieved still image on the display unit 403 .

따라서, 사용자는 상기 저장부(404)의 제 1폴더에 저장된 문자만을 선택함으로써 원하는 스틸 영상을 신속하고 용이하게 검색 및 확인할 수 있다.Accordingly, the user can quickly and easily search and confirm the desired still image by selecting only the characters stored in the first folder of the storage unit 404.

이상에서 상세히 설명한 바와 같이, 본 발명의 제1 실시예에 따른 영상 표시 장치 및 그 방법은, 영상을 검색하기 위한 키가 선택되었을 때 사용자 음성을 수신하고, 상기 사용자 음성이 수신된 시점에 대응하는 촬영된 영상의 촬영 시점과, 상기 촬영된 영상의 저장 위치와 상기 수신된 사용자 음성을 함께 저장부에 저장함으로써, 동영상 파일로부터 사용자가 원하는 영상을 신속하고 용이하게 검색 및 표시할 수 있다.As described in detail above, the video display apparatus and the video display method according to the first embodiment of the present invention are configured to receive a user's voice when a key for searching for an image is selected, The user can quickly and easily search and display the desired image from the moving image file by storing the photographing time of the photographed image, the storage position of the photographed image, and the received user voice together in the storage unit.

본 발명의 제2 실시예에 따른 영상 표시 장치 및 그 방법은, 영상을 검색하기 위한 키가 선택되었을 때 사용자 음성을 수신하고, 상기 사용자 음성이 수신된 시점에 대응하는 촬영된 스틸 영상의 저장 위치와 상기 수신된 사용자 음성을 함께 저장부에 저장함으로써, 스틸 영상 파일을 신속하고 용이하게 검색 및 표시할 수 있다.The video display apparatus and method according to the second embodiment of the present invention are configured to receive a user's voice when a key for searching for an image is selected and to store the stored still video corresponding to the time point at which the user's voice is received And storing the received user voice in the storage unit, the still image file can be quickly and easily searched and displayed.

본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위 가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. Therefore, the embodiments disclosed in the present invention are intended to illustrate rather than limit the scope of the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments. The scope of protection of the present invention should be construed according to the following claims, and all technical ideas within the scope of equivalents should be construed as falling within the scope of the present invention.

도1은 본 발명의 실시예를 설명하기 위한 이동 통신 단말기의 구성을 나타낸 블록도 이다. 1 is a block diagram illustrating a configuration of a mobile communication terminal for explaining an embodiment of the present invention.

도2는 이동 통신 단말기의 근접 터치 과정을 나타낸 도이다.2 is a diagram illustrating a process of proximity touch of a mobile communication terminal.

도3은 본 발명의 실시예를 설명하기 위한 차량 내비게이션 시스템을 나타낸 블록도 이다. 3 is a block diagram showing a vehicle navigation system for explaining an embodiment of the present invention.

도4는 본 발명의 실시예를 설명하기 위한 텔레매틱스 단말기(200)의 구성을 나타낸 블록도 이다.4 is a block diagram showing a configuration of a telematics terminal 200 for explaining an embodiment of the present invention.

도5는 TPEG 정보의 포맷을 도시한 도면이다.5 is a diagram showing the format of the TPEG information.

도6은 본 발명의 실시예들에 따른 영상 표시 장치의 구성을 나타낸 블록도 이다. 6 is a block diagram illustrating a configuration of an image display apparatus according to embodiments of the present invention.

도7은 본 발명의 제1 실시예에 따른 영상 표시 방법을 나타낸 흐름도이다. 7 is a flowchart illustrating an image display method according to the first embodiment of the present invention.

도8 내지 도10은 본 발명의 제1 실시예에 따라 저장된 문자를 선택했을 때 동영상 재생기를 통해 재생된 영상을 나타낸 예시도이다. 8 to 10 are views illustrating an example of an image reproduced through a moving picture player when a character stored according to the first embodiment of the present invention is selected.

도11은 본 발명의 제2 실시예에 따른 영상 표시 방법을 나타낸 흐름도이다. 11 is a flowchart illustrating a video display method according to a second embodiment of the present invention.

*도면의 주요부에 대한 부호의 설명DESCRIPTION OF THE REFERENCE NUMERALS

401: 제어부 402: 카메라 모듈401: control unit 402: camera module

403: 표시부 404: 저장부403: Display section 404:

405: 마이크405: Microphone

Claims (26)

영상을 촬영하는 카메라와;A camera for capturing an image; 상기 촬영된 영상을 표시하는 표시부와;A display unit for displaying the photographed image; 상기 촬영된 영상에 관련된 정보를 저장하기 위한 키가 선택되었을 때 사용자 음성을 수신하고, 상기 사용자 음성이 수신된 시점에 대응하는 상기 촬영된 영상의 촬영 시점과, 상기 촬영된 영상의 저장 위치와 상기 수신된 사용자 음성을 함께 저장부에 저장하는 제어부를 포함하며,A user's voice is received when a key for storing information related to the photographed image is selected, and a time point at which the photographed image corresponding to a time point at which the user's voice is received, a storage position of the photographed image, And a control unit for storing the received user voice in a storage unit, 상기 제어부는 현재 사용자 음성을 수신하고, 상기 수신된 현재 사용자 음성과 상기 저장된 사용자 음성이 동일하면 상기 촬영된 영상의 저장 위치를 근거로 상기 촬영된 영상을 검색하고, 상기 검색한 영상을 상기 표시부에 표시하는 것을 특징으로 하는 영상 표시 장치. Wherein the control unit receives the current user voice, searches the photographed image based on the storage location of the photographed image if the received current user voice and the stored user voice are the same, and displays the retrieved image on the display unit And displays the image. 제1항에 있어서, 상기 영상은, The method of claim 1, 동영상인 것을 특징으로 하는 영상 표시 장치.Wherein the moving picture is a moving picture. 제1항에 있어서, 상기 제어부는,The apparatus of claim 1, 상기 수신된 사용자 음성을 문자로 변환하고, 상기 변환된 문자에 상기 사용자 음성이 수신된 시점에 대응하는 상기 촬영된 영상의 촬영 시점과, 상기 촬영된 영상의 저장 위치를 포함시키는 것을 특징으로 하는 영상 표시 장치. And converting the received user voice into a character and including a photographing time point of the photographed image corresponding to a time point at which the user voice is received in the converted character and a storage position of the photographed image Display device. 제3항에 있어서, 상기 제어부는,The apparatus of claim 3, 상기 변환된 문자를 상기 영상의 저장위치와는 다른 저장 위치에 저장하는 것을 특징으로 하는 영상 표시 장치. And stores the converted character in a storage location different from the storage location of the image. 제1항에 있어서, 상기 제어부는,The apparatus of claim 1, 상기 수신된 사용자 음성을 문자로 변환하고, 상기 변환된 문자에 상기 촬영시점과 상기 저장위치를 포함시키는 것을 특징으로 하는 영상 표시 장치.Converting the received user voice into characters, and including the shooting time and the storage position in the converted character. 제1항에 있어서, 상기 제어부는,The apparatus of claim 1, 상기 저장된 사용자 음성이 선택될 때 상기 촬영된 영상의 저장 위치를 근거로 상기 촬영된 영상을 검색하고, 상기 저장된 촬영 시점을 근거로 상기 검색한 영상을 상기 촬영시점부터 재생하는 것을 특징으로 하는 영상 표시 장치.Wherein when the stored user voice is selected, the photographed image is searched based on the storage position of the photographed image, and the searched image is reproduced from the photographed point based on the stored photographed point. Device. 제3항에 있어서, 상기 제어부는,The apparatus of claim 3, 상기 변환된 문자가 선택될 때 상기 촬영된 영상의 저장 위치를 근거로 상기 촬영된 영상을 검색하고, 상기 저장된 촬영 시점을 근거로 상기 검색한 영상을 상기 촬영시점부터 재생하는 것을 특징으로 하는 영상 표시 장치.And wherein when the converted character is selected, the photographed image is searched based on the storage position of the photographed image, and the searched image is reproduced from the photographed point of time based on the stored photographed point. Device. 제1항에 있어서, 상기 제어부는,The apparatus of claim 1, 스틸 영상이 촬영되었을 때 상기 키가 선택되면, 사용자 음성을 수신하고, 상기 수신한 사용자 음성을 문자로 변환하고, 상기 변환된 문자에 상기 스틸 영상의 저장위치를 포함시키는 것을 특징으로 하는 영상 표시 장치.Wherein when the key is selected when the still image is captured, the image display device receives the user's voice, converts the received user's voice into a character, and stores the storage location of the still image in the converted character. . 제1항에 있어서, 상기 제어부는,The apparatus of claim 1, 상기 현재 사용자 음성과 상기 저장된 사용자 음성이 동일하면 상기 촬영된 영상의 저장 위치를 근거로 상기 촬영된 영상을 검색하고, 상기 저장된 촬영 시점을 근거로 상기 검색한 영상을 상기 촬영시점부터 재생하는 것을 특징으로 하는 영상 표시 장치.If the current user voice and the stored user voice are the same, searching the photographed image based on the storage position of the photographed image and reproducing the retrieved image from the photographed point based on the stored photographed point To be displayed. 삭제delete 삭제delete 삭제delete 삭제delete 영상을 촬영하는 단계와;A step of photographing an image; 상기 촬영된 영상을 표시부에 표시하는 단계와;Displaying the photographed image on a display unit; 상기 촬영된 영상에 관련된 정보를 저장하기 위한 키가 선택되었을 때 사용자 음성을 수신하는 단계와;Receiving a user's voice when a key for storing information related to the photographed image is selected; 상기 사용자 음성이 수신된 시점에 대응하는 상기 촬영된 영상의 촬영 시점과, 상기 촬영된 영상의 저장 위치와 상기 수신된 사용자 음성을 함께 저장부에 저장하는 단계와; Storing the taken time of the photographed image corresponding to the time when the user voice is received, the storage location of the photographed image and the received user voice in a storage unit together; 현재 사용자 음성을 수신하는 단계와;Receiving a current user voice; 상기 수신된 현재 사용자 음성과 상기 저장된 사용자 음성이 동일하면 상기 촬영된 영상의 저장 위치를 근거로 상기 촬영된 영상을 검색하는 단계와;Searching the photographed image based on a storage location of the photographed image if the received current user voice and the stored user voice are the same; 상기 검색한 영상을 상기 표시부에 표시하는 단계를 포함하는 것을 특징으로 하는 영상 표시 방법. And displaying the searched image on the display unit. 청구항 15은(는) 설정등록료 납부시 포기되었습니다.Claim 15 is abandoned in the setting registration fee payment. 제14항에 있어서, 상기 영상은, 15. The method of claim 14, 동영상인 것을 특징으로 하는 영상 표시 방법.Wherein the moving image is a moving image. 청구항 16은(는) 설정등록료 납부시 포기되었습니다.Claim 16 has been abandoned due to the setting registration fee. 제14항에 있어서, 상기 사용자 음성을 저장하는 단계는,15. The method of claim 14, wherein storing the user voice comprises: 상기 수신된 사용자 음성을 문자로 변환하는 단계와;Converting the received user voice into a character; 상기 변환된 문자에 상기 사용자 음성이 수신된 시점에 대응하는 상기 촬영된 영상의 촬영 시점과, 상기 촬영된 영상의 저장 위치를 포함시키는 단계를 포함하는 것을 특징으로 하는 영상 표시 방법. And including a photographing time point of the photographed image corresponding to a time point at which the user voice is received in the converted character and a storage position of the photographed image. 청구항 17은(는) 설정등록료 납부시 포기되었습니다.Claim 17 has been abandoned due to the setting registration fee. 제16항에 있어서, 상기 변환된 문자는 상기 영상의 저장위치와는 다른 저장 위치에 저장되는 것을 특징으로 하는 영상 표시 방법. 17. The method of claim 16, wherein the converted character is stored in a storage location different from the storage location of the image. 청구항 18은(는) 설정등록료 납부시 포기되었습니다.Claim 18 has been abandoned due to the setting registration fee. 제14항에 있어서, 상기 사용자 음성을 저장하는 단계는,15. The method of claim 14, wherein storing the user voice comprises: 상기 수신된 사용자 음성을 문자로 변환하는 단계와;Converting the received user voice into a character; 상기 사용자 음성이 수신된 시점에 대응하는 상기 촬영된 영상의 촬영 시점을 검출하는 단계와;Detecting a photographing time point of the photographed image corresponding to a time point at which the user voice is received; 상기 촬영된 영상의 저장 위치를 검출하는 단계와;Detecting a storage position of the photographed image; 상기 변환된 문자에 상기 촬영시점과 상기 저장위치를 포함시키는 단계를 포함하는 것을 특징으로 하는 영상 표시 방법.And including the shot time and the storage location in the converted character. 청구항 19은(는) 설정등록료 납부시 포기되었습니다.Claim 19 is abandoned in setting registration fee. 제14항에 있어서, 상기 저장된 사용자 음성이 선택될 때 상기 촬영된 영상의 저장 위치를 근거로 상기 촬영된 영상을 검색하는 단계와;15. The method of claim 14, further comprising: searching the photographed image based on a storage location of the photographed image when the stored user voice is selected; 상기 저장된 촬영 시점을 근거로 상기 검색한 영상을 상기 촬영시점부터 재생하는 단계를 더 포함하는 것을 특징으로 하는 영상 표시 방법.And reproducing the searched image from the shooting time based on the stored shooting time point. 청구항 20은(는) 설정등록료 납부시 포기되었습니다.Claim 20 has been abandoned due to the setting registration fee. 제16항에 있어서, 상기 변환된 문자가 선택될 때 상기 촬영된 영상의 저장 위치를 근거로 상기 촬영된 영상을 검색하는 단계와;17. The method of claim 16, further comprising: searching the photographed image based on a storage location of the photographed image when the converted character is selected; 상기 저장된 촬영 시점을 근거로 상기 검색한 영상을 상기 촬영시점부터 재생하는 단계를 더 포함하는 것을 특징으로 하는 영상 표시 방법.And reproducing the searched image from the shooting time based on the stored shooting time point. 청구항 21은(는) 설정등록료 납부시 포기되었습니다.Claim 21 has been abandoned due to the setting registration fee. 제14항에 있어서, 상기 사용자 음성을 저장하는 단계는,15. The method of claim 14, wherein storing the user voice comprises: 스틸 영상이 촬영되었을 때 상기 키가 선택되면, 사용자 음성을 수신하는 단계와;Receiving a user voice when the key is selected when a still image is photographed; 상기 수신한 사용자 음성을 문자로 변환하는 단계와;Converting the received user voice into a character; 상기 변환된 문자에 상기 스틸 영상의 저장위치를 포함시키는 단계를 포함하는 것을 특징으로 하는 영상 표시 방법.And storing the storage location of the still image in the converted character. 청구항 22은(는) 설정등록료 납부시 포기되었습니다.Claim 22 is abandoned in setting registration fee. 제14항에 있어서, 15. The method of claim 14, 상기 수신된 현재 사용자 음성과 상기 저장된 사용자 음성이 동일하면 상기 저장된 촬영 시점을 근거로 상기 검색한 영상을 상기 촬영시점부터 재생하는 단계를 더 포함하는 것을 특징으로 하는 영상 표시 방법. If the received current user voice and the stored user voice are the same, reproducing the retrieved image from the photographing time point based on the stored photographing time point. 삭제delete 삭제delete 삭제delete 삭제delete
KR1020090126367A 2009-12-17 2009-12-17 Image display method and apparatus thereof Expired - Fee Related KR101641240B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020090126367A KR101641240B1 (en) 2009-12-17 2009-12-17 Image display method and apparatus thereof
PCT/KR2010/007612 WO2011074776A2 (en) 2009-12-17 2010-11-01 Image display apparatus and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090126367A KR101641240B1 (en) 2009-12-17 2009-12-17 Image display method and apparatus thereof

Publications (2)

Publication Number Publication Date
KR20110069577A KR20110069577A (en) 2011-06-23
KR101641240B1 true KR101641240B1 (en) 2016-07-21

Family

ID=44167800

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090126367A Expired - Fee Related KR101641240B1 (en) 2009-12-17 2009-12-17 Image display method and apparatus thereof

Country Status (2)

Country Link
KR (1) KR101641240B1 (en)
WO (1) WO2011074776A2 (en)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4236372B2 (en) * 2000-09-25 2009-03-11 インターナショナル・ビジネス・マシーンズ・コーポレーション Spatial information utilization system and server system
JP2004234465A (en) * 2003-01-31 2004-08-19 Toshiba Corp Retrieval server, mobile terminal and information providing system
WO2005039175A1 (en) * 2003-10-16 2005-04-28 Matsushita Electric Industrial Co., Ltd. Video/audio recorder/reproducer, video/audio recording method and reproducing method
KR100623192B1 (en) * 2004-12-21 2006-09-14 주식회사 팬택 A mobile terminal for outputting audio data about an image input through a mounted camera
KR101100191B1 (en) * 2005-01-28 2011-12-28 엘지전자 주식회사 Multimedia playback device and multimedia data retrieval method using the same
KR20070006195A (en) * 2005-07-07 2007-01-11 주식회사 팬택 Apparatus and method for generating a still image from a video
KR20080112975A (en) * 2007-06-22 2008-12-26 서종훈 Database construction method for script information based video retrieval, database construction system, recording medium on which database program is recorded, and video retrieval method using the same

Also Published As

Publication number Publication date
WO2011074776A2 (en) 2011-06-23
WO2011074776A3 (en) 2011-11-03
KR20110069577A (en) 2011-06-23

Similar Documents

Publication Publication Date Title
KR101562588B1 (en) Information providing apparatus and method thereof
KR101612785B1 (en) Mobile vehicle navigation method and apparatus thereof
KR101561913B1 (en) Method for displaying image for mobile terminal and apparatus thereof
KR101641513B1 (en) Image photographing apparatus of mobile terminal and method thereof
KR101688155B1 (en) Information processing apparatus and method thereof
KR101646139B1 (en) Navigation method of mobile terminal and apparatus thereof
KR101578737B1 (en) Voice processing apparatus and method of mobile terminal
KR101622637B1 (en) Navigation method of mobile terminal and apparatus thereof
KR20140007282A (en) Speech recognition apparatus and method thereof
KR101917700B1 (en) Mobile terminal and control method for the mobile terminal
KR101569021B1 (en) Information providing apparatus and method thereof
KR101542495B1 (en) Method for displaying information for mobile terminal and apparatus thereof
KR20140122956A (en) Information providing apparatus and method thereof
KR101677641B1 (en) User recognition apparatus and method thereof
KR101712666B1 (en) Electronic device and contents sharing method for electronic device
KR101553952B1 (en) Control method of mobile terminal and apparatus thereof
KR101649644B1 (en) Information providing apparatus and method thereof
KR20110055267A (en) Navigation method of mobile terminal and device therefor
KR101641240B1 (en) Image display method and apparatus thereof
KR101677628B1 (en) Information providing apparatus and method thereof
KR101585472B1 (en) Data processing apparatus and method thereof
KR101544454B1 (en) Vehicle control system and method thereof
KR101587103B1 (en) Display method of mobile terminal and apparatus thereof
KR101576460B1 (en) Data output method and apparatus
KR101729578B1 (en) Information providing apparatus and method thereof

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20091217

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20141215

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20091217

Comment text: Patent Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20160106

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20160623

PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20160714

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20160715

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PR1001 Payment of annual fee

Payment date: 20190614

Start annual number: 4

End annual number: 4

PR1001 Payment of annual fee

Payment date: 20200612

Start annual number: 5

End annual number: 5

PR1001 Payment of annual fee

Payment date: 20210609

Start annual number: 6

End annual number: 6

PR1001 Payment of annual fee

Payment date: 20220609

Start annual number: 7

End annual number: 7

PC1903 Unpaid annual fee

Termination category: Default of registration fee

Termination date: 20240425