[go: up one dir, main page]

KR100538572B1 - 시각적 입력 피드백을 포함하는 사용자 접촉 기반의 디지털기기 제어 장치 및 방법 - Google Patents

시각적 입력 피드백을 포함하는 사용자 접촉 기반의 디지털기기 제어 장치 및 방법 Download PDF

Info

Publication number
KR100538572B1
KR100538572B1 KR1020050050656A KR20050050656A KR100538572B1 KR 100538572 B1 KR100538572 B1 KR 100538572B1 KR 1020050050656 A KR1020050050656 A KR 1020050050656A KR 20050050656 A KR20050050656 A KR 20050050656A KR 100538572 B1 KR100538572 B1 KR 100538572B1
Authority
KR
South Korea
Prior art keywords
contact
light emitting
user
digital device
information
Prior art date
Application number
KR1020050050656A
Other languages
English (en)
Inventor
민동진
Original Assignee
(주)멜파스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)멜파스 filed Critical (주)멜파스
Priority to KR1020050050656A priority Critical patent/KR100538572B1/ko
Priority to PCT/KR2005/002578 priority patent/WO2006135127A1/en
Priority to CNA2005800500285A priority patent/CN101194220A/zh
Priority to JP2008516736A priority patent/JP2008544361A/ja
Priority to US11/921,856 priority patent/US8462122B2/en
Priority to EP05773911A priority patent/EP1894080A4/en
Application granted granted Critical
Publication of KR100538572B1 publication Critical patent/KR100538572B1/ko
Priority to JP2011283956A priority patent/JP2012069165A/ja
Priority to JP2013239428A priority patent/JP2014041655A/ja

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0362—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 1D translations or rotations of an operating part of the device, e.g. scroll wheels, sliders, knobs, rollers or belts
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03547—Touch pads, in which fingers can move on a surface

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Telephone Set Structure (AREA)
  • Telephone Function (AREA)

Abstract

본 발명은 인체의 접촉을 감지하는 센서를 이용하여 디지털 기기를 제어하는 디지털 기기 제어 장치 및 디지털 기기 제어 방법에 관한 것으로서, 더욱 상세하게는 접촉식 센서를 통한 디지털 기기 제어를 수행함과 동시에 센서의 접촉 정보에 기초한 피드백 정보를 사용자에게 제공하는 디지털 기기 제어 장치 및 방법에 관한 것이다. 본 발명의 일 실시예에 따라 사용자로부터 입력되는 접촉에 기초하여 디지털 기기를 제어하기 위한 디지털 기기 제어장치는 소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들을 구비하고 상기 접촉식 스위치들에 대한 상기 사용자의 접촉을 감지하여 접촉 정보를 생성하기 위한 센서, 상기 접촉 정보에 기초하여 상기 디지털 기기를 제어하기 위한 제어 정보를 생성하는 제어 정보 생성부, 상기 생성된 제어 정보에 따라 상기 디지털 기기를 제어하는 기기 제어부, 상기 접촉 정보에 기초하여 피드백 정보를 생성하는 피드백 정보 생성부 및 상기 피드백 정보를 사용자에게 시각적으로 표시하는 피드백 표시부를 포함하는 것을 특징으로 한다. 본 발명에 의하면 복수 개의 접촉식 스위치들이 접촉되는 것을 사용자가 시각적으로 명확하게 인식할 수 있다.

Description

시각적 입력 피드백을 포함하는 사용자 접촉 기반의 디지털 기기 제어 장치 및 방법{APPARATUS FOR CONTROLLING DIGITAL DEVICE BASED ON TOUCH INPUT INTERFACE CAPABLE OF VISUAL INPUT FEEDBACK AND METHOD FOR THE SAME}
본 발명은 인체의 접촉을 감지하는 센서를 이용하여 디지털 기기를 제어하는 디지털 기기 제어 장치 및 디지털 기기 제어 방법에 관한 것으로서, 더욱 상세하게는 접촉식 센서를 통한 디지털 기기 제어를 수행함과 동시에 센서의 접촉 정보에 기초한 피드백 정보를 사용자에게 제공하는 디지털 기기 제어 장치 및 방법에 관한 것이다.
오늘날, 정보통신기술의 발달로 많은 기능들이 하나의 디지털 기기에 융합되는 추세에 있다. 이에 따라, 다양한 멀티미디어 기능 등을 갖춘 디지털 기기들이 등장하게 되었고, 다양한 기능의 추가에 따라 새로운 사용자 인터페이스에 대한 필요성이 커지고 있는 실정이다.
디지털 기기의 경량화, 휴대성의 편의를 위해서는 디스플레이, 키패드 등의 관련 구성 요소들 역시 그 크기가 소형화될 수 밖에 없게 되고, 따라서 제한된 리소스의 한계를 극복하고 사용자가 좀더 편리하게 사용할 수 있도록 하는 사용자 인터페이스의 제공이 필수적이다.
최근 인체의 접촉 정보에 기초하여 스위칭 동작을 수행하는 접촉식 스위치의 사용이 확대되고 있다. 접촉식 스위치는 기계식 스위치와 달리 인체의 접촉 만으로 스위칭이 가능하여 스탠드 등 각종 기기에서 기계식 스위치를 대체하고 있다.
특히, 기계식 스위치의 경우, 1회성이 아닌 지속적이고 연속적인 입력을 요하는 경우, 예를 들어, 네비게이션 기능이나 스크롤 기능 등을 구현하기에 불편하기 때문에 접촉식 스위치의 조합을 채택하는 어플리케이션이 늘고 있다.
일반적으로, 기계식 스위치의 경우에는 그 스위칭 시에 버튼이나 스위치가 물리적으로 움직이거나 딸깍 소리가 나는 등의 피드백이 있어 사용자가 기계식 스위치의 스위칭을 인지할 수 있다.
그러나, 접촉식 스위치의 경우에 사용자가 센서에 접촉하는 것만으로 스위칭이 이루어지기 때문에 사용자가 그 접촉식 스위치를 통한 스위칭이 제대로 발생했는지를 인식하기 어렵다. 따라서, 스탠드 등의 전원에 사용되는 접촉식 스위치의 경우에 사용자의 접촉에 의해 스위칭이 발생하면 비프음을 발생시키는 등의 방법을 사용하여 스위칭의 발생을 사용자가 인식할 수 있도록 하고 있다.
특히, 접촉식 스위치를 여러 개 조합하여 네비게이션 기능이나 스크롤 기능을 구현하는 경우에는 여러 개의 접촉식 스위치가 짧은 시간동안 스위칭되므로 사용자는 접촉식 스위치들이 제대로 동작하였는지 여부를 더더욱 인식하기가 어렵다.
따라서, 접촉식 스위치들을 여러 개 조합하여 스크롤 등을 수행하는 디지털 기기의 제어 시에 접촉식 스위치들의 접촉을 사용자가 효과적으로 인식할 수 있는 방법 및 장치의 필요성이 절실하게 대두된다.
본 발명은 상기와 같은 종래기술을 개선하기 위해 안출된 것으로서, 복수 개의 접촉식 스위치들을 이용하여 사용자 입력을 받는 디지털 기기에서 사용자가 접촉식 스위치들의 접촉 여부를 시각적으로 명확하게 인식할 수 있는 디지털 기기 제어 장치 및 디지털 기기 제어 방법을 제공하는 것을 목적으로 한다.
또한 본 발명은 접촉식 스위치들과 이에 대응되는 발광 소자들을 이용하여 디지털 기기를 제어함으로써, 소형화된 디지털 기기에 쉽게 장착될 수 있으며, 사용자가 편리하게 이용할 수 있는 디지털 기기 제어 장치 및 디지털 기기 제어 방법을 제공하는 것을 목적으로 한다.
또한 본 발명은 접촉식 스위치들을 이용한 스위칭시에 이를 사용자에게 시각적으로 인식 가능하게 하여 디지털 기기의 제어가 제대로 수행되지 않는 경우에 접촉식 스위치를 포함한 입력 인터페이스의 고장인지 기기 제어부의 고장인지를 파악할 수 있는 디지털 기기 제어 장치 및 디지털 기기 제어 방법을 제공하는 것을 목적으로 한다.
상기의 목적을 이루고 종래기술의 문제점을 해결하기 위하여, 본 발명의 일 실시예에 따른 사용자로부터 입력되는 접촉에 기초하여 제어되는 모바일 단말기는, 소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들을 구비하고 상기 접촉식 스위치들에 대한 상기 사용자의 접촉을 감지하여 접촉 정보를 생성하기 위한 센서, 상기 접촉 정보에 기초하여 상기 모바일 단말기를 제어하기 위한 제어 정보를 생성하는 제어 정보 생성부, 상기 생성된 제어 정보에 따라 상기 모바일 단말기를 제어하는 기기 제어부, 상기 접촉 정보에 기초하여 피드백 정보를 생성하는 피드백 정보 생성부 및 상기 피드백 정보를 사용자에게 시각적으로 표시하는 복수 개의 발광 소자들을 포함하는 것을 특징으로 한다.
또한 본 발명의 다른 실시예에 따른 사용자로부터 입력되는 접촉에 기초하여 디지털 기기를 제어하기 위한 디지털 기기 제어장치는, 소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들을 구비하고 상기 접촉식 스위치들에 대한 상기 사용자의 접촉을 감지하여 접촉 정보를 생성하기 위한 센서, 상기 접촉 정보에 기초하여 피드백 정보를 생성하는 피드백 정보 생성부 및 상기 피드백 정보를 사용자에게 시각적으로 표시하는 피드백 표시부를 포함하는 것을 특징으로 한다.
또한 본 발명의 또 다른 실시예에 따른 사용자로부터 입력되는 접촉에 기초하여 디지털 기기를 제어하기 위한 디지털 기기 제어방법은, 소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들에 대한 상기 사용자의 접촉을 감지하여 접촉 정보를 생성하는 단계, 상기 접촉 정보에 기초하여 상기 디지털 기기를 제어하기 위한 제어 정보를 생성하는 단계, 상기 생성된 제어 정보에 따라 상기 디지털 기기를 제어하는 단계, 상기 접촉 정보에 기초하여 피드백 정보를 생성하는 단계 및 상기 피드백 정보를 사용자에게 시각적으로 표시하는 단계를 포함하는 것을 특징으로 한다.
본 명세서에서 사용되는 "발광 소자"는 빛을 발산하는 모든 소자를 포함한다. 예를 들어, 발광 소자는 발광 다이오드일 수 있다.
이하, 첨부된 도면들을 참조하여 본 발명에 따른, 사용자로부터 입력되는 접촉에 기초하여 제어되는 디지털 기기 제어장치 및 디지털 기기 제어방법에 대하여 상세히 설명한다. 이하에서는 본 발명이 디지털 기기에 포함되어 구현되는 경우를 예로 들어 설명하나 디지털 기기가 아닌 다른 형태의 기기에서도 본 발명이 적용가능함은 당연하다.
도 1은 본 발명의 일 실시예에 따른 디지털 기기 제어방법을 나타낸 동작 흐름도이다.
도 1을 참조하면, 사용자로부터 입력되는 접촉에 기초하여 제어되는 디지털 기기 제어방법은 먼저 소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들에 대한 사용자의 접촉을 감지하여 접촉 정보를 생성한다(S110).
이 때, 복수 개의 접촉식 스위치들은 열, 압력, 커패시턴스 및 저항 등을 이용하여 사용자의 접촉을 감지하고, 이를 전기 신호로 변환하는 모든 장치를 포함하는 개념이다. 이 때, 접촉식 스위치는 사용자 신체의 일부분의 접촉을 감지할 수도 있고, 인체 이외의 도체 또는 부도체를 통한 접촉을 감지할 수도 있다.
복수 개의 접촉식 스위치들은 소정의 간격으로 이격되어 배치된다. 예를 들어, 접촉식 스위치들은 원형(원의 둘레에)으로 배치될 수 있다. 접촉식 스위치들이 원형으로 배치된 경우에 사용자는 접촉식 스위치들의 상부를 시계 방향 또는 시계 반대 방향으로 손가락으로 문지르는 방법으로 디지털 기기를 제어할 수 있다. 이 때, 시계 방향으로 손가락을 문지르면 오른쪽이나 아래쪽으로 스크롤되고, 시계 반대 방향으로 손가락을 문지르면 왼쪽이나 위쪽으로 스크롤될 수 있다.
접촉식 스위치들은 바(bar)형태나 십자 형태로 배치될 수도 있다. 이러한 경우에도 사용자는 접촉식 스위치들의 상부를 손가락으로 문지르는 방법으로 디지털 기기를 제어할 수 있다.
접촉식 스위치들 사이의 간격은 어플리케이션의 종류나 사용자에게 제공하는 편의의 정도 등에 따라 다르게 설정될 수 있다. 접촉식 스위치들 사이의 간격을 좁게 하면 디지털 기기를 보다 세밀하게 컨트롤할 수 있다. 접촉식 스위치들 사이의 간격을 넓게 하면 스위치의 총 개수를 줄여서 생산단가를 낮추고 접촉식 스위치들 사이의 배선을 용이하게 처리할 수 있다.
상기 접촉 정보는 접촉 스위치별로 사용자에 의한 인체 접촉 신호를 감지하여 전기적 신호로 변환하여 생성되는 정보로서, 이진(binary) 데이터, 그레이(gray) 또는 풀컬러드(full-colored) 데이터일 수 있다. 접촉 정보는 접촉 스위치별로 인체 접촉여부, 접촉의 정도 또는 가장 최근 접촉으로부터 현재까지의 시간 등의 데이터를 포함할 수 있다. 예를 들어, 접촉 정보의 저장을 위해 디지털 기기 내에 접촉 스위치별로 접촉 발생 여부 필드, 접촉의 세기 필드 및 최근 접촉으로부터 경과 시간 필드 등을 포함하는 데이터베이스가 구비될 수 있다.
또한, 디지털 기기 제어방법은 접촉 정보에 기초하여 상기 디지털 기기를 제어하기 위한 제어 정보를 생성한다(S120).
디지털 기기는 휴대폰 등의 모바일 단말기, MP3플레이어나 PMP(Portable Multimedia Player) 등의 모바일 멀티미디어 플레이어 또는 모바일 게임기 등일 수 있다. 또한, 디지털 기기는 모바일 기기가 아닌 다양한 가전 기기일 수도 있다.
이 때, 제어 정보는 디지털 기기의 동작에 필요한 모든 제어신호를 포함할 수 있다. 예를 들어, 제어 정보는 디지털 기기의 디스플레이 장치를 제어할 수도 있고, 음량 조절 장치를 제어할 수도 있다.
또한, 디지털 기기 제어방법은 생성된 제어 정보에 따라 상기 디지털 기기를 제어한다(S130).
이 때, 디지털 기기의 제어는 다양한 방법으로 수행될 수 있다. 예를 들어, 디지털 기기의 제어는 사용자가 접촉한 위치에 따라 디지털 기기를 제어할 수도 있고, 사용자 접촉의 위치에 따라 사용자의 움직임을 파악하여 수행될 수도 있다. 예를 들어, 디지털 기기의 제어는 사용자가 손가락을 위/아래로 움직이거나 시계방향/반시계 방향으로 돌리면 위/아래로 스크롤하거나, 위/아래로 포인터를 움직이거나, 줌인/줌아웃 기능을 수행하거나, 음량을 높이거나 낮출 수 있다.
또한, 디지털 기기 제어방법은 접촉 정보에 기초하여 피드백 정보를 생성한다(S140).
이 때, 피드백 정보는 사용자로부터 입력되는 접촉에 관한 정보인 접촉 정보를 다시 사용자에게 제공하기 위한 정보이다. 예를 들어, 피드백 정보는 접촉 정보에 기초하여 발광 소자를 구동하기 위한 제어 신호일 수 있다. 예를 들어, 상기 접촉 스위치들에 1:1로 대응되는 발광 소자들이 접촉 스위치들에 대응되는 위치에 배치되어 있는 경우에 피드백 정보는 접촉이 발생한 접촉 스위치들에 대응되는 발광 소자들이 점등되도록 하는 제어 신호일 수 있다.
또한, 디지털 기기 제어방법은 피드백 정보를 사용자에게 시각적으로 표시한다(S150).
이 때, 단계(S150)는 복수 개의 발광 소자들을 이용하여 피드백 정보를 사용자에게 표시할 수 있다. 이 때, 발광 소자들은 발광 다이오드(luminescent diode; LED)일 수 있다. 발광 소자들 각각은 다양한 색깔로 발광할 수 있다.
복수 개의 발광 소자들을 이용하여 피드백 정보를 표시하는 경우에, 발광 소자들은 복수 개의 접촉 스위치들에 대응되어야 한다. 이 때, 접촉 스위치들 및 발광 소자들간의 대응은 일 대 다(1:N), 다 대 일(N:1) 또는 일 대 일(1:1) 대응일 수 있다. 접촉 스위치들 및 발광 소자들 간의 대응이 일 대 다 대응인 경우에, 한 개의 접촉 스위치의 접촉 여부에 따라 두 개 이상의 발광 소자가 점멸하게 된다. 접촉 스위치들 및 발광 소자들 간의 대응이 다 대 일 대응인 경우에, 두 개 이상의 접촉 스위치의 접촉 여부에 따라 한 개의 발광 소자가 점멸하게 된다. 접촉 스위치들 및 발광 소자들 간의 대응이 일 대 일 대응인 경우에, 한 개의 접촉 스위치의 접촉 여부에 따라 한 개의 발광 소자가 점멸하게 된다. 접촉 스위치들 및 발광 소자들 간의 대응 방법은 어플리케이션의 종류나 이나 디지털 기기의 크기 또는 사용자의 요구에 따라 달라질 수 있다.
발광 소자들은 대응되는 접촉식 스위치의 접촉 정보에 포함된 접촉의 정도에 따라 밝기나 색깔을 달리 할 수 있다. 예를 들어, 접촉식 스위치가 압력에 의하여 접촉을 감지한다고 할 때, 접촉식 스위치에 주어지는 압력이 높으면 대응되는 발광 소자가 밝은 빛을 발광하도록 하고, 접촉식 스위치에 주어지는 압력이 낮으면 대응되는 발광 소자가 어두운 빛을 발광하도록 할 수 있다. 또한, 특정 접촉식 스위치에 최근에 접촉이 발생하였으면 대응되는 발광 소자를 밝게 발광시키고, 접촉식 스위치에 접촉이 발생한 후 오랜 시간이 경과할수록 대응되는 발광 소자를 어둡게 발광시킬 수 있다. 또한, 임의의 접촉식 스위치에 접촉이 발생한 시간과 그 주위의 접촉식 스위치들에 접촉이 발생한 시간을 고려하여 사용자의 손가락 등 신체가 움직이는 속도를 파악하고, 그 속도에 따라 해당 발광 소자들의 색이나 밝기를 다르게 발광시킬 수도 있다. 이와 같이, 스위치에 인가되는 압력, 접촉 지속 시간, 접촉 시간에 대한 정보들은 접촉 정보로서 저장되고, 상기 저장된 접촉 정보는 다양한 형태의 피드백 정보를 생성하는데 이용되어 다양한 발광 형태로 표현될 수 있다.
접촉 스위치들에 대응되는 발광 소자들의 위치는 대응되는 접촉 스위치의 위치에서 소정 영역 내에 있는 것이 바람직하다. 즉, 임의의 접촉 스위치에 대응되는 발광 소자는 다른 발광 소자들보다 해당 접촉 스위치에 가까운 위치에 배치되는 것이 바람직하다. 이는, 사용자에게 시각적으로 표시되는 피드백 정보가 어느 접촉 스위치가 접촉 되었는지를 나타낼 수 있어야 하기 때문이다.
단계(S150)에서는 다양한 방법으로 피드백 정보를 사용자에게 표시할 수 있다. 예를 들어, 단계(S150)에서 발광 다이오드 등의 발광 소자들은 대응하는 접촉식 스위치에 사용자의 접촉이 있는 동안 발광할 수 있다. 따라서, 사용자는 어느 위치에 있는 접촉식 스위치에 접촉이 발생했는지를 알 수 있다. 또한, 실시예에 따라, 발광 소자들은 대응하는 접촉식 스위치에 대한 사용자의 접촉이 끝난 후에도 소정 시간 동안 발광할 수 있다. 따라서, 앞서와 같이 발광 소자들이 사용자의 접촉 시간과 연관하여 발광함으로써, 매우 짧은 시간 동안 사용자의 접촉이 발생한 경우에도 사용자가 자신이 접촉한 접촉 스위치들의 궤적을 파악할 수 있다.
발광 소자에는 사용자에게 시각적으로 보다 더 연속적인 느낌을 주기 위한 처리가 가미될 수 있다. 예를 들어, 각각의 발광 소자들이 발광하는 빛을 확산, 굴절 또는 반사시켜서 발광 면적을 증대시킴으로써 사용자에게 보다 더 연속적인 느낌을 주도록 처리할 수 있다.
피드백 정보는 접촉 스위치에 대한 사용자의 접촉뿐만 아니라 디지털 기기의 제어상태에 따라서 발광 소자를 다르게 발광하도록 할 수 있다. 예를 들어, 발광 소자들은 디지털 기기가 특정 모드로 진입하는 경우에 동시에 점멸하는 동작을 수행할 수 있다. 예를 들어, 발광 소자들은 디지털 기기에 전원이 인가되어 스타트-업(start-up) 동작을 수행하는 동안 차례로 점멸될 수 있다.
나아가, 피드백 정보는 디지털 기기의 제어상태에 따라 같은 접촉에 대해서도 발광 소자가 다르게 발광하도록 할 수 있다. 예를 들어, A모드에서는 접촉이 발생한 접촉 스위치에 상응하는 발광 소자가 빨간 색으로 발광하도록 하고, B모드에서는 접촉이 발생한 접촉 스위치에 상응하는 발광 소자가 파란 색으로 발광하도록 할 수 있다. 예를 들어, A모드에서는 접촉이 발생한 접촉 스위치에 상응하는 발광 소자가 접촉이 발생한 동안만 발광하도록 할 수 있고, B모드에서는 접촉이 발생한 접촉 스위치에 상응하는 발광 소자가 접촉이 발생한 동안 및 접촉이 종료된 이후 소정 시간 동안 발광하도록 할 수 있다.
도 1에 도시된 각각의 단계들은 도 1에 도시된 순서, 그 역순 또는 동시에 수행될 수 있다. 예를 들어, 도 1에 도시된 단계(S120) 및 단계(S130)와 단계(S140) 및 단계(S150)는 동시에 병렬적으로 수행될 수 있다.
도 2는 도 1에 도시된 피드백 정보 생성단계(S140)의 일 예를 나타낸 동작 흐름도이다.
도 2를 참조하면, 피드백 정보 생성단계는 상기 접촉 정보를 이용하여 어느 접촉 스위치에 접촉이 발생했는지를 판단한다(S210).
이 때, 단계(S210)에서는 어느 스위치에 접촉이 발생했는지 여부뿐만 아니라 접촉이 발생한 스위치의 접촉의 세기 및 접촉 스위치 별로 가장 최근에 접촉이 발생한 시점부터의 경과시간 등을 판단할 수도 있다.
또한, 피드백 정보 생성단계는 접촉 스위치에 접촉이 발생한 동안 대응되는 발광 소자를 점등시키도록 피드백 정보를 생성한다(S220).
이 때, 피드백 정보는 발광 소자가 다양한 색깔, 다양한 밝기로 점등되도록 생성될 수 있다.
도 3은 도 1에 도시된 피드백 정보 생성단계(S140)의 다른 예를 나타낸 동작 흐름도이다.
도 3을 참조하면, 피드백 정보 생성단계는 상기 접촉 정보를 이용하여 어느 접촉 스위치에 접촉이 발생했는지를 판단한다(S310).
이 때, 단계(S310)에서는 어느 스위치에 접촉이 발생했는지 여부뿐만 아니라 접촉이 발생한 스위치의 접촉의 세기 및 접촉 스위치 별로 가장 최근에 접촉이 발생한 시점부터의 경과시간 등을 판단할 수도 있다.
또한, 피드백 정보 생성단계는 접촉이 발생한 접촉 스위치에 대응되는 발광 소자를 점등시키고, 접촉이 종료된 후에도 소정 시간 동안 점등을 유지하도록 피드백 정보를 생성한다(S320).
이 때, 피드백 정보는 발광 소자가 다양한 색깔, 다양한 밝기로 점등되도록 생성될 수 있다.
따라서, 매우 짧은 시간 동안 사용자의 접촉이 발생한 경우에도 사용자가 자신이 접촉한 접촉 스위치들의 궤적을 파악할 수 있다.
본 발명에 따른 디지털 기기 제어 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 상기 매체는 프로그램 명령, 데이터 구조 등을 지정하는 신호를 전송하는 반송파를 포함하는 광 또는 금속선, 도파관 등의 전송 매체일 수도 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
도 4는 본 발명의 일 실시예에 따른 디지털 기기 제어장치를 나타낸 도면이다.
도 4를 참조하면, 디지털 기기 제어장치는 소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들 및 접촉식 스위치들에 대응되는 발광 소자들을 포함한다. 접촉식 스위치들은 접촉식 스위치(410)를 포함하고, 발광 소자들은 발광 소자(420)를 포함한다.
도 4에 도시된 실시예에서 접촉식 스위치들과 발광 소자들은 일 대 일로 대응된다. 그러나, 상술한 바와 같이, 접촉식 스위치들과 발광 소자들은 다 대 일 또는 일 대 다로 대응될 수도 있다.
도 4에 도시된 실시예에서 접촉식 스위치(410)에 대응되는 발광 소자(420)는 접촉식 스위치들이 배치된 원형의 바깥쪽에 위치한다. 그러나, 발광 소자(420)가 반드시 도 4에 도시된 것과 같이 위치할 필요는 없고, 다만 접촉식 스위치(410)로부터 다른 발광 소자들보다 가까운 소정의 위치에 배치되면 된다. 따라서, 접촉식 스위치(410)에 접촉이 발생하였을 경우에 발광 소자(420)를 발광시키면 사용자가 접촉식 스위치(410)에 대한 접촉이 일어났음을 시각적으로 확실하게 인지할 수 있다.
도 4에 도시된 실시예에서 접촉식 스위치(410)는 열, 압력, 커패시턴스 및 저항 등을 이용하여 사용자의 접촉을 감지하고, 이를 전기 신호로 변환하는 모든 장치를 포함하는 개념이다. 이 때, 접촉식 스위치는 사용자 신체의 일부분의 접촉을 감지할 수도 있고, 인체 이외의 도체 또는 부도체를 통한 접촉을 감지할 수도 있다.
도 4에 도시된 실시예에서 발광 소자(420)는 발광 다이오드(luminescent diode; LED)일 수 있다. 발광 소자(420)는 대응하는 접촉식 스위치(410)에 사용자의 접촉이 있는 동안 발광할 수 있다. 따라서, 사용자는 어느 위치에 있는 접촉식 스위치에 접촉이 발생했는지를 알 수 있다. 또한, 실시예에 따라, 발광 소자(420)는 대응하는 접촉식 스위치(410)에 대한 사용자의 접촉이 끝난 후에도 소정 시간 동안 발광할 수 있다. 따라서, 매우 짧은 시간 동안 사용자의 접촉이 발생한 경우에도 사용자가 자신이 접촉한 접촉 스위치들의 궤적을 파악할 수 있다.
발광 소자(420)는 다양한 밝기로 다양한 색깔의 빛을 낼 수도 있다.
도 5는 본 발명의 다른 실시예에 따른 디지털 기기 제어장치를 나타낸 도면이다.
도 5를 참조하면, 디지털 기기 제어장치는 소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들 및 접촉식 스위치들에 대응되는 발광 소자들을 포함한다. 접촉식 스위치들은 접촉식 스위치(510)를 포함하고, 발광 소자들은 발광 소자(520)를 포함한다.
도 5에 도시된 실시예에서도 접촉식 스위치들과 발광 소자들은 일 대 일로 대응된다. 그러나, 상술한 바와 같이, 접촉식 스위치들과 발광 소자들은 다 대 일 또는 일 대 다로 대응될 수도 있다.
도 5에 도시된 실시예에서 접촉식 스위치(510)에 대응되는 발광 소자(520)는 접촉식 스위치(510)를 둘러싸는 형태이다. 따라서, 접촉식 스위치(510)에 접촉이 발생하였을 경우에 발광 소자(520)를 발광시키면 사용자가 접촉식 스위치(510)에 대한 접촉이 일어났음을 시각적으로 확실하게 인지할 수 있다.
도 5에 도시된 실시예에서 접촉식 스위치(510) 및 발광 소자(520)의 동작 및 특성은 도 4에서 설명한 바와 같다.
도 6은 본 발명의 또 다른 실시예에 따른 디지털 기기 제어장치를 나타낸 도면이다.
도 6을 참조하면, 디지털 기기 제어장치는 소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들 및 접촉식 스위치들에 대응되는 발광 소자들을 포함한다. 접촉식 스위치들은 접촉식 스위치(610)를 포함하고, 발광 소자들은 발광 소자(620)를 포함한다.
도 6에 도시된 실시예에서도 접촉식 스위치들과 발광 소자들은 일 대 일로 대응된다. 그러나, 상술한 바와 같이, 접촉식 스위치들과 발광 소자들은 다 대 일 또는 일 대 다로 대응될 수도 있다.
도 6에 도시된 실시예에서 접촉식 스위치(610)에 대응되는 발광 소자(620)는 접촉식 스위치(610)를 둘러싸는 형태이다. 실시예에 따라, 발광 소자(620)는 접촉식 스위치(610)에 접촉이 발생하였을 경우에 발광 소자(620)를 발광시키면 사용자가 접촉식 스위치(610)에 대한 접촉이 일어났음을 시각적으로 확실하게 인지할 수 있도록 접촉식 스위치(610)의 상/하/좌/우에 배치될 수도 있다.
도 6에 도시된 실시예에서 접촉식 스위치들은 상하방향의 바(bar)형으로 생성된다. 이 때, 접촉식 스위치들에 아래쪽에서 위쪽으로 접촉이 발생하면 위쪽 방향으로 스크롤을 수행하거나, 포인터를 위쪽으로 움직이거나, 볼륨을 높이는 등의 동작을 수행할 수 있다. 또한, 접촉식 스위치들에 위쪽에서 아래쪽으로 접촉이 발생하면 아래쪽 방향으로 스크롤을 수행하거나, 포인터를 아래쪽으로 움직이거나, 볼륨을 낮추는 등의 동작을 수행할 수 있다.
도 6에 도시된 실시예에서 접촉식 스위치(610) 및 발광 소자(620)의 동작 및 특성은 도 4에서 설명한 바와 같다.
도 7은 본 발명의 또 다른 실시예에 따른 디지털 기기 제어장치를 나타낸 도면이다.
도 7을 참조하면, 디지털 기기 제어장치는 소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들 및 접촉식 스위치들에 대응되는 발광 소자들을 포함한다. 접촉식 스위치들은 접촉식 스위치(710)를 포함하고, 발광 소자들은 발광 소자(720)를 포함한다.
도 7에 도시된 실시예에서도 접촉식 스위치들과 발광 소자들은 일 대 일로 대응된다. 그러나, 상술한 바와 같이, 접촉식 스위치들과 발광 소자들은 다 대 일 또는 일 대 다로 대응될 수도 있다.
도 7에 도시된 실시예에서 접촉식 스위치(710)에 대응되는 발광 소자(720)는 접촉식 스위치(710)를 둘러싸는 형태이다. 실시예에 따라, 발광 소자(720)는 접촉식 스위치(710)에 접촉이 발생하였을 경우에 발광 소자(720)를 발광시키면 사용자가 접촉식 스위치(710)에 대한 접촉이 일어났음을 시각적으로 확실하게 인지할 수 있도록 접촉식 스위치(710)의 상/하/좌/우에 배치될 수도 있다.
도 7에 도시된 실시예에서 접촉식 스위치들은 상하/좌우방향의 십자형으로 생성된다. 이 때, 접촉식 스위치들에 아래쪽에서 위쪽으로 접촉이 발생하면 위쪽 방향으로 스크롤을 수행하거나, 포인터를 위쪽으로 움직이거나, 볼륨을 높이는 등의 동작을 수행할 수 있다. 또한, 접촉식 스위치들에 위쪽에서 아래쪽으로 접촉이 발생하면 아래쪽 방향으로 스크롤을 수행하거나, 포인터를 아래쪽으로 움직이거나, 볼륨을 낮추는 등의 동작을 수행할 수 있다. 이 때, 접촉식 스위치들에 왼쪽에서 오른쪽으로 접촉이 발생하면 오른쪽 방향으로 스크롤을 수행하거나, 포인터를 오른쪽으로 움직이거나, 오른쪽의 메뉴로 진행시킬 수 있다. 또한, 접촉식 스위치들에 오른쪽에서 왼쪽으로 접촉이 발생하면 왼쪽 방향으로 스크롤을 수행하거나, 포인터를 왼쪽으로 움직이거나, 왼쪽의 메뉴로 진행시킬 수 있다.
도 7에 도시된 실시예에서 접촉식 스위치(710) 및 발광 소자(720)의 동작 및 특성은 도 4에서 설명한 바와 같다.
도 8은 도 4에 도시된 디지털 기기 제어장치의 동작을 설명하기 위한 도면이다.
도 8을 참조하면, 디지털 기기 제어장치는 접촉 스위치들(811, 812, 813)에 순차적으로 접촉이 발생한다. 따라서, 접촉 스위치들(811, 812, 813)에 대응되는 발광 소자들(821, 822, 823)이 순차적으로 발광한다.
이 때, 발광 소자들(821, 822, 823)은 각각 접촉 스위치들(811, 812, 813)에 접촉이 발생한 동안만 발광할 수도 있고, 접촉 스위치들(811, 812, 813)에 접촉이 발생하였다가 종료된 후에도 소정 시간 동안 발광할 수도 있다.
발광 소자들(821, 822, 823)은 발광 다이오드 일 수 있고, 다양한 색깔 또는 다양한 밝기로 발광할 수 있다.
도 8에 도시된 바와 같이, 특정한 접촉식 스위치(813)에 최근에 접촉이 발생하였으면 대응되는 발광 소자(823)를 밝게 발광시키고, 접촉식 스위치(811)에 접촉이 발생한 후 오랜 시간이 경과하였으면 대응되는 발광 소자(821)를 어둡게 발광시킬 수 있다. 이와 같이, 접촉식 스위치에 접촉이 발생한 시간에 따라 대응되는 발광 소자의 밝기를 변화시킴으로써 사용자가 자신의 접촉 동작의 궤적을 시각적으로 추적할 수 있다. 또는, 소정의 제어신호가 활성화되면 신속하게 빛을 발산하고, 그 제어신호가 비활성화되면 천천히 빛을 읽어가는 발광 소자를 사용하여 디지털 기기 제어장치가 잔상 효과를 내도록 할 수도 있다. 나아가, 잔상 효과를 위해 밝기를 조절하는 것 이외에 색깔을 조절하는 등의 다양한 방법이 사용될 수 있다.
또한, 접촉식 스위치들이 압력에 의하여 접촉을 감지한다고 할 때, 접촉식 스위치에 주어지는 압력이 높으면 대응되는 발광 소자가 밝은 빛을 발광하도록 하고, 접촉식 스위치에 주어지는 압력이 낮으면 대응되는 발광 소자가 어두운 빛을 발광하도록 할 수도 있다.
발광 소자들에는 사용자에게 시각적으로 보다 더 연속적인 느낌을 주기 위한 처리가 가미될 수 있다. 예를 들어, 각각의 발광 소자들이 발광하는 빛을 확산, 굴절 또는 반사시켜서 발광 면적을 증대시킴으로써 사용자에게 보다 더 연속적인 느낌을 주도록 처리할 수 있다.
도 8에 도시된 실시예에서, 발광 소자들은 접촉 스위치에 대한 사용자의 접촉뿐만 아니라 디지털 기기의 제어상태에 따라서 다르게 발광할 수도 있다. 예를 들어, 발광 소자들은 디지털 기기가 특정 모드로 진입하는 경우에 동시에 점멸하는 동작을 수행할 수 있다. 예를 들어, 발광 소자들은 디지털 기기에 전원이 인가되어 스타트-업(start-up) 동작을 수행하는 동안 차례로 점멸될 수도 있다.
나아가, 발광 소자들은 디지털 기기의 제어상태에 따라 같은 접촉에 대해서도 다르게 발광할 수 있다.
도 8에서는 도 4에 도시된 디지털 기기 제어장치의 동작을 중심으로 설명하였으나, 도 8을 통하여 설명된 디지털 기기 제어장치의 동작은 도 5 내지 도 7에 도시된 디지털 기기 제어장치에도 적용될 수 있는 것이다.
도 9는 본 발명의 일 실시예에 따른 디지털 기기 제어장치의 구성을 나타낸 블록도이다.
도 9를 참조하면, 본 발명의 일 실시예에 따른 사용자로부터 입력되는 접촉에 기초하여 디지털 기기를 제어하기 위한 디지털 기기 제어장치는 센서(910), 제어 정보 생성부(920), 기기 제어부(930), 피드백 정보 생성부(940) 및 피드백 표시부(950)를 포함한다.
센서(910)는 소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들을 구비하고 접촉식 스위치들에 대한 사용자의 접촉을 감지하여 접촉 정보를 생성한다.
이 때, 복수 개의 접촉식 스위치들은 열, 압력, 커패시턴스 및 저항 등을 이용하여 사용자의 접촉을 감지하고, 이를 전기 신호로 변환하는 모든 장치를 포함하는 개념이고, 사용자 신체의 일부분의 접촉을 감지할 수도 있고, 인체 이외의 도체 또는 부도체를 통한 접촉을 감지할 수도 있음은 상술한 바와 같다. 접촉식 스위치는 접촉의 세기를 감지할 수 있는 것일 수도 있다.
복수 개의 접촉식 스위치들은 도 4 내지 도 7에 도시된 바와 같이 원형, 바(bar)형태나 십자 형태로 배치될 수 있다. 사용자는 접촉식 스위치들의 상부를 손가락으로 문지르는 방법으로 디지털 기기를 제어할 수 있다.
접촉식 스위치들 사이의 간격은 어플리케이션의 종류나 사용자에게 제공하는 편의의 정도 등에 따라 다르게 설정될 수 있다. 접촉식 스위치들 사이의 간격을 좁게 하면 디지털 기기를 보다 세밀하게 컨트롤할 수 있다. 접촉식 스위치들 사이의 간격을 넓게 하면 생산단가를 낮추고 접촉식 스위치들 사이의 배선을 용이하게 처리할 수 있다.
제어 정보 생성부(920)는 접촉 정보에 기초하여 디지털 기기를 제어하기 위한 제어 정보를 생성한다.
디지털 기기는 휴대폰 등의 모바일 단말기, MP3플레이어나 PMP(Portable Multimedia Player) 등의 모바일 멀티미디어 플레이어 또는 모바일 게임기 등일 수 있다. 또한, 디지털 기기는 모바일 기기가 아닌 다양한 가전 기기일 수도 있다.
이 때, 제어 정보는 디지털 기기의 동작에 필요한 모든 제어신호를 포함할 수 있다. 예를 들어, 제어 정보는 디지털 기기의 디스플레이 장치를 제어할 수도 있고, 음량 조절 장치를 제어할 수도 있다.
기기 제어부(930)는 생성된 제어 정보에 따라 디지털 기기를 제어한다.
이 때, 디지털 기기의 제어는 다양한 방법으로 수행될 수 있다. 예를 들어, 디지털 기기의 제어는 사용자가 접촉한 위치에 따라 수행될 수도 있고, 사용자 접촉의 위치를 이용하여 파악한 사용자의 움직임에 따라 수행될 수도 있다. 예를 들어, 디지털 기기의 제어는 사용자가 손가락을 위/아래로 움직이거나 시계방향/반시계 방향으로 돌리면 위/아래로 스크롤하거나, 위/아래로 포인터를 움직이거나, 줌인/줌아웃 기능을 수행하거나, 음량을 높이거나 낮출 수 있다.
피드백 정보 생성부(940)는 접촉 정보에 기초하여 피드백 정보를 생성한다.
이 때, 피드백 정보는 사용자로부터 입력되는 접촉에 관한 정보인 접촉 정보를 다시 사용자에게 제공하기 위한 정보이다. 예를 들어, 피드백 정보는 접촉 정보에 기초하여 발광 소자를 구동하기 위한 제어 신호일 수 있다. 예를 들어, 상기 접촉 스위치들에 1:1로 대응되는 발광 소자들이 접촉 스위치들에 대응되는 위치에 배치되어 있는 경우에 피드백 정보는 접촉이 발생한 접촉 스위치들에 대응되는 발광 소자들이 점등되도록 하는 제어 신호일 수 있다.
피드백 표시부(950)는 피드백 정보를 사용자에게 시각적으로 표시한다.
이 때, 피드백 표시부(950)는 복수 개의 발광 소자들을 포함하여 피드백 정보를 사용자에게 표시할 수 있다. 이 때, 발광 소자들은 발광 다이오드(luminescent diode; LED)일 수 있다. 발광 소자들 각각은 다양한 색깔로 발광할 수도 있다.
복수 개의 발광 소자들을 이용하여 피드백 정보를 표시하는 경우에, 발광 소자들은 복수 개의 접촉 스위치들에 대응되어야 한다. 접촉 스위치들 및 발광 소자들 사이의 관계 및 동작은 상술한 바와 같다.
센서(910) 및 피드백 정보 생성부(940)는 하나의 칩으로 구현될 수 있다. 센서(910) 및 피드백 정보 생성부(940)를 하나의 칩으로 구현하게 되면 센서(910) 및 피드백 정보 생성부(940) 사이의 와이어링을 줄일 수 있어 디지털 기기를 집적화시킬 수 있고, 단선 및 누전 등의 불필요한 고장을 방지할 수 있다.
피드백 정보 생성부(940)는 연성회로기판(Flexible Printed Circuit Board; FPCB)을 이용하여 구현될 수 있다. 연성회로기판은 작업성이 뛰어나고, 내열성 및 내곡성, 내약품성이 강하며, 열에 강하고 단독으로 3차원 배선이 가능하여 용이하게 피드백 정보 생성부(940)를 소형화 및 경량화할 수 있다.
도 10은 본 발명의 일 실시예에 따른 모바일 단말기를 나타낸 도면이다.
도 10을 참조하면, 모바일 단말기는 센서(101) 및 복수 개의 발광 소자들(102)을 포함한다. 도 10에 도시되지는 아니하였으나, 모바일 단말기는 기기 내부에 제어 정보 생성부, 기기 제어부 및 피드백 정보 생성부를 포함할 수 있다.
센서(101)는 소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들을 구비하고 상기 접촉식 스위치들에 대한 상기 사용자의 접촉을 감지하여 접촉 정보를 생성한다.
복수 개의 발광 소자들(102)은 센서(101)에 포함된 복수 개의 접촉식 스위치들에 대응되어 피드백 정보를 사용자에게 시각적으로 표시한다.
사용자가 손가락 등으로 센서(101)에 접촉하면서 움직이면 이에 따라 제어 정보 생성부 및 기기 제어부가 동작하여 모바일 단말기가 제어되게 된다. 예를 들어, 사용자가 손가락을 위/아래로 움직이거나 시계방향/반시계 방향으로 돌리면 위/아래로 스크롤하거나, 위/아래로 포인터를 움직이거나, 줌인/줌아웃 기능을 수행하거나, 음량을 높이거나 낮출 수 있다. 이와 동시에, 복수 개의 발광 소자들(102)은 센서(101)에 접촉하면서 움직이는 사용자의 손가락 등의 움직임을 시각적으로 사용자에게 피드백한다. 예를 들어, 접촉식 스위치가 압력에 의하여 접촉을 감지한다고 할 때, 접촉식 스위치에 주어지는 압력이 높으면 대응되는 발광 소자가 밝은 빛을 발광하도록 하고, 접촉식 스위치에 주어지는 압력이 낮으면 대응되는 발광 소자가 어두운 빛을 발광하도록 할 수 있다. 예를 들어, 특정 접촉식 스위치에 최근에 접촉이 발생하였으면 대응되는 발광 소자를 밝게 발광시키고, 접촉식 스위치에 접촉이 발생한 후 오랜 시간이 경과할수록 대응되는 발광 소자를 어둡게 발광시킬 수 있다.
따라서, 사용자는 자신이 어떻게 접촉식 스위치들로 구성된 센서를 동작시키고 있는지를 시각적으로 명확하게 인식할 수 있어 편리하고, 오동작을 줄일 수 있으며, 기기의 고장시에 센서(101)에 문제가 있는지 제어 정보 생성부나 기기 제어부에 문제가 있는지를 용이하게 파악할 수 있다.
이상에서 설명한 접촉식 스위치나 발광 소자들은 다양한 형태로 구현될 수 있다. 예를 들어, 접촉식 스위치나 발광 소자들은 원형, 타원형, 부채꼴 형태 또는 직사각형 형태 등으로 구현될 수 있다.
지금까지 본 발명에 따른 구체적인 실시예에 관하여 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서는 여러 가지 변형이 가능함은 물론이다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안되며, 후술하는 특허 청구의 범위뿐 아니라 이 특허 청구의 범위와 균등한 것들에 의해 정해져야 한다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 이는 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명 사상은 아래에 기재된 특허 청구 범위에 의해서만 파악되어야 하고, 이의 균등 또는 등가적 변형 모두는 본 발명 사상의 범주에 속한다고 할 것이다.
본 발명은 복수 개의 접촉식 스위치들을 이용하여 사용자 입력을 받는 디지털 기기에서 사용자가 접촉식 스위치들의 접촉 여부를 시각적으로 명확하게 인식할 수 있는 디지털 기기 제어 장치 및 디지털 기기 제어 방법을 제공할 수 있다.
또한 본 발명은 접촉식 스위치들과 이에 대응되는 발광 소자들을 이용하여 디지털 기기를 제어함으로써, 소형화된 디지털 기기에 쉽게 장착될 수 있으며, 사용자가 편리하게 이용할 수 있다.
또한 본 발명은 접촉식 스위치들을 이용한 스위칭시에 이를 사용자에게 시각적으로 인식 가능하게 하여 디지털 기기의 제어가 제대로 수행되지 않는 경우에 접촉식 스위치를 포함한 입력 인터페이스의 고장인지 기기 제어부의 고장인지를 용이하게 파악할 수 있다.
도 1은 본 발명의 일 실시예에 따른 디지털 기기 제어방법을 나타낸 동작 흐름도이다.
도 2는 도 1에 도시된 피드백 정보 생성단계의 일 예를 나타낸 동작 흐름도이다.
도 3은 도 1에 도시된 피드백 정보 생성단계의 다른 예를 나타낸 동작 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 디지털 기기 제어장치를 나타낸 도면이다.
도 5는 본 발명의 다른 실시예에 따른 디지털 기기 제어장치를 나타낸 도면이다.
도 6은 본 발명의 또 다른 실시예에 따른 디지털 기기 제어장치를 나타낸 도면이다.
도 7은 본 발명의 또 다른 실시예에 따른 디지털 기기 제어장치를 나타낸 도면이다.
도 8은 도 4에 도시된 디지털 기기 제어장치의 동작을 설명하기 위한 도면이다.
도 9는 본 발명의 일 실시예에 따른 디지털 기기 제어장치의 구성을 나타낸 블록도이다.
도 10은 본 발명의 일 실시예에 따른 모바일 단말기를 나타낸 도면이다.
<도면의 주요 부분에 대한 부호의 설명>
910: 센서
920: 제어 정보 생성부 930: 기기 제어부
940: 피드백 정보 생성부 950: 피드백 표시부

Claims (16)

  1. 사용자로부터 입력되는 접촉에 기초하여 제어되는 모바일 단말기에 있어서,
    소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들을 구비하고 상기 접촉식 스위치들에 대한 상기 사용자의 접촉을 감지하여 접촉 정보를 생성하기 위한 센서;
    상기 접촉 정보에 기초하여 상기 모바일 단말기를 제어하기 위한 제어 정보를 생성하는 제어 정보 생성부;
    상기 생성된 제어 정보에 따라 상기 모바일 단말기를 제어하는 기기 제어부;
    상기 접촉 정보에 기초하여 피드백 정보를 생성하는 피드백 정보 생성부; 및
    상기 복수 개의 접촉식 스위치들에 대응되고, 대응되는 접촉식 스위치에 대한 상기 피드백 정보를 사용자에게 시각적으로 표시하는 복수 개의 발광 소자들 - 상기 발광 소자들은 각각 대응하는 접촉식 스위치로부터 소정 영역 내에 위치함 -
    을 포함하는 것을 특징으로 하는 모바일 단말기.
  2. 제1항에 있어서,
    상기 복수개의 발광 소자들 각각은 발광 다이오드인 것을 특징으로 하는 모바일 단말기.
  3. 삭제
  4. 사용자로부터 입력되는 접촉에 기초하여 디지털 기기를 제어하기 위한 디지털 기기 제어장치에 있어서,
    소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들을 구비하고 상기 접촉식 스위치들에 대한 상기 사용자의 접촉을 감지하여 접촉 정보를 생성하기 위한 센서;
    상기 접촉 정보에 기초하여 피드백 정보를 생성하는 피드백 정보 생성부; 및
    상기 복수 개의 접촉식 스위치들에 대응되고, 대응되는 접촉식 스위치에 대한 상기 피드백 정보를 사용자에게 시각적으로 표시하는 복수 개의 발광 소자들 - 상기 발광 소자들은 각각 대응하는 접촉식 스위치로부터 소정 영역 내에 위치함 -
    을 포함하는 것을 특징으로 하는 디지털 기기 제어 장치.
  5. 삭제
  6. 제4항에 있어서,
    상기 복수 개의 발광 소자들 각각은 발광 다이오드인 것을 특징으로 하는 디지털 기기 제어장치.
  7. 삭제
  8. 제4항에 있어서,
    상기 발광 소자들은 대응하는 상기 접촉식 스위치에 상기 사용자의 접촉 시간과 연관하여 발광하는 것을 특징으로 하는 디지털 기기 제어장치.
  9. 제4항에 있어서,
    상기 발광 소자들은 상기 접촉 정보에 따라서 밝기 또는 색깔이 다르게 발광하는 것을 특징으로 하는 디지털 기기 제어장치.
  10. 제4항에 있어서,
    상기 피드백 정보는 상기 디지털 기기의 제어상태에 따라 결정되는 것을 특징으로 하는 디지털 기기 제어장치.
  11. 제4항에 있어서,
    상기 센서와 상기 피드백 정보 생성부는 하나의 칩으로 구현되는 것을 특징으로 하는 디지털 기기 제어장치.
  12. 제4항에 있어서,
    상기 피드백 정보 생성부는 연성회로기판을 이용하여 구현되는 것을 특징으로 하는 디지털 기기 제어장치.
  13. 사용자로부터 입력되는 접촉에 기초하여 디지털 기기를 제어하기 위한 디지털 기기 제어방법에 있어서,
    소정 거리로 이격되어 있는 복수 개의 접촉식 스위치들에 대한 상기 사용자의 접촉을 감지하여 접촉 정보를 생성하는 단계;
    상기 접촉 정보에 기초하여 상기 디지털 기기를 제어하기 위한 제어 정보를 생성하는 단계;
    상기 생성된 제어 정보에 따라 상기 디지털 기기를 제어하는 단계;
    상기 접촉 정보에 기초하여 피드백 정보를 생성하는 단계; 및
    상기 복수 개의 접촉식 스위치들에 대응되고, 대응되는 접촉식 스위치로부터 소정의 영역 내에 위치하는 복수 개의 발광 소자들을 이용하여 상기 피드백 정보를 사용자에게 시각적으로 표시하는 단계
    를 포함하는 것을 특징으로 하는 디지털 기기 제어 방법.
  14. 삭제
  15. 삭제
  16. 제13항의 방법을 수행하기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
KR1020050050656A 2005-06-14 2005-06-14 시각적 입력 피드백을 포함하는 사용자 접촉 기반의 디지털기기 제어 장치 및 방법 KR100538572B1 (ko)

Priority Applications (8)

Application Number Priority Date Filing Date Title
KR1020050050656A KR100538572B1 (ko) 2005-06-14 2005-06-14 시각적 입력 피드백을 포함하는 사용자 접촉 기반의 디지털기기 제어 장치 및 방법
PCT/KR2005/002578 WO2006135127A1 (en) 2005-06-14 2005-08-08 Apparatus for controlling digital device based on touch input interface capable of visual input feedback and method for the same
CNA2005800500285A CN101194220A (zh) 2005-06-14 2005-08-08 基于能够进行视觉输入反馈的触摸输入接口来控制数字设备的装置及其方法
JP2008516736A JP2008544361A (ja) 2005-06-14 2005-08-08 視覚的入力フィードバックを含むユーザ接触基盤のデジタル機器制御装置および方法
US11/921,856 US8462122B2 (en) 2005-06-14 2005-08-08 Apparatus for controlling digital device based on touch input interface capable of visual input feedback and method for the same
EP05773911A EP1894080A4 (en) 2005-06-14 2005-08-08 APPARATUS FOR CONTROLLING A DIGITAL DEVICE BASED ON A TOUCH-INPUT INTERFACE CAPABLE OF MAKING VISUAL INPUT RETROACTION AND METHOD THEREOF
JP2011283956A JP2012069165A (ja) 2005-06-14 2011-12-26 モバイル端末機
JP2013239428A JP2014041655A (ja) 2005-06-14 2013-11-20 視覚的入力フィードバックを含むユーザ接触基盤のデジタル機器制御装置および方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050050656A KR100538572B1 (ko) 2005-06-14 2005-06-14 시각적 입력 피드백을 포함하는 사용자 접촉 기반의 디지털기기 제어 장치 및 방법

Publications (1)

Publication Number Publication Date
KR100538572B1 true KR100538572B1 (ko) 2005-12-23

Family

ID=37306913

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050050656A KR100538572B1 (ko) 2005-06-14 2005-06-14 시각적 입력 피드백을 포함하는 사용자 접촉 기반의 디지털기기 제어 장치 및 방법

Country Status (6)

Country Link
US (1) US8462122B2 (ko)
EP (1) EP1894080A4 (ko)
JP (3) JP2008544361A (ko)
KR (1) KR100538572B1 (ko)
CN (1) CN101194220A (ko)
WO (1) WO2006135127A1 (ko)

Families Citing this family (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7312785B2 (en) 2001-10-22 2007-12-25 Apple Inc. Method and apparatus for accelerated scrolling
US7345671B2 (en) 2001-10-22 2008-03-18 Apple Inc. Method and apparatus for use of rotational user inputs
US7333092B2 (en) 2002-02-25 2008-02-19 Apple Computer, Inc. Touch pad for handheld device
US20070152977A1 (en) 2005-12-30 2007-07-05 Apple Computer, Inc. Illuminated touchpad
US7499040B2 (en) 2003-08-18 2009-03-03 Apple Inc. Movable touch pad with added functionality
US8059099B2 (en) 2006-06-02 2011-11-15 Apple Inc. Techniques for interactive input to portable electronic devices
US7495659B2 (en) 2003-11-25 2009-02-24 Apple Inc. Touch pad for handheld device
US7932897B2 (en) 2004-08-16 2011-04-26 Apple Inc. Method of increasing the spatial resolution of touch sensitive devices
US7671837B2 (en) 2005-09-06 2010-03-02 Apple Inc. Scrolling input arrangements using capacitive sensors on a flexible membrane
US7880729B2 (en) 2005-10-11 2011-02-01 Apple Inc. Center button isolation ring
US20070152983A1 (en) 2005-12-30 2007-07-05 Apple Computer, Inc. Touch pad with symbols based on mode
US8022935B2 (en) 2006-07-06 2011-09-20 Apple Inc. Capacitance sensing electrode with integrated I/O mechanism
US9360967B2 (en) 2006-07-06 2016-06-07 Apple Inc. Mutual capacitance touch sensing device
US8743060B2 (en) 2006-07-06 2014-06-03 Apple Inc. Mutual capacitance touch sensing device
US7795553B2 (en) 2006-09-11 2010-09-14 Apple Inc. Hybrid button
US8786553B2 (en) 2006-10-06 2014-07-22 Kyocera Corporation Navigation pad and method of using same
US8274479B2 (en) 2006-10-11 2012-09-25 Apple Inc. Gimballed scroll wheel
US8482530B2 (en) 2006-11-13 2013-07-09 Apple Inc. Method of capacitively sensing finger position
WO2009032898A2 (en) 2007-09-04 2009-03-12 Apple Inc. Compact input device
US8683378B2 (en) 2007-09-04 2014-03-25 Apple Inc. Scrolling techniques for user interfaces
US8416198B2 (en) 2007-12-03 2013-04-09 Apple Inc. Multi-dimensional scroll wheel
KR20090065000A (ko) * 2007-12-17 2009-06-22 삼성전자주식회사 입력 패널 장치, 및 이를 이용하는 화상형성장치와 그 방법
TWI384388B (zh) * 2007-12-25 2013-02-01 Acer Inc 以光顯示級距大小之方法、觸控感應操作介面裝置及可攜式電子裝置
US8125461B2 (en) 2008-01-11 2012-02-28 Apple Inc. Dynamic input graphic display
US8820133B2 (en) 2008-02-01 2014-09-02 Apple Inc. Co-extruded materials and methods
US9454256B2 (en) 2008-03-14 2016-09-27 Apple Inc. Sensor configurations of an input device that are switchable based on mode
DE102008023405B4 (de) 2008-05-13 2020-10-01 Volkswagen Ag Kraftfahrzeug mit einem Display sowie Verfahren zum Betrieb eines Kraftfahrzeuges mit einem Display
ATE495040T1 (de) * 2008-09-19 2011-01-15 Fiat Ricerche Benutzerschnittstelle für ein belüftungs- oder klimaanlagensystem für ein kraftfahrzeug
US8816967B2 (en) 2008-09-25 2014-08-26 Apple Inc. Capacitive sensor having electrodes arranged on the substrate and the flex circuit
US8395590B2 (en) 2008-12-17 2013-03-12 Apple Inc. Integrated contact switch and touch sensor elements
US8547244B2 (en) * 2008-12-22 2013-10-01 Palm, Inc. Enhanced visual feedback for touch-sensitive input device
TWI398794B (zh) * 2009-04-02 2013-06-11 Lite On Electronics Guangzhou 具有高分子發光二極體的電子裝置
US9354751B2 (en) 2009-05-15 2016-05-31 Apple Inc. Input device with optimized capacitive sensing
US8872771B2 (en) 2009-07-07 2014-10-28 Apple Inc. Touch sensing device having conductive nodes
TWI423287B (zh) * 2010-07-16 2014-01-11 Primax Electronics Ltd 壓力感測式發光鍵盤
KR101019885B1 (ko) * 2010-12-07 2011-03-04 최운용 엘이디 블록 디스플레이 장치
CN102298420B (zh) * 2011-09-15 2013-03-20 鸿富锦精密工业（深圳）有限公司 具触摸输入功能的电子装置
KR20130055743A (ko) * 2011-11-21 2013-05-29 엘지전자 주식회사 전자 기기
JP6004756B2 (ja) * 2012-06-07 2016-10-12 キヤノン株式会社 表示制御装置及びその制御方法
US9684382B2 (en) 2012-06-13 2017-06-20 Microsoft Technology Licensing, Llc Input device configuration having capacitive and pressure sensors
US9459160B2 (en) 2012-06-13 2016-10-04 Microsoft Technology Licensing, Llc Input device sensor configuration
KR101363876B1 (ko) * 2012-07-06 2014-02-18 (주)멜파스 멀티 터치 입력 처리 방법 및 장치
US10578499B2 (en) 2013-02-17 2020-03-03 Microsoft Technology Licensing, Llc Piezo-actuated virtual buttons for touch surfaces
JP2016521421A (ja) * 2013-05-06 2016-07-21 サーク・コーポレーション タッチ・センサの秘密パスワード・インディケータ
US9448631B2 (en) 2013-12-31 2016-09-20 Microsoft Technology Licensing, Llc Input device haptics and pressure sensing
JP6813254B2 (ja) * 2014-07-15 2021-01-13 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US9424048B2 (en) 2014-09-15 2016-08-23 Microsoft Technology Licensing, Llc Inductive peripheral retention device
US10222889B2 (en) 2015-06-03 2019-03-05 Microsoft Technology Licensing, Llc Force inputs and cursor control
US10416799B2 (en) 2015-06-03 2019-09-17 Microsoft Technology Licensing, Llc Force sensing and inadvertent input control of an input device
US10061385B2 (en) 2016-01-22 2018-08-28 Microsoft Technology Licensing, Llc Haptic feedback for a touch input device
WO2018131355A1 (ja) * 2017-01-16 2018-07-19 シャープ株式会社 移動通信端末
IL310727A (en) * 2017-04-27 2024-04-01 Magic Leap Inc Light-emitting user input device
EP4212222A1 (en) 2018-03-07 2023-07-19 Magic Leap, Inc. Visual tracking of peripheral devices
USD918176S1 (en) 2018-07-24 2021-05-04 Magic Leap, Inc. Totem controller having an illumination region
USD930614S1 (en) 2018-07-24 2021-09-14 Magic Leap, Inc. Totem controller having an illumination region
JP7552657B2 (ja) 2022-06-17 2024-09-18 カシオ計算機株式会社 入力インターフェース、電子楽器、発光制御方法及びプログラム

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS55171921U (ko) * 1979-05-30 1980-12-10
JPS61105928A (ja) 1984-10-29 1986-05-24 Hayase Yoshiko タツチスイツチ
US4988981B1 (en) * 1987-03-17 1999-05-18 Vpl Newco Inc Computer data entry and manipulation apparatus and method
JPH07226789A (ja) * 1994-02-15 1995-08-22 Hitachi Ltd キー入力確認光発生装置
FI962692L (fi) * 1996-06-28 1997-12-29 Nokia Mobile Phones Ltd Kosketusherkkä näyttö ja päätelaite
US6262717B1 (en) 1998-07-02 2001-07-17 Cirque Corporation Kiosk touch pad
US6757002B1 (en) 1999-11-04 2004-06-29 Hewlett-Packard Development Company, L.P. Track pad pointing device with areas of specialized function
US7240093B1 (en) * 2000-02-29 2007-07-03 Microsoft Corporation Use of online messaging to facilitate selection of participants in game play
US7063619B2 (en) * 2001-03-29 2006-06-20 Interactive Telegames, Llc Method and apparatus for identifying game players and game moves
US6822640B2 (en) * 2001-04-10 2004-11-23 Hewlett-Packard Development Company, L.P. Illuminated touch pad
JP4736250B2 (ja) * 2001-06-26 2011-07-27 日本電気株式会社 キーバックライト付き電子機器、該電子機器の制御プログラム、及びキーバックライト発光方法
FI20012610L (fi) 2001-12-31 2003-07-01 Nokia Corp Elektroninen laite ja ohjauselin
US6846579B2 (en) * 2002-02-15 2005-01-25 Eastman Kodak Company Multilayer with radiation absorber and touch screen
KR20040000845A (ko) 2002-06-25 2004-01-07 (주) 넥스트 테크놀리지 손가락이동방향 및 거리감지에 의한 비접촉 제어기기콘트롤 방법 및 장치
JP2004355606A (ja) 2003-02-14 2004-12-16 Sony Corp 情報処理装置、情報処理方法、及びプログラム
KR100525470B1 (ko) 2003-02-14 2005-11-23 오의진 입력키가 손가락의 이동반경 내에 위치되어 있는입력장치와 이를 사용한 명령 입력방법
JP4644422B2 (ja) * 2003-09-26 2011-03-02 元一 大川 携帯型電子機器
US20050162402A1 (en) * 2004-01-27 2005-07-28 Watanachote Susornpol J. Methods of interacting with a computer using a finger(s) touch sensing input device with visual feedback
US7210618B2 (en) * 2005-03-03 2007-05-01 Nokia Corporation Mobile communication terminal

Also Published As

Publication number Publication date
EP1894080A1 (en) 2008-03-05
WO2006135127A1 (en) 2006-12-21
EP1894080A4 (en) 2009-05-27
CN101194220A (zh) 2008-06-04
JP2012069165A (ja) 2012-04-05
JP2014041655A (ja) 2014-03-06
JP2008544361A (ja) 2008-12-04
US20090090568A1 (en) 2009-04-09
US8462122B2 (en) 2013-06-11

Similar Documents

Publication Publication Date Title
KR100538572B1 (ko) 시각적 입력 피드백을 포함하는 사용자 접촉 기반의 디지털기기 제어 장치 및 방법
JP5225576B2 (ja) 携帯端末機及びその動作方法
KR100846188B1 (ko) 복수의 접촉 센서를 구비한 사용자 입력 장치, 및 상기장치로부터 사용자의 접촉을 감지하여 디지털 기기를제어하는 방법
US20070285402A1 (en) Mobile terminal and method of displaying image thereof
US8032185B2 (en) Operation mode conversion device, mobile communication terminal having the operation mode conversion device and method for converting operation mode using the same
CN101267471B (zh) 用于移动终端的空闲屏幕布置结构和空闲屏幕显示方法
EP1852771A2 (en) Mobile communication terminal and method of processing key signal
KR100793302B1 (ko) 접촉식 단말기 제어 장치 및 제어 방법
BR112012015405A2 (pt) sistema e método para entrada de comando multimodo
TWI459789B (zh) 用於在終端機輸入區域上顯示符號之裝置與方法
JP5332643B2 (ja) 携帯端末及びその処理方法とプログラム
JP5971583B2 (ja) 負荷コントローラ
JP2005094595A (ja) 電子機器
CN104994242A (zh) 一种手机屏幕亮度的调节结构及调节方法
CN102214020A (zh) 输入装置、控制电路、电子系统及其操控方法
KR101574750B1 (ko) 손가락 재활 장치 및 방법
JP2020096696A (ja) プログラム
KR100675129B1 (ko) 제어 모드를 선택할 수 있는 사용자 접촉 기반의 디지털기기 제어 장치 및 방법
KR101400445B1 (ko) 자기장 기반의 사용자 단말 입력 수단, 사용자 단말 및 사용자 단말 입력 시스템
JP2005321974A (ja) 電子機器
JP2013061766A (ja) タッチペン
KR20060131103A (ko) 제어 모드를 선택할 수 있는 사용자 접촉 기반의 디지털기기 제어 장치 및 방법
JP2006216089A (ja) 記録再生装置及びそのリモコン装置

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20050614

PA0201 Request for examination
A302 Request for accelerated examination
PA0302 Request for accelerated examination

Patent event date: 20050615

Patent event code: PA03022R01D

Comment text: Request for Accelerated Examination

Patent event date: 20050614

Patent event code: PA03021R01I

Comment text: Patent Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20050905

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20051208

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20051216

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20051219

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PR1001 Payment of annual fee

Payment date: 20081113

Start annual number: 4

End annual number: 4

PR1001 Payment of annual fee

Payment date: 20091204

Start annual number: 5

End annual number: 5

PR1001 Payment of annual fee

Payment date: 20101215

Start annual number: 6

End annual number: 6

PR1001 Payment of annual fee

Payment date: 20111101

Start annual number: 7

End annual number: 7

FPAY Annual fee payment

Payment date: 20121213

Year of fee payment: 8

PR1001 Payment of annual fee

Payment date: 20121213

Start annual number: 8

End annual number: 8

FPAY Annual fee payment

Payment date: 20131014

Year of fee payment: 9

PR1001 Payment of annual fee

Payment date: 20131014

Start annual number: 9

End annual number: 9

FPAY Annual fee payment

Payment date: 20141008

Year of fee payment: 10

PR1001 Payment of annual fee

Payment date: 20141008

Start annual number: 10

End annual number: 10

PR1001 Payment of annual fee

Payment date: 20201215

Start annual number: 16

End annual number: 16

PR1001 Payment of annual fee

Payment date: 20211117

Start annual number: 17

End annual number: 17

PR1001 Payment of annual fee

Payment date: 20221130

Start annual number: 18

End annual number: 18

PC1903 Unpaid annual fee

Termination category: Default of registration fee

Termination date: 20240927