KR100652682B1 - 휴대단말기의 컴퓨터 마우스 운용장치 및 방법 - Google Patents

Abstract

본 발명은 포인터가 지적하는 모니터 주변 영상을 신호처리하여 에지정보 신호를 검출하고 컴퓨터로 전송하여 컴퓨터를 직접제어하는 것으로, 휴대단말기 제어부의 제어에 의하여 포인터 위치의 에지정보와 제어명령 신호와 데이터 통신신호를 무선 송수신하는 블루투스부; 블루투스부에 접속하고 컴퓨터 프로젝션 모니터 영상의 포인터 위치 주변을 촬영하여 포인터 위치를 확인하며, 소정 영역의 에지정보 신호를 검출하도록 제어하고 감시하는 제어부; 제어부의 제어에 의하여 상기 모니터 영상의 포인터 위치 주변영역을 촬영하는 카메라부; 제어부의 제어에 의하여 카메라부가 촬영한 상기 모니터 영상신호를 인가받고 색 분석 방식으로 포인터 위치를 분리 검출하는 영상처리부; 제어부의 제어에 의하여 카메라부가 촬영한 상기 모니터 영상신호를 인가받고 밝기 분석 방식으로 포인터 위치를 다시 분리 검출하는 명도부; 제어부의 제어에 의하여 포인터 위치 주변영역의 상기 모니터 영상신호로부터 에지정보를 검출하는 에지검출부가 포함되어 이루어지는 구성을 특징 등등으로 한다.

Description

휴대단말기의 컴퓨터 마우스 운용장치 및 방법{METHODS AND A APPARATUS OF OPERATING COMPUTER MOUSE WITH MOBILE PHONE}

도1 은 종래 휴대단말기의 컴퓨터 마우스 운용장치 기능 구성도,

도2 는 종래 기술에 의한 휴대단말기의 컴퓨터 마우스 운용방법 순서도,

도3 은 본 발명에 의한 휴대단말기의 컴퓨터 마우스 운용장치 기능 구성도,

도4 는 본 발명에 의한 휴대단말기의 컴퓨터 마우스 운용방법 순서도,

도5 는 본 발명에 의한 컴퓨터의 휴대단말기 마우스 운용방법 순서도,

도6 은 본 발명에 의한 포인터 검출 영상처리 방법 설명도,

도7 은 본 발명에 의한 에지신호 검출 기능 설명도,

도8 은 본 발명에 의한 에지신호 검출 순서도,

도9 는 본 발명에 의하여 영상신호로부터 에지신호를 검출한 상태도시도.

** 도면의 주요부분에 대한 부호 설명 **

100 : 카메라부 110 : 제어부 120 : 블루투스부

130 : 무선부 140 : 포인터부 150 : 메모리부

160 : 입출력부 170 : 에지검출부 180 : 명도부

190 : 영상처리부

본 발명은 휴대단말기를 컴퓨터용 마우스로 운용하는 것으로, 특히, 휴대단말기의 레이저 포인터로 컴퓨터 프로젝션 모니터 영상을 지적하여 이동상태에서 컴퓨터를 제어하는 휴대단말기의 컴퓨터 마우스 운용장치 및 방법에 관한 것이다.

이동통신용 휴대단말기(MS: MOBILE STATION)는 가입 등록된 시스템의 해당 기지국(RAN: RADIO ACCESS NETWORK)이 형성하는 서비스 영역(SERVICE AREA) 안을 자유롭게 이동하면서 이동교환국(MSC: MOBILE SWITCHING CENTER)의 감시와 제어와 스위칭(SWITCHING)에 의하여 설정된 통신경로를 경유하여, 언제 어디서나 원하는 상대방과 즉시 무선접속하고 통신하는 것으로, 개인이 항상 직접 휴대하면서 이동하는 첨단 무선통신장비 이다.

상기 휴대단말기는, 이동성이 보장되어 언제 어느 장소로도 즉시 이동 가능하고, 이동성 확보를 위하여 크기를 작게하며 무게를 가볍게 하고, 언제 발생될지 모르는 통신을 위하여 항상 휴대하고 있으나 통신에 직접 사용되는 시간이 비교적 매우 작아 활용도가 낮다.

상기 휴대단말기의 활용도를 높이기 위하여 다양한 부가서비스와 부가기능이 개발되어 제공되고 있으며, 관련 기술의 발달에 힘입어 부가기능 및 부가서비스가 계속 추가되므로, 크기와 무게를 작게하는 것에는 어느 정도 한계가 있다.

상기와 같이 휴대단말기에 부가되는 기능 및 서비스는, 일 예로, 휴대단말기 생산업자가 개발하여 제공하는 것으로, 카메라, 블루투스, 무선랜, 라디오, 게임, 전자계산기, 달력, 시계, 착신벨 설정 등이 있으며, 이동통신 서비스 사업자가 제공하는 것에는, 문자메시지, 영상 메시지, 온라인 게임, 무선인터넷 접속, 발신자 확인 등등이 있다.

최근에는 컴퓨터(PC)의 보급이 확대되고, 인터넷(INTERNET)의 발달 등에 의하여 대량의 정보를 신속하게 확보하고 있으며, 상기 컴퓨터는 입력되는 제어명령에 의하여 동작하고, 상기 제어명령 입력에는 키보드(KEYBOARD)와 마우스(MOUSE)가 이용된다.

상기 컴퓨터는 비교적 부피와 무게가 크므로, 고정된 장소에 위치시키고, 키보드와 마우스는 책상 또는 평평한 장소에 반고정 상태로 위치하고, 사람이 직접 제어하여 명령 또는 데이터를 입력하는 것으로, 사용자와 밀접한 거리를 유지하는 동시에 어느 정도 이동성이 확보되어야 하므로, 상기 키보드 또는 마우스를 컴퓨터와 무선으로 연결하는 기술이 개발되고 있다.

상기 마우스와 컴퓨터의 무선 연결에는, 일반적으로 블루투스(BLUETOOTH) 기술이 적용되고, 상기 휴대단말기에는 카메라가 촬영한 신호를 분석 및 처리하는 영상처리(IMAGE PROCESSING) 기술이 적용된다.

따라서, 상기 휴대단말기의 영상신호 처리기능과 블루투스 기능을 이용하여 컴퓨터의 마우스로 이용하도록 하는 동시에 책상 등이 필요하지 않고 이동상태에서도 컴퓨터를 제어하도록 하는 기술을 개발할 필요가 있다.

이하, 종래 기술에 의한 휴대단말기의 컴퓨터 마우스 운용방식을 첨부된 도면을 참조하여 설명한다.

종래 기술을 설명하기 위하여 첨부된 것으로, 도1 은 종래 기술에 의한 휴대단말기의 컴퓨터 마우스 운용장치 기능 구성도 이고, 도2 는 종래 기술에 의한 휴대단말기의 컴퓨터 마우스 운용방법 순서도 이다.

상기 첨부된 도1을 참조하여 종래 기술에 의한 휴대단말기의 컴퓨터 마우스 운용장치를 설명하면, 컴퓨터(PC)(10)는 입력된 데이터를 해당 운용 프로그램과 제어명령에 의하여 처리하고 출력하는 것으로, 상기 제어명령은 별도의 키보드와 마우스 등을 통하여 입력된다.

일반적으로 키보드와 마우스는 유선으로 연결되어 이동성이 제한되며, 배치와 연결선의 처리가 불편한 등의 문제가 있으므로, 무선접속하는 블루투스 기술이 적용된다.

상기 컴퓨터(10)에 접속되는 블루투스부(20)는 블루투스 방식 신호를 무선 송수신하며, 이동통신용 휴대단말기(MS)(40)에도 블루투스부(30)가 구비되어 상기 컴퓨터(10)의 블루투스부(20)와 무선접속하고 해당 데이터를 송수신하는 무선통신한다.

상기 휴대단말기(40)에는 볼의 움직임을 감지하여 포인터 제어신호를 생성하는 볼센서(60) 또는, 엘이디(LED) 등에 의하여 발생되는 빛으로 바닥 영상무늬를 반사시키고 이미지 센서로 검출하는 스캔(SCAN)을 초당 수십회 처리하여 포인터 제어신호를 생성하는 광센서(50)가 일체로 고정 구성된다.

즉, 상기 휴대단말기(40)에는 광센서(50) 또는 볼센서(60)가 선택에 의하여 일체로 구비되는 것으로, 상기 광센서(50) 또는 볼센서(60)는, 책상과 같이 평평한 바닥 위에 올려지고, 사용자가 휴대단말기(40)에 인가하는 외력에 의하여 볼이 바닥면 위를 이동하거나 또는 바닥으로부터 반사되어 변하는 영상무늬를 검출하여 포인터 위치정보 신호로 변환 출력하는 것이다.

따라서, 상기와 같은 종래 기술의 휴대단말기 마우스는 컴퓨터(10)와 무선으로 연결되어 해당 제어를 하는 장점이 있으나, 책상과 같은 평평한 바닥면이 반드시 필요한 문제가 있다.

이하, 상기 첨부된 도2를 참조하여, 종래 기술에 의한 휴대단말기의 컴퓨터 마우스 운용방법을 설명한다.

이동통신용 휴대단말기(40)를 컴퓨터용 마우스(MOUSE)로 운용할 것인지 판단하고(S10), 상기 판단(S10)에서 휴대단말기(40)를 컴퓨터용 마우스로 운용하고자 하는 경우, 블루투스부(30)를 구동하여 컴퓨터(10)의 블루투스부(20)와 무선접속한다(S20).

상기와 같이 컴퓨터 마우스 기능을 하는 휴대단말기(40)를 책상 등과 같이 평평한 장소에 밀착하고, 이동이 자유로운 상태로 설정 또는 위치시키며(S30), 상기 휴대단말기(40)에 외력을 인가하면 일체로 구비되는 볼센서(60) 또는 광센서(50)에 의하여 이동상태가 검출되며(S40), 상기 검출된 이동상태 신호는 포인터(POINTER) 신호로 변환하여 해당 제어명령 신호와 함께 블루투스 방식 신호로 송신하므로 상기 컴퓨터에서 블루투스 신호로 수신한다(S50).

상기 휴대단말기 마우스는 볼센서(60) 또는 광센서(50)의 구조적 특성상, 이동상태 신호를 검출하기 위하여 바닥면에 접속하여야 하고, 상기 검출되는 신호가 인가되는 힘에 균일한 비례로 발생되어야 하므로, 바닥면은 일정하게 평평하여야 한다.

따라서, 상기 종래 기술에 의한 휴대단말기 마우스는, 책상과 같이 평평한 면이 구비되어야 하므로 한정된 범위에서 이동성이 보장되는 문제가 있다.

본 발명은 휴대단말기에서 포인터 신호를 발생하고 포인터가 지시하는 모니터 영상을 카메라로 촬영하여 포인터 위치를 검출하며 주변의 에지정보 신호를 검출하여 블루투스 신호로 컴퓨터에 전송하므로, 컴퓨터에서 모니터 영상에서의 포인터 위치 확인 및 선택된 제어명령을 수행하는 휴대단말기의 컴퓨터 마우스 운용장치 및 방법을 제공하는 것이 그 목적이다.

상기와 같은 목적을 달성하기 위하여 안출한 본 발명은, 휴대단말기 제어부의 제어에 의하여 포인터 위치의 에지정보와 제어명령 신호와 데이터 통신신호를 무선 송수신하는 블루투스부와; 상기 블루투스부에 접속하고 컴퓨터 프로젝션 모니터 영상의 포인터 위치 주변을 촬영하여 포인터 위치를 확인하며, 소정 영역의 에지신호를 검출하도록 제어하고 감시하는 제어부와; 상기 제어부의 제어에 의하여 상기 모니터 영상의 포인터 위치 주변영역을 촬영하는 카메라부와; 상기 제어부의 제어에 의하여 카메라부가 촬영한 상기 모니터 영상신호를 인가받고 색 분석 방식으로 포인터 위치를 분리 검출하는 영상처리부와; 상기 제어부의 제어에 의하여 카메라부가 촬영한 상기 모니터 영상신호를 인가받고 밝기 분석 방식으로 포인터 위치를 다시 분리 검출하는 명도부와; 상기 제어부의 제어에 의하여 포인터 위치 주변영역의 상기 모니터 영상신호로부터 에지정보를 검출하는 에지검출부가 포함되어 이루어지는 구성을 특징으로 한다.

또한, 상기와 같은 목적을 달성하기 위하여 안출한 본 발명은, 휴대단말기를 컴퓨터 프로젝션 모니터 영상의 마우스로 이용하는 경우에 블루투스로 컴퓨터와 접속하는 준비과정과; 상기 휴대단말기로 포인터를 출력하고 카메라로 상기 모니터 영상을 촬영하여 색 분리 영상처리로 포인터 위치를 검출하는 영상과정과; 상기 모니터 영상의 포인터 위치를 밝기 분석 방식의 명도처리로 재확인하고 소정 영역의 모니터 영상으로부터 에지정보를 검출하는 에지과정과; 상기 확인된 포인터 위치에서 제어명령이 입력되는 경우, 검출된 에지정보와 상기 제어명령을 블루투스로 컴퓨터에 송신하는 제어과정으로 이루어지는 것을 특징으로 한다.

또한, 상기와 같은 목적을 달성하기 위하여 안출한 본 발명은, 컴퓨터에 의하여 휴대단말기를 마우스로 운용하는 제어명령이 입력되면, 블루투스부를 구동하는 시작과정과; 상기 블루투스부를 통하여 마우스로부터 포인터 위치의 에지정보가 수신되는 경우 데이터 베이스로부터 동일한 에지정보를 검색하는 데이터 과정과; 상기 데이터 베이스를 검색하여 동일한 에지정보를 확인한 경우, 선택입력된 제어명령 신호를 분석하여 수행 처리하는 명령과정으로 이루어지는 것을 특징으로 한다.

이하, 본 발명에 의한 것으로 휴대단말기의 컴퓨터 마우스 운용장치 및 방법을 첨부된 도면을 참조하여 설명한다.

본 발명을 설명하기 위하여 첨부된 것으로, 도3 은 본 발명에 의한 휴대단말기의 컴퓨터 마우스 운용장치 기능 구성도 이고, 도4 는 본 발명에 의한 휴대단말기의 컴퓨터 마우스 운용방법 순서도 이며, 도5 는 본 발명에 의한 컴퓨터의 휴대단말기 마우스 운용방법 순서도 이고, 도6 은 본 발명에 의한 포인터 검출 영상처리 방법 설명도 이며, 도7 은 본 발명에 의한 에지신호 검출 기능 설명도 이고, 도8 은 본 발명에 의한 에지신호 검출 순서도 이며, 도9 는 본 발명의 일 예에 의하여 영상신호로부터 에지신호를 검출한 상태도시도 이다.

상기 첨부된 도3을 참조하여, 본 발명에 의한 휴대단말기의 컴퓨터 마우스 운용장치를 설명하면, 이동통신용 휴대단말기를 운용하는 제어부의 제어에 의하여 포인터와 소정크기의 주변을 촬영한 영상신호를 출력하는 것으로, 포인터가 지적하는 컴퓨터 프로젝션 모니터 영상 주변의 소정 영역을 촬영하는 카메라부(100)와,

상기 카메라부(100)에 접속하고 컴퓨터 프로젝션 모니터 영상에서의 포인터 위치 주변 영상신호를 촬영하여 색 분석과 밝기 분석 방식으로 포인터 위치를 확인하며, 포인터 위치 주변 소정 영역의 에지신호를 검출하여 출력하도록 제어하고 감시하는 것으로, 포인터부(140)를 제어하여 레이져에 의한 포인터 신호를 발생하며, 상기 포인터가 지적하는 컴퓨터 프로젝션 모니터 영상의 일부분을 카메라부(100)를 제어하여 촬영하고, 카메라부(100)의 출력신호를 영상처리부(190)에 인가하여 색 분석 방식으로 포인터 위치를 검출하며, 상기 검출된 포인터 위치의 모니터 영상신호를 명도부(180)에 인가하여 밝기 분석 방식으로 다시 확인하고, 상기 확인된 포인터 주변의 영상신호를 에지검출부(170)에 인가하여 소정 영역으로부터 에지정보 신호를 검출하며, 상기 검출된 에지정보 신호를 블루투스부(120)를 통하여 컴퓨터에 무선송신하도록 제어하고 감시하는 제어부(110)와,

상기 제어부(110)의 제어에 의하여 포인터 위치의 에지정보 신호와 제어명령 신호와 데이터 통신신호를 무선 송수신하는 것으로, 입력되는 영상신호로부터 검출된 포인터 주변의 소정 영역에 대한 에지신호와 제어명령 신호가 포함되는 데이터 신호를 블루투스 방식으로 접속한 컴퓨터와 무선송수신하는 블루투스부(120)와,

상기 제어부(110)의 제어에 의하여 이동통신 신호를 무선송수신하는 무선부(130)와,

상기 제어부(110)의 제어에 의하여 붉은색 레이저를 구동하여 포인터 신호를 발생하는 포인터부(140)와,

상기 제어부(110)의 제어에 의하여 휴대단말기 운용 프로그램과 컴퓨터 마우스 응용 프로그램과 데이터를 기록하는 메모리부(150)와,

상기 제어부(110)에 접속하고, 영상과 문자와 운용정보를 표시하며 음성신호를 입출력하고 다이얼링 신호와 제어명령을 입력하는 입출력부(160)와,

상기 제어부(110)의 제어에 의하여 검출된 포인터 위치 주변영역의 상기 모니터 영상신호로부터 에지정보 신호를 검출하는 것으로, 포인터를 중심으로 설정된 소정 영역의 컴퓨터 프로젝션 모니터 영상신호로부터 에지정보 신호를 검출하는 에지검출부(170)와,

상기 제어부(110)의 제어에 의하여 카메라부(100)가 촬영한 상기 컴퓨터 프로젝션 모니터 영상신호의 밝기 분석 방식으로 포인터 위치를 다시 분리 검출하는 것으로, 영상처리부(190)가 포인터 위치를 검출한 컴퓨터 프로젝션 모니터 영상신호를 인가받고 회색에 의한 밝기 분석 방식으로 명도를 확인하여 포인터 위치를 다시 확인하거나 또는, 히스토그램(HISTOGRAM) 이퀄리제이션(EQUALIZATION) 방식으로 밝기 분포 분석하여 포인터 위치를 다시 확인하는 명도부(180)와,

상기 제어부(110)의 제어에 의하여 카메라부(100)가 촬영한 상기 모니터 영상신호를 인가받고 색 분석 방식으로 포인터 위치를 분리 검출하는 것으로, 상기 카메라부(100)가 촬영 인가한 컴퓨터 프로젝션 모니터 영상신호를 색 분석 방식으로 처리하여 레이져의 붉은색 포인터(POINTER) 위치를 분리검출하는 영상처리부(190)가 포함되어 이루어지는 구성이다.

이하, 상기와 같은 구성의 본 발명에 의한 것으로, 휴대단말기의 컴퓨터 마우스 운용장치를 첨부된 도면을 참조하여 상세히 설명한다.

본 발명은, 상기 이동통신용 멀티미디어 휴대단말기를 통신에 운용하지 않는 상태에서 컴퓨터와 블루투스 방식으로 접속하여 데이터 통신하는 마우스 기능에 관한 것이다.

상기 컴퓨터는 처리된 데이터를 모니터에 표시하거나 또는 프로젝션 모니터에 출력하여 영상으로 표시할 수 있으며, 상기 데이터는 컴퓨터에 접속된 마우스를 이용하여 커서를 제어하므로, 이동, 삭제, 변경 등을 할 수 있다.

즉, 상기 휴대단말기로 레이져 포인터를 발생하고, 상기 포인터가 가르키는 프로젝션 모니터 영상의 특정 위치를 촬영 및 선택된 소정 영역의 에지정보 신호를 검출하여 컴퓨터에 블루투스로 전송하므로, 상기 컴퓨터에서 포인터가 지정한 위치를 해당 데이터 베이스 검색으로 확인하는 동시에 선택입력된 제어명령을 수행하는 것이다.

상기 휴대단말기의 제어부(110)는 동작전원이 공급되면, 상기 메모리부(150)로부터 운용 프로그램과 응용 프로그램 및 데이터를 로드(LOAD)하여 운용 대기상태가 되고, 상기 입출력부(160)를 통하여 입력되는 제어명령에 의하여, 이동통신에 운용되지 않는 상태에서, 컴퓨터용 마우스로 운용하고자 하는 경우, 상기 블루투스부(120)를 제어하여, 컴퓨터의 블루투스부와 블루투스 방식으로 무선접속하고 데이터를 송수신한다.

상기 제어부(110)는 포인터부(140)를 제어하여, 붉은색 레이져에 의한 포인터 신호를 출력하도록 한다.

상기 포인터부(140)로부터 출력되는 포인터 신호는, 컴퓨터의 모니터 또는 프로젝션 모니터 영상의 어느 한 지점을 가르키며, 상기 카메라부(100)를 제어하여 포인터가 위치하는 부분을 중심으로 일정한 영역을 촬영한다.

상기 제어부(110)는, 상기 카메라부(100)가 촬영한 모니터 영상신호를 영상처리부(190)에 인가하여 색 분석 방식으로 처리하므로, 붉은색의 포인터 위치를 검출한다.

상기 영상처리부(190)의 색 분석 방식으로 붉은색의 포인터 위치를 검출하는 것은, 모니터 또는 프로젝션 모니터 영상의 배경 또는 바탕색이 붉은색이 아닐 경우에 용이하게 검출되지만, 포인터가 위치한 배경이 붉은색 계통이면, 상기 포인터 위치를 분리 검출하는 정확도가 떨어질 수 있다.

따라서, 상기 포인터 위치 분리 검출의 정확도를 높이기 위하여, 상기 포인터 위치가 검출된 상기 모니터 영상신호를 명도부(180)에 인가하고 밝기 분석 방식으로 다시 확인한다.

즉, 동일한 붉은 색의 경우에도 밝기에 차이가 있음으로 밝기를 분석하여 포인터의 정확한 위치를 검출하는 것으로, 상기 포인터부(140)로부터 출력되는 붉은색 레이져에 의한 포인터의 명도에 의한 밝기는, 상기 제어부(110)의 해당 처리에 의하여 사전에 알거나 또는 명도 값을 사전에 입력한다.

상기 명도부(180)는 영상처리부(190)가 색 분석 방식으로 처리한 영상신호 데이터를 인가받고, 붉은 색을 분류하여 회색성분의 밝기에 의한 명도를 구분하고, 상기 포인터부(140)로부터 출력되는 포인터의 회색성분 명도와 같은 밝기의 것을 검출하므로, 포인터의 정확한 위치를 다시 확인한다.

상기 첨부된 도6을 참조하면, 붉은 색의 밝기에 의한 명도를 분석하는 방식을 도시한 것이다.

상기 붉은색의 명도를 분석하는 방식에는 적녹청(RGB: RED, GREEN, BLUE) 방식과, CMY 방식이 있으며, 상기 도6은 적녹청(RGB) 방식을 설명한다.

상기 도6을 좀더 상세히 설명하면, 촬영된 배경의 컬러(COLOUR) 색상에 의한 녹색성분 또는 초록색(G) 성분의 값과 청색(B) 성분의 값을 0의 값으로 설정하고, 회색눈금(GRAY SCALE)값으로 변환하여 회색 눈금 세기(GRAY SCALE INTENSITY) 값을 구하여 스택(STACK) 메모리에 저장하며, 상기 포인터부(140)로부터 출력되는 포인터의 고유한 회색 눈금(GRAY SCALE) 값과 비교하여 동일한 것을 포인터로 분류하고 확인하는 방식이다.

상기와 같이 포인터의 명도를 컬러표현으로 구분하는 방식 이외에 밝기 분포도를 검출하는 히스토그램 이퀄리제이션(HISTOGRAM EQUALIZATION) 방법을 이용하여 포인터와 일치하는 히스토그램 값을 찾아 포인터의 위치를 확인하는 방식이 있다.

상기 제어부(110)는, 상기 명도부(180)에 의하여 붉은색 포인터의 위치를 다시 확인하면, 상기 확인된 포인터를 중심으로 주변의 설정된 소정 영역의 영상신호 를 에지 검출부(170)에 인가하여 에지신호를 검출한다.

상기 에지신호를 검출하는 소정 영역은, 일 예로, 모니터의 경우, 검출된 포인터의 위치를 중심으로 3 * 3 픽셀(PIXEL)에 해당하는 정보를 전송하거나 또는, 프로젝션 모니터의 경우는 확대 투사되므로, 현장 실험에 의하여 최적 픽셀 값을 선택하거나 입력 설정하는 방식을 적용할 수 있다.

상기 첨부된 도7을 참조하여 에지정보 신호 검출 기능을 설명하면, 가까운 거리에서 루프(ROOF)와 스텝(STEP)에 의한 에지정보 신호를 검출하고, 다음 순서로, 선(LINE)에 의한 에지정보 신호를 검출하며, 다음 순서로, 결합에 의한 에지정보 신호를 검출하는 상태가 도시되어 있다.
상기 에지정보의 일련의 순서적 결합은 모니터 영상에 표시되는 데이터에 따라 다르게 되므로, 상기 컴퓨터 모니터 영상의 각 좌표 영역으로부터 검출되는 에지정보 값은 모두 다르게 된다.
상기 컴퓨터는 모니터에 표시되는 영상의 모든 좌표에 대한 에지정보를 데이터 베이스로 기록 관리한다.

상기 첨부된 도8을 참조하여 에지정보 신호를 검출하는 순서를 설명하면, 입력되는 영상신호(I(i,f))를 병렬마스킹 처리(PARALLEL MASKING OPERATION)하고(Wk(i,f), k=1,2,3,,,n) 다시 비선형 포인트 처리하여 에지배열(EDGE-ENHANCED ARRAY) 신호를 출력한다.
상기 에지배열 신호를 임계점 처리(THRESHOLDING OPERATION)하므로, 최종적인 바이나리 에지정보 신호(BINARY EDGE MAP)로 출력한다.

상기 첨부된 도9를 참조하여 설명하면, 컴퓨터의 모니터 또는 프로젝션 모니터에 표시되는 영상으로부터 휴대단말기의 카메라부는, 포인터가 지시된 부분을 촬영하고, 색 분석 방식에 의한 영상처리와 밝기 분석 방식에 의한 명도 처리로 최종 확인된 포인터 위치 중심의 소정 영역으로부터 에지신호를 검출한 상태를 도시한 것이다.

상기 영상신호의 에지(EDGE) 형태에는 루프(ROOF), 스텝(STEP), 선(LINE), 결합(COMBINATION) 등이 있고, 다음과 같은 미분수식을 이용하여 검출한다.

(수식)

상기 도9에는, 촬영된 영상신호를 에지검출 처리하므로 출력되는 스펙트럼 사진이 도시되어 있는 것으로, 배경과 상이한 부분이 에지로 검출되어 로우레벨로 표시되고 있음을 보여준다.

상기와 같이 최종 검출된 에지정보 신호는, 입출력부를 통하여 입력되는 제어명령과 함께, 상기 제어부(110)의 제어에 의하여 블루투스부(120)에 인가되고, 상기 블루투스부(120)는 블루투스(BLUETOOTH) 방식으로 무선출력하므로, 컴퓨터에 무선송신된다.

상기 컴퓨터에서는, 모니터(MONITOR) 또는 프로젝션(PROJECTION) 모니터에 표시되는 영상신호의 전체 영역에 대한 에지정보 신호를 데이터 베이스로 기록 관리하고, 상기 마우스로 응용되는 휴대단말기로부터 블루투스로 인가되는 에지정보 신호와 동일한 에지정보 신호를 검색하므로, 상기 포인터가 위치한 정보 또는 좌표정보를 확인한다.

상기 컴퓨터는, 상기와 같이 휴대단말기 마우스가 지적한 포인터의 위치를 상기 데이터 베이스 검색 확인하고, 함께 입력되는 제어명령에 의하여, 상기 포인터가 위치한 영역에 할당된 명령을 처리한다.
즉, 상기 컴퓨터는, 현재 표시되는 모니터 영상신호의 전체 영역에 대한 에지정보 신호를 데이터 베이스로 관리하고, 상기 휴대단말기로부터 포인터가 위치한 주변 영역의 에지정보 신호를 인가받은 경우, 상기 데이터 베이스로부터 동일한 에지정보 신호를 검색하며, 상기 검색으로 확인된 에지정보가 상기 모니터 영상의 어느 위치를 지적하는지 확인하게 된다.

따라서, 상기 휴대단말기 마우스는, 포인터부(140)를 통하여 출력되는 레이져의 포인터를 이용하여 모니터 또는 프로젝션 모니터 영상의 특정 부분을 지적하고 제어명령을 입력하므로 컴퓨터를 직접 제어하는 것으로, 비교적 넓은 범위를 이동하면서 제어할 수 있는 장점이 있다.

이하, 상기 첨부된 도4를 참조하여 본 발명에 의한 휴대단말기의 컴퓨터 마우스 운용방법을 설명한다.

이동통신용 휴대단말기를 컴퓨터용 마우스로 이용하는 경우에 블루투스로 컴퓨터에 접속하는 것으로, 휴대단말기를 통신에 사용하지 않는 상태에서 컴퓨터 프로젝션 모니터 영상용 마우스로 이용할 것인지 판단하는 과정(S100); 상기 과정(S100)에서 휴대단말기를 컴퓨터용 마우스로 이용하는 경우, 휴대단말기의 블루투스부(120)를 구동하여 컴퓨터와 무선접속하고 데이터를 무선 송수신하는 과정(S110)으로 이루어지는 준비과정과,

상기 준비과정의 휴대단말기로 포인터 신호를 레이저 출력하고 카메라 촬영하여 색 분리 방식 영상처리로 포인터 위치를 검출하는 것으로, 휴대단말기에 의하여 적색 레이저 포인터 신호를 컴퓨터 프로젝션 모니터 영상에 출력 및 표시하고 상기 포인터 주변의 모니터 영상을 카메라부로 촬영하는 과정(S120); 상기 과정(S120)의 촬영된 모니터 영상신호를 색 분리 방식으로 영상처리하여 포인터 위치를 분리 검출하는 과정(S130)으로 이루어지는 영상과정과,

상기 영상과정의 포인터 위치를 밝기 분석 방식의 명도처리에 의하여 재확인하고 소정 영역으로부터 에지정보 신호를 검출하는 것으로, 촬영된 영상신호를 회색 밝기분석 방식에 의한 명도 처리하여 포인터 위치를 다시 확인하는 과정(S140); 상기 과정(S140)의 포인터 주변에 설정된 소정 영역으로부터 에지정보 신호를 검출하는 과정(S150)으로 이루어지는 에지과정과,

상기 에지과정의 포인터 위치에 제어명령을 입력하는 경우, 검출된 에지신호와 해당 제어명령을 입력하여 컴퓨터에 블루투스로 송신하는 것으로, 컴퓨터 프로젝션 모니터 영상에서 포인터가 위치한 곳에 설정된 제어명령을 선택 입력하는지 판단하는 과정(S160); 상기 과정(S160)에서 제어명령을 선택 입력하는 경우에 검출된 에지신호와 해당 제어명령 신호를 블루투스로 컴퓨터에 송신하는 과정(S170)으로 이루어지는 제어과정으로 구성된다.

이하, 상기와 같은 구성의 본 발명에 의한 것으로, 휴대단말기의 컴퓨터 마우스 운용방법을 첨부된 도면을 참조하여 상세히 설명한다.

상기 휴대단말기를 이동통신에 운용하지 않는 상태에서 컴퓨터용 마우스로 이용할 것인지 판단하며(S100), 상기 판단(S100)에서 휴대단말기를 컴퓨터용 마우스로 이용하는 경우, 블루투스부를 제어하여 컴퓨터와 무선 접속하므로, 데이터 통신 상태를 설정한다(S110).

상기 휴대단말기의 제어부(110)는, 포인터부(140)를 제어하여 레이저에 의한 포인터 신호를 출력하고, 상기 카메라부(100)를 제어하여 상기 포인터가 지적하는 부분의 영상을 촬영하여 입력한다(S120).

상기 제어부(110)는 상기 촬영 입력된 영상신호를 영상처리부(190)에 인가하여, 색 분석 방식으로 처리하여, 레이저에 의한 붉은색의 포인터 위치를 구분 검출하고(S130), 상기 검출된 포인터 위치의 주변 배경 색상이 붉은색 계통의 경우에, 색 분석 방식으로 포인터의 위치를 정확하게 구분 검출하지 못하는 문제를 해결하기 위하여, 상기 영상신호를 명도부(180)에 인가하므로 포인터 위치를 다시 검출 및 확인한다(S140).

상기 명도부(180)는 붉은색 계통의 밝기를 분석하여 포인터를 정확하게 구분 검출하는 것으로, 붉은색의 청색성분과 녹색 또는 초록색 성분을 억제하고 적색 성분을 회색(GRAY) 성분에 의한 밝기 눈금으로 변환하며, 상기 밝기 값을 이용하여 사전에 입력된 포인터의 밝기 값과 동일한 밝기 값을 검출하므로 포인터의 위치를 확인하는 방식이다.

상기와 같은 방식을 컬러표현 방식이라고 하고, 히스토그램 이퀄리제이션 방식 등도 있다.

상기 제어부(110)는, 확인된 포인터 위치를 중심으로 하는 주변 영상신호로부터 설정된 크기의 영상신호를 에지검출부(170)에 인가하여 해당 소정 영역의 에지정보 신호를 검출하고(S150), 상기 검출된 에지정보 신호를 선택하여 컴퓨터에 무선 전송하는 제어명령이 입출력부(160)를 통하여 입력되는지 판단한다(S160).

상기 입출력부(160)를 통하여 입력되는 제어명령은 일반적인 컴퓨터용 마우스(MOUSE)와 같이 클릭신호가 된다.

상기와 같이 포인터가 위치한 주변의 소정 크기 영상신호로부터 검출된 에지정보 신호를 선택 입력하는 것으로 판단하는 경우, 상기 검출된 에지정보 신호와 해당 제어명령은, 제어부(110)의 제어에 의하여 블루투스부(120)에 인가되고, 블루투스 방식 데이터로 출력되며, 컴퓨터에 무선송신되므로, 상기 휴대단말기로 컴퓨터를 직접 제어한다(S170).

따라서, 상기 휴대단말기 마우스는, 이동상태에서도 컴퓨터 모니터 또는 프로젝션 모니터 영상의 특정부분을 포인터로 지적하여 제어하는 장점이 있다.

이하, 상기 첨부된 도5를 참조하여 본 발명에 의한 것으로, 컴퓨터의 휴대단말기 마우스 운용방법을 설명한다.

컴퓨터에 의하여 휴대단말기를 마우스로 운용하는 제어명령이 입력되면, 블루투스부를 구동하는 것으로, 컴퓨터를 원격 제어하기 위하여 휴대단말기 마우스를 운용할 것인지 판단하는 과정(S200); 상기 과정(S200)에서 휴대단말기 마우스를 운용하는 경우에 컴퓨터의 블루투스부를 구동하여 휴대단말기의 블루투스부와 무선통신하는 과정(S210)으로 이루어지는 시작과정과,

상기 시작과정의 블루투스부를 통하여 휴대단말기 마우스로부터 포인터 위치의 에지정보 신호가 수신되는 경우 데이터 베이스로부터 동일한 에지정보 신호를 검색하는 것으로, 상기 컴퓨터 블루투스부를 통하여 휴대단말기 마우스로부터 포인터 에지정보 신호가 수신되는지를 판단하는 과정(S220); 상기 과정(S220)에서 포인터 위치의 에지정보 신호가 수신되는 경우에 컴퓨터의 에지정보 신호 데이터 베이스를 검색하여 동일한 에지정보 신호를 확인하는 과정(S230)으로 이루어지는 데이터 과정과,

상기 데이터 과정에서 데이터 베이스를 검색하여 포인터 에지정보 신호를 검색하고 위치를 확인한 경우, 선택입력된 제어신호를 분석하고 수행 처리하는 것으로, 상기 데이터 과정에서 포인터 에지신호와 동일한 에지신호를 검색하고 분석하여 포인터의 위치정보를 확인하였는지 판단하는 과정(S240); 상기 과정(S240)에서 포인터 위치정보를 확인한 경우는, 선택입력되는 제어신호를 분석 수행하는 과정(S250)으로 이루어지는 명령과정으로 구성된다.

이하, 상기와 같은 구성의 본 발명에 의한 것으로, 컴퓨터의 휴대단말기 마 우스 운용방법을 첨부된 도면을 참조하여 상세히 설명한다.

상기 컴퓨터는 제어명령을 입력하는 휴대단말기 마우스를 운용할 것인지 판단하고(S200), 상기 판단(S200)에서 휴대단말기 마우스를 운용하는 경우, 해당 블루투스부를 구동하며(S210), 상기 블루투스부를 통하여 휴대단말기 마우스로부터 에지정보 신호가 수신되어 입력되는지를 판단한다(S220).

상기 컴퓨터는 휴대단말기 마우스로부터 에지정보 신호가 입력되는 것으로 판단하면(S220), 자체 관리하는 모니터 출력 영상의 전체 영역에 대한 에지정보 신호 데이터 베이스를 검색하여 동일한 에지정보 신호를 확인한다(S230).

상기 컴퓨터의 에지정보 신호 데이터 베이스를 검색하여 동일한 에지정보 신호를 확인한 경우, 모니터 영상에서의 포인터 위치를 확인하므로, 상기 포인터의 위치가 확인되었는지 판단하고(S240), 상기 판단(S240)에서 포인터의 위치가 확인된 경우, 함께 입력되는 제어신호를 분석하여 포인터가 위치한 영역에 할당된 제어명령을 수행 처리한다(S250).

따라서, 상기와 같은 구성의 본 발명은, 책상 또는 평평한 위치에서 반고정 상태로 운용되지 않고 자유롭게 공간을 이동하는 휴대단말기 마우스를 제공하는 장점이 있다.

상기와 같은 구성의 본 발명은, 휴대단말기에서 레이저 포인터를 발생하고, 포인터가 지적하는 모니터 영상을 카메라로 촬영 및 색 분석과 밝기 분석에 의하여 검출된 포인터 주변의 에지정보 신호를 컴퓨터에 전송하며, 컴퓨터는 에지정보 신호 데이터 베이스를 검색하여 포인터의 위치 확인 및 제어명령을 수행하므로, 이동상태에서도 컴퓨터를 직접 제어하는 산업적 이용효과가 있다.

또한, 촬영된 영상신호로부터 색 분석 방식에 의하여 포인터를 검출하고, 다시 명도 분석 방식에 의하여 포인터의 위치를 정확하게 확인하므로, 포인터의 위치 확인에 신뢰성을 제고하는 사용상 편리한 효과가 있다.

Claims (19)

1. 휴대단말기 제어부의 제어에 의하여 포인터 위치의 에지정보와 제어명령 신호와 데이터 통신신호를 무선 송수신하는 블루투스부와,

   상기 블루투스부에 접속하고 컴퓨터 프로젝션 모니터 영상의 포인터 위치 주변을 촬영하여 색 분석과 밝기 분석 방식으로 포인터 위치를 확인하며, 소정 영역의 에지신호를 검출하도록 제어하고 감시하는 제어부와,

   상기 제어부의 제어에 의하여 상기 모니터 영상의 포인터 위치 주변영역을 촬영하는 카메라부와,

   상기 제어부의 제어에 의하여 카메라부가 촬영한 상기 모니터 영상신호를 인가받고 색 분석 방식으로 포인터 위치를 분리 검출하는 영상처리부와,

   상기 제어부의 제어에 의하여 카메라부가 촬영한 상기 모니터 영상신호를 인가받고 밝기 분석 방식으로 포인터 위치를 다시 분리 검출하는 명도부와,

   상기 제어부의 제어에 의하여 포인터 위치 주변영역의 상기 모니터 영상신호로부터 에지정보를 검출하는 에지검출부가 포함되어 이루어지는 구성을 특징으로 하는 휴대단말기의 컴퓨터 마우스 운용장치.
2. 제1 항에 있어서,

   상기 제어부의 제어에 의하여 이동통신 신호를 무선송수신하는 무선부와,

   상기 제어부의 제어에 의하여 레이저에 의한 포인터 신호를 발생하는 포인터부와,

   상기 제어부의 제어에 의하여 휴대단말기 운용 프로그램과 컴퓨터 마우스 응용 프로그램과 데이터를 기록하는 메모리부와,

   상기 제어부에 접속하고, 영상과 문자와 운용정보를 표시하며 음성신호를 입출력하고 다이얼링 신호와 제어명령을 입력하는 입출력부가 더 포함되어 이루어지는 구성을 특징으로 하는 휴대단말기의 컴퓨터 마우스 운용장치.
3. 삭제
4. 삭제
5. 삭제
6. 제1 항에 있어서, 상기 명도부는,

   상기 제어부의 제어에 의하여 영상처리부가 포인터 위치를 검출한 모니터 영상신호를 인가받고 회색 밝기 분석 방식으로 명도를 확인하여 포인터 위치를 다시 확인하는 구성으로 이루어지는 것을 특징으로 하는 휴대단말기의 컴퓨터 마우스 운용장치.
7. 제6 항에 있어서, 상기 명도부는,

   상기 제어부의 제어에 의하여 영상처리부가 포인터 위치를 검출한 모니터 영상신호를 인가받고 히스토그램 이퀄리제이션 방식으로 밝기 분포 분석하여 포인터 위치를 다시 확인하는 구성으로 이루어지는 것을 특징으로 하는 휴대단말기의 컴퓨터 마우스 운용장치.
8. 삭제
9. 제1 항에 있어서, 상기 제어부는,

   포인터부를 제어하여 레이져에 의한 포인터 신호를 발생하며, 상기 포인터가 지적하는 컴퓨터 프로젝션 모니터 영상의 일부분을 상기 카메라부를 제어하여 촬영하고, 영상처리부에 인가하여 색 분석 방식으로 포인터 위치를 검출하며, 상기 검출된 포인터 위치의 모니터 영상신호를 명도부에 인가하여 밝기 분석 방식으로 다시 확인하고, 상기 확인된 포인터 주변의 소정 영역 영상신호를 에지검출부에 인가하여 에지정보를 검출하며, 상기 검출된 에지정보를 블루투스부를 통하여 컴퓨터에 무선송신하도록 제어하고 감시하는 구성으로 이루어지는 것을 특징으로 하는 휴대단말기의 컴퓨터 마우스 운용장치.
10. 삭제
11. 휴대단말기를 컴퓨터 프로젝션 모니터 영상의 마우스로 이용하는 경우에 블루투스로 컴퓨터와 접속하는 준비과정과,

    상기 휴대단말기로 포인터를 출력하고 카메라로 상기 모니터 영상을 촬영하여 색 분리 영상처리로 포인터 위치를 검출하는 영상과정과,

    상기 모니터 영상의 포인터 위치를 밝기 분석 방식의 명도처리로 재확인하고 소정 영역의 모니터 영상으로부터 에지정보를 검출하는 에지과정과,

    상기 확인된 포인터 위치에서 제어명령이 입력되는 경우, 검출된 에지정보와 상기 제어명령을 블루투스로 컴퓨터에 송신하는 제어과정으로 이루어지는 것을 특징으로 하는 휴대단말기의 컴퓨터 마우스 운용방법.
12. 삭제
13. 제11 항에 있어서, 상기 영상과정은,

    상기 휴대단말기에 의하여 레이저에 의한 포인터 신호를 컴퓨터 프로젝션 모니터 영상에 출력하고 카메라부로 촬영하는 과정과,

    상기 촬영된 모니터 영상신호를 색 분리 방식으로 처리하여 포인터를 분리 검출하는 과정으로 이루어지는 것을 특징으로 하는 휴대단말기의 컴퓨터 마우스 운용방법.
14. 제11 항에 있어서, 상기 에지과정은,

    상기 촬영된 모니터 영상신호를 회색 밝기분석 방식의 명도 처리에 의하여 포인터 위치를 다시 확인하는 과정과,

    상기 포인터 위치 주변에 설정된 소정 영역으로부터 에지정보를 검출하여 출력하는 과정으로 이루어지는 것을 특징으로 하는 휴대단말기의 컴퓨터 마우스 운용방법.
15. 제11 항에 있어서, 상기 제어과정은,

    상기 컴퓨터 프로젝션 모니터 영상의 포인터가 위치한 곳을 선택하는 제어명령이 입력되는지 판단하는 과정과,

    상기 제어명령이 입력되는 경우에 검출된 에지정보와 함께 블루투스로 컴퓨터에 송신하는 과정으로 이루어지는 것을 특징으로 하는 휴대단말기의 컴퓨터 마우스 운용방법.
16. 컴퓨터에 의하여 휴대단말기를 마우스로 운용하는 제어명령이 입력되면, 블루투스부를 구동하는 시작과정과,

    상기 블루투스부를 통하여 휴대단말기 마우스로부터 포인터 위치의 에지정보가 수신되는 경우 데이터 베이스로부터 동일한 에지정보를 검색하는 데이터 과정과,

    상기 데이터 베이스를 검색하여 동일한 에지정보를 확인한 경우, 선택입력된 제어명령 신호를 분석하여 수행 처리하는 명령과정으로 이루어지는 것을 특징으로 하는 휴대단말기의 컴퓨터 마우스 운용방법.
17. 삭제
18. 제16 항에 있어서, 상기 데이터 과정은,

    상기 컴퓨터 블루투스부를 통하여 휴대단말기 마우스로부터 포인터 위치의 에지정보가 수신되는지를 판단하는 과정과,

    상기 포인터 위치의 에지정보가 수신되면 컴퓨터의 에지정보 데이터 베이스를 검색하여 동일한 에지정보를 확인하는 과정으로 이루어지는 것을 특징으로 하는 휴대단말기의 컴퓨터 마우스 운용방법.
19. 제16 항에 있어서, 상기 명령과정은,

    상기 포인터 위치 에지정보와 동일한 에지정보를 검색하고 분석하여 프로젝션 모니터 영상에서의 포인터 위치정보를 확인하는 과정과,

    상기 포인터 위치정보를 확인한 경우는, 선택입력되는 제어신호를 분석하여 수행하는 과정으로 이루어지는 것을 특징으로 하는 휴대단말기의 컴퓨터 마우스 운용방법.

Images