KR101668702B1 - 화상회의 장치 및 화상회의 서비스 제공 방법 - Google Patents

Abstract

화상회의 장치 및 화상회의 서비스 제공 방법이 개시된다. 네트워크 인터페이스부는 화상회의 영상을 수신한다. 제어부는 네트워크 인터페이스부가 수신한 화상회의 영상에 포함된 영상 프레임에서 객체 영역을 확인하고, 확인한 객체 영역이 영상 프레임에서 차지하는 비율을 확인하며, 확인 결과에 따라 볼륨 게인(volume Gain)을 조절한다. 본 발명에 따른 화상회의 장치 및 화상회의 서비스 제공 방법에 의하면, 수신된 화상회의 영상에서 상대방 회의자의 위치에 적정한 볼륨을 제공하므로, 사용자에게 회의 상황에 알맞는 맞춤형 화상회의 서비스를 제공할 수 있다.

Description

화상회의 장치 및 화상회의 서비스 제공 방법{VIDEO CONFERENCE DEVICE AND METHOD FOR PROVIDING A VIDEO CONFERENCE SERVICE}

본 발명은 화상회의 장치 및 화상회의 서비스 제공 방법에 관한 것으로, 보다 상세하게는, 화상회의 서비스를 제공하기 위한 화상회의 장치 및 그 방법에 관한 것이다.

현재 모바일 환경에서 다자간 화상회의를 위한 시스템은 각 단말기와 화상회의 서버로 구성되어 있다. 두 명 이상이 화상회의에 참석하는 경우, 참석자 가운데 발언자가 선택되고 모든 화상회의 참석자에게 발언자의 영상이 전송되는 방식이 초기단계에 개발되었다.

점차적으로, 참석자가 5명 이하의 소규모 화상회의의 경우, 참석자 모두의 영상을 단말기에서 보기를 원하는 요구사항을 만족할 수 있는 방법이 필요하게 되었으며, 현재 가장 널리 알려진 방법은, 각 단말에 단말 사용자를 제외한 나머지 참여자들의 영상을 생성하기 위해, 각 단말에서 부호화한 비디오 영상을 서버에서 받아 복호화한 후 복호화된 영상을 조합하여 새로운 영상을 구성하고 이를 재부호화하여 각 사용자에게 전송하는 방식이다. 이 방법은 각 단말에 단말 사용자를 제외한 나머지 참여자의 영상을 생성하기 위해, 화상회의 영상시스템 서버에서는 여러 단말에서 받은 비디오 영상을 복호화하고, 각 수신자에게 맞는 새로운 영상을 부호화하는 비디오 부호화 서버를 필요로 하고 결과적으로 서버에서의 높은 연산량과 복호화/부호화에 따른 전송시간의 지연이 발생한다.

본 발명이 이루고자 하는 기술적 과제는 화상회의 서비스를 화상회의 상황에 맞추어 제공할 수 있는 화상회의 장치 및 화상회의 서비스 제공 방법을 제공하는 데 있다.

상기의 기술적 과제를 달성하기 위한, 본 발명에 따른 화상회의 서비스 제공 방법은 화상회의 영상을 수신하는 단계, 상기 수신된 화상회의 영상에 포함된 영상 프레임에서 객체 영역을 확인하는 단계, 상기 확인된 객체 영역이 상기 영상 프레임에서 차지하는 비율을 확인하는 단계 및 상기 확인 결과에 따라 볼륨 게인(volume Gain)을 조절하는 단계를 포함할 수 있다. 여기서, 상기 객체 영역은 얼굴 영역 및 스킨 영역 중 하나일 수 있다.

바람직하게, 상기 객체 영역을 확인하는 단계는, 상기 영상 프레임의 스킨 칼라(Skin Color) 정보를 산출한 단계 및 상기 산출된 스킨 칼라 정보를 기초로 객체 영역 확인하는 단계를 더 포함할 수 있다.

바람직하게, 상기 볼륨 게인을 조절하는 단계에서, 상기 비율이 사전에 설정된 비율값 이상인 경우에는, 상기 볼륨 게인을 감소시킬 수 있다.

바람직하게, 상기 볼륨 게인을 조절하는 단계에서, 상기 비율이 사전에 설정된 비율값 이하인 경우에는, 상기 볼륨 게인을 증가시킬 수 있다.

바람직하게, 상기 볼륨 게인을 조절하는 단계에서, 상기 비율이 사전에 설정된 범위내인 경우에는, 상기 볼륨 게인을 유지할 수 있다.

바람직하게, 자동 볼륨 조절이 설정된 경우에, 상기 볼륨 게인이 조절될 수 있다.

바람직하게, 상기의 화상회의 서비스 제공 방법은 상기 객체 영역이 확인되지 않는 경우에는, 방송 영상을 디스플레이하는 단계를 더 포함할 수 있다.

바람직하게, 상기의 화상회의 서비스 제공 방법은 RF(Radio Frequency) 방송 신호를 수신하는 단계, 상기 수신된 RF 방송 신호를 복조하는 단계, 상기 복조된 RF 방송 신호를 영상신호, 음성신호 및 데이터 신호로 역다중화하는 단계 및 상기 설정된 서비스 모드에 따라 상기 역다중화된 영상신호 및 상기 화상회의 영상 중 적어도 하나를 선택적으로 디스플레이하는 단계를 더 포함할 수 있다.

바람직하게, 상기의 화상회의 서비스 제공 방법은 방송 신호를 포함하는 IP 패킷을 수신하는 단계 및 상기 설정된 서비스 모드에 따라 상기 수신된 방송 신호 및 상기 화상회의 영상 중 적어도 하나를 선택적으로 디스플레이하는 단계를 더 포함할 수 있다.

상기의 다른 기술적 과제를 달성하기 위한, 본 발명에 따른 화상회의 장치는 화상회의 영상을 수신하는 네트워크 인터페이스부, 상기 수신된 화상회의 영상에 포함된 영상 프레임에서 객체 영역을 확인하고, 상기 확인된 객체 영역이 상기 영상 프레임에서 차지하는 비율을 확인하며, 상기 확인 결과에 따라 볼륨 게인(volume Gain)을 조절하는 제어부를 포함할 수 있다. 여기서, 상기 객체 영역은 얼굴 영역 및 스킨 영역 중 하나일 수 있다.

바람직하게, 상기 제어부는, 상기 영상 프레임의 스킨 칼라(Skin Color) 정보를 산출하고 상기 산출된 스킨 칼라 정보를 기초로 상기 객체 영역을 확인할 수 있다.

바람직하게, 상기 제어부는, 상기 비율이 사전에 설정된 비율값 이상인 경우에는, 상기 볼륨 게인을 감소시킬 수 있다.

바람직하게, 상기 제어부는, 상기 비율이 사전에 설정된 비율값 이하인 경우에는, 상기 볼륨 게인을 증가시킬 수 있다.

바람직하게, 상기 제어부는, 상기 비율이 사전에 설정된 범위내인 경우에는, 상기 볼륨 게인을 유지할 수 있다.

바람직하게, 상기 제어부는, 자동 볼륨 조절이 설정된 경우에, 상기 볼륨 게인을 조절할 수 있다.

바람직하게, 상기 제어부는, 상기 객체 영역이 확인되지 않는 경우에는, 방송 영상이 디스플레이되도록 제어할 수 있다.

바람직하게, 상기 화상회의 장치는 RF(Radio Frequency) 방송 신호를 수신하는 튜너, 상기 수신된 RF 방송 신호를 복조하여 스트림 신호를 출력하는 복조부, 상기 출력된 스트림 신호를 영상신호, 음성신호 및 데이터 신호로 역다중화하는 역다중화부, 및 설정된 서비스 모드에 따라 상기 수신된 화상회의 영상 및 상기 역다중화된 영상신호 중 적어도 하나를 디스플레이하는 디스플레이부를 더 포함할 수 있다.

바람직하게, 상기 네트워크 인터페스부는 방송 신호를 포함하는 IP 패킷을 더 수신하고, 상기 제어부는 상기 설정된 서비스 모드에 따라 상기 수신된 방송 신호 및 상기 화상회의 영상 중 적어도 하나가 선택적으로 디스플레이되도록 제어할 수 있다.

본 발명에 따른 화상회의 장치 및 화상회의 서비스 제공 방법에 의하면, 수신된 화상회의 영상에서 상대방 회의자의 위치에 적정한 볼륨을 제공하므로, 사용자에게 회의 상황에 알맞는 맞춤형 화상회의 서비스를 제공할 수 있다.

도 1은 본 발명에 따른 화상회의 시스템에 대한 바람직한 일실예의 구성을 도시한 구성도,
도 2는 본 발명에 따른 화상회의 장치에 대한 바람직한 일실예의 구성을 도시한 블록도,
도 3a 내지 도3d는 얼굴 영역이 인식된 화면을 도시한 도면,
도 4a 내지 도 4b는 스킨 영역이 인식된 화면을 도시한 도면,
도 5는 볼륨 게인 조절을 위한 참조 테이블의 일 실시예를 도시한 도면, 그리고,
도 6은 본 발명에 따른 화상회의 서비스 제공 방법에 대한 바람직한 일 실시예의 수행과정을 도시한 순서도이다.

이하 상기의 목적을 구체적으로 실현할 수 있는 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 설명한다. 이때 도면에 도시되고 또 이것에 의해서 설명되는 본 발명의 구성과 작용은 적어도 하나의 실시예로서 설명되는 것이며, 이것에 의해서 본 발명의 기술적 사상과 그 핵심 구성 및 작용이 제한되지는 않는다.

본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당해 기술분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 함을 밝혀두고자 한다.

도 1은 본 발명에 따른 화상회의 시스템에 대한 바람직한 일실예의 구성을 도시한 구성도이다.

도 1을 참조하면, 본 발명에 따른 화상회의 시스템(100)은 서버(110) 및 화상회의 장치(121, 123, 125)를 포함할 수 있다. 서버(110) 및 화상회의 장치(121, 123, 125)는 인터넷을 통해 연결될 수 있고, 사설 네트워크 통신망을 통해 연결될 수 있다. 여기서 사설 네트워크 통신망은 PSDN(Public Switched Data Network), ISDN(Integrated Services Digital Network) 및 이더넷(Ethernet)과 같은 통신망으로 구현될 수 있다.

또한 화상회의 장치(121, 123, 125)는 무선 랜을 통해 인터넷 또는 사설 네트워크 통신망에 연결될 수 있다. 여기서 상기 무선 랜은 IEEE 802.11 기반의 무선 랜일 수 있다. 화상회의 장치(121, 123, 125)는 서버(110)의 중계 없이 직접 연결되어 데이터를 송수신할 수 있고, 화상회의 서비스를 제공할 수 있다.

서버(110)는 화상회의 장치(121, 123, 125)에 화상회의 서비스를 제공할 수 있다. 서버(110)는 화상회의 장치(121, 123, 125)간의 연결을 중계한다. 또한 서버(110)는 각 화상회의 장치(121, 123, 125)로부터 영상신호를 수신하여 하나의 화면에 디스플레이할 수 있도록 영상신호를 통합하여 각 화상회의 장치로 제공할 수 있다. 또한 서버(110)는 각 화상회의 장치(121, 123, 125)로부터 음성신호를 수신하고 수신된 음성신호를 기초로 각 화상회의 장치(121, 123, 125)에 전송될 음성신호를 생성하여 이를 전송할 수 있다. 여기서 서버(110)는 SKYPE system 의 서버일 수 있다.

화상회의 장치(121, 123, 125)는 A/V 신호를 디스플레이할 수 있는 정보처리 장치로 구현될 수 있다. 즉 화상회의 장치(121, 123, 125)는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player), 네비게이션 등과 같은 이동 단말기일 수 있고, 디지털 TV, 데스크탑 컴퓨터 등과 같은 고정 단말기일 수 있다.

도 2는 본 발명에 따른 화상회의 장치에 대한 바람직한 일실예의 구성을 도시한 블록도이다.

도 2를 참조하면, 본 발명에 따른 화상회의 장치(200)는 음성 수신부(205), 음성 처리부(210), 제어부(215), 디스플레이부(220), 사용자 인터페이스부(225), 카메라(230), 영상 처리부(235), 네트워크 인터페이스부(240), 저장부(245), 튜너부(250), 복조부(255) 및 역다중화부(260)를 포함할 수 있다. 도 1의 화상회의 장치(121, 123, 125)는 화상회의 장치(200)일 수 있다.

음성 수신부(205)는 음성을 녹취하고 녹취한 음성신호를 출력한다. 여기서 음성 수신부(205)는 마이크로 구현될 수 있다.

음성 처리부(210)는 음성 수신부(205)가 출력한 음성신호를 압축한다. 여기서, 음성 처리부(210)는 음성신호를 국제 표준 알고리즘인 H.261, H.263 및 H.264를 이용하여 압축할 수 있다.

또한 음성 처리부(210)는 네트워크 인터페이스부(240)가 수신한 음성신호를 복원한다. 여기서, 음성 처리부(210)는 음성신호가 압축된 알고리즘에 따라 해당 알고리즘을 이용하여 음성신호를 복원할 수 있다.

카메라(230)는 피사체를 촬상하여 촬상 화상 신호를 생성한다.

영상 처리부(235)는 생성된 촬상 화상 신호를 압축하여 영상신호를 생성한다. 만일 카메라(230)가 출력한 신호가 아날로그 신호인 경우에는, 영상 처리부(235)는 A/D 변환부를 구비하여, 카메라(230)가 출력한 아날로그 신호를 디지털 신호로 변환하고 변환된 디지털 신호를 압축할 수 있다. 여기서, 영상 처리부(235)는 촬상 화상 신호를 국제 표준 알고리즘인 H.261, H.263 및 H.264를 이용하여 압축할 수 있다.

또한 영상 처리부(235)는 네트워크 인터페이스부(240)가 출력한 영상신호를 복원한다. 여기서, 영상 처리부(235)는 영상신호가 압축된 알고리즘에 따라 해당 알고리즘을 이용하여 영상신호를 복원할 수 있고, 압축 알고리즘으로 H.261, H.263 및 H.264가 사용될 수 있다.

제어부(215)는 음성 처리부(210)가 출력한 음성신호 및 영상 처리부(235)가 출력한 영상신호가 네트워크 인터페이스부(240)를 통해 통신망에 연결된 다른 화상회의 장치 또는 화상회의 서버로 전송되도록 제어한다. 여기서 음성신호 및 영상신호는 다중화되어 전송될 수 있고, 개별적으로 전송될 수 있다.

제어부(215)는 네트워크 인터페이스부(240)가 수신한 음성신호 및 영상신호가 각각 음성 처리부(210) 및 영상 처리부(235)로 전달되도록 제어한다.

제어부(215)는 영상 처리부(235)가 복원한 영상신호에 포함된 영상 프레임에서 객체 영역을 확인한다. 그리고 제어부(215)는 확인된 객체 영역이 상기 영상 프레임에서 차지하는 비율을 확인한다. 그리고 제어부(215)는 확인 결과에 따라 볼륨 게인(volume Gain)을 조절한다. 여기서 객체 영역은 얼굴 영역 및 스킨 영역 중 하나일 수 있다. 영상 처리부(235)가 복원한 영상신호는 화상회의 영상이 압축된 신호일 수 있다. 또한 음성 처리부(210)가 복원한 음성신호는 조절된 볼륨 게인에 따라 볼륨이 조절되어 디스플레이될 수 있다.

일부 실시예들로, 제어부(215)는 얼굴의 대칭을 이용한 알고리즘, 머리카락 색과 얼굴 색을 이용한 알고리즘, 및 얼굴의 윤곽을 이용한 알고리즘을 이용하여 영상 프레임에서 얼굴 영역을 확인할 수 있다.

또 다른 실시예로, 제어부(215)는 영상 프레임에서 스킨 칼라 정보를 산출하고, 산출한 스킨 칼라 정보를 기초로 스킨 영역을 확인할 수 있다.

제어부(215)는 자동 볼륨 조절이 설정된 경우에 볼륨 게인을 조절하고 자동 볼륨 조절이 설정되지 않은 경우에 볼륨을 조절하지 않을 수 있다. 여기서 자동 볼륨 조절은 디폴트로 설정될 수 있고, 사용자 명령에 따라 자동 볼륨 조절이 변경될 수 있다.

만일 객체 영역이 확인되지 않는 경우에, 제어부(215)는 영상회의가 디스플레이되는 화면을 뮤트시킬 수 있다. 이때 제어부(215)는 튜너부(250) 또는 네트워크 인터페이스부(240)가 수신한 방송 신호가 화면에 자동으로 디스플레이되도록 제어할 수 있다.

네트워크 인터페이스부(240)는 네트워크 망으로부터 수신되는 패킷(packet)들을 수신하고, 네트워크 망으로 패킷을 전송한다. 네트워크 인터페이스부(240)는 네트워크 망을 통해 서비스 제공 서버로부터 방송 신호 또는 인터넷 서비스 데이터를 포함하는 IP 패킷을 수신할 수 있다. 여기서 방송 신호는 실시간 방송 신호일 수 있고, 인터넷 서비스 데이터는 인터넷 서비스에 대한 데이터일 수 있다. 인터넷 서비스는 CoD(Content's on Demand) 서비스, 유튜브 서비스, 날씨, 뉴스, 지역 정보 및 검색 등의 인포메이션 서비스, 게임, 노래방 등의 엔터테인먼트 서비스, TV 메일, TV SMS(Short Message Service) 등의 커뮤니케이션 서비스 등 인터넷을 통해 제공될 수 있는 서비스를 의미한다. 이에 따라 본 발명에서 화상회의 장치는 네트워크 TV, 웹 TV 및 브로드밴드 TV를 포함한다.

네트워크 인터페이스부(240)는 서버(110) 또는 화상회의 장치(121, 123, 125)로부터 음성신호 및 영상신호를 수신한다. 여기서 수신되는 음성신호 및 영상신호는 서로 다중된 것일 수 있고, 개별적으로 전송된 것일 수 있다. 또한 음성신호 및 영상신호는 각각 전용회선을 통해 전송될 수 있고, IP 패킷의 페이로드에 포함되어 전송될 수 있다.

네트워크 인터페이스부(240)는 음성 처리부(210)가 출력한 음성신호 및 영상 처리부(235)가 출력한 영상신호를 서버(110) 또는 화상회의 장치(121, 123, 125)로 전송한다. 여기서 네트워크 인터페이스부(240)는 음성신호 및 영상신호를 각각 다른 회선을 통해 전송할 수 있고, 음성신호 및 영상신호를 멀티플레싱하여 하나의 회선으로 전송할 수 있다. 또한 네트워크 인터페이스부(240)는 음성신호 및 영상신호를 IP 패킷 형태로 전송할 수 있다.

사용자 인터페이스부(225)는 사용자로부터 자동 볼륨 조절을 설정 및 해제를 요청하는 사용자 명령 또는 서비스 모드를 변경을 요청하는 서비스 모드 변경 명령을 입력받는다. 제어부(215)는 입력된 서비스 모드 변경 명령에 따라 서비스 모드를 변경한다. 만일 서비스 모드가 IPTV 방송을 지시하면, 제어부(215)는 네트워크 인터페이스부(240)로부터 수신된 IP 패킷에 포한된 방송 신호가 디스플레이되도록 디스플레이부(220)를 제어한다. 만일 서비스 모드가 RF 방송을 지시하면, 제어부(215)는 튜너부(250)로부터 수신된 RF 방송 신호가 디스플레이되도록 디스플레이부(220)를 제어한다. 만일 서비스 모드가 화상회의를 지시하면, 제어부(215)는 화상회의 영상이 디스플레이되도록 디스플레이부(220)를 제어한다. 여기서 RF 방송은 케이블 방송, 위성 방송 및 공중파 방송 중 하나일 수 있고, 튜너부를 통해 수신되는 방송일 수 있다.

또한 서비스 모드는 다중 모드를 지시할 수 있다. 서비스 모드가 다중 모드를 지시하는 경우에는, 제어부(215)는 다중 모드에 포함되는 모든 서비스가 디스플레이되도록 디스플레이부(220)를 제어할 수 있다. 즉 서비스 모드가 RF 방송 및 화상회의 지시하면, 제어부(215)는 RF 방송 신호 및 화상회의 영상이 동시에 화면에 디스플레이되도록 디스플레이부(220)를 제어한다.

사용자 인터페이스부(225)는 사용자로부터 보조 서비스 모드를 변경을 요청하는 보조 서비스 모드 변경 명령을 입력받을 수 있다. 여기서 보조 서비스 모드는 화상회의 화면이 뮤트된 경우에, 디스플레이될 서비스를 지시한다. 즉 화상회의 영상에서 객체 영역이 확인되지 않은 경우에, 제어부(215)는 화상회의 영상이 디스플레이되는 화면을 뮤트시키고 보조 서비스 모드가 지시하는 서비스가 화면에 자동으로 디스플레이되도록 제어할 수 있다. 여기서 보조 서비스 모드가 지시하는 서비스는 방송 서비스 및 인터넷 서비스를 포함하고, 방송 서비스는 케이블 방송 서비스, 위성 방송 서비스, 공중파 방송 서비스 및 IPTV 방송 서비스 중 하나일 수 있다.

저장부(245)는, 제어부(215) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장할 수 있고, 신호 처리된 영상신호, 음성신호 또는 데이터 신호를 저장할 수 있다. 또한 저장부(245)는 음성 처리부(210) 및 영상 처리부(235)로 출력되는 음성신호 및 영상신호의 임시 저장을 위한 기능을 수행할 수도 있다.

저장부(245)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬(EEPROM 등) 중 적어도 하나의 타입의 저장매체로 구현될 수 있다.

튜너부(250)는 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널에 해당하는 RF 방송 신호를 선택하고, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환한다. 예를 들어, 선택된 RF 방송 신호가 디지털 방송 신호이면 디지털 IF 신호(DIF)로 변환하고, 아날로그 방송 신호이면 아날로그 베이스 밴드 영상 또는 음성신호(CVBS SIF)로 변환한다. 즉, 튜너부(250)는 디지털 방송 신호 또는 아날로그 방송 신호를 처리할 수 있다.

또한, 튜너부(250)는 ATSC(Advanced Television System Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다.

본 발명의 또 다른 실시예에 의하면, 화상회의 장치(200)는 적어도 2개의 튜너부를 구비할 수 있다. 적어도 2개의 튜너부를 구비하는 경우, 제2 튜너부는 제1튜너부와 유사하게 안테나를 통해 수신되는 RF 방송 신호 중 사용자에 의해 선택된 채널에 해당하는 RF 방송 신호를 선택하고, 선택된 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환한다.

또한, 제2 튜너부는 수신되는 RF 방송 신호 중 채널 기억 기능을 통하여 저장된 모든 방송 채널의 RF 방송 신호를 순차적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환할 수 있다. 제2 튜너부는 주기적으로 모든 방송 채널의 변환 작업을 수행할 수 있다. 따라서 화상회의 장치(200)는 제1 튜너부를 통하여 변환된 방송 신호의 영상을 표시하면서, 제2 튜너부를 통하여 변환된 여러 채널의 영상을 썸 네일 형태로 제공할 수 있다. 이 경우, 제1 튜너부는 사용자가 선택한 메인 RF 방송 신호를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환하고, 제2 튜너부는 메인 RF 방송 신호를 제외한 모든 RF 방송 신호를 순차적/주기적으로 선택하여 이를 중간 주파수 신호 혹은 베이스 밴드 영상 또는 음성신호로 변환할 수 있다.

복조부(255)는 튜너부(250)에서 변환된 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다. 일예로, 튜너부(250)에서 출력되는 디지털 IF 신호가 ATSC 방식인 경우, 복조부(255)는 8-VSB(8-Vestigal Side Band) 복조를 수행한다. 또 다른 예로, 튜너부(250)에서 출력되는 디지털 IF 신호가 DVB 방식인 경우, 복조부(255)는 COFDMA(Coded Orthogonal Frequency Division Modulation) 복조를 수행한다.

또한, 복조부(255)는 채널 복호화를 수행할 수도 있다. 이를 위해 복조부(255)는 트렐리스 디코더(Trellis Decoder), 디인터리버(De-interleaver), 및 리드 솔로먼 디코더(Reed Solomon Decoder) 등을 구비하여, 트렐리스 복호화, 디인터리빙, 및 리드 솔로먼 복호화를 수행할 수 있다.

복조부(255)는 복조 및 채널 복호화를 수행한 후 스트림 신호(TS)를 출력할 수 있다. 이때 스트림 신호는 영상신호, 음성신호 또는 데이터 신호가 다중화된 신호일 수 있다. 일예로, 스트림 신호는 MPEG-2 규격의 영상신호, 돌비(Dolby) AC-3 규격의 음성신호 등이 다중화된 MPEG-2 TS(Transport Stream)일 수 있다. 구체적으로 MPEG-2 TS는, 4 바이트(byte)의 헤더와 184 바이트의 페이로드(payload)를 포함할 수 있다.

또한, 적어도 2개의 튜너부가 구비된 화상회의 장치의 경우, 그에 대응하는 수의 복조부를 구비할 수 있다. 또한 복조부는, ATSC 방식과, DVB 방식에 따라 각각 별개로 구비될 수 있다.

역다중화부(260)는 복조부(255)에서 출력한 스트림 신호를 영상신호, 음성신호, 또는 데이터 신호로 역다중하여 영상 처리부(235), 음성 처리부(210) 및 제어부(215)로 출력할 수 있다. 영상 처리부(235)는 역다중화부(260)로부터 출력된 영상신호를 복원하여 디스플레이부(220)로 출력할 수 있고, 음성 처리부(210)는 역다중화부(260)로부터 출력된 음성신호를 복원하여 디스플레이부(220)로 출력할 수 있다.

도 3a 내지 도 3d는 객체 영역이 인식된 화면을 도시한 도면이다.

도 3a 내지 도 3d를 참조하면, 화면(310), 화면(320), 화면(330) 및 화면(340)은 각각 수신된 화상회의 영상에 포함된 영상 프레임이 디스플레이된 화면이다.

제어부(215)는 화면(310)에서 객체 영역으로 얼굴 영역(312)을 인식할 수 있다. 여기서 제어부(215)는 얼굴의 대칭을 이용한 알고리즘, 머리카락 색과 얼굴 색을 이용한 알고리즘, 및 얼굴의 윤곽을 이용한 알고리즘을 이용하여 얼굴 영역(312)을 인식할 수 있다.

도 3a에서 얼굴 영역(312)이 화면(310)의 전체 영역에서 60%이상을 차지하므로, 제어부(215)는 볼륨 게인을 0.9 수준으로 낮춘다. 얼굴 영역(312)이 전체 영역의 60%이상을 차지한다는 것은 카메라와 화상회의 상대방의 위치가 가깝다는 것을 의미할 수 있으며, 이에 따라 수신된 화상회의 음성신호가 크게 출력될 수 있으므로, 본 발명에 따른 화상회의 장치(200)는 볼륨 게인을 자동으로 낮추어 화상회의 음성신호가 적당한 크기로 출력되도록 조절할 수 있다.

또한, 도 3b에서 얼굴 영역(322)이 화면(320)의 전체 영역에서 60% 미만에서 20%초과 사이의 범위를 차지하므로, 제어부(215)는 볼륨 게인을 1.0으로 유지한다. 얼굴 영역(322)이 전체 영역의 60% 미만에서 20%초과의 범위를 자치한다는 것은 카메라와 화상회의 상대방의 위치가 적정하다는 것을 의미할 수 있으며, 이에 따라 소기가 적정하게 출력될 수 있으므로, 별도로 볼륨 게인을 조절하지 않는다.

또한, 도 3c에서 얼굴 영역(332)이 화면(330)의 전체 영역에서 20%이하를 차지하므로, 제어부(215)는 볼륨 게인을 1.1 수준으로 높인다. 얼굴 영역(332)이 전체 영역의 20%이하를 차지한다는 것은 카메라와 화상회의 상대방의 위치가 멀다는 것을 의미할 수 있으며, 이에 따라 수신된 화상회의 음성신호가 작게 출력될 수 있으므로, 본 발명에 따른 화상회의 장치(200)는 볼륨 게인을 자동으로 높이어 화상회의 음성신호가 적당한 크기로 출력되도록 조절할 수 있다.

또한, 도 3d에서 화면(340)에 객체 영역이 확인되지 않으므로, 제어부(215)는 화상회의 화면을 뮤트시킬 수 있다. 추가적으로, 제어부(215)는 네트워크 인터페이스부(240) 또는 튜너부(250)로부터 수신된 방송신호가 화면에 디스플레이되도록 제어할 수 있다. 향후, 수신된 화상회의 영상에 얼굴 영역이 확인되면, 제어부(215)는 화상회의 영상이 화면에 다시 디스플레이되도록 제어할 수 있다.

도 4a 내지 도 4b는 스킨 영역이 인식된 화면을 도시한 도면이다.

도 4a 내지 도 4b를 참조하면, 화면(410), 화면(420), 화면(440) 및 화면(440)은 각각 수신된 화상회의 영상에 포함된 영상 프레임이 디스플레이된 화면을 의미한다.

제어부(215)는 화면(410)에서 객체 영역으로 스킨 영역(412)을 인식할 수 있다. 여기서 제어부(215)는 화면(410)에서 스킨 칼라 정보를 산출하고, 산출된 스킨 칼라 정보를 이용하여 스킨 칼라에 해당하는 픽셀값을 갖는 영역(412)을 스킨 영역으로 인식한다.

도 4a에서 스킨 영역(412)이 화면(410)의 전체 영역에서 80%이상을 차지하므로, 제어부(215)는 볼륨 게인을 0.9 수준으로 낮춘다. 스킨 영역(412)이 전체 영역의 80%이상을 차지한다는 것은 카메라와 화상회의 상대방의 위치가 가깝다는 것을 의미할 수 있으며, 이에 따라 수신된 화상회의 음성신호가 크게 출력될 수 있으므로, 본 발명에 따른 화상회의 장치(200)는 볼륨 게인을 자동으로 낮추어 화상회의 음성신호가 적당한 크기로 출력되도록 조절할 수 있다.

또한, 도 4b에서 스킨 영역(422)이 화면(420)의 전체 영역에서 80% 미만에서 40%초과 사이의 범위를 차지하므로, 제어부(215)는 볼륨 게인을 1.0으로 유지한다. 스킨 영역(422)이 전체 영역의 80% 미만에서 40%초과의 범위를 자치한다는 것은 카메라와 화상회의 상대방의 위치가 적정하다는 것을 의미할 수 있으며, 이에 따라 수신된 화상회의 음성신호가 적정하게 출력될 수 있으므로, 별도로 볼륨 게인을 조절하지 않는다.

또한, 도 4c에서 스킨 영역(432)이 화면(430)의 전체 영역에서 40%이하를 차지하므로, 제어부(215)는 볼륨 게인을 1.1 수준으로 높인다. 스킨 영역(432)이 전체 영역의 40%이하를 차지한다는 것은 카메라와 화상회의 상대방의 위치가 멀다는 것을 의미할 수 있으며, 이에 따라 수신된 화상회의 음성신호가 작게 출력될 수 있으므로, 본 발명에 따른 화상회의 장치(200)는 볼륨 게인을 자동으로 높이어 화상회의 음성신호가 적당한 크기로 출력되도록 조절할 수 있다.

또한, 도 4d에서 화면(440)에 객체 영역이 확인되지 않으므로, 제어부(215)는 화상회의 화면을 뮤트시킬 수 있다. 추가적으로, 제어부(215)는 네트워크 인터페이스부(240) 또는 튜너부(250)로부터 수신된 방송신호가 화면에 디스플레이되도록 제어할 수 있다. 향후, 수신된 화상회의 영상에 스킨 영역이 확인되면, 제어부(215)는 화상회의 영상이 화면에 다시 디스플레이되도록 제어할 수 있다.

도 5는 볼륨 게인 조절을 위한 참조 테이블의 일 실시예를 도시한 도면이다.

도 5를 참조하면, 저장부(245)는 볼륨 게인 조절을 위한 참조 테이블(500)을 저장할 수 있다. 참조 테이블(500)은 범위에 따라 볼륨 게인의 조절량을 지시하는 값을 포함할 수 있다.

참조 테이블(400)은 객체 영역이 영상 프레임의 전체 영역에서 차지하는 비율의 범위를 '상', '중', '하'로 구분하여 해당 범위 내에서의 볼륨 게인의 조절량을 지시하는 값을 포함한다. 여기서 비율의 범위의 구분은 디폴트로 설정될 수 있고, 사용자 명령에 따라 다르게 설정될 수 있다. 일예로 '상'은 비율이 80%이상의 범위일 수 있고, '중'은 비율이 80%미만에서 40%초과의 범위 일 수 있으며, '하'는 비율이 40%이하의 범위일 수 있다. 여기서 볼륨 게인의 조절량은 제품 생산 시에 설정된 값일 수 있고, 사용자에 의해 조절된 값일 수 있다. 또한 수정된 조절량을 제품 생산 시에 설정된 값으로 초기화할 수 있다. 이때, 화상회의 장치는 수정된 조절량을 제품 생산 시에 설정된 값으로 초기화하기 위한 위 메뉴를 제공할 수 있다.

제어부(215)는 참조 테이블(500)을 이용하여 볼륨 게인을 조절할 수 있다. 객체 영역의 비율이 '상'에 포함된 경우에는, 제어부(215)는 볼륨 게인을 0.9 수준으로 낮춘다. 객체 영역의 비율이 '중'에 포함된 경우에는, 제어부(215)는 볼륨 게인을 1.0으로 유지한다. 그리고 객체 영역의 비율이 '하'에 포함된 경우에는, 제어부(215)는 볼룸 게인을 1.1 수준으로 높인다.

도 6은 본 발명에 따른 화상회의 서비스 제공 방법에 대한 바람직한 일 실시예의 수행과정을 도시한 순서도이다.

도 6을 참조하면, 네트워크 인터페이스부(240)는 영상신호 및 음성신호를 수신한다(S600). 여기서 영상신호는 화상회의 영상이 압축된 신호일 수 있고, 음성신호는 화상회의 음성이 압축된 신호일 수 있다. 네트워크 인터페이스부(240)는 서버(110) 또는 화상회의 장치(121, 123, 125)로부터 영상신호 및 음성신호를 수신할 수 있고, 영상신호 및 음성신호와 함께 데이터 신호를 수신할 수 있고, 이들이 다중화된 신호를 수신할 수 있다.

영상 처리부(235)는 수신한 영상신호를 복원하고, 음성 처리부(210)는 음성신호를 복원한다(S605). 영상 처리부(270) 및 음성 처리부(210)는 각각 영상신호 및 음성신호가 압축된 알고리즘에 따라 해당 알고리즘을 이용하여 영상신호 및 음성신호를 복원할 수 있고, 압축 알고리즘으로 H.261, H.263 및 H.264가 사용될 수 있다.

제어부(215)는 자동 볼륨 조절이 설정되어 있는지 여부를 확인한다(S610). 여기서 자동 볼륨 조절이 디폴트로 설정되어 있을 수 있다. 또한 제어부(215)는 사용자 명령에 따라 자동 볼륨 조절의 설정을 해제하거나 다시 설정할 수 있다.

제어부(215)는 복원된 영상신호에 포함된 영상 프레임에서 객체 영역을 확인한다(S615). 여기서 객체 영역은 얼굴 영역 및 스킨 영역 중 하나일 수 있다.

객체 영역이 확인된 경우에는, 제어부(215)는 확인된 객체 영역이 해당 영상 프레임에서 차지하는 비율을 산출한다(S620).

제어부(215)는 산출된 비율이 어느 범위에 속하는지 여부를 확인한다(S625). 여기서 제어부(215)는 산출된 비율이 사전에 설정된 제1 비율값 이상인지 여부를 확인할 수 있고, 사전에 설정된 제2 비율값보다 큰지 여부를 확인할 수 있다.

산출된 비율이 사전에 설정된 제1 비율값 이상인 경우에는, 제어부(215)는 볼륨 게인을 감소시킨다(S630). 여기서, 제어부(215)는 도 5에 도시된 참조 테이블(500)을 이용하여 볼륨 게인을 조절할 수 있다.

산출된 비율이 산전에 설정된 제1 비율값보다 작고, 사전에 설정된 제2 비율값보다 큰 경우에는, 제어부(215)는 볼륨 게인을 유지한다(S635). 여기서, 제어부(215)는 도 5에 도시된 참조 테이블(500)을 이용하여 볼륨 게인을 조절할 수 있다.

산출된 비율이 사전에 설정된 제2 비율값 이하인 경우에는, 제어부(215)는 볼륨 게인을 증가시킨다(S640). 여기서, 제어부(215)는 도 5에 도시된 참조 테이블(500)을 이용하여 볼륨 게인을 조절할 수 있다.

디스플레이부(220)는 조절된 볼륨 게인에 따라 복원된 음성신호를 디스플레이한다(S645).

객체 영역이 확인되지 않는 경우에는, 제어부(215)는 화상화의 영상이 디스플레이되는 화면이 뮤트되도록 제어한다(S650). 여기서 제어부(215)는 방송 영상이 자동으로 디스플레이되도록 제어할 수 있다. 상기 방송 영상을 포함하는 방송 신호는 네트워크 인터페이스부(240) 및 튜너부(250)에 의해 수신될 수 있고, 케이블 방송 영상, 지상파 방송 영상, 위성 방송 영상, IPTV 방송 영상 중 하나일 수 있다.

본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 장치에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 장치에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.

이상에서 본 발명의 바람직한 실시예에 대해 도시하고 설명하였으나, 본 발명은 상술한 특정의 바람직한 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능한 것은 물론이고, 그와 같은 변경은 청구범위 기재의 범위 내에 있게 된다.

Claims (20)

1. 적어도 하나의 외부 디바이스로부터 화상회의의 영상신호 및 음성신호를 수신하는 단계;
   상기 적어도 하나의 외부 디바이스로부터 수신된 화상회의의 영상신호에 포함된 영상 프레임에서 객체 영역을 추출하는 단계;
   상기 추출된 객체 영역이 상기 영상 프레임에서 차지하는 비율을 결정하는 단계;
   상기 결정에 따라, 상기 비율이 사전에 설정된 상한값 이상인 경우에는 볼륨 게인(Volume Gain)을 감소시키고, 상기 비율이 사전에 설정된 하한값 이하인 경우에는 상기 볼륨 게인을 증가시키고, 상기 비율이 상기 상한값 내지 상기 하한값인 경우에는 상기 볼륨 게인을 유지하도록 조절하는 단계; 및
   상기 조절된 볼륨 게인에 따라, 변조된 음성신호를 출력하는 단계;를 포함하는 것을 특징으로 하는 화상회의 서비스 제공 방법.
2. 제 1항에 있어서,
   상기 객체 영역은 얼굴 영역 및 스킨 영역 중 하나인 것을 특징으로 하는 화상회의 서비스 제공 방법.
3. 제 1항에 있어서,
   상기 객체 영역을 확인하는 단계는,
   상기 영상 프레임의 스킨 칼라(Skin Color) 정보를 산출한 단계; 및
   상기 산출된 스킨 칼라 정보를 기초로 객체 영역 확인하는 단계;를 더 포함하는 것을 특징으로 하는 화상회의 서비스 제공 방법.
4. 삭제
5. 삭제
6. 삭제
7. 제 1항에 있어서,
   자동 볼륨 조절이 설정된 경우에, 상기 볼륨 게인이 조절되는 것을 특징으로 하는 화상회의 서비스 제공 방법.
8. 제 1항에 있어서,
   상기 객체 영역이 확인되지 않는 경우에는, 방송 영상을 디스플레이하는 단계;를 더 포함하는 것을 특징으로 하는 화상회의 서비스 제공 방법.
9. 제 1항에 있어서,
   RF(Radio Frequency) 방송 신호를 수신하는 단계;
   상기 수신된 RF 방송 신호를 복조하는 단계;
   상기 복조된 RF 방송 신호를 영상신호, 음성신호 및 데이터 신호로 역다중화하는 단계; 및
   상기 역다중화된 영상신호 및 상기 화상회의 영상 중 적어도 하나를 선택적으로 디스플레이하는 단계;를 더 포함하는 것을 특징으로 하는 화상회의 서비스 제공 방법.
10. 제 1항에 있어서,
    방송 신호를 포함하는 IP 패킷을 수신하는 단계; 및
    상기 수신된 방송 신호 및 상기 화상회의의 영상신호 중 적어도 하나를 선택적으로 디스플레이하는 단계;를 더 포함하는 것을 특징으로 하는 화상회의 서비스 제공 방법.
11. 적어도 하나의 외부 디바이스로부터 화상회의의 영상신호 및 음성신호를 수신하는 네트워크 인터페이스부;
    상기 적어도 하나의 외부 디바이스로부터 수신된 음성신호를 처리하는 음성 처리부; 그리고
    상기 네트워크 인터페이스부 및 상기 음성 처리부를 제어하는 컨트롤러를 포함하되,
    상기 컨트롤러는,
    상기 적어도 하나의 외부 디바이스로부터 수신된 화상회의의 영상신호에 포함된 영상 프레임에서 객체 영역을 추출하고, 상기 추출된 객체 영역이 상기 영상 프레임에서 차지하는 비율을 결정하고,
    상기 결정에 따라, 상기 비율이 사전에 설정된 상한값 이상인 경우에는 볼륨 게인(Volume Gain)을 감소시키고, 상기 비율이 사전에 설정된 하한값 이하인 경우에는 상기 볼륨 게인을 증가시키고, 상기 비율이 상기 상한값 내지 상기 하한값인 경우에는 상기 볼륨 게인을 유지하도록 조절하고, 그리고
    상기 조절된 볼륨 게인(Volume Gain)에 따라, 변조된 음성신호가 출력되도록 상기 음성 처리부를 제어하는 것을 특징으로 하는 화상회의 장치.
12. 제 11항에 있어서,
    상기 객체 영역은 얼굴 영역 및 스킨 영역 중 하나인 것을 특징으로 하는 화상회의 장치.
13. 제 11항에 있어서,
    상기 컨트롤러는,
    상기 영상 프레임의 스킨 칼라(Skin Color) 정보를 산출하고 상기 산출된 스킨 칼라 정보를 기초로 상기 객체 영역을 확인하는 것을 특징으로 하는 화상회의 장치.
14. 삭제
15. 삭제
16. 삭제
17. 제 11항에 있어서,
    상기 컨트롤러는,
    자동 볼륨 조절이 설정된 경우에, 상기 볼륨 게인을 조절하는 것을 특징으로 하는 화상회의 장치.
18. 제 11항에 있어서,
    상기 컨트롤러는,
    상기 객체 영역이 확인되지 않는 경우에는, 방송 영상이 디스플레이되도록 제어하는 것을 특징으로 하는 화상회의 장치.
19. 제 11항에 있어서,
    RF(Radio Frequency) 방송 신호를 수신하는 튜너;
    상기 수신된 RF 방송 신호를 복조하여 스트림 신호를 출력하는 복조부;
    상기 출력된 스트림 신호를 영상신호, 음성신호 및 데이터 신호로 역다중화하는 역다중화부; 및
    설정된 서비스 모드에 따라 상기 수신된 화상회의 영상 및 상기 역다중화된 영상신호 중 적어도 하나를 디스플레이하는 디스플레이부;를 더 포함하는 것을 특징으로 하는 화상회의 장치.
20. 제 11항에 있어서,
    상기 네트워크 인터페스부는 방송 신호를 포함하는 IP 패킷을 더 수신하고,
    상기 컨트롤러는 상기 수신된 방송 신호 및 상기 화상회의의 영상신호 중 적어도 하나가 선택적으로 디스플레이되도록 제어하는 것을 특징으로 하는 화상회의 장치.

Images