[go: up one dir, main page]

KR100561228B1 - 보이스엑스엠엘 문서를 엑스에이치티엠엘플러스보이스문서로 변환하기 위한 방법 및 이를 이용한 멀티모달서비스 시스템 - Google Patents

보이스엑스엠엘 문서를 엑스에이치티엠엘플러스보이스문서로 변환하기 위한 방법 및 이를 이용한 멀티모달서비스 시스템 Download PDF

Info

Publication number
KR100561228B1
KR100561228B1 KR1020030095258A KR20030095258A KR100561228B1 KR 100561228 B1 KR100561228 B1 KR 100561228B1 KR 1020030095258 A KR1020030095258 A KR 1020030095258A KR 20030095258 A KR20030095258 A KR 20030095258A KR 100561228 B1 KR100561228 B1 KR 100561228B1
Authority
KR
South Korea
Prior art keywords
xhtml
voice
voicexml
tag
document
Prior art date
Application number
KR1020030095258A
Other languages
English (en)
Other versions
KR20050063996A (ko
Inventor
김지은
박지은
박준석
한동원
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020030095258A priority Critical patent/KR100561228B1/ko
Priority to US10/824,483 priority patent/US20050137875A1/en
Publication of KR20050063996A publication Critical patent/KR20050063996A/ko
Application granted granted Critical
Publication of KR100561228B1 publication Critical patent/KR100561228B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M3/00—Automatic or semi-automatic exchanges
    • H04M3/42—Systems providing special services or facilities to subscribers
    • H04M3/487—Arrangements for providing information services, e.g. recorded voice services or time announcements
    • H04M3/493—Interactive information services, e.g. directory enquiries ; Arrangements therefor, e.g. interactive voice response [IVR] systems or voice portals
    • H04M3/4938—Interactive information services, e.g. directory enquiries ; Arrangements therefor, e.g. interactive voice response [IVR] systems or voice portals comprising a voice browser which renders and interprets, e.g. VoiceXML
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/80—Information retrieval; Database structures therefor; File system structures therefor of semi-structured data, e.g. markup language structured data such as SGML, XML or HTML
    • G06F16/84—Mapping; Conversion
    • G06F16/88—Mark-up to mark-up conversion

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Telephonic Communication Services (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 발명은 VoiceXML기반 음성 서비스를 XHTML(eXtensible HyperTtext Markup Language)기반 웹 인터페이스와 VoiceXML 기반 음성 인터페이스를 지원하는 XHTML+ Voice기반 멀티모달 서비스로 변환하는 방법 및 시스템에 관한 것이다. 본 발명의 변환 방법은 VoiceXML 문서를 파싱한 트리를 상위 태그부터 하위 태그까지 모두 검색하면서 XHTML+Voice 트리를 초기화하는 단계; 태그를 확인하여 태그가 <memu>이면 XHTML의 <a> 태그로 변환하는 단계; 태그를 확인하여 태그가 <grammar>이면 XHTML의 <input type=radio> 태그로 변환하는 단계; 및 태그를 확인하여 태그가 <form>이면 XHTML의 <form>을 XHTML+Voice 트리에 추가한 후 <form> 태그를 처리하는 단계를 포함한다. 또한, 본 발명에 따른 시스템은 프록시 서버(Proxy Server)와 같은 별도의 외부 시스템이나 통상의 사용자 디바이스의 XHTML+Voice 브라우저에 상기 변환 방법을 구현한 트랜스코더(Transcoder) 또는 트랜스코더의 부분 모듈(Module)을 탑재하는 모습으로 나타날 수 있다.
VoiceXML, multimodal, XHTML+Voice, XHTML+Voice, 마크업 언어, 변환

Description

보이스엑스엠엘 문서를 엑스에이치티엠엘플러스보이스 문서로 변환하기 위한 방법 및 이를 이용한 멀티모달 서비스 시스템{Method for VoiceXML to XHTML+Voice Conversion and Multimodal Service System using the same}
도 1은 전화망상의 VoiceXML기반 음성 서비스 방식을 설명하기 위한 도면.
도 2는 본 발명에 따른 트랜스코더가 프록시 서버에 구현된 경우를 도시한 구성 블럭도.
도 3은 본 발명에 따른 트랜스코더의 한 모듈인 VoiceXML-to-XHTML+Voice 변환기가 XHTML+Voice 브라우저에 내장된 경우를 도시한 구성 블럭도.
도 4는 본 발명에 따른 트랜스코더의 한 모듈인 VoiceXML-to-XHTML+Voice 변환기의 알고리즘을 도시한 순서도.
도 5는 본 발명에 따른 변환 전의 예제 음성 시나리오와 변환 후 XHTML+Voice 브라우저에서 실행한 화면을 도시한 도면.
도 6은 도 5의 예제 음성 시나리오의 VoiceXML 문서 구조를 도시한 도면.
도 7은 도 5의 예제 음성 시나리오의 VoiceXML 트리와 본 발명에 따라 변환하여 생성된 XHTML+Voice 트리를 도시한 도면.
도 8은 도 7의 XHTML+Voice 트리에서 생성된 XHTML+Voice 문서 구조를 도시 한 도면.
<도면의 주요부분에 대한 부호의 설명>
210: 사용자 211: XHTML+Voice 브라우저
220: 프록시 서버 230: 트랜스코더
231: VoiceXML 파서 232: VoiceXML-to-XHTML+Voice 변환기
233: XHTML+Voice 문서 생성기 240: 웹 서버
242: VoiceXML 응용
본 발명은 VoiceXML(Voice eXtensible Markup Language)기반 음성 서비스를 XHTML(eXtensible HyperTtext Markup Language)기반 웹 인터페이스와 VoiceXML 기반 음성 인터페이스를 지원하는 XHTML+Voice 기반 멀티모달 서비스(Multimodal Service)로 변환하는 방법 및 시스템에 관한 것이다.
일반적으로, VoiceXML는 음성 인식(Speech Recognition) 및 음성 합성(Text to Speech) 기술과 컴퓨터 전화통합(CTI:Computer Telephony Integration) 기술에 웹 정보 처리 기술을 접목한 음성 대화 시나리오 저작 표준 언어이다. 즉, VoiceXML은 XML에 기반을 둔 마크업 언어(Markup language)로서 유선, 이동전화를 이용해 인터넷 정보를 음성으로 검색하고 들을 수 있는 음성 다이얼로그(spoken dialog)를 정의하는데 사용되는 언어이다. VoiceXML 문서는 노트북(Notebook), 피시(Desktop PC) 등 인터넷 접속장치 없이 유선, 이동전화를 통해서 인터넷상의 전자우편, 날씨정보, 교통정보 등의 내용을 검색할 수 있으며 웹 페이지(Web page)의 내용을 음성으로 제공할 수 있다.
따라서, VoiceXML은 웹을 통해 실시간으로 서비스 창출 및 유지 보수를 할 수 있어 기존 자동응답서비스(ARS:Automatic Response Services)와, 상호응답(IVR:Interactive Voice Response) 등의 대화형 음성 서비스 시스템을 대체할 차세대 음성 서비스의 핵심 기술로 인정받고 있다.
도 1은 전화망상의 VoiceXML 기반 음성 서비스 방식을 설명하기 위한 도면으로서, 사용자(102-1,102-2), 공중전화망(PSTN: 104), IVR(106), 인터넷(108), 음성 게이트웨이(110), 웹 서버(120)가 도시되어 있다. 사용자(102-1)는 전화기나 이동전화기를 이용하여 음성 웹 서비스를 사용할 수 있고, 사용자(102-2)는 PC를 통해 웹 서버(120)에 접속하여 통상의 웹서비스를 사용할 수 있다. 웹 서버(120)는 통상의 웹 페이지와 함께 VoiceXML 응용(122)을 구비하여 인터넷(108)을 통해 사용자(102-2)에게 웹 페이지를 제공함과 아울러 음성 게이트웨이(110)의 HTTP 요구에 따라 VoiceXML 문서를 제공한다. 음성 게이트웨이(110)는 VoiceXML 브라우저(112)와 음성인식/합성기(114), 스크립트 엔진(116) 등을 구비하여 사용자(102-1)의 요구에 따라 웹 서버(120)에 HTTP 요구를 통해 음성 웹 문서를 요구하고, VoiceXML문서를 받으면 VoiceXML 브라우저(112)를 통해 이를 실행한 후 음성인식/합성기(114)로 공중전화망(104)을 통해 사용자에게 전달한다.
이와 같은 전화망을 통한 음성 웹 서비스 동작은 다음과 같다.
먼저, 사용자(102-1)는 유선 전화기 또는 이동 통신 단말기를 통하여 대표번호로 음성 게이트웨이(Voice Gateway)(110)에 접속한다. 음성 게이트웨이(110)의 VoiceXML 브라우저(112)는 VoiceXML 문서를 웹 서버(120)에 요청한다. 웹 서버(120)는 해당 VoiceXML 문서를 전송한다. 그리고 음성 게이트웨이의 VoiceXML 브라우저(112)는 전송된 VoiceXML 문서를 해석하여 실행한 음성 출력을 전화망(104)을 통하여 사용자(102-1)에게 제공한다.
한편, 현재 많은 분야(예를 들어, 증권, 카드, 유통 등)에서 다양한 서비스를 제공하는 VoiceXML 기반 음성 서비스를 PDA나 스마트폰, PC 등에서 인터넷과 브라우저를 통해 서비스 받고자 한다면, VoiceXML에 대한 소정의 변환 과정이 필요하다. 이때 인터넷과 브라우저를 통해 서비스 받는다는 것은 디바이스의 성격이 음성 이외의 인터페이스도 제동됨을 의미하기 때문에 변환 과정에서 사용자 인터페이스의 변화도 고려되어야 한다.
이러한 요구를 충족시킬 수 있는 마크업 언어로 XHTML+Voice가 있다. 이는 XHTML기반 웹 서비스와 VoiceXML(VoiceXML 2.0의 서브셋)기반 음성 서비스를 결합한 멀티모달 웹 서비스를 개발하기 위한 목적으로 제안되었다. XHTML+Voice 문서 작성은 기존의 XHML 문서 작성 방법 및 VoiceXML 문서 작성 방법과 비슷하지만 음성과 연관되는 태그(tag)들은 XML 이벤트와 XHTML+Voice 이벤트를 통해 연동되도록 하고 있다. 따라서 현재 제공되는 VoiceXML 기반 음성 서비스를 PDA나 스마트폰, PC 등에서 인터넷과 브라우저를 통해 멀티모달 서비스로 받고 자 한다면, 기존의 VoiceXML 문서를 XHTML+Voice 문서로 변환하는 과정이 필요하다.
그런데 XHTML+Voice에서 지원되는 음성(Voice) 태그는 VoiceXML의 서브셋이기 때문에 XHTML+Voice 태그와 VoiceXML 태그는 1:1 매칭으로 변환할 수 없는 문제점이 있다. 또한 VoiceXML 문서는 순차적 구조로서 순차적 입력만을 처리하는데, 이를 병렬 구조를 갖는 XHTML+Voice 문서로 적절히 변경하여야 한다.
본 발명은 상기와 같은 문제점을 해결하기 위해, 소정의 변환 알고리즘으로 VoiceXML 문서를 XHTML+Voice 문서로 변환하는 변환방법 및 이를 이용한 멀티모달 시스템 구성에 그 목적이 있다.
상기와 같은 목적을 달성하기 위하여 본 발명의 변환방법은 VoiceXML 문서를 파싱하여 생성된 VoiceXML 트리를 XHTML+Voice 트리로 변환하는 방법에 있어서, 상기 VoiceXML 트리를 상위 태그부터 하위 태그까지 모두 검색하면서, XHTML+Voice 트리를 초기화하는 단계; 태그를 확인하여 태그가 <memu>이면 XHTML+Voice의 <a> 태그로 변환하는 단계; 태그를 확인하여 태그가 <grammar>이면 XHTML+Voice의 <input type=radio> 태그로 변환하는 단계; 및, 태그를 확인하여 태그가 <form>이면 XHTML+Voice의 <form>을 XHTML+Voice 트리에 추가한 후 <form> 태그를 처리하는 단계를 포함하는 것을 특징으로 한다.
또한, 상기와 같은 목적을 달성하기 위하여 본 발명의 멀티모달 서비스 방법은 통상의 XHTML+Voice 브라우저가 탑재된 사용자 단말기와, 프록시 서버와, VoiceXML 문서를 제공하는 웹 서버를 포함하는 시스템에 있어서, 사용자 단말기에서 XHTML+Voice 브라우저를 구동하여 HTTP 요구(request)를 통해 웹 서버로 VoiceXML 문서를 요청하는 단계; 상기 웹 서버가 VoiceXML 문서를 상기 프록시 서버에 전송하는 단계; 상기 프록시 서버에 탑재된 VoiceXML 파서는 전송받은 VoiceXML문서를 트리 구조로 구성하여 VoiceXML-to-XHTML+Voice 변환기로 전달하는 단계; VoiceXML-to-XHTML+Voice 변환기는 전송된 VoiceXML 트리를 소정의 알고리즘으로 새로운 XHTML+Voice 트리로 변환하여 XHTML+Voice 생성기로 전달하는 단계; XHTML+Voice 문서 생성기는 XHTML+Voice 트리를 입력받아 XHTML+Voice 문서를 생성하여 상기 XHTML+Voice 브라우저로 전송하는 단계; 및, 상기 사용자의 XHTML+Voice 브라우저가 XHTML+Voice 문서를 해석하여 실행한 후 음성 및 그래픽을 출력하는 단계를 포함하는 것을 특징으로 한다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 자세히 설명하기로 한다.
본 발명에 따라 VoiceXML 문서를 XHTML+Voice 문서로 변환하는 모듈(이하, 'VoiceXML-to-XHTML+Voice 변환기'라 한다)은 사용자 디바이스의 XHTML+Voice 브라우저에 내장될 수 있다(제2 실시예). 만약, 본 발명의 VoiceXML-to-XHTML+Voice 변환기를 탑재한 XHTML+Voice 브라우저를 사용하지 않는 사용자 디바이스에서 음성 서비스를 제공받고자 한다면, 본 발명의 VoiceXML-to-XHTML+Voice 변환기를 구비한 트랜스코더가 동작하는 프록시 서버(Proxy Server)를 통해 변환된 XHTML+Voice 문서를 전송받아야 한다(제1 실시예).
[제1 실시예]
도 2는 본 발명의 트랜스코더가 프록시 서버에 내장된 경우로서, 사용자(210)와 프록시 서버(220), 및 웹 서버(240)의 관계가 도시되어 있다. 사용자(210)는 XHTML+Voice 브라우저(211)와 음성인식기(215), 음성합성기(216), 스크립트 엔진(Script Engine; 217)을 포함하고 있고, 프록시 서버(Proxy Server; 220)는 트랜스코더(Transcoder; 230)를 구비하고 있는데 트랜스코더(230)는 VoiceXML 파서(231)와 VoiceXML-to-XHTML+Voice 변환기(232), XHTML+Voice 문서 생성기(233)로 이루어진다. 그리고 웹 서버(Web Server; 240)는 VoiceXML 응용(Application; 242)을 구비하고 있다.
도 2를 참조하면, 통상의 XHTML+Voice 브라우저(211)는 XHTML문서를 XHTML 트리로 구성하는 XHTML 파서(Parser; 213), VoiceXML 문서를 VoiceXML 트리로 구성하는 VoiceXML 파서(212), 각 트리를 실행하여 인터랙션하는 XHTML+Voice 랜더러(Render; 214)로 구성된다. 이러한 XHTML+Voice 브라우저(211)는 스크립트 엔진(217)을 이용하여 ECMA 스크립트를 처리하고, 음성 합성기(216)를 이용하여 음성을 출력하며, 음성 인식기(215)를 이용하여 음성 입력을 처리한다. 또한 XHTML+Voice 브라우저(211)는 텍스트 입력(터치 스크린, 하드웨어 키보드를 포함)도 처리한다.
서비스 사업자는 음성 서비스를 저작하여 웹 서버(240) 등을 통해 서비스하 는데, 웹 서버(240)는 VoiceXML 응용(242)을 통해 프록시 서버(220)로부터 HTTP 요구(request)가 수신되면 해당 VoiceXML 문서를 전송해 준다.
프록시 서버(220)는 본 발명에 따라 VoiceXML문서를 XHTML+Voice 문서로 변환해주는 트랜스코더(230)를 포함하는데, 본 발명의 트랜스코더(230)는 VoiceXML 트리를 생성하는 VoiceXML 파서(231)와 소정의 변환 알고리즘을 구현한 VoiceXML-to-XHTML+Voice 변환기(232)와 XHTML+Voice 트리를 XHTML+Voice 문서로 변환하기 위한 XHTML+Voice 문서 생성기(Generator)(233)로 구성된다.
이와 같은 본 발명의 트랜스코더(230)를 이용하여 통상의 XHTML+Voice 브라우저(211)를 사용하는 사용자(210)에게 멀티모달 서비스를 제공하는 절차는 다음과 같다.
사용자(210)는 PDA 또는 스마트 폰과 같은 단말기를 통하여 XHTML+Voice 브라우저(211)를 구동한다. 이어 HTTP 요구(request)을 통해 웹 서버(240)로 VoiceXML 문서를 요청한다. 웹 서버(240)는 VoiceXML 문서를 프록시 서버(220)로 전송한다.
프록시 서버(220)에 탑재된 VoiceXML 파서(231)는 전송받은 VoiceXML문서를 트리 구조로 구성하고, 생성된 VoiceXML 트리를 VoiceXML-to-X+V 변환기(232)로 전달한다.
VoiceXML-to-XHTML+Voice 변환기(232)는 전송된 VoiceXML 트리를 소정의 알고리즘으로 새로운 XHTML+Voice 트리로 변환하고, 변환된 XHTML+Voice 트리를 XHTML+Voice 문서 생성기(233)로 전달한다. XHTML+Voice 문서 생성기(233)는 XHTML+Voice 트리를 입력받아 XHTML+Voice 문서를 생성하고, XHTML+Voice 브라우저(211)로 전송한다.
이에 따라 사용자(210)의 XHTML+Voice 브라우저(211)는 XHTML+Voice 문서를 해석하여 실행한 후 음성 및 그래픽으로 출력한다.
[제2 실시예]
도 3은 본 발명의 VoiceXML-to-XHTML+Voice 변환기가 XHTML+Voice 브라우저에 내장된 경우를 도시한 도면으로서, 사용자(310)와 웹 서버(240)의 관계가 도시되어 있다.
도 3을 참조하면, 사용자(310)의 단말기에는 XHTML+Voice 브라우저(320)와 음성인식/합성기(TTS & SRS; 332), 스크립트 엔진(Script Engine; 334)이 탑재되어 있고, XHTML+Voice 브라우저(320)는 VoiceXML 파서(321), VoiceXML-to-XHTML+Voice 변환기(322), XHTML+Voice 랜더러(323)를 포함하고 있다. VoiceXML 파서(321)는 VoiceXML문서에서 VoiceXML 트리를 생성하고, VoiceXML-to-XHTML+Voice 변환기(322)는 소정의 변환 알고리즘에 따라 VoiceXML 트리에서 XHTML+Voice 트리를 생성하고, XHTML+Voice 랜더러(Render; 323) XHTML+Voice 트리를 실행하여 음성인식/합성기(332)를 통해 음성으로 출력한다. 그리고 스크립트 엔진(334)은 ECMA 스크립트를 처리한다.
이러한 본 발명의 XHTML+Voice 브라우저(320)를 이용하여 멀티모달 서비스를 제공하는 절차는 다음과 같다.
사용자(310)는 PDA 또는 스마트 폰과 같은 단말기를 통하여 XHTML+Voice 브 라우저(320)를 구동한다. XHTML+Voice 브라우저(320)는 HTTP 호출을 통해 웹 서버(240)로 VoiceXML 문서를 요청한다. 이에 따라 웹 서버의 VoiceXML 응용(242)은 해당 VoiceXML 문서를 XHTML+Voice 브라우저(320)로 전송한다.
XHTML+Voice 브라우저(320)의 VoiceXML 파서(321)는 전송 받은 VoiceXML 문서를 트리 구조로 구성하고, 생성된 VoiceXML 트리를 VoiceXML-to-XHTML+Voice 변환기(322)로 전달한다. VoiceXML-to-XHTML+Voice 변환기(322)는 전송된 VoiceXML 트리를 소정의 알고리즘으로 새로운 XHTML+Voice 트리로 변환하고 이를 XHTML+Voice 랜더러(323)로 전달한다. XHTML+Voice 랜더러(323)는 XHTML+Voice 트리를 해석하여 실행한 후 음성 및 그래픽으로 출력한다.
도 4는 본 발명에 따른 VoiceXML-to-XHTML+Voice 변환기의 변환 알고리즘을 도시한 순서도이다.
도 4를 참조하면, VoiceXML 트리를 상위 태그부터 하위 태그까지 모두 검색하면서, XHTML+Voice 트리를 초기화 한다(401,402). 이중 메인 다이얼로그는 새로 생성되는 XHTML 트리이다.
태그를 확인하여 처음 태그가 <form>, <menu>, <grammar>인지 확인한다(403).
만일, 태그가 <memu>이면 XHTML의 <a> 태그로 변환한 후 VoiceXML 트리를 삭제한다(404~406).
만일, 태그가 <grammar>이면 XHTML의 <input type=radio> 태그로 변환한 후 이벤트/핸들러를 정의한다(407~409).
만일, 태그가 <form>이면 XHTML의 <form>을 XHTML 트리에 추가한다(411). 하나의 <form> 태그에 속하는 <block>과 <prompt> 태그는 PC DATA이면 XHTML의 <p> 태그로 변환한 후 이벤트/핸들러를 정의한다(418~421).
하나의 <form>과 <field> 태그에 속한 <prompt> 태그는 XHTML의 <label> 태그로 변환하고, 하위 태그로 <input type=text> 태그를 생성한 후 이벤트/핸들러를 정의하고 VoiceXML을 수정한다(412~417).
하나의 <form>과 <field> 또는 <block>에 속하는 <submit> 태그는 XHTML의 <input type=submit> 태그로 변환한 후 이벤트/핸들러를 정의하고, VoiceXML을 수정한다(422~425). 이와 같이 모든 과정마다 적절한 이벤트가 추가되어야 하고, 때로는 대상 트리인 VoiceXML 트리를 수정하거나 삭제하여야 한다.
이와 같은 본 발명의 변환 알고리즘을 이해하기 쉽도록 하나의 예제를 통해 확인해보면 다음과 같다.
도 5는 본 발명에 따른 변환 전의 예제 음성 시나리오와, 변환 후에 XHTML+Voice 브라우저에서 실행한 화면의 예를 도시한 도면이다.
도 5를 참조하면, 변환 전의 예제 음성 시나리오(510)는 항공 예약과 관련된 시나리오로서, 사용자는 PDA나 스마트폰으로 인터넷을 통해 제공되는 음성 서비스 중 하나인 비행기 예약 서비스를 받고자 한다. 서비스 사업자가 제공하는 비행기 예약 서비스의 시나리오(510)는 사용자 이름("What is your name"), 출발지역("The city of your departure"), 도착지역("The city of your destination"), 출발 예정일("The date of your departure") 등을 차례로 입력 받아 처리하는 구성으로 되어 있다.
그리고 이와 같은 시나리오를 갖는 VoiceXML 문서는 본 발명에 따라 변환된 후 XHTML+Voice 브라우저에서 실행되어 도면의 오른쪽과 같이 화면(520)으로 나타난다.
XHTML+Voice 브라우저 화면(520)은 기본으로 음성 사용 모드를 지원하기 때문에 사용자가 임의의 입력 창을 선택(click & focus)하면, 해당 질문을 음성으로 읽어주고 적절한 값을 음성으로 입력받기 위해 대기한다. 만약, 음성 취소(voice_cancel) 버튼(522)을 클릭하여 음성 취소 모드를 선택한다면, 사용자는 텍스트만을 이용하여 입력하여야 한다. 모든 입력이 끝나면, 처리(submit) 버튼(521)을 클릭하여 입력 내용을 다음 단계의 응용 프로그램에게 전달한다
도 6은 도 5의 예제 음성 시나리오의 VoiceXML 문서 구조를 보여주는 도면으로서, 예제 음성 시나리오의 VoiceXML 문서는 메인 다이얼로그인 app.vxml 문서(610)와, 서브 다이얼로그인 sub_app.vxml 문서(620)로 이루어진다.
도 6을 참조하면, 메인 다이얼로그(Main-dialog)인 app.vxml 문서(610)는 하나의 <form>에 <field a>(611), <subdialog>(612), <field b>(613), <submit>(614) 태그로 구성되어 있다. 서브 다이얼로그(Sub-dialog)인 sub_app.vxml 문서(620)는 하나의 <form>에 <field c>(621), <field d>(622), <return>(623) 태그로 구성되어 있다. 본 발명의 실시예에서 "Welcome to the Flight Reservation Service" 는 <block> 태그에 속하지만 설명에서는 제외한다.
도 7은 도 5의 예제 음성 시나리오의 VoiceXML 트리와 이를 본 발명의 변환 알고리즘을 적용하여 생성한 XHTML+Voice 트리를 도시한 도면이다.
도 7을 참조하면, 예제 음성 시나리오의 VoiceXML 트리는 app 트리(710)와 sub_app 트리(720)로 이루어지고, 본 발명의 변환 알고리즘에 의해 new 트리(730), 변형된 app 트리(710'), 변형된 sub_app 트리(720')로 생성 또는 변형된 것을 알 수 있다.
app 트리(710)는 하나의 form이 제1 필드(field), 서브 다이얼로그(subdialog), 제2 필드(field), 블록(block)으로 이루어지고, sub_app 트리(720)는 하나의 form이 다시 2개의 필드(field)로 이루어진다.
도 8은 도 7의 XHTML+Voice 트리에서 생성된 XHTML+Voice 문서 구조를 보여주는 도면이다.
도 8을 참조하면, 메인 다이얼로그인 new.vxml 문서(810)는 최상위 태그 <html>에 <head> 태그(820), <body> 태그(830)를 기본 구조로 갖는다.
<head> 태그(820)는 음성 문서의 <field> 태그와 <body>의 <input> 태그를 동기화(synchronization)(802)하기 위한 <xv:sync> 태그(821)와, 음성 취소 모드를 처리하는 <xv:cancel> 태그(821)로 구성된다.
<body> 태그(830)는 하나의 <form> 태그에 음성 문서의 <field> 태그에서 변환된 <input type=text a>(831), <input type=text c>(832), <input type=text d>(833), <input type=text b> 태그(834)와 음성 문서의 <submit> 태그에서 변환된 <input type=submit> 태그(835), 그리고 음성 취소 모드를 위한 <input type=reset> 태그(836)로 구성된다.
app.vxml 문서(840)는 <form a>(841)에 <field a>, <form b>(842)에 <field b> 태그를 갖는 서브 다이얼로그로 수정되었다. sub_app.vxml 문서(850)는 <form c>(851)에 <field c>, <form d>(852)에 <field d>를 갖는 서브 다이얼로그로 수정되었다.
이상에서 설명한 바와 같이, 본 발명의 VoiceXML-to-XHTML+Voice 변환기 및 이를 포함하는 트랜스코더는, XHTML+Voice 태그와 VoiceXML 태그를 가능한 1:1 매칭으로 변환하지만, 그렇지 못한 호 제어(Call Control) 태그의 경우는 스크립트를 이용하여 시스템을 제어하는 방법이나 응용 프로그램을 이용하는 방법 혹은 아예 삭제하는 방법을 통해 해결한다. 또한 본 발명의 VoiceXML-to-XHTML+Voice 변환기는 사용자 디바이스에 내장하거나 아니면 트랜스코더를 갖는 프록시 서버와 같은 시스템으로 따로 구축할 수 있도록 하여 사용자 환경에 맞추어 서비스를 제공할 수 있다.
또한 본 발명에 의하면 서비스 제공자는, 실시간으로 전화망을 위한 VoiceXML기반 음성 서비스를 인터넷을 위한 XHTML+Voice 멀티모달 서비스로 자동 변환함으로써, 기존의 VoiceXML 기반 음성 서비스를 활용하여 XHTML+Voice 기반의 멀티모달 서비스를 쉽게 구축할 수 있다. 즉, PDA나 스마트폰과 같은 지능 정보형 디바이스를 위한 서비스를 다시 개발하지 않아도 저렴한 비용으로 멀티모달 서비스를 구축할 수 있다. 그리고 VoiceXML기반 음성 서비스의 유지 보수만으로 멀티모 달 서비스를 위한 유지 보수는 자동 수행되는 효과가 발행하여, 멀티모달 서비스를 위한 별도의 유지보수 비용이 거의 발생하지 않는다.
그리고 본 발명에 의하면 서비스 이용자는, 인터넷으로 음성 서비스를 이용하는데 있어서, 싱글모달이 아닌 멀티모달 인터페이스로 인터랙션(Interaction)하며, 순차적이 아닌 병렬적으로 서비스를 제어하고, 모드 스위칭(음성 사용여부를 선택)을 통해 사용하고자 하는 모드를 선택할 수 있으며, 결과적으로 불필요한 인터랙션(User Overexertion)을 줄여 보다 정확하고 효율적으로 음성 서비스를 이용할 수 있다.
한편, 본 발명에 적합한 음성 서비스로는, 날씨/뉴스/증권/교통 정보 등의 실시간 정보 안내 서비스, 음식의 요리법이나 응급환자의 응급처치와 같은 절차적 내용을 갖는 서비스, 여론조사/시청률 조사/소비자 정보 조사 등 각종 갤럽 조사 서비스, 잔액조회/각종 은행 상품 정보 검색이 가능한 은행 서비스 등이 있다.
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

Claims (9)

  1. VoiceXML 문서를 파싱하여 생성된 VoiceXML 트리를 XHTML+Voice 트리로 변환하는 방법에 있어서,
    (a) 상기 VoiceXML 트리를 상위 태그부터 하위 태그까지 모두 검색하면서, XHTML+Voice 트리를 초기화하는 단계;
    (b) 태그를 확인하여 태그가 <memu>이면 XHTML의 <a> 태그로 변환하는 단계;
    (c) 태그를 확인하여 태그가 <grammar>이면 XHTML의 <input type=radio> 태그로 변환하는 단계; 및
    (d) 태그를 확인하여 태그가 <form>이면 XHTML의 <form>을 XHTML 트리에 추가한 후, <form> 태그에 대해 하나의 <form>에 속하는 <block>과 <prompt> 태그는 XHTML의 <p> 태그로 변환하고, 하나의 <form>과 <field> 태그에 속한 <prompt> 태그는 XHTML의 <label> 태그로 변환하고, 하나의 <form>과 <field> 또는 <block>에 속하는 <submit> 태그는 XHTML의 <input type=submit> 태그로 변환하여 처리하는 단계를 포함하는 것을 특징으로 하는
    VoiceXML 문서를 XHTML+Voice 문서로 변환하는 방법.
  2. 삭제
  3. 제1항에 있어서, 상기 각 단계는
    변환 후 이벤트/핸들러를 정의하거나 VoiceXML을 수정 혹은 삭제하는 것을 특징으로 하는
    VoiceXML 문서를 XHTML+Voice 문서로 변환하는 방법.
  4. 통상의 XHTML+Voice 브라우저가 탑재된 사용자 단말기와, 프록시 서버와, VoiceXML 문서를 제공하는 웹 서버를 포함하는 시스템에서 VoiceXML 문서를 XHTML+Voice 문서로 변환하는 것을 이용한 멀티모달 서비스 방법에 있어서,
    사용자 단말기에서 XHTML+Voice 브라우저를 구동하여 HTTP 요구(request)를 통해 웹 서버로 VoiceXML 문서를 요청하는 단계;
    상기 웹 서버가 VoiceXML 문서를 상기 프록시 서버에 전송하는 단계;
    상기 프록시 서버에 탑재된 VoiceXML 파서는 전송받은 VoiceXML문서를 트리 구조로 구성하여 VoiceXML-to-XHTML+Voice 변환기로 전달하는 단계;
    VoiceXML-to-XHTML+Voice 변환기는 전송된 VoiceXML 트리를 소정의 알고리즘으로 새로운 XHTML+Voice 트리로 변환하여 XHTML+Voice 문서 생성기로 전달하는 단 계;
    XHTML+Voice 문서 생성기는 XHTML+Voice 트리를 입력받아 XHTML+Voice 문서를 생성하여 상기 XHTML+Voice 브라우저로 전송하는 단계; 및
    상기 사용자의 XHTML+Voice 브라우저가 XHTML+Voice 문서를 해석하여 실행한 후 음성 및 그래픽을 출력하는 단계를 포함하는 것을 특징으로 하는
    VoiceXML 문서를 XHTML+Voice 문서로 변환하는 것을 이용한 멀티모달 서비스 방법.
  5. VoiceXML-to-XHTML+Voice 변환기를 갖는 XHTML+Voice 브라우저가 탑재된 사용자 단말기와 VoiceXML 문서를 제공하는 웹 서버를 포함하는 시스템에서 VoiceXML 문서를 XHTML+Voice 문서로 변환하는 것을 이용한 멀티모달 서비스 방법에 있어서,
    사용자 단말기를 통하여 XHTML+Voice 브라우저를 구동하여 HTTP 호출을 통해 상기 웹 서버로 VoiceXML 문서를 요청하는 단계;
    상기 웹 서버가 해당 VoiceXML 문서를 XHTML+Voice 브라우저로 전송하는 단계;
    XHTML+Voice 브라우저의 VoiceXML 파서가 전송 받은 VoiceXML 문서를 트리 구조로 구성하여 VoiceXML-to-XHTML+Voice 변환기로 전달하는 단계;
    상기 VoiceXML-to-XHTML+Voice 변환기가 전송된 VoiceXML 트리를 소정의 알고리즘으로 새로운 XHTML+Voice 트리로 변환하는 단계; 및
    XHTML+Voice 랜더러가 XHTML+Voice 트리를 해석하여 실행한 후 음성 및 그래픽으로 출력하는 단계를 포함하는 것을 특징으로 하는
    VoiceXML 문서를 XHTML+Voice 문서로 변환하는 것을 이용한 멀티모달 서비스 방법.
  6. XHTML+Voice 브라우저가 탑재된 사용자 단말기와, 프록시 서버와, VoiceXML 문서를 제공하는 웹 서버를 포함하는 시스템에 있어서,
    VoiceXML 트리를 생성하는 VoiceXML 파서와,
    상기 VoiceXML 트리를 상위 태그부터 하위 태그까지 모두 검색하면서, 태그를 확인하여 태그가 <memu>이면 XHTML의 <a> 태그로 변환하고, <grammar>이면 XHTML의 <input type=radio> 태그로 변환하며, 태그가 <form>이면 XHTML의 <form>을 XHTML 트리에 추가한 후 <form> 태그를 처리하는 소정의 변환 알고리즘을 구현한 VoiceXML-to-XHTML+Voice 변환기와,
    XHTML+Voice 트리를 XHTML+Voice 문서로 변환하기 위한 XHTML+Voice 문서 생성기(Generator)로 구성된 트랜스코더가 상기 프록시 서버에 탑재된 것을 특징으로 하는
    멀티모달 서비스 시스템.
  7. XHTML+Voice 브라우저가 탑재된 사용자 단말기와, VoiceXML 문서를 제공하는 웹 서버를 포함하는 시스템에 있어서,
    상기 XHTML+Voice 브라우저가
    VoiceXML문서에서 VoiceXML 트리를 생성하는 VoiceXML 파서;
    소정의 변환 알고리즘에 따라 VoiceXML 트리에서 XHTML+Voice 트리를 생성하는 VoiceXML-to-XHTML+Voice 변환기; 및
    상기 XHTML+Voice 트리를 실행하는 XHTML+Voice 랜더러(Render)를 포함하며,
    상기 XHTML+Voice 브라우저를 통해 서비스 되는 음성 서비스는 멀티모달 서비스로 브라우징되며, 음성 입출력 사용 모드와 음성 입출력 취소 모드 선택이 가능한 것을 특징으로 하는
    멀티모달 서비스 시스템.
  8. 삭제
  9. 제7항에 있어서,
    상기 VoiceXML-to-XHTML+Voice 변환기는 상기 VoiceXML 트리를 상위 태그부터 하위 태그까지 모두 검색하면서, 태그를 확인하여 태그가 <memu>이면 XHTML의 <a> 태그로 변환하고, <grammar>이면 XHTML의 <input type=radio> 태그로 변환하며, 태그가 <form>이면 XHTML의 <form>을 XHTML 트리에 추가한 후 <form> 태그를 처리하는 것을 특징으로 하는 멀티모달 서비스 시스템.
KR1020030095258A 2003-12-23 2003-12-23 보이스엑스엠엘 문서를 엑스에이치티엠엘플러스보이스문서로 변환하기 위한 방법 및 이를 이용한 멀티모달서비스 시스템 KR100561228B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020030095258A KR100561228B1 (ko) 2003-12-23 2003-12-23 보이스엑스엠엘 문서를 엑스에이치티엠엘플러스보이스문서로 변환하기 위한 방법 및 이를 이용한 멀티모달서비스 시스템
US10/824,483 US20050137875A1 (en) 2003-12-23 2004-04-15 Method for converting a voiceXML document into an XHTMLdocument and multimodal service system using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020030095258A KR100561228B1 (ko) 2003-12-23 2003-12-23 보이스엑스엠엘 문서를 엑스에이치티엠엘플러스보이스문서로 변환하기 위한 방법 및 이를 이용한 멀티모달서비스 시스템

Publications (2)

Publication Number Publication Date
KR20050063996A KR20050063996A (ko) 2005-06-29
KR100561228B1 true KR100561228B1 (ko) 2006-03-15

Family

ID=34675947

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020030095258A KR100561228B1 (ko) 2003-12-23 2003-12-23 보이스엑스엠엘 문서를 엑스에이치티엠엘플러스보이스문서로 변환하기 위한 방법 및 이를 이용한 멀티모달서비스 시스템

Country Status (2)

Country Link
US (1) US20050137875A1 (ko)
KR (1) KR100561228B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100902732B1 (ko) * 2007-11-30 2009-06-15 주식회사 케이티 모달리티에 관한 ｄｏｍ 이벤트 처리를 위한 프록시,멀티모달 단말기, ｄｏｍ 이벤트 처리 방법, 모달리티동기화 방법

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE602004008887T2 (de) * 2004-05-18 2008-01-17 Alcatel Lucent Verfahren und Server zur Bereitstellung eines multi-modalen Dialogs
US20060015335A1 (en) * 2004-07-13 2006-01-19 Ravigopal Vennelakanti Framework to enable multimodal access to applications
US7848928B2 (en) * 2005-08-10 2010-12-07 Nuance Communications, Inc. Overriding default speech processing behavior using a default focus receiver
US8977636B2 (en) 2005-08-19 2015-03-10 International Business Machines Corporation Synthesizing aggregate data of disparate data types into data of a uniform data type
US7958131B2 (en) * 2005-08-19 2011-06-07 International Business Machines Corporation Method for data management and data rendering for disparate data types
US8266220B2 (en) 2005-09-14 2012-09-11 International Business Machines Corporation Email management and rendering
US20070061712A1 (en) * 2005-09-14 2007-03-15 Bodin William K Management and rendering of calendar data
US20070061371A1 (en) * 2005-09-14 2007-03-15 Bodin William K Data customization for data of disparate data types
US8694319B2 (en) * 2005-11-03 2014-04-08 International Business Machines Corporation Dynamic prosody adjustment for voice-rendering synthesized data
US20070100872A1 (en) * 2005-11-03 2007-05-03 Bodin William K Dynamic creation of user interfaces for data management and data rendering
US20070121873A1 (en) * 2005-11-18 2007-05-31 Medlin Jennifer P Methods, systems, and products for managing communications
KR100862611B1 (ko) * 2005-11-21 2008-10-09 한국전자통신연구원 멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한 방송 웹 사이트 서비스를 위한 비주얼 데이터 및 음성 데이터의 동기화 장치 및 그 방법
US10332071B2 (en) 2005-12-08 2019-06-25 International Business Machines Corporation Solution for adding context to a text exchange modality during interactions with a composite services application
US8259923B2 (en) 2007-02-28 2012-09-04 International Business Machines Corporation Implementing a contact center using open standards and non-proprietary components
US20070133773A1 (en) 2005-12-08 2007-06-14 International Business Machines Corporation Composite services delivery
US11093898B2 (en) 2005-12-08 2021-08-17 International Business Machines Corporation Solution for adding context to a text exchange modality during interactions with a composite services application
US7773731B2 (en) * 2005-12-14 2010-08-10 At&T Intellectual Property I, L. P. Methods, systems, and products for dynamically-changing IVR architectures
US7577664B2 (en) * 2005-12-16 2009-08-18 At&T Intellectual Property I, L.P. Methods, systems, and products for searching interactive menu prompting system architectures
US8271107B2 (en) 2006-01-13 2012-09-18 International Business Machines Corporation Controlling audio operation for data management and data rendering
US20070165538A1 (en) * 2006-01-13 2007-07-19 Bodin William K Schedule-based connectivity management
US9135339B2 (en) * 2006-02-13 2015-09-15 International Business Machines Corporation Invoking an audio hyperlink
US20070192675A1 (en) * 2006-02-13 2007-08-16 Bodin William K Invoking an audio hyperlink embedded in a markup document
US8050392B2 (en) * 2006-03-17 2011-11-01 At&T Intellectual Property I, L.P. Methods systems, and products for processing responses in prompting systems
US7961856B2 (en) * 2006-03-17 2011-06-14 At&T Intellectual Property I, L. P. Methods, systems, and products for processing responses in prompting systems
US20100299590A1 (en) * 2006-03-31 2010-11-25 Interact Incorporated Software Systems Method and system for processing xml-type telecommunications documents
US9196241B2 (en) 2006-09-29 2015-11-24 International Business Machines Corporation Asynchronous communications using messages recorded on handheld devices
US7921214B2 (en) * 2006-12-19 2011-04-05 International Business Machines Corporation Switching between modalities in a speech application environment extended for interactive text exchanges
US8204182B2 (en) 2006-12-19 2012-06-19 Nuance Communications, Inc. Dialect translator for a speech application environment extended for interactive text exchanges
US8000969B2 (en) 2006-12-19 2011-08-16 Nuance Communications, Inc. Inferring switching conditions for switching between modalities in a speech application environment extended for interactive text exchanges
US8027839B2 (en) * 2006-12-19 2011-09-27 Nuance Communications, Inc. Using an automated speech application environment to automatically provide text exchange services
US8594305B2 (en) 2006-12-22 2013-11-26 International Business Machines Corporation Enhancing contact centers with dialog contracts
US9318100B2 (en) 2007-01-03 2016-04-19 International Business Machines Corporation Supplementing audio recorded in a media file
US9247056B2 (en) 2007-02-28 2016-01-26 International Business Machines Corporation Identifying contact center agents based upon biometric characteristics of an agent's speech
US9055150B2 (en) 2007-02-28 2015-06-09 International Business Machines Corporation Skills based routing in a standards based contact center using a presence server and expertise specific watchers
US8060371B1 (en) 2007-05-09 2011-11-15 Nextel Communications Inc. System and method for voice interaction with non-voice enabled web pages
US8423635B2 (en) * 2007-06-11 2013-04-16 Enghouse Interactive Inc. System and method for automatic call flow detection
US8301757B2 (en) * 2007-06-11 2012-10-30 Enghouse Interactive Inc. System and method for obtaining in-use statistics for voice applications in interactive voice response systems
US8296148B1 (en) * 2008-06-13 2012-10-23 West Corporation Mobile voice self service device and method thereof
US8311837B1 (en) * 2008-06-13 2012-11-13 West Corporation Mobile voice self service system
CN101527755B (zh) * 2009-03-30 2011-07-13 中兴通讯股份有限公司 基于VoiceXML移动终端语音交互方法及移动终端
JP2011081457A (ja) * 2009-10-02 2011-04-21 Sony Corp 情報処理装置および方法
US20110209072A1 (en) * 2010-02-19 2011-08-25 Naftali Bennett Multiple stream internet poll
US20130031469A1 (en) * 2010-04-09 2013-01-31 Nec Corporation Web-content conversion device, web-content conversion method and recording medium
CN105120373B (zh) * 2015-09-06 2018-07-13 上海智臻智能网络科技股份有限公司 语音传输控制方法及系统

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7222301B2 (en) * 1998-09-11 2007-05-22 Genesys Telecommunications Laboratories, Inc. Method and apparatus enabling voice-based management of state and interaction of a remote knowledge worker in a contact center environment
US7080315B1 (en) * 2000-06-28 2006-07-18 International Business Machines Corporation Method and apparatus for coupling a visual browser to a voice browser
US6996800B2 (en) * 2000-12-04 2006-02-07 International Business Machines Corporation MVC (model-view-controller) based multi-modal authoring tool and development environment
US7114123B2 (en) * 2001-02-14 2006-09-26 International Business Machines Corporation User controllable data grouping in structural document translation
US20030046316A1 (en) * 2001-04-18 2003-03-06 Jaroslav Gergic Systems and methods for providing conversational computing via javaserver pages and javabeans
US7020841B2 (en) * 2001-06-07 2006-03-28 International Business Machines Corporation System and method for generating and presenting multi-modal applications from intent-based markup scripts
US20030125953A1 (en) * 2001-12-28 2003-07-03 Dipanshu Sharma Information retrieval system including voice browser and data conversion server
US20030145062A1 (en) * 2002-01-14 2003-07-31 Dipanshu Sharma Data conversion server for voice browsing system
US20060168095A1 (en) * 2002-01-22 2006-07-27 Dipanshu Sharma Multi-modal information delivery system
GB0204768D0 (en) * 2002-02-28 2002-04-17 Mitel Knowledge Corp Bimodal feature access for web applications
WO2004066125A2 (en) * 2003-01-14 2004-08-05 V-Enable, Inc. Multi-modal information retrieval system
US20050021826A1 (en) * 2003-04-21 2005-01-27 Sunil Kumar Gateway controller for a multimodal system that provides inter-communication among different data and voice servers through various mobile devices, and interface for that controller

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100902732B1 (ko) * 2007-11-30 2009-06-15 주식회사 케이티 모달리티에 관한 ｄｏｍ 이벤트 처리를 위한 프록시,멀티모달 단말기, ｄｏｍ 이벤트 처리 방법, 모달리티동기화 방법

Also Published As

Publication number Publication date
US20050137875A1 (en) 2005-06-23
KR20050063996A (ko) 2005-06-29

Similar Documents

Publication Publication Date Title
KR100561228B1 (ko) 보이스엑스엠엘 문서를 엑스에이치티엠엘플러스보이스문서로 변환하기 위한 방법 및 이를 이용한 멀티모달서비스 시스템
US7739117B2 (en) Method and system for voice-enabled autofill
RU2352979C2 (ru) Синхронное понимание семантических объектов для высокоинтерактивного интерфейса
US8909532B2 (en) Supporting multi-lingual user interaction with a multimodal application
US8862475B2 (en) Speech-enabled content navigation and control of a distributed multimodal browser
US8069047B2 (en) Dynamically defining a VoiceXML grammar in an X+V page of a multimodal application
US8086463B2 (en) Dynamically generating a vocal help prompt in a multimodal application
US8706500B2 (en) Establishing a multimodal personality for a multimodal application
US7016848B2 (en) Voice site personality setting
RU2349969C2 (ru) Синхронное понимание семантических объектов, реализованное с помощью тэгов речевого приложения
KR100459299B1 (ko) 대화식 브라우저 및 대화식 시스템
CN101287043B (zh) 用于提供与多模式应用之间的表达用户交互的方法和设备
US9330668B2 (en) Sharing voice application processing via markup
US8768711B2 (en) Method and apparatus for voice-enabling an application
US7171361B2 (en) Idiom handling in voice service systems
US8510117B2 (en) Speech enabled media sharing in a multimodal application
US9349367B2 (en) Records disambiguation in a multimodal application operating on a multimodal device
US20080235029A1 (en) Speech-Enabled Predictive Text Selection For A Multimodal Application
US20080208586A1 (en) Enabling Natural Language Understanding In An X+V Page Of A Multimodal Application
US20070061146A1 (en) Retrieval and Presentation of Network Service Results for Mobile Device Using a Multimodal Browser
US20050273487A1 (en) Automatic multimodal enabling of existing web content
EP1209660B1 (en) Voice navigation in web applications
Brkic et al. VoiceXML for Slavic languages application development
Kwon et al. A design of user-initiative voice web using RSS and VoiceXML
PATIL Phonet-a Voice Based Web Technology

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20031223

PA0201 Request for examination
PG1501 Laying open of application
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20050819

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20060303

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20060308

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20060309

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PR1001 Payment of annual fee

Payment date: 20090303

Start annual number: 4

End annual number: 4

FPAY Annual fee payment

Payment date: 20091228

Year of fee payment: 6

PR1001 Payment of annual fee

Payment date: 20091228

Start annual number: 5

End annual number: 6

LAPS Lapse due to unpaid annual fee
PC1903 Unpaid annual fee