[go: up one dir, main page]

KR101359715B1 - 모바일 음성 웹 제공 방법 및 장치 - Google Patents

모바일 음성 웹 제공 방법 및 장치 Download PDF

Info

Publication number
KR101359715B1
KR101359715B1 KR1020070085560A KR20070085560A KR101359715B1 KR 101359715 B1 KR101359715 B1 KR 101359715B1 KR 1020070085560 A KR1020070085560 A KR 1020070085560A KR 20070085560 A KR20070085560 A KR 20070085560A KR 101359715 B1 KR101359715 B1 KR 101359715B1
Authority
KR
South Korea
Prior art keywords
web
user
voice
site
mobile terminal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
KR1020070085560A
Other languages
English (en)
Other versions
KR20090020921A (ko
Inventor
조정미
김지연
송윤경
곽병관
김남훈
한익상
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070085560A priority Critical patent/KR101359715B1/ko
Priority to US12/007,797 priority patent/US9251786B2/en
Publication of KR20090020921A publication Critical patent/KR20090020921A/ko
Application granted granted Critical
Publication of KR101359715B1 publication Critical patent/KR101359715B1/ko
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G10L15/183—Speech classification or search using natural language modelling using context dependencies, e.g. language models
    • G10L15/19—Grammatical context, e.g. disambiguation of the recognition hypotheses based on word sequence rules
    • G10L15/193—Formal grammars, e.g. finite state automata, context free grammars or word networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephonic Communication Services (AREA)

Abstract

본 발명은 모바일 단말에서의 음성 웹 제공 방법 및 장치에 관한 것으로, 본 발명의 일 실시 예에 따른 모바일 단말에서의 음성 웹 제공 방법은 사용자의 웹 검색 로그들로부터 사용자의 웹 히스토리를 분석하고, 그 결과를 기초로 음성 접속 리스트를 생성하고, 이를 반영한 음성 인식 문법을 동적으로 생성하여 음성 인식을 수행함으로써, 사용자의 웹 컨텍스트에 적합한 문법을 생성하여 음성 인식에 필요한 무제한 문법을 제한함으로써 서버가 아닌 단말에서도 구동 가능한 효율적인 음성 인식을 구현할 수 있다.
모바일, 인터넷, 웹, 접속, 내비게이션, 검색

Description

모바일 음성 웹 제공 방법 및 장치{Method and apparatus for providing mobile voice web}
본 발명은 모바일 음성 웹 제공 방법 및 장치에 관한 것으로, 더 상세하게는, 음성을 이용하여 모바일 환경에서 웹 접속, 웹 내비게이션 및 웹 검색을 쉽고 빠르게 수행할 수 있는 방법 및 장치에 관한 것이다.
모바일 인터넷 환경이 일반화되면서 모바일 웹 검색이나 웹을 통해 모바일 단말기에 콘텐츠를 다운로드 하는 것이 빈번해지고 있다. 그러나 단말기의 버튼 입력 방식은 버튼의 소형화로 검색어 입력이 불편하고 속도도 느리다. 또한, 방향키를 이용한 웹 페이지 내비게이션은 속도가 느리고, 커서 이동과 버튼 누름의 동기화가 잘 맞지 않아, 효율적인 웹 내비게이션이 어렵다.
전술한 모바일 인터넷 환경에서의 웹 검색 등을 용이하게 하기 위해서, 음성 인식을 이용한 웹 검색 기술들이 개발되고 있다. 기존의 음성을 이용한 웹 검색은 서버-클라이언트 방식이 제안되고 있다. 다음과 같은 서버-클라이언트 방식의 웹 접속, 검색 기술들이 공지되어 있다.
국내등록특허 제0486030호는 음성인식을 이용한 이동 무선 단말기의 인터넷 사이트 접속 장치 및 방법에 관한 기술로서, 단말에서 입력된 음성을 음성인식 서버에서 인식하여 원하는 인터넷 사이트로 이동하고, 음성 입력과 함께 전송된 URL로부터 멀티미디어 서버는 음성 인식 문법을 매핑하여 음성인식 서버로 전달하는 기술을 개시하고 있다.
국내공개특허 제2000-0087281호는 음성인식을 이용한 이동 무선 단말기의 인터넷 검색 방법에 관한 기술로서, 사용자의 음성 데이터를 등록하는 음성 인식 서버를 통하여 별도의 음성인식 모듈 없이 음성으로 인터넷 검색하고, 사용자의 등록된 음성 데이터 비교에 의한 검색어 인식하고, 등록되지 않은 음성 데이터는 DB화 알고리즘을 통하여 패턴화시키는 기술을 개시하고 있다.
하지만, 전술한 기술들은 음성 입력은 단말에서 이루어지더라도 음성 인식은 단말이 아닌 통신망을 이용하여 서버에서 이루어진다. 따라서 대량의 컴퓨팅 자원과 문법을 요구하는 대용량 음성 인식 엔진이 필요하고, 사용자 음성의 인식을 위해 통신망을 이용할 경우, 통신망 사용에 따른 사용자의 경제적 부담과 함께 통신 속도, 통신망 상황에 의존적이라는 한계가 있다.
또한, 사용자의 개별 웹 히스토리를 반영하지 않고, 모든 사용자에게 동일한 음성 인식 모델을 적용함으로써, 개인적인 환경에서 주로 사용되는 모바일 단말의 특징을 반영하지 못하였다.
본 발명은 음성을 이용하여 모바일 환경에서 웹 검색을 쉽고 빠르게 수행할 수 있는 방법 및 장치를 제공하는 데 목적이 있다.
특히, 본 발명은 사용자의 웹 히스토리를 반영하여 단말 내에서 음성 인식 문법을 동적으로 생성, 관리하여 모바일 단말 내에서의 직접 웹 접속, 웹 내비게이션 및 웹 검색을 위한 방법 및 장치를 제공하는 데 목적이 있다.
본 발명의 기술적 과제를 달성하기 위한 모바일 단말에서의 음성 웹 제공 방법은 사용자의 웹 검색 로그들로부터 사용자의 웹 히스토리를 분석하고, 분석 결과를 기초로 음성 접속 리스트를 생성하고, 생성한 음성 접속 리스트를 반영한 음성 인식 문법을 생성하고, 사용자의 입력 음성을 생성한 음성 인식 문법에 매칭하여 웹 명령을 생성하여 이루어진다.
본 발명의 다른 기술적 과제를 달성하기 위한 모바일 단말에서의 음성 웹 제공 장치는 사용자의 웹 검색 로그들로부터 사용자의 웹 히스토리를 분석하고, 분석 결과를 기초로 음성 접속 리스트를 생성하는 콘텐츠 데이터 관리부와, 생성한 음성 접속 리스트를 반영한 음성 인식 문법을 생성하는 동적 문법 생성부와, 사용자의 입력 음성을 상기 생성한 음성 인식 문법에 매칭하여 웹 명령을 생성하는 음성 해석부를 포함한다.
본 발명의 또 다른 기술적 과제를 달성하기 위한 상기 방법을 컴퓨터에서 실 행시키기 위한 프로그램을 기록한 기록매체를 포함한다.
본 발명의 세부 및 개선 사항은 종속항에 개시된다.
본 발명의 일 실시 예에 따른 모바일 단말에서의 음성 웹 제공 방법은 사용자의 웹 검색 로그들로부터 사용자의 웹 히스토리를 분석하고, 그 결과를 기초로 음성 접속 리스트를 생성하고, 이를 반영한 음성 인식 문법을 동적으로 생성하여 음성 인식을 수행함으로써, 사용자의 웹 컨텍스트에 적합한 문법을 생성하여 음성 인식에 필요한 무제한 문법을 제한함으로써 서버가 아닌 단말에서도 구동 가능한 효율적인 음성 인식을 구현할 수 있다.
또한, 사용자의 웹 로그 분석 결과를 문법 생성시 반영함으로써 사전에 등록되지 않은 단어의 인식 성공률을 높일 수 있는 효과가 있고, 단말 내에서 사용자 음성 입력을 인식함으로써 통신망에 의존적이지 않은 음성 인식 서비스를 제공할 수 있다.
이하, 첨부한 도면들을 참조하여 본 발명의 바람직한 실시 예들을 상세히 설명한다.
도 1은 본 발명의 일 실시 예에 따른 모바일 단말에서의 음성 웹 제공 장치(100)의 개략적인 블록도이다.
도 1을 참조하면, 모바일 단말에서의 음성 웹 제공 장치(100)는 콘텐츠 데이터 관리부(110), 동적 문법 생성부(120) 및 음성 해석부(120)를 포함한다.
음성 웹 제공 장치(100)는 모바일 단말, 예를 들면 이동통신 단말기, PDA 등에서 동작할 수 있는 장치이다. 본 발명의 바람직한 실시 예에 따른 모바일 단말은 사용자의 음성을 인식하여 무선 인터넷 사이트에 직접 접속하고, 웹 내비게이션 및 웹 검색이 가능하다.
콘텐츠 데이터 관리부(110)는 사용자의 웹 검색 로그들로부터 사용자의 웹 히스토리를 분석하고, 분석한 결과를 바탕으로 음성 접속 리스트(voice access list)를 생성한다.
동적 문법 생성부(120)는 콘텐츠 데이터 관리부(110)로부터 음성 접속 리스트를 제공받아, 이를 반영한 음성 인식 문법을 동적으로 생성한다.
음성 해석부(130)는 사용자로부터 음성을 입력받아, 동적 문법 생성부(120)에서 생성한 음성 인식 문법을 매칭하여 웹 명령을 생성한다. 여기서, 웹 명령은 웹 사이트에 직접 접속하기 위한 특정 사이트의 URL 정보를 포함한다.
도 2는 본 발명의 다른 실시 예에 따른 콘텐츠 데이터 관리부(110)의 개략적인 블록도이다.
도 2를 참조하면, 콘텐츠 데이터 관리부(110)는 사용자의 웹 사이트 방문 횟수와 방문 시간 분포를 분석하는 웹 검색 로그 분석부(200)와 웹 검색 로그 분석부(200)에서 분석한 결과를 이용하여 음성 접속 리스트를 생성하는 음성 접속 리스트 생성부(210)를 포함하여 구성할 수 있다.
또한, 도면에 도시된 것처럼, 콘텐츠 데이터 관리부(110)는 음성으로 직접 웹 사이트에 접속하기 위한 구성뿐만 아니라, 웹 내비게이션과 웹 검색을 위한 구 성으로서, 사용자의 모바일 단말이 접속한 사이트의 URL로부터 사이트의 분야를 분류하는 웹 사이트 분류부(220), 모바일 단말이 접속한 사이트에 상응하는 웹 콘텐츠들의 html 소스를 분석하는 웹 콘텐츠 분석부(230) 및 웹 콘텐츠 분석부(230)에서 분석한 결과로부터 접속한 사이트에서 웹 내비게이션 및 웹 검색할 수 있는 링크 텍스트를 추출하는 링크 텍스트 추출부(240)를 더 포함하여 구성할 수 있다.
본 발명의 바람직한 실시 예는 모바일 단말에서 음성에 의한 직접 웹 접속(direct web access), 웹 내비게이션(web navigation) 및 웹 검색(web search)을 할 수 있다. 여기서, 웹 접속은 웹 브라우저의 주소창에 URL을 입력하여 특정 사이트에 접속하는 것을 의미하고, 직접 웹 접속은 사이트 명을 발성하는 것으로 바로 해당 사이트에 접속할 수 있음을 의미한다. 웹 내비게이션은 웹 브라우저의 현재 페이지에 하이퍼 텍스트로 연결된 링크를 선택하는 것으로, 본 발명의 바람직한 실시 예에서는 하이퍼 텍스트 발성으로 해당 링크를 선택할 수 있다. 웹 검색은 검색창에 원하는 검색어를 입력하여 원하는 정보를 검색하는 것으로, 음성 검색어 입력을 통해 원하는 검색을 수행할 수 있다.
웹 검색 로그 분석부(200)는 사용자 웹 로그 정보들을 분석하여 일정 기간 내에 사용자가 방문했던 사이트를 분석하여 음성 접속 리스트를 생성한다. 또한, 웹 검색 로그 분석부(200)는 음성에 의한 직접 웹 접속을 위하여 일반적으로 사용자들의 방문 빈도가　많은 웹 사이트를 선택하여 디폴트 사이트(default site) 리스트를 구축한다. 또한, 사용자가 직접 즐겨찾기로 등록한 사이트를 정보를 이용하여 북마크 리스트도 반영한다. 　
웹 검색 로그 분석부(200)는 사용자의 웹 사이트 방문 횟수 및 방문 시간 분포를 반영하여 사용자 방문 사이트 리스트를 생성하는 데, 모바일 단말 내에 저장된 웹 히스토리로부터 방문 사이트의 인터넷 주소와 제목, 접속 시간, 빈도 등을 추출한다. 사용자 방문 사이트 리스트를 생성하기 위하여 아래 수학식 1내지 3을 통해 계산한 스코어가 높은 순서대로 리스트를 생성한다.
사이트 si의 접속 빈도 계산은 다음 수학식 1과 같다.
Figure 112007061614582-pat00001
여기서, F(si)는 웹 히스토리 내에서의 사이트 si의 발생 빈도이다.
또한, 접속 분포 계산은 다음 수학식 2와 같다.
Figure 112007061614582-pat00002
여기서, Pt(s)는 시간 t에서 측정한 P(s)이다.
앞서 계산한 사이트 접속 빈도와 접속 분포를 반영한 스코어 함수는 다음 수학식 3과 같다.
Figure 112007061614582-pat00003
여기서, α* 와 β* 는 접속 빈도와 접속 분포에 대한 가중치이다.
상기 수학식 3에서 계산한 스코어가 높은 순서대로 사용자 방문 사이트 리스트를 생성한다.
또한, 바람직하게 음성 접속 리스트는 디폴트 사이트 리스트와 북마크 리스트를 함께 상기 수학식 3에서 계산한 사용자 방문 사이트 리스트를 통해 업데이트 한다.
웹 내비게이션과 웹 검색을 위해, 콘텐츠 데이터 관리부(110)는 웹 사이트 분류부(220), 웹 콘텐츠 분석부(230) 및 링크 텍스트 추출부(240)를 더 포함하여 구성될 수 있다.
음성에 의한 웹 내비게이션을 지원하기 위해서는 현재 페이지 상에서 사용자가 음성으로 선택할 수 있는 링크 텍스트를 추출하여야 한다. 링크 텍스트는 해당 페이지의 html 소스의 태그를 분석하여 추출 가능하다. 여기서, html 문서에서 링크 텍스트는 태그 <A>로 표시되며, URL은 href의 값으로 나타난다. 따라서 간단한 태그 분석으로 사용자가 선택할 수 있는 링크 텍스트와 해당 링크 텍스트의 URL을 추출할 수 있다.
또한, 음성에 의한 웹 검색을 지원하기 위해서는 무제한 음성 인식 기술이 필요하며, 본 발명의 바람직한 실시 예에서는 웹 페이지를 분류하고 해당 카테고리에 특화된 검색어 리스트를 음성 인식 문법에 추가함으로써 음성에 의한 웹 검색을 가능하게 한다. 예를 들면, 사용자가 쇼핑 사이트에 접속해서는 주로 해당 쇼핑 사이트에서 제공하는 상품 검색이나 주문, 결재 등 쇼핑과 관련된 검색을 원하는 경우가 많다. 따라서 현재 웹 사이트가 쇼핑 카테고리인 경우, 쇼핑과 관련되어 미리 정의된 어휘를 문법에 추가한다.
본 발명의 바람직한 실시 예에서는 URL과 해당 웹 페이지의 타이틀 분석으로 해당 웹 사이트의 분야를 분류하고, 현재 웹 사이트가 분야 특화된 사이트가 아닌 경우, 포털 사이트로부터 인기 검색어 리스트를 추출한다. 웹 사이트 분류 카테고리로는, 예를 들면, 뉴스, 증권, 영화, 음악, 쇼핑, 여행 등이 있다.
도 3은 본 발명의 또 다른 실시 예에 따른 동적 문법 생성부(120)의 개략적인 블록도이다.
도 3을 참조하면, 동적 문법 생성부(120)는 콘텐츠 데이터 관리부(110)에서 생성한 음성 접속 리스트를 반영한 실제 음성 인식의 리소스인 문법을 동적으로 생성한다.
또한, 동적 문법 생성부(120)는 사이트 분류 결과와 추출한 링크 텍스트를 이용하여 사용자의 음성 입력의 의도를 분석하는 사용자 의도 분석부(300), 생성한 음성 접속 리스트와 추출한 링크 텍스트로부터 키워드를 추출하는 키워드 추출부(310) 및 사용자의 의도에 따른 음성 인식 문법을 생성하는 문법 생성부(320)를 포함하여 구성될 수도 있다.
사용자 의도 분석부(300)는 단말의 상태와 사이트 특성을 반영하여 입력 음성에 대한 사용자 의도를 파악한다. 즉, 사용자 의도에 따라 음성인식을 위한 문법을 동적으로 생성하기 위한 구성이다. 여기서, 사용자의 의도, 예를 들면 사이트 의 특성에 따라 동적으로 문법을 생성하는데, 일반적인 포털 사이트인 경우에는 인기 검색어 리스트, 특정 분야에 특화된 사이트인 경우, 예를 들면, 쇼핑몰이라면, 쇼핑몰 내 상품 관련 검색어 리스트를 생성하고, 증권 사이트인 경우에는 주식 시세 검색을 위한 등록된 기업 리스트를 생성하고, 영화 사이트인 경우에는 영화 제목, 배우 등의 리스트를 생성한다.
사용자 의도를 분석하기 위한 방법은 도 4를 참조하여 후술한다.
키워드 추출부(310)는 사이트 리스트와 링크 텍스트, 검색어 리스트에서 의미 없는 기호 제거를 제거하고, 정제된 텍스트로부터 실제 사용자 발화 후보 추출한다. 즉, 사이트 명이나 링크 텍스트, 검색어 전체를 발성하지 않고 부분 어휘만을 발성해도 인식될 수 있도록 텍스트로부터 키워드 추출을 수행한다. 콘텐츠 데이터 관리부(110)에서 생성된 리스트에 대해 의미 없는 기호를 제거한 뒤, 형태소 분석이나 어휘 기반 분석 등을 적용하여 띄어쓰기 단위나 형태소 단위로 추출한다.
문법 생성부(320)는 사이트 리스트와 링크 텍스트로부터 추출된 키워드로부터 음성인식을 위한 문법을 생성한다. 또한,　현재 웹 사이트의 카테고리에 해당하는 검색어 리스트로 문법을 업데이트 한다.
도 4는 본 발명의 또 다른 실시 예에 따른 사용자 의도 추출 방법을 설명하기 위한 흐름도이다.
도 4를 참조하면, 단계 400에서, 모바일 단말의 웹 브라우저가 실행중인지 여부를 판단한다. 웹 브라우저가 실행중이지 않다면, 단계 402에서, 사용자가 직접 사이트 접속을 위한 음성을 발화할 가능성이 큰 경우이므로, 단계 404에서, 음 성 접속 리스트로 문법을 생성하도록 한다.
웹 브라우저가 실행되어 있는 상황인 경우에는, 웹 직접 접속, 웹 내비게이션 및 웹 검색이 모두 가능하다. 단계 406에서, 특정 웹 사이트인지 여부를 판단한다. 이 경우, 현재 웹 사이트의 분류에 따라 검색어 리스트를 제한할 수 있다. 즉, 현재 웹 사이트가 증권, 영화와 같이 분야가 특화된 사이트인 경우, 해당 분야에 특화된 검색어 리스트로, 분야 특화된 사이트가 아닌 경우, 일반 인기 검색어 리스트로 검색어 범위를 제한할 수 있다. 특정 웹 사이트가 아닌 경우, 단계 408로 진행하여, 사용자의 의도가 직접 사이트 접속, 웹 내비게이션, 일반 웹 검색이라고 판단하고, 단계 410에서, 음성 접속 리스트, 링크 텍스트, 인기 검색어 리스트로 문법을 생성하도록 한다. 한편, 특정 웹 사이트인 경우에는 단계 412로 진행하여, 사용자의 의도가 직접 사이트 접속, 웹 내비게이션 및 특정 웹 검색이라고 판단하고, 음성 접속 리스트, 링크 텍스트, 특정 쿼리 리스트로 문법을 생성하도록 한다. 이어, 키워드 추출부(310)에서, 문법 생성을 위해 생성한 리스트로부터 키워드를 추출한다.
도 5는 본 발명의 또 다른 실시 예에 따른 음성 해석부(130)의 개략적인 블록도이다.
도 5를 참조하면, 음성 해석부(130)는 사용자의 입력 음성을 생성한 음성 인식 문법에 매칭하여 웹 명령을 생성한다. 음성 해석부(130)는 음성 인식부(500) 및 웹 명령 생성부(510)를 포함한다.
음성 해석부(130)는 동적 문법 생성부(120)에서 생성된 문법을 적용하여 음 성 인식을 수행하고, 음성 인식 결과로부터 사용자의 웹 명령을 생성한다. 음성 인식부(500)는 음소 검출기(도시되지 않음)의 출력인 후보 음소 열과 문법 사이의 부분 매칭을 통해 매칭 점수가 높은 후보 목록을 검색하여 인식 결과로 출력한다. 웹 명령 생성부(510)는 음성 인식된 결과로부터 실제 사용자 의도를 수행하기 위한 웹 명령을 생성한다. 여기서, 웹 명령은 직접 웹 접속, 웹 내비게이션 및 웹 검색을 포함한다. 직접 웹 접속을 위한 웹 명령은 해당 사이트에 대해 등록된 URL로 대체하는 것이고, 웹 내비게이션을 위한 웹 명령은 음성 입력에 해당하는 링크 텍스트의 href URL로 대체하는 것이고, 웹 검색을 위한 명령은 음성 쿼리(query)를 검색어로 대체하는 것이다.
도 6은 본 발명의 또 다른 실시 예에 따른 음성 웹 제공을 위한 문법(600)의 예시이다.
도 6을 참조하면, 동적 문법(600)이 예시적으로 도시되어 있다. 문법(600)은 음성 접속 리스트(610), 링크 키워드 리스트(620), 인기 검색어 리스트(630)로 구성되어 있다. 또한, 음성 접속 리스트(610)는 "네이버", "네이버 블로그", "구글" 등과 같은 디폴트 사이트와, 사용자가 즐겨찾기에서 추가한 정보로부터 획득한 북마크 리스트에서 추가된 리스트, 예를 들면, "기상청 홈페이지", "텐바이텐 감성 채널 에너지" 등으로 구성되어 있다.
도 7은 본 발명의 또 다른 실시 예에 따른 모바일 단말에서의 음성 웹 제공의 전체 흐름을 설명하기 위한 도면이다.
도 7을 참조하면, 단계 700에서, 사용자가 직접 웹 접속을 위해 모바일 단말 을 통해 사용자가 "네이버"라고 발성하면, 네이버 사이트에 접속한다. 단계 702에서, 사용자가 현재 네이버 사이트에서 웹 내비게이션을 위해, "손예진"이라고 발성하면, 단계 704에서, 현재 웹 사이트에서 손예진과 관련한 링크 텍스트를 추출하여 손예진과 관련한 하이퍼 링크로 접속하게 된다. 이어, 해당 링크 페이지에서, 사용자가 "지마켓"이라고 발성하면, 해당 지마켓 사이트로 직접 사이트 접속을 수행하여, 단계 706에서, 지마켓 사이트를 열어준다. 현재 지마켓 사이트에서 사용자가 "PDP TV" 또는 "공동 구매"라고 발성하면, 웹 검색 또는 웹 내비게이션을 통해 PDP TV와 하이퍼 링크된 사이트를 열어주거나 공동 구매 사이트를 열어준다. 여기서, 현재 접속한 사이트, 예를 들면 지마켓은 인터넷 쇼핑에 특화된 사이트이므로, 쇼핑과 관련한 검색어로 문법을 동적으로 구성하여 음성 인식의 성능을 높일 수 있다.
한편, 본 발명은 컴퓨터로 읽을 수 있는 기록 매체에 컴퓨터가 읽을 수 있는 코드로 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.
컴퓨터가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현하는 것을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산 방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의하여 용이하게 추론될 수 있다.
이제까지 본 발명에 대하여 바람직한 실시 예를 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 본 발명을 구현할 수 있음을 이해할 것이다. 그러므로 상기 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 한다.
도 1은 본 발명의 일 실시 예에 따른 모바일 단말에서의 음성 웹 제공 장치(100)의 개략적인 블록도이다.
도 2는 본 발명의 다른 실시 예에 따른 콘텐츠 데이터 관리부(110)의 개략적인 블록도이다.
도 3은 본 발명의 또 다른 실시 예에 따른 동적 문법 생성부(120)의 개략적인 블록도이다.
도 4는 본 발명의 또 다른 실시 예에 따른 사용자 의도 추출 방법을 설명하기 위한 흐름도이다.
도 5는 본 발명의 또 다른 실시 예에 따른 음성 해석부(130)의 개략적인 블록도이다.
도 6은 본 발명의 또 다른 실시 예에 따른 음성 웹 제공을 위한 문법(600)의 예시이다.
도 7은 본 발명의 또 다른 실시 예에 따른 모바일 단말에서의 음성 웹 제공의 전체 흐름을 설명하기 위한 도면이다.
<도면의 주요 부분에 대한 부호의 설명>
100: 음성 웹 제공 장치 110: 콘텐츠 데이터 관리부
120: 동적 문법 생성부 130: 음성 해석부
200: 웹 검색 로그 분석부 210: 음성 접속 리스트 생성부
220: 웹 사이트 분류부 230: 웹 콘텐츠 분석부
240: 링크 텍스트 추출부 300: 사용자 의도 분석부
310: 키워드 추출부 320: 문법 생성부
500: 음성 인식부 510: 웹 명령 생성부

Claims (13)

  1. (a) 사용자의 웹 검색 로그들로부터 사용자의 웹 히스토리를 분석하고, 상기 분석 결과를 기초로 음성 접속 리스트를 생성하는 단계;
    (b) 상기 사용자의 검색 목적을 나타내는 상기 사용자의 음성 입력의 의도에 기초하여, 상기 생성한 음성 접속 리스트를 반영한 음성 인식 문법을 생성하는 단계; 및
    (c) 상기 사용자의 입력 음성을 상기 생성한 음성 인식 문법에 매칭하여 웹 명령을 생성하는 단계를 포함하는 모바일 단말에서의 음성 웹 제공 방법.
  2. 제 1 항에 있어서,
    상기 음성 접속 리스트는,
    상기 사용자의 웹 사이트 방문 횟수 및 방문 시간 분포를 분석함으로써 생성한 사용자 방문 사이트 리스트를 반영한 것을 특징으로 하는 모바일 단말에서의 음성 웹 제공 방법.
  3. 제 2 항에 있어서,
    상기 음성 접속 리스트는,
    상기 사용자의 모바일 단말에 저장된 디폴트 사이트 리스트와,
    즐겨찾기로 등록한 정보로부터 획득한 북마크 리스트를 반영한 것을 특징으로 하는 모바일 단말에서의 음성 웹 제공 방법.
  4. 제 1 항에 있어서,
    상기 (a) 단계는,
    접속한 사이트의 URL로부터 사이트의 분야를 분류하는 단계;
    상기 접속한 사이트에 상응하는 웹 콘텐츠들의 html 소스를 분석하는 단계; 및
    상기 분석한 결과로부터 접속한 사이트에서 웹 내비게이션 및 웹 검색할 수 있는 링크 텍스트를 추출하는 단계를 더 포함하고,
    상기 (b) 단계는,
    상기 사이트 분류 결과 및 상기 추출한 링크 텍스트를 이용하여 상기 사용자의 음성 입력의 의도를 분석하고, 상기 사용자의 의도에 따른 음성 인식 문법을 생성하는 것을 특징으로 하는 모바일 단말에서의 음성 웹 제공 방법.
  5. 제 4 항에 있어서,
    상기 (b) 단계는,
    상기 생성한 음성 접속 리스트 및 상기 추출한 링크 텍스트로부터 키워드를 추출하고, 상기 추출한 키워드로부터 음성 인식 문법을 생성하는 것을 특징으로 하는 모바일 단말에서의 음성 웹 제공 방법.
  6. 제 4 항에 있어서,
    상기 (b) 단계는,
    상기 사용자의 의도 분석은,
    상기 사용자의 모바일 단말의 웹 브라우저 실행 여부와 특정 웹 사이트에 접속 여부에 따라 직접 사이트 접속, 웹 내비게이션, 일반 웹 검색 및 특정 웹 검색 중 적어도 하나 이상의 사용자 의도를 분석하는 것을 특징으로 하는 모바일 단말에서의 음성 웹 제공 방법.
  7. 제 1 항 내지 제 6 항 중 어느 한 항에 따른 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 기록매체.
  8. 사용자의 웹 검색 로그들로부터 사용자의 웹 히스토리를 분석하고, 상기 분석 결과를 기초로 음성 접속 리스트를 생성하는 콘텐츠 데이터 관리부;
    상기 사용자의 검색 목적을 나타내는 상기 사용자의 음성 입력의 의도에 기초하여, 상기 생성한 음성 접속 리스트를 반영한 음성 인식 문법을 생성하는 동적 문법 생성부; 및
    상기 사용자의 입력 음성을 상기 생성한 음성 인식 문법에 매칭하여 웹 명령을 생성하는 음성 해석부를 포함하는 모바일 단말에서의 음성 웹 제공 장치.
  9. 제 8 항에 있어서,
    상기 콘텐츠 데이터 관리부는,
    상기 사용자의 웹 사이트 방문 횟수 및 방문 시간 분포를 분석하는 웹 검색 로그 분석부; 및
    상기 웹 검색 로그 분석부에서 분석한 결과를 이용하여 상기 음성 접속 리스트를 생성하는 음성 접속 리스트 생성부를 포함하는 것을 특징으로 하는 모바일 단말에서의 음성 웹 제공 장치.
  10. 제 9 항에 있어서,
    상기 음성 접속 리스트 생성부는,
    상기 사용자의 모바일 단말에 저장된 디폴트 사이트 리스트와,
    즐겨찾기로 등록한 정보로부터 획득한 북마크 리스트를 반영한 음성 접속 리스트를 생성하는 것을 특징으로 하는 모바일 단말에서의 음성 웹 제공 장치.
  11. 제 8 항에 있어서,
    상기 콘텐츠 데이터 관리부는,
    상기 사용자의 모바일 단말이 접속한 사이트의 URL로부터 사이트의 분야를 분류하는 웹 사이트 분류부;
    상기 접속한 사이트에 상응하는 웹 콘텐츠들의 html 소스를 분석하는 웹 콘텐츠 분석부; 및
    상기 분석한 결과로부터 접속한 사이트에서 웹 내비게이션 및 웹 검색할 수 있는 링크 텍스트를 추출하는 링크 텍스트 추출부를 더 포함하고,
    상기 동적 문법 생성부는,
    상기 사이트 분류 결과 및 상기 추출한 링크 텍스트를 이용하여 상기 사용자의 음성 입력의 의도를 분석하는 사용자 의도 분석부; 및
    상기 사용자의 의도에 따른 음성 인식 문법을 생성하는 문법 생성부를 더 포함하는 것을 특징으로 하는 모바일 단말에서의 음성 웹 제공 장치.
  12. 제 11 항에 있어서,
    상기 동적 문법 생성부는,
    상기 생성한 음성 접속 리스트 및 상기 추출한 링크 텍스트로부터 키워드를 추출하는 키워드 추출부를 더 포함하고,
    상기 문법 생성부는,
    상기 추출한 키워드로부터 음성 인식 문법을 생성하는 것을 특징으로 하는 모바일 단말에서의 음성 웹 제공 장치.
  13. 제 11 항에 있어서,
    상기 사용자의 의도 분석부는,
    상기 사용자의 모바일 단말의 웹 브라우저 실행 여부와 특정 웹 사이트에 접속 여부에 따라 직접 사이트 접속, 웹 내비게이션, 일반 웹 검색 및 특정 웹 검색 중 적어도 하나 이상의 사용자 의도를 분석하는 것을 특징으로 하는 모바일 단말에서의 음성 웹 제공 장치.
KR1020070085560A 2007-08-24 2007-08-24 모바일 음성 웹 제공 방법 및 장치 Expired - Fee Related KR101359715B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020070085560A KR101359715B1 (ko) 2007-08-24 2007-08-24 모바일 음성 웹 제공 방법 및 장치
US12/007,797 US9251786B2 (en) 2007-08-24 2008-01-15 Method, medium and apparatus for providing mobile voice web service

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070085560A KR101359715B1 (ko) 2007-08-24 2007-08-24 모바일 음성 웹 제공 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20090020921A KR20090020921A (ko) 2009-02-27
KR101359715B1 true KR101359715B1 (ko) 2014-02-10

Family

ID=40382998

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070085560A Expired - Fee Related KR101359715B1 (ko) 2007-08-24 2007-08-24 모바일 음성 웹 제공 방법 및 장치

Country Status (2)

Country Link
US (1) US9251786B2 (ko)
KR (1) KR101359715B1 (ko)

Families Citing this family (220)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
ITFI20010199A1 (it) 2001-10-22 2003-04-22 Riccardo Vieri Sistema e metodo per trasformare in voce comunicazioni testuali ed inviarle con una connessione internet a qualsiasi apparato telefonico
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US8510109B2 (en) 2007-08-22 2013-08-13 Canyon Ip Holdings Llc Continuous speech transcription performance indication
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US9973450B2 (en) 2007-09-17 2018-05-15 Amazon Technologies, Inc. Methods and systems for dynamically updating web service profile information by parsing transcribed message strings
US9053089B2 (en) 2007-10-02 2015-06-09 Apple Inc. Part-of-speech tagging using latent analogy
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8065143B2 (en) 2008-02-22 2011-11-22 Apple Inc. Providing text input using speech data and non-speech data
US8676577B2 (en) * 2008-03-31 2014-03-18 Canyon IP Holdings, LLC Use of metadata to post process speech recognition output
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8464150B2 (en) 2008-06-07 2013-06-11 Apple Inc. Automatic language identification for dynamic text processing
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8768702B2 (en) 2008-09-05 2014-07-01 Apple Inc. Multi-tiered voice feedback in an electronic device
US8898568B2 (en) 2008-09-09 2014-11-25 Apple Inc. Audio user interface
US8712776B2 (en) 2008-09-29 2014-04-29 Apple Inc. Systems and methods for selective text to speech synthesis
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US8862252B2 (en) * 2009-01-30 2014-10-14 Apple Inc. Audio user interface for displayless electronic device
US8380507B2 (en) 2009-03-09 2013-02-19 Apple Inc. Systems and methods for determining the language to use for speech generated by a text to speech engine
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10540976B2 (en) 2009-06-05 2020-01-21 Apple Inc. Contextual voice commands
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US20110066438A1 (en) * 2009-09-15 2011-03-17 Apple Inc. Contextual voiceover
US8682649B2 (en) * 2009-11-12 2014-03-25 Apple Inc. Sentiment prediction from textual data
US8311838B2 (en) 2010-01-13 2012-11-13 Apple Inc. Devices and methods for identifying a prompt corresponding to a voice input in a sequence of prompts
US8381107B2 (en) 2010-01-13 2013-02-19 Apple Inc. Adaptive audio feedback system and method
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US8713021B2 (en) 2010-07-07 2014-04-29 Apple Inc. Unsupervised document clustering using latent semantic density analysis
US8719006B2 (en) 2010-08-27 2014-05-06 Apple Inc. Combined statistical and rule-based part-of-speech tagging for text-to-speech synthesis
US8719014B2 (en) 2010-09-27 2014-05-06 Apple Inc. Electronic device with text error correction based on voice recognition data
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US10515147B2 (en) 2010-12-22 2019-12-24 Apple Inc. Using statistical language models for contextual lookup
US8781836B2 (en) 2011-02-22 2014-07-15 Apple Inc. Hearing assistance system for providing consistent human speech
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US20120310642A1 (en) 2011-06-03 2012-12-06 Apple Inc. Automatically creating a mapping between text data and audio data
US8812294B2 (en) 2011-06-21 2014-08-19 Apple Inc. Translating phrases from one language into another using an order-based set of declarative rules
US8706472B2 (en) 2011-08-11 2014-04-22 Apple Inc. Method for disambiguating multiple readings in language conversion
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US8762156B2 (en) 2011-09-28 2014-06-24 Apple Inc. Speech recognition repair using contextual information
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9311417B2 (en) * 2012-03-09 2016-04-12 Oracle International Corporation Personalized navigation shortcuts
CN103377212B (zh) * 2012-04-19 2016-01-20 腾讯科技（深圳）有限公司 一种语音控制浏览器动作的方法、系统及浏览器
CN103377209A (zh) * 2012-04-20 2013-10-30 阿里巴巴集团控股有限公司 语音辅助浏览网页的方法和终端
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US8775442B2 (en) 2012-05-15 2014-07-08 Apple Inc. Semantic search using a single-source semantic model
WO2013185109A2 (en) 2012-06-08 2013-12-12 Apple Inc. Systems and methods for recognizing textual identifiers within a plurality of words
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US8935167B2 (en) 2012-09-25 2015-01-13 Apple Inc. Exemplar-based latent perceptual modeling for automatic speech recognition
WO2014061905A1 (ko) * 2012-10-16 2014-04-24 에스케이플래닛 주식회사 동작 및 음성 기반 북마크 제공 시스템 과 그 방법
KR101990037B1 (ko) * 2012-11-13 2019-06-18 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
KR102516577B1 (ko) 2013-02-07 2023-04-03 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
US9977779B2 (en) 2013-03-14 2018-05-22 Apple Inc. Automatic supplementation of word correction dictionaries
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
US10572476B2 (en) 2013-03-14 2020-02-25 Apple Inc. Refining a search based on schedule items
US10642574B2 (en) 2013-03-14 2020-05-05 Apple Inc. Device, method, and graphical user interface for outputting captions
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US9733821B2 (en) 2013-03-14 2017-08-15 Apple Inc. Voice control to diagnose inadvertent activation of accessibility features
AU2014233517B2 (en) 2013-03-15 2017-05-25 Apple Inc. Training an at least partial voice command system
US10078487B2 (en) 2013-03-15 2018-09-18 Apple Inc. Context-sensitive handling of interruptions
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US11151899B2 (en) 2013-03-15 2021-10-19 Apple Inc. User training by intelligent digital assistant
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
KR101959188B1 (ko) 2013-06-09 2019-07-02 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
KR101809808B1 (ko) 2013-06-13 2017-12-15 애플 인크. 음성 명령에 의해 개시되는 긴급 전화를 걸기 위한 시스템 및 방법
CN105453026A (zh) 2013-08-06 2016-03-30 苹果公司 基于来自远程设备的活动自动激活智能响应
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
CN104123085B (zh) * 2014-01-14 2015-08-12 腾讯科技（深圳）有限公司 通过语音访问多媒体互动网站的方法和装置
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
TWI566107B (zh) 2014-05-30 2017-01-11 蘋果公司 用於處理多部分語音命令之方法、非暫時性電腦可讀儲存媒體及電子裝置
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US11868354B2 (en) 2015-09-23 2024-01-09 Motorola Solutions, Inc. Apparatus, system, and method for responding to a user-initiated query with a context-based response
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US20190103096A1 (en) * 2016-03-23 2019-04-04 Nec Corporation Output control device, output control method, and program
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
WO2018056846A1 (en) * 2016-09-21 2018-03-29 Motorola Solutions, Inc. Method and system for optimizing voice recognition and information searching based on talkgroup activities
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US20200081211A1 (en) 2017-05-03 2020-03-12 All Systems Broadband, Inc. Fiber Optic Connection Box With Fluid Drainage Chute For Preventing Water Ingress
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
DE112018007127T5 (de) 2018-02-20 2020-11-05 Lg Electronics Inc. Anzeigevorrichtung
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
CN108536680B (zh) * 2018-04-12 2022-05-27 北京焦点新干线信息技术有限公司 一种房产信息的获取方法和装置
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US11076039B2 (en) 2018-06-03 2021-07-27 Apple Inc. Accelerated task performance
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. User activity shortcut suggestions
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
US20220392432A1 (en) * 2021-06-08 2022-12-08 Microsoft Technology Licensing, Llc Error correction in speech recognition
CN114238603B (zh) * 2021-12-15 2024-10-18 平安证券股份有限公司 基于人工智能的问答方法、装置、计算机设备及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19990015328A (ko) * 1997-08-05 1999-03-05 정선종 웹 브라우저 상의 음성 인식기 구현방법
KR20000072482A (ko) * 2000-09-06 2000-12-05 이재학 이용자의 검색을 용이하게 하는 인터넷 검색 시스템 및 그방법
KR20020057045A (ko) * 2000-12-30 2002-07-11 구자홍 음성 인식을 이용한 이동 무선 단말기의 인터넷 검색 방법
KR100486030B1 (ko) 2002-10-10 2005-04-29 와이더댄 주식회사 음성인식을 이용한 이동통신 단말기의 인터넷 사이트접속장치 및 방법

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6157935A (en) * 1996-12-17 2000-12-05 Tran; Bao Q. Remote data access and management system
US6587822B2 (en) * 1998-10-06 2003-07-01 Lucent Technologies Inc. Web-based platform for interactive voice response (IVR)
US6604075B1 (en) * 1999-05-20 2003-08-05 Lucent Technologies Inc. Web-based voice dialog interface
US20020099602A1 (en) * 2000-12-04 2002-07-25 Paul Moskowitz Method and system to provide web site schedules
US20020087316A1 (en) * 2000-12-29 2002-07-04 Lee Victor Wai Leung Computer-implemented grammar-based speech understanding method and system
US7027987B1 (en) * 2001-02-07 2006-04-11 Google Inc. Voice interface for a search engine
US7222073B2 (en) * 2001-10-24 2007-05-22 Agiletv Corporation System and method for speech activated navigation
US20050065935A1 (en) * 2003-09-16 2005-03-24 Chebolu Anil Kumar Client comparison of network content with server-based categorization
US7526429B2 (en) * 2004-03-12 2009-04-28 Siemens Communications, Inc. Spelled speech recognition method and system accounting for possible misrecognized characters
KR100658940B1 (ko) 2004-03-31 2006-12-18 주식회사 인프라웨어 휴대용 정보 단말기에서의 키 네비게이션 방법
US7389346B2 (en) * 2004-04-13 2008-06-17 Microsoft Corporation System and method for aggregating and extending parental controls auditing in a computer network
US8751240B2 (en) * 2005-05-13 2014-06-10 At&T Intellectual Property Ii, L.P. Apparatus and method for forming search engine queries based on spoken utterances
US7672931B2 (en) * 2005-06-30 2010-03-02 Microsoft Corporation Searching for content using voice search queries
US20080134042A1 (en) * 2005-09-14 2008-06-05 Magiq Technologies, Dac , A Corporation Qkd System Wth Ambiguous Control
US8332218B2 (en) * 2006-06-13 2012-12-11 Nuance Communications, Inc. Context-based grammars for automated speech recognition
US20080162537A1 (en) * 2006-12-29 2008-07-03 Ebay Inc. Method and system for utilizing profiles
US20080275846A1 (en) * 2007-05-04 2008-11-06 Sony Ericsson Mobile Communications Ab Filtering search results using contact lists
US8126879B2 (en) * 2007-05-17 2012-02-28 Microsoft Corporation Assisted management of bookmarked web pages

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19990015328A (ko) * 1997-08-05 1999-03-05 정선종 웹 브라우저 상의 음성 인식기 구현방법
KR20000072482A (ko) * 2000-09-06 2000-12-05 이재학 이용자의 검색을 용이하게 하는 인터넷 검색 시스템 및 그방법
KR20020057045A (ko) * 2000-12-30 2002-07-11 구자홍 음성 인식을 이용한 이동 무선 단말기의 인터넷 검색 방법
KR100486030B1 (ko) 2002-10-10 2005-04-29 와이더댄 주식회사 음성인식을 이용한 이동통신 단말기의 인터넷 사이트접속장치 및 방법

Also Published As

Publication number Publication date
KR20090020921A (ko) 2009-02-27
US20090055179A1 (en) 2009-02-26
US9251786B2 (en) 2016-02-02

Similar Documents

Publication Publication Date Title
KR101359715B1 (ko) 모바일 음성 웹 제공 방법 및 장치
US9330661B2 (en) Accuracy improvement of spoken queries transcription using co-occurrence information
US7729913B1 (en) Generation and selection of voice recognition grammars for conducting database searches
US7742922B2 (en) Speech interface for search engines
CN102629246B (zh) 识别浏览器语音命令的服务器及浏览器语音命令识别方法
US6188985B1 (en) Wireless voice-activated device for control of a processor-based host system
KR100661687B1 (ko) 대화형 음성 응답 애플리케이션 구현 장치 및 방법, 머신 판독가능 매체 및 대화형 음성 응답 시스템
US5819220A (en) Web triggered word set boosting for speech interfaces to the world wide web
JP3923513B2 (ja) 音声認識装置および音声認識方法
EP1349145B1 (en) System and method for providing information using spoken dialogue interface
US8412514B1 (en) Method and apparatus for compiling and querying a QA database
US20020087315A1 (en) Computer-implemented multi-scanning language method and system
US20050091274A1 (en) System and method for transcribing audio files of various languages
KR20080068844A (ko) 텍스트 메타데이터를 갖는 음성문서의 인덱싱 및 검색방법, 컴퓨터 판독가능 매체
US20090172546A1 (en) Search-based dynamic voice activation
CN102880723A (zh) 一种识别用户检索意图的搜索方法和系统
Kumar et al. A knowledge graph based speech interface for question answering systems
CN110069724A (zh) 应用程序快捷跳转方法、装置、电子设备和存储介质
US8200485B1 (en) Voice interface and methods for improving recognition accuracy of voice search queries
KR101709055B1 (ko) 오픈 웹 질의응답을 위한 질문분석 장치 및 방법
KR100455439B1 (ko) 인터넷 자원의 도메인화와 확장 사이트맵을 이용한정보검색 및 브라우징방법
JP3893893B2 (ja) ウエブページの音声検索方法、音声検索装置および音声検索プログラム
KR100519748B1 (ko) 연속어 음성 명령을 통한 인터넷 네비게이션 시스템 및 그방법
US7197494B2 (en) Method and architecture for consolidated database search for input recognition systems
Gu et al. Spoken Query for Web Search and Navigation.

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20070824

PG1501 Laying open of application
A201 Request for examination
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20111228

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20070824

Comment text: Patent Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20130422

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20131029

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20140129

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20140203

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
FPAY Annual fee payment

Payment date: 20161228

Year of fee payment: 4

PR1001 Payment of annual fee

Payment date: 20161228

Start annual number: 4

End annual number: 4

FPAY Annual fee payment

Payment date: 20171228

Year of fee payment: 5

PR1001 Payment of annual fee

Payment date: 20171228

Start annual number: 5

End annual number: 5

LAPS Lapse due to unpaid annual fee
PC1903 Unpaid annual fee

Termination category: Default of registration fee

Termination date: 20191109