KR20190074344A - 대화 시스템 및 대화 처리 방법 - Google Patents
대화 시스템 및 대화 처리 방법 Download PDFInfo
- Publication number
- KR20190074344A KR20190074344A KR1020170175608A KR20170175608A KR20190074344A KR 20190074344 A KR20190074344 A KR 20190074344A KR 1020170175608 A KR1020170175608 A KR 1020170175608A KR 20170175608 A KR20170175608 A KR 20170175608A KR 20190074344 A KR20190074344 A KR 20190074344A
- Authority
- KR
- South Korea
- Prior art keywords
- user
- information
- speech
- determining
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title abstract description 10
- 238000003672 processing method Methods 0.000 title description 5
- 230000009471 action Effects 0.000 claims abstract description 29
- 238000000034 method Methods 0.000 claims abstract description 24
- 230000001815 facial effect Effects 0.000 claims description 8
- 230000002452 interceptive effect Effects 0.000 abstract description 14
- 230000006870 function Effects 0.000 description 10
- 230000004044 response Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 230000002093 peripheral effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 208000030016 Avascular necrosis Diseases 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 210000003195 fascia Anatomy 0.000 description 1
- 238000010304 firing Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/04—Segmentation; Word boundary detection
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/24—Speech recognition using non-acoustical features
- G10L15/25—Speech recognition using non-acoustical features using position of the lips, movement of the lips or face analysis
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification techniques
- G10L17/02—Preprocessing operations, e.g. segment selection; Pattern representation or modelling, e.g. based on linear discriminant analysis [LDA] or principal components; Feature selection or extraction
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
- G10L2021/02166—Microphone arrays; Beamforming
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- User Interface Of Digital Computer (AREA)
- Navigation (AREA)
Abstract
일 실시예에 따른 대화 시스템은, 적어도 한 명의 사용자 정보를 저장하는 저장부; 상기 적어도 한 명의 사용자의 발화 정보를 획득하는 제1센서부; 상기 적어도 한 명의 사용자의 영상 정보를 획득하는 제2센서부; 및 상기 사용자 정보, 상기 발화 정보 및 상기 영상 정보 중 적어도 하나를 기초로, 상기 적어도 한 명의 사용자 중 입력 개시 신호를 발화하는 기준 사용자를 판단하고, 상기 기준 사용자의 발화에 포함된 적어도 하나의 명령어를 기초로 차량이 수행할 액션을 결정하는 대화관리기;를 포함한다.
Description
도2는 차량 내부의 구성을 나타낸 도면이다.
도3은 일 실시예에 따른 발화 정보를 획득하는 동작을 나타낸 도면이다.
도4는 일 실시예에 따른 빔포밍 신호를 출력하는 동작을 나타낸 도면이다.
도5는 일 실시예에 따른 영상 정보를 획득하는 동작을 나타낸 도면이다.
도6은 일 실시예에 따른 입술의 움직을 기초로 입력 개시 신호를 도출하는 동작을 설명하기 위한 도면이다.
도7은 일 실시예에 따른 순서도이다.
110: 입력 처리기
110-1 : 제1센서부
110-2 : 제2센서부
120: 대화 관리기
130: 결과 처리기
140 : 저장부
200: 차량
Claims (14)
- 적어도 한 명의 사용자 정보를 저장하는 저장부;
상기 적어도 한 명의 사용자의 발화 정보를 획득하는 제1센서부;
상기 적어도 한 명의 사용자의 영상 정보를 획득하는 제2센서부; 및
상기 사용자 정보, 상기 발화 정보 및 상기 영상 정보 중 적어도 하나를 기초로, 상기 적어도 한 명의 사용자 중 입력 개시 신호를 발화하는 기준 사용자를 판단하고,
상기 기준 사용자의 발화에 포함된 적어도 하나의 명령어를 기초로 차량이 수행할 액션을 결정하는 대화관리기;를 포함하는 대화 시스템.
- 제1항에 있어서,
상기 저장부는,
상기 적어도 한 명의 사용자의 기준 위치 정보를 저장하고,
상기 대화관리기는,
상기 발화 정보를 기초로 상기 적어도 한 명의 사용자의 현재 위치 정보를 도출하고,
상기 현재 위치 정보를 상기 기준 위치 정보에 대응하여 상기 기준 사용자를 판단하는 대화 시스템.
- 제1항에 있어서,
상기 저장부는,
상기 적어도 한 명의 사용자의 기준 음성 정보를 저장하고,
상기 대화관리기는,
상기 발화 정보를 상기 기준 음성 정보에 대응하여 상기 기준 사용자를 판단하는 대화 시스템.
- 제1항에 있어서,
상기 제1센서부는,
차량에 내부에 위치하고 빔포밍(Beamforming) 신호를 수신하는 적어도 하나의 마이크를 포함하고,
상기 대화관리기는,
상기 적어도 하나의 마이크가 출력하는 상기 빔포밍 신호를 기초로 상기 적어도 한 명의 사용자의 현재 위치 정보를 도출하는 대화 시스템.
- 제1항에 있어서,
상기 제1센서부는,
상기 입력 개시 신호의 발화 시점 이전의 상기 적어도 한 명의 사용자의 과거 발화 정보를 획득하고,
상기 대화관리기는,
상기 과거 발화 정보를 기초로 상기 사용자 정보를 생성하여 저장하는 대화 시스템.
- 제1항에 있어서,
상기 대화관리기는,
상기 영상 정보를 기초로 상기 적어도 한 명의 사용자의 위치 정보를 도출하는 대화 시스템.
- 제1항에 있어서,
상기 제2센서부는,
상기 적어도 한 명의 사용자의 입술 주변부를 포함하는 안면 영상 정보를 획득하고,
상기 대화관리기는,
상기 적어도 한 명의 사용자의 입술 움직임을 기초로 상기 입력 개시 신호의 발화 여부를 판단하여, 상기 기준 사용자를 판단하는 대화 시스템.
- 적어도 한 명의 사용자 정보를 저장하고,
상기 적어도 한 명의 사용자의 발화 정보를 획득하고,
상기 적어도 한 명의 사용자의 영상 정보를 획득하고,
상기 사용자 정보, 상기 발화 정보 및 상기 영상 정보 중 적어도 하나를 기초로, 상기 적어도 한 명의 사용자 중 입력 개시 신호를 발화하는 기준 사용자를 판단하고,
상기 기준 사용자의 발화에 포함된 적어도 하나의 명령어를 기초로 차량이 수행할 액션을 결정하는 것을 포함하는 대화 처리 방법.
- 제8항에 있어서,
상기 적어도 한 명의 사용자 정보를 저장하는 것은,
상기 적어도 한 명의 사용자의 기준 위치 정보를 저장하는 것을 포함하고,
상기 기준 사용자를 판단하는 것은,
상기 발화 정보를 기초로 상기 적어도 한 명의 사용자의 현재 위치 정보를 도출하고,
상기 현재 위치 정보를 상기 기준 위치 정보에 대응하여 상기 기준 사용자를 판단하는 것을 포함하는 대화 처리 방법.
- 제8항에 있어서,
상기 적어도 한 명의 사용자 정보를 저장하는 것은,
상기 적어도 한 명의 사용자의 기준 음성 정보를 저장하는 것을 포함하고,
상기 기준 사용자를 판단하는 것은,
상기 발화 정보를 상기 기준 음성 정보에 대응하여 상기 기준 사용자를 판단하는 것을 포함하는 대화 처리 방법.
- 제8항에 있어서,
상기 적어도 한 명의 사용자의 발화 정보를 획득하는 것은,
차량에 내부에 위치하고 빔포밍(Beamforming) 신호를 수신하는 것을 포함하고,
상기 기준 사용자를 판단하는 것은,
상기 빔포밍 신호를 기초로 상기 적어도 한 명의 사용자의 현재 위치 정보를 도출하는 것을 포함하는 대화 처리 방법.
- 제8항에 있어서,
상기 적어도 한 명의 사용자의 발화 정보를 획득하는 것은,
상기 입력 개시 신호의 발화 시점 이전의 상기 적어도 한 명의 사용자의 과거 발화 정보를 획득하는 것을 포함하고,
상기 적어도 한 명의 사용자 정보를 저장하는 것은,
상기 과거 발화 정보를 기초로 상기 사용자 정보를 생성하여 저장하는 것을 포함하는 대화 처리 방법.
- 제8항에 있어서,
상기 영상 정보를 기초로 상기 적어도 한 명의 사용자의 위치 정보를 도출하는 것을 더 포함하는 대화 처리 방법.
- 제8항에 있어서,
상기 적어도 한 명의 사용자의 영상 정보를 획득하는 것은,
상기 적어도 한 명의 사용자의 입술 주변부를 포함하는 안면 영상 정보를 획득하는 것을 더 포함하고,
상기 기준 사용자를 판단하는 것은,
상기 적어도 한 명의 사용자의 입술 움직임을 기초로 상기 입력 개시 신호의 발화 여부를 판단하여, 상기 기준 사용자를 판단하는 것을 포함하는 대화 처리 방법.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020170175608A KR102371513B1 (ko) | 2017-12-20 | 2017-12-20 | 대화 시스템 및 대화 처리 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020170175608A KR102371513B1 (ko) | 2017-12-20 | 2017-12-20 | 대화 시스템 및 대화 처리 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20190074344A true KR20190074344A (ko) | 2019-06-28 |
KR102371513B1 KR102371513B1 (ko) | 2022-03-07 |
Family
ID=67066023
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020170175608A Active KR102371513B1 (ko) | 2017-12-20 | 2017-12-20 | 대화 시스템 및 대화 처리 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102371513B1 (ko) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20220154434A (ko) * | 2021-05-13 | 2022-11-22 | (주)파트론 | 카메라 연동 후석 대화 방법 |
US12008988B2 (en) | 2019-10-10 | 2024-06-11 | Samsung Electronics Co., Ltd. | Electronic apparatus and controlling method thereof |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150027608A (ko) * | 2013-09-04 | 2015-03-12 | 현대자동차주식회사 | 제스처 기반의 원격 조작 시스템 및 그 조작 방법 |
KR20150112594A (ko) * | 2014-03-28 | 2015-10-07 | 주식회사 시그널비젼 | 음성 신호 추출 장치 및 방법과, 이를 포함하는 전기전자기기의 제어 장치 |
-
2017
- 2017-12-20 KR KR1020170175608A patent/KR102371513B1/ko active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150027608A (ko) * | 2013-09-04 | 2015-03-12 | 현대자동차주식회사 | 제스처 기반의 원격 조작 시스템 및 그 조작 방법 |
KR20150112594A (ko) * | 2014-03-28 | 2015-10-07 | 주식회사 시그널비젼 | 음성 신호 추출 장치 및 방법과, 이를 포함하는 전기전자기기의 제어 장치 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US12008988B2 (en) | 2019-10-10 | 2024-06-11 | Samsung Electronics Co., Ltd. | Electronic apparatus and controlling method thereof |
KR20220154434A (ko) * | 2021-05-13 | 2022-11-22 | (주)파트론 | 카메라 연동 후석 대화 방법 |
Also Published As
Publication number | Publication date |
---|---|
KR102371513B1 (ko) | 2022-03-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11495214B2 (en) | Artificial intelligence device for providing voice recognition service and method of operating the same | |
US11289074B2 (en) | Artificial intelligence apparatus for performing speech recognition and method thereof | |
CN104737226B (zh) | 机动车中的语音识别 | |
US11176948B2 (en) | Agent device, agent presentation method, and storage medium | |
CN110286745B (zh) | 对话处理系统、具有对话处理系统的车辆及对话处理方法 | |
KR20180102871A (ko) | 이동단말기 및 이동단말기의 차량 제어 방법 | |
US20190385614A1 (en) | Artificial intelligence apparatus and method for recognizing utterance voice of user | |
CN105222797B (zh) | 利用口授和部分匹配搜索的导航系统的系统和方法 | |
KR20190041569A (ko) | 대화 시스템, 이를 포함하는 차량 및 대화 서비스 처리 방법 | |
US11270700B2 (en) | Artificial intelligence device and method for recognizing speech with multiple languages | |
CN107305769A (zh) | 语音交互处理方法、装置、设备及操作系统 | |
US11330384B2 (en) | Artificial intelligence device for diagnosing failure and method thereof | |
US11450316B2 (en) | Agent device, agent presenting method, and storage medium | |
US11810575B2 (en) | Artificial intelligence robot for providing voice recognition function and method of operating the same | |
US20200043498A1 (en) | Artificial intelligence apparatus and method for recognizing speech of user in consideration of word usage frequency | |
US11769508B2 (en) | Artificial intelligence apparatus | |
JP2020144274A (ja) | エージェント装置、エージェント装置の制御方法、およびプログラム | |
US11930082B1 (en) | Multiple zone communications and controls | |
KR101688164B1 (ko) | 차량 단말 장치 및 이의 제어방법 | |
US11423877B2 (en) | Robot for providing guidance service using artificial intelligence and method of operating the same | |
KR20190074344A (ko) | 대화 시스템 및 대화 처리 방법 | |
KR20230135396A (ko) | 대화 관리 방법, 사용자 단말 및 컴퓨터로 판독 가능한 기록 매체 | |
CN111731320B (zh) | 智能体系统、智能体服务器及其控制方法、存储介质 | |
US20190377489A1 (en) | Artificial intelligence device for providing voice recognition service and method of operating the same | |
KR20190037470A (ko) | 대화 시스템, 이를 포함하는 차량 및 대화 처리 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20171220 |
|
PG1501 | Laying open of application | ||
A201 | Request for examination | ||
PA0201 | Request for examination |
Patent event code: PA02012R01D Patent event date: 20201216 Comment text: Request for Examination of Application Patent event code: PA02011R01I Patent event date: 20171220 Comment text: Patent Application |
|
E701 | Decision to grant or registration of patent right | ||
PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20220225 |
|
GRNT | Written decision to grant | ||
PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20220302 Patent event code: PR07011E01D |
|
PR1002 | Payment of registration fee |
Payment date: 20220303 End annual number: 3 Start annual number: 1 |
|
PG1601 | Publication of registration |