[go: up one dir, main page]

KR20170011351A - 차량 제어 장치 및 이를 구비한 차량의 제어방법 - Google Patents

차량 제어 장치 및 이를 구비한 차량의 제어방법 Download PDF

Info

Publication number
KR20170011351A
KR20170011351A KR1020150103856A KR20150103856A KR20170011351A KR 20170011351 A KR20170011351 A KR 20170011351A KR 1020150103856 A KR1020150103856 A KR 1020150103856A KR 20150103856 A KR20150103856 A KR 20150103856A KR 20170011351 A KR20170011351 A KR 20170011351A
Authority
KR
South Korea
Prior art keywords
sound
vehicle
information
control unit
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
KR1020150103856A
Other languages
English (en)
Other versions
KR101977090B1 (ko
Inventor
제갈찬
장석진
김민재
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020150103856A priority Critical patent/KR101977090B1/ko
Priority to EP15003300.9A priority patent/EP3121064B1/en
Priority to US14/950,690 priority patent/US10214145B2/en
Priority to CN201610083969.9A priority patent/CN106364430B/zh
Publication of KR20170011351A publication Critical patent/KR20170011351A/ko
Application granted granted Critical
Publication of KR101977090B1 publication Critical patent/KR101977090B1/ko
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B60Q9/008—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for anti-collision purposes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B60K35/265—Voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/50—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking
    • B60Q1/525—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking automatically indicating risk of collision between vehicles in traffic or with pedestrians, e.g. after risk assessment using the vehicle sensor data
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q5/00—Arrangement or adaptation of acoustic signal devices
    • B60Q5/005—Arrangement or adaptation of acoustic signal devices automatically actuated
    • B60Q5/006—Arrangement or adaptation of acoustic signal devices automatically actuated indicating risk of collision between vehicles or with pedestrians
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • B60R11/0247—Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof for microphones or earphones
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373—Voice control
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/013—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over
    • B60R21/0134—Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over responsive to imminent contact with an obstacle, e.g. using radar systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M11/00—Telephonic communication systems specially adapted for combination with other electrical systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M19/00—Current supply arrangements for telephone systems
    • H04M19/02—Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone
    • H04M19/04—Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone the ringing-current being generated at the substations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M9/00—Arrangements for interconnection not involving centralised switching
    • H04M9/001—Two-way communication systems between a limited number of parties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/323—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only for loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/326—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only for microphones
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143—Touch sensitive instrument input devices
    • B60K2360/1438—Touch screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/148—Instrument input by voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/004—Arrangements for holding or mounting articles, not otherwise provided for characterised by position outside the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/207—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using multi-purpose displays, e.g. camera image and navigation or video on same display
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/307—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/70—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8033—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for pedestrian protection
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143—Alarm means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/54—Audio sensitive means, e.g. ultrasound
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2422/00—Indexing codes relating to the special location or mounting of sensors
    • B60W2422/95—Measuring the same parameter at multiple locations of the vehicle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/13—Acoustic transducers and sound field adaptation in vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Automation & Control Theory (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Theoretical Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computational Linguistics (AREA)
  • Mathematical Physics (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Navigation (AREA)

Abstract

본 발명은 소리 정보를 활용하여 차량을 제어하는 차량 제어 장치 및 그것의 제어방법에 관한 것으로, 차량의 외부 영상을 촬영하도록 형성된 카메라와 상기 카메라로부터 수신된 영상을 표시하는 디스플레이부와 상기 차량의 내부 및 외부에서 발생한 소리를 감지하는 소리 센서와 상기 차량의 내부 및 외부에서 소리를 출력하도록 형성된 음향출력부 및 상기 소리 센서에서 감지된 소리에 대응하는 소리 정보에 기초하여, 상기 소리와 관련된 기능이 실행되도록 상기 디스플레이부, 상기 소리 센서 및 상기 음향출력부 중 적어도 하나를 활성화하는 제어부를 포함하는 것을 특징으로 한다.

Description

차량 제어 장치 및 이를 구비한 차량의 제어방법{CONTROL DEVICE FOR VEHICLE AND METHOD FOR CONTROLLING VEHICLE}
본 발명은 소리 정보를 활용하여 차량을 제어하는 차량 제어 장치 및 이를 구비한 차량 제어방법에 관한 것이다.
단말기는 이동 가능여부에 따라 이동 단말기(mobile/portable terminal) 및 고정 단말기(stationary terminal)으로 나뉠 수 있다. 다시 이동 단말기는 사용자의 직접 휴대 가능 여부에 따라 휴대(형) 단말기(handheld terminal) 및 거치형 단말기(vehicle mounted terminal)로 나뉠 수 있다.
이와 같은 단말기(terminal)는 기능이 다양화됨에 따라 예를 들어, 사진이나 동영상의 촬영, 음악이나 동영상 파일의 재생, 게임, 방송의 수신 등의 복합적인 기능들을 갖춘 멀티미디어 기기(Multimedia player) 형태로 구현되고 있다.
한편, 전자 기술의 발달로 차량에 있어서, 차량의 자동화 기술이 많이 개발되었다. 또한, 차량의 전자 기술의 발달과 함께 운전자의 주행을 보조하기 위한 다양한 기능들이 개발되었다. 이러한 기술들을 일반적으로 ADAS(advanced Driver Assitance System) 시스템이라고 명칭된다.
차량의 주행 보조를 위하여, 차량 분야에서는, 다양한 센서들이 개발되어 왔으며, 이러한 센서들을 통하여 차량 주변의 상황 정보를 인지하는 기술이 발달되었다.
다만, 이러한 센서들이 카메라 등 시각적 정보의 센싱에 국한된 바, 본 발명은 소리 센서를 통하여, 센싱된 청각적 정보를 활용하여 주행을 보조하는 기능들을 제공하는 방법을 제안한다.
이에 본 발명의 일 목적은 소리 정보를 활용하여, 차량 주변의 상황 정보를 검출하는 것이다.
또한, 본 발명의 또 다른 목적은 차량 외부의 보행자와 차량 내부의 운전자가 창문의 개폐없이, 대화를 수행하는 방법을 제공하는 것이다.
또한, 본 발명의 또 다른 목적은 소리 정보에 기초하여 다양한 멀티미디어 기능을 제공하는 것이다.
본 발명은 차량 주변의 영상을 촬영하도록 형성된 카메라와 상기 카메라로부터 수신된 영상을 표시하도록 형성된 디스플레이부와 상기 차량의 내부 및 외부에서 발생한 소리를 감지하는 소리 센서와 상기 차량의 내부 및 외부에서 소리를 출력하도록 형성된 음향출력부 및 상기 소리 센서에서 감지된 소리에 대응하는 소리 정보에 기초하여, 상기 소리와 관련된 기능이 실행되도록 상기 디스플레이부, 상기 소리 센서 및 상기 음향출력부 중 적어도 하나를 활성화하는 제어부를 포함한다.
일 실시 예에 있어서, 상기 제어부는 상기 소리 정보에 기초하여, 상기 소리를 발생시킨 소리 발생원의 위치를 검출하고, 상기 검출된 소리 발생원의 위치에 기초하여, 알림 정보가 상기 소리 발생원을 향하도록, 상기 음향출력부를 제어하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 차량의 내부에서 발생한 소리를 상기 차량의 외부에 위치한 소리 발생원의 위치를 향하여 출력되도록 상기 소리 센서 및 상기 음향출력부를 제어하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 검출된 소리 발생원의 위치가 상기 차량을 기준으로 기 설정된 거리 이내에 해당하는 경우, 상기 알림 정보가 상기 소리 발생원을 향하여 출력되도록, 상기 음향출력부를 제어하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 검출된 소리 발생원의 위치가, 상기 차량을 기준으로 기 설정된 거리 이내에 해당하지 않는 경우, 상기 알림 정보가 상기 소리 발생원을 향하여 출력되지 않도록, 상기 음향출력부를 제어하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 음향출력부는 복수로 구비되며, 상기 복수의 음향출력부는 상기 차량 내에 서로 이격하여 배치되고, 상기 제어부는 상기 복수의 음향출력부 중 상기 소리를 발생시킨 소리 발생원의 위치에 대응되는 위치에 배치된 음향출력부에서 상기 소리와 관련된 알림 정보가 출력되도록, 상기 복수의 음향출력부를 제어하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 기 설정된 조건이 만족되는 경우, 상기 소리를 발생시킨 소리 발생원의 위치에 기초하여, 상기 소리 발생원의 영상이 촬영되도록, 상기 카메라를 제어하고, 상기 카메라로부터 수신된 영상을 상기 디스플레이부에 표시하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 카메라로부터 수신된 영상에 포함된 적어도 하나의 그래픽 객체를 검출하며, 상기 적어도 하나의 그래픽 객체로부터 수신된 각각의 소리의 소리 정보에 기초하여, 상기 적어도 하나의 그래픽 객체와 관련된 사고 발생 위험도 및 상대 거리 정보를 검출하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 적어도 하나의 그래픽 객체와 관련된 사고 발생 위험도 및 상대 거리 정보를 상기 적어도 하나의 그래픽 객체가 표시된 영역의 주변 영역 상에 함께 표시하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 적어도 하나의 객체 중 어느 하나의 객체에 대한 터치가 가해지는 것에 응답하여, 상기 어느 하나의 그래픽 객체에 대응되는 소리 발생원을 향하여, 알림 정보가 출력되도록, 상기 음향출력부를 제어하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 적어도 하나의 객체 중 어느 하나의 객체에 대한 터치가 가해지는 것에 응답하여, 상기 어느 하나의 그래픽 객체에 대응되는 소리 발생원을 향하여, 알림 정보가 출력되도록, 상기 음향출력부를 제어하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 차량에 장착된 창문의 개폐 상태를 감지하고, 상기 음향 출력부 및 소리 센서가 활성화된 상태에서, 상기 창문이 닫혀있는 상태에서 개방된 상태로 변경됨이 감지되는 경우, 상기 활성화된 음향 출력부 및 소리 센서를 비활성화 상태로 전환하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 소리 정보에 기초하여, 차량과 관련된 상황 정보를 검출하고, 상기 상황 정보가 기 설정된 조건에 해당하는 경우, 상기 상황 정보를 운전자가 인지하도록 상기 상황 정보와 관련된 정보를 상기 디스플레이부에 표시하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 상황 정보는 차량의 부품 상태 정보, 차량 외부의 소음 레벨 정보, 차량 소리 발생원의 종류 정보, 장애물 정보 및 노면의 상태 정보 중 적어도 하나를 포함하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 소리 센서를 통하여 감지된 소리가 기 설정된 시간 동안 감지되지 않는 경우, 음악을 재생하는 기능을 실행하거나, 백색 소음을 발생시키도록, 상기 음향출력부를 제어하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 소리 정보가 기 설정된 소리 정보와 일치하는 경우, 차량 주행과 관련된 주행 가이드 정보를 상기 디스플레이부에 표시하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 제어부는 상기 소리 정보에 기초하여, 차량의 주변에 장애물이 있다고 판단되는 경우, 상기 소리 센서의 소리 민감도를 제어하는 것을 특징으로 한다.
본 발명의 또 다른 실시 예에 있어서, 차량의 내부 및 외부에서 발생한 소리를 감지하는 단계와 상기 발생한 소리에 대응되는 소리 정보에 기초하여, 상기 차량과 관련된 상황 정보를 검출하는 단계 및 상기 차량과 관련된 상황 정보와 관련된 적어도 하나의 기능을 실행하는 단계를 포함한다.
일 실시 예에 있어서, 상기 적어도 하나의 기능을 실행하는 단계는, 상기 감지된 소리에 대응되는 소리 정보에 기초하여, 상기 소리의 소리 발생원의 위치를 검출하고, 상기 소리 발생원의 위치를 향하여 알림 정보를 출력하는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 알림 정보는 상기 소리 발생원의 위치가 상기 차량을 기준으로 기 설정된 거리 이내에 위치한 것에 근거하여, 출력되는 것을 특징으로 한다.
일 실시 예에 있어서, 상기 적어도 하나의 기능을 실행하는 단계에서는, 상기 감지된 소리를 발생시킨 소리 발생원과 차량 내부에 위치한 운전자가 대화를 수행하도록, 소리 센서 및 음향출력부를 제어하는 것을 특징으로 한다.
본 발명은 차량의 내부 또는 외부에서 발생한 소리에 대응되는 소리 정보에 기초하여, 상황 정보를 검출할 수 있다. 이를 통하여, 사용자는 소리를 통하여 감지할 수 있는 상황 정보를 빠르게 감지하고, 이와 관련된 기능을 실행할 수 있다.
또한, 본 발명은, 소리와 관련된 정보를 제공함으로써 운전자의 편의를 제공할 수 있다.
또한 본 발명은 창문을 개방할 필요없이, 차량 내부의 운전자와 차량 외부의 보행자가 대화를 수행하는 방법을 제공할 수 있다.
도 1a는 본 발명과 관련된 차량 제어 장치를 설명하기 위한 블록도이다.
도 1b는 본 발명과 관련된 텔레매틱스 단말기 시스템을 나타낸 블록도이다.
도 1c는 본 발명의 일 실시 예에 따른 텔레매틱스 단말기의 구성을 나타낸 블록도이다.
도 2는 본 발명에 따른 차량 제어 장치에 있어서, 차량에 구비된 센서들의 배치를 나타낸 개념도이다.
도 3은 본 발명에 따른 차량 제어 장치에 있어서, 차량 주변에서 발생한 소리에 대응되는 소리 정보에 근거하여, 차량을 제어하는 방법을 나타낸 흐름도이다.
도 4a부터 도 5d는 도 3의 제어방법을 나타낸 개념도들이다.
도 6a에서 도 6c는 디스플레이부에 표시된 상황 정보에 기초하여, 차량을 제어하는 방법을 나타낸 개념도들이다.
도 7a 및 도 7b는 디스플레이부에 표시되는 그래픽 객체가 소리 정보에 기초하여 서로 다른 출력 형태로 표시되는 방법을 나타낸 개념도들이다.
도 8a 및 도 8b는 차량 주변에서 발생한 소리에 대응되는 소리 정보에 기초하여, 주행 가이드 정보를 제공하는 방법을 나타낸 개념도들이다.
도 9는 차량 주변의 소리에 대응되는 소리 정보에 기초하여, 소음 민감도를 제어하는 방법을 나타낸 개념도이다.
도 10a부터 도 11b는 소리 정보에 기초하여, 멀티 미디어 기능을 추천하거나 실행하는 방법을 나타낸 개념도들이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 명세서에서 설명되는 차량은 차량 주변의 여러 환경과 관련된 정보를 센싱하고, 이에 따라 전자적인 제어가 가능한 차량일 수 있다.
도 1a는 본 발명과 관련된 차량 제어 장치를 설명하기 위한 블록도이다.
상기 차량 제어 장치(100)는 무선 통신부(110), 입력부(120), 구동부(130), 감지부(140, 또는 센싱부), 출력부(150), 인터페이스부(160), 메모리(170), 제어부(180) 및 전원 공급부(190) 등을 포함할 수 있다. 도 1a에 도시된 구성요소들은 차량를 구현하는데 있어서 필수적인 것은 아니어서, 본 명세서 상에서 설명되는 차량는 위에서 열거된 구성요소들 보다 많거나, 또는 적은 구성요소들을 가질 수 있다.
보다 구체적으로, 상기 구성요소들 중 무선 통신부(110)는, 차량 제어 장치(100)와 차량 사이, 차량 제어 장치(100)와 무선 통신 시스템 사이, 또는 차량 제어 장치(100)와 외부서버 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 또한, 상기 무선 통신부(110)는, 차량 제어 장치(100)를 하나 이상의 네트워크에 연결하는 하나 이상의 모듈을 포함할 수 있다.
이러한 무선 통신부(110)는, 방송 수신 모듈(111), 이동통신 모듈(112), 무선 인터넷 모듈(113), 근거리 통신 모듈(114), 위치정보 모듈(115) 중 적어도 하나를 포함할 수 있다.
상기 무선 통신부(110)는, 이동 단말기 또는 서버와 무선(wireless) 방식으로, 데이터를 교환할 수 있다. 또한 무선 통신부(110)는, 차량 운전자의 이동 단말기와, 무선으로 데이터를 교환할 수 있다. 무선 데이터 통신 방식으로는, 블루투스(Bluetooth), WiFi Direct, WiFi, APiX, NFC 등 다양한 데이터 통신 방식이 가능하다.
또한, 상기 무선 통신부(110)는, 이동 단말기 또는 서버로부터, 날씨 정보, 도로의 교통 상황 정보, 예를 들어, TPEG(Transport Protocol Expert Group) 정보를 수신할 수 있다.
한편, 사용자가 차량에 탑승한 경우, 사용자의 이동 단말기와 차량 제어 장치(100)는, 자동으로 또는 사용자의 요청에 따라, 근거리 통신부(114)를 통하여, 서로 페어링(pairing)을 수행할 수 있다.
입력부(120)는, 영상 신호 입력을 위한 카메라(121) 또는 영상 입력부, 오디오 신호 입력을 위한 마이크로폰(microphone, 122), 또는 오디오 입력부, 사용자로부터 정보를 입력받기 위한 사용자 입력부(123, 예를 들어, 터치키(touch key), 푸시키(mechanical key) 등)를 포함할 수 있다. 입력부(120)에서 수집한 음성 데이터나 이미지 데이터는 분석되어 사용자의 제어명령으로 처리될 수 있다.
구동부(130)는, 차량에 구성된 전반적인 부품들을 제어할 수 있다. 이러한 구동부(130)에는, 램프 구동부(131), 조향 구동부(132), 브레이크 구동부(133), 동력원 구동부(134), 썬루프 구동부(135), 서스펜션 구동부(136), 공조 구동부(137), 윈도우 구동부(138), 에어백 구동부(139) 등이 포함될 수 있다.
램프 구동부(131)는, 차량 내부 또는 외부에 배치되는 램프의 턴 온(turn on)/턴 오프(turn off)를 제어할 수 있다. 또한, 램프 구동부(131)은 램프의 빛의 세기, 방향 등을 제어할 수 있다. 예를 들어, 램프 구동부(131)은 차량에 구비된 방향 지시 램프, 브레이크 램프 등의 대하여, 턴 온 또는 턴 오프를 수행할 수 있다.
조향 구동부(132)는, 차량(200) 내의 조향 장치(steering apparatus)에 대한 전자식 제어를 수행할 수 있다. 상기 조향 장치는 차량 내에 구비되어, 차량 본체의 움직임을 제어하는 사용자 입력부일 수 있다. 예를 들어, 상기 조향 장치는 핸들(handle) 또는 스티어링 휠(steering wheel)이 될 수 있다.
상기 조향 장치는, 사용자 입력에 의하여 차량 본체의 이동 방향을 제어할 수 있다. 예를 들어, 사용자는 스티어링 휠을 오른쪽으로 회전시킴으로써, 차량의 진행 방향이 오른쪽을 향하도록, 상기 차량을 제어할 수 있다.
브레이크 구동부(133)는, 차량(200) 내의 브레이크 장치(brake equipment)에 대한 전자식 제어를 수행할 수 있다. 상기 브레이크 장치는 차량을 제동하기 위하여 구비된 부품으로써, 제동력을 바퀴 및 기타 장치에 전달하여, 차량의 운동을 제동시키는 역할을 수행할 수 있다. 상기 브레이크 장치는, 제동력 발생의 동력을 기준으로, 핸드 브레이크(hand brake), 공기 브레이크, 전기 브레이크 등을 포함할 수 있다.
상기 브레이크 구동부(133)는 상기 브레이크 장치에서 발생한 제동력이 바퀴 및 기타 장치에 전달되도록, 상기 브레이크 장치를 제어할 수 있다. 예를 들어, 브레이크 구동부(133)는 바퀴에 배치되는 브레이크의 동작을 제어하여, 차량(200)의 속도를 줄일 수 있다. 다른 예로, 브레이크 구동부(133)는 좌측 바퀴와 우측 바퀴에 각각 배치되는 브레이크의 동작을 달리하여, 차량(200)의 진행 방향을 좌측, 또는 우측으로 조정할 수 있다.
동력원 구동부(134)는, 차량(200) 내의 동력원에 대한 전자식 제어를 수행할 수 있다. 예를 들어, 화석 연료 기반의 엔진이 동력원인 경우, 동력원 구동부(134)는, 엔진에 대한 전자식 제어를 수행할 수 있다. 이에 의해, 상기 동력원 구동부(134)는 엔진의 출력 토크 등을 제어할 수 있다. 다른 예로, 전기 기반의 모터가 동력원인 경우, 동력원 구동부(134)는, 모터에 대한 제어를 수행할 수 있다. 이에 의해, 상기 동력원 구동부(134)는 모터의 회전 속도, 토크 등을 제어할 수 있다.
썬루프 구동부(135)는, 차량(200) 내의 썬루프 장치(sunroof apparatus)에 대한 전자식 제어를 수행할 수 있다. 예를 들어, 썬루프의 개방 또는 폐쇄를 제어할 수 있다.
서스펜션 구동부(136)는, 차량(200) 내의 서스펜션 장치(suspension apparatus)에 대한 전자식 제어를 수행할 수 있다. 예를 들어, 도로면에 굴곡이 있는 경우, 서스펜션 장치를 제어하여, 차량(200)의 진동이 저감되도록 제어할 수 있다.
공조 구동부(137)는, 차량(200) 내의 공조 장치(air cinditioner)에 대한 전자식 제어를 수행할 수 있다. 예를 들어, 차량 내부의 온도가 높은 경우, 공조 장치가 동작하여, 냉기가 차량 내부로 공급되도록 제어할 수 있다.
윈도우 구동부(138)는, 차량(200) 내의 서스펜션 장치(window apparatus)에 대한 전자식 제어를 수행할 수 있다. 예를 들어, 차량의 측면의 좌,우 윈도우들에 대한 개방 또는 폐쇄를 제어할 수 있다.
에어백 구동부(139)는, 차량(200) 내의 서스펜션 장치(airbag apparatus)에 대한 전자식 제어를 수행할 수 있다. 예를 들어, 에어백 구동부(139)는 차량의 사고 감지시, 에어백이 터지도록 제어할 수 있다.
센싱부(140)는 차량 내 정보, 차량을 둘러싼 주변 환경 정보 및 사용자 정보 중 적어도 하나를 감지하기 위한 하나 이상의 센서를 포함할 수 있다. 예를 들어, 센싱부(140)는 근접센서(141, proximity sensor), 조도 센서(142, illumination sensor), 소리 센서(143), 헤딩 센서(heading sensor), 요 센서(yaw sensor), 차량 전진/후진 센서, 휠 센서(wheel sensor), 차량 속도 센서, 터치 센서(touch sensor), 가속도 센서(acceleration sensor), 자기 센서(magnetic sensor), 중력 센서(G-sensor), 자이로스코프 센서(gyroscope sensor), 모션 센서(motion sensor), RGB 센서, 적외선 센서(IR 센서: infrared sensor), 지문인식 센서(finger scan sensor), 초음파 센서(ultrasonic sensor), 광 센서(optical sensor, 예를 들어, 카메라(121 참조)), 마이크로폰(microphone, 122 참조), 배터리 게이지(battery gauge), 환경 센서(예를 들어, 기압계, 습도계, 온도계, 방사능 감지 센서, 열 감지 센서, 가스 감지 센서 등), 화학 센서(예를 들어, 전자 코, 헬스케어 센서, 생체 인식 센서 등), 차체 경사 감지센서, 배터리 센서, 연료 센서, 타이어 센서, 핸들 회전 정도를 감지하는 스티어링 센서 중 적어도 하나를 포함할 수 있다. 한편, 본 명세서에 개시된 차량은, 이러한 센서들 중 적어도 둘 이상의 센서에서 센싱되는 정보들을 조합하여 활용할 수 있다.
또한, 센싱부(14)는, 그 외, 가속페달센서, 압력센서, 엔진 회전 속도 센서(engine speed sensor), 공기 유량 센서(AFS), 흡기 온도 센서(ATS), 수온 센서(WTS), 스로틀 위치 센서(TPS), TDC 센서, 크랭크각 센서(CAS) 등을 더 구비할 수 있다.
상기 소리 센서(143)은 마이크(122)의 일 구성 요소이거나, 독립하여 존재할 수 있다. 상기 소리 센서(143)는 오디오 신호를 감지하도록 형성될 수 있다. 상기 오디오 신호는 차량의 외부 또는 내부에서 발생한 소리일 수 있다. 본 명세서에 개시된 차량는, 상기 소리 센서(143)에서 감지된 오디오 신호에 대응되는 정보를 활용할 수 있다.
출력부(150)는 시각, 청각 또는 촉각 등과 관련된 출력을 발생시키기 위한 것으로, 디스플레이부(151), 음향 출력부(152), 햅팁 모듈(153), 광 출력부(154) 중 적어도 하나를 포함할 수 있다. 디스플레이부(151)는 터치 센서와 상호 레이어 구조를 이루거나 일체형으로 형성됨으로써, 터치 스크린을 구현할 수 있다. 이러한 터치 스크린은, 차량 제어 장치(100)와 사용자 사이의 입력 인터페이스를 제공하는 사용자 입력부(123)로써 기능함과 동시에, 차량 제어 장치(100)와 사용자 사이의 출력 인터페이스를 제공할 수 있다.
상기 디스플레이부(151)는 차량 내부 전면의 클러스터(cluster) 또는 HUD(Head Up Display)를 포함할 수 있다. 한편, 상기 디스플레이부(151)가 HUD 인 경우, 차량 제어 장치(100)의 전면 유리에 이미지를 투사하는 투사 모듈을 포함할 수 있다.
인터페이스부(160)는 차량 제어 장치(100)에 연결되는 다양한 종류의 외부 기기와의 통로 역할을 수행한다. 이러한 인터페이스부(160)는, 차량의 ECU(270), 차량 센서부(260), 유/무선 헤드셋 포트(port), 외부 충전기 포트(port), 유/무선 데이터 포트(port), 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트(port), 오디오 I/O(Input/Output) 포트(port), 비디오 I/O(Input/Output) 포트(port), 이어폰 포트(port) 중 적어도 하나를 포함할 수 있다. 차량 제어 장치(100)에서는, 상기 인터페이스부(160)에 외부 기기가 연결되는 것에 대응하여, 연결된 외부 기기와 관련된 적절할 제어를 수행할 수 있다.
또한, 메모리(170)는 차량 제어 장치(100)의 다양한 기능을 지원하는 데이터를 저장한다. 메모리(170)는 차량 제어 장치(100)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 차량 제어 장치(100)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는, 무선 통신을 통해 외부 서버로부터 다운로드 될 수 있다. 또한 이러한 응용 프로그램 중 적어도 일부는, 차량 제어 장치(100)의 기본적인 기능(예를 들어, 길 안내 기능, 차량 제어 기능)을 위하여 출고 당시부터 차량 제어 장치(100)상에 존재할 수 있다. 한편, 응용 프로그램은, 메모리(170)에 저장되고, 차량 제어 장치(100) 상에 설치되어, 제어부(180)에 의하여 상기 차량의 동작(또는 기능)을 수행하도록 구동될 수 있다.
제어부(180)는 상기 응용 프로그램과 관련된 동작 외에도, 통상적으로 차량 제어 장치(100)의 전반적인 동작을 제어한다. 제어부(180)는 위에서 살펴본 구성요소들을 통해 입력 또는 출력되는 신호, 데이터, 정보 등을 처리하거나 메모리(170)에 저장된 응용 프로그램을 구동함으로써, 사용자에게 적절한 정보 또는 기능을 제공 또는 처리할 수 있다. 이러한 제어부(180)는, 차량의 ECU(electronic control unit)와 동일 또는 유사한 역할을 수행하는 구성 요소로 이해될 수 있다.
또한, 제어부(180)는 메모리(170)에 저장된 응용 프로그램을 구동하기 위하여, 도 1a와 함께 살펴본 구성요소들 중 적어도 일부를 제어할 수 있다. 나아가, 제어부(180)는 상기 응용 프로그램의 구동을 위하여, 차량 제어 장치(100)에 포함된 구성요소들 중 적어도 둘 이상을 서로 조합하여 동작시킬 수 있다.
전원공급부(190)는 제어부(180)의 제어 하에서, 외부의 전원, 내부의 전원을 인가 받아 차량 제어 장치(100)에 포함된 각 구성요소들에 전원을 공급한다. 이러한 전원공급부(190)는 배터리를 포함하며, 상기 배터리는 내장형 배터리 또는 교체가능한 형태의 배터리가 될 수 있다.
도 1b는 본 명세서에 개시된 실시 예에 따른 텔레매틱스 단말기 시스템을 나타낸 블록도이다.
도 1b에 도시한 바와 같이, 차량 텔레매틱스 단말기 시스템은, 교통 정보 및 각종 데이터(예를 들면, 프로그램, 실행 파일 등)를 제공하는 정보 제공 센터(40)와; 차량 내에 장착되고, 원거리 무선 통신망(30) 및/또는 근거리 무선 통신망을 통해 교통 정보를 수신하고, 인공위성(20)을 통해 수신된 GPS 신호 및 상기 교통 정보를 근거로 길 안내 서비스를 제공하는 텔레매틱스 단말기(200)로 구성된다. 여기서, 상기 통신망은 LAN(Local Area Network), WAN(Wide Area Network)과 같은 유무선 통신 네트워크를 더 포함할 수도 있다.
상기 통신망을 통해서는 신호등 정보를 비롯한 각종 교통정보(예컨대, 도로 교통 정보 또는 관심지역 정보)가 수집되며, 수집된 정보는 정보 제공 센터(40)(예컨대, 서버)에서 TPEG(Transport Protocol Expert Group) 규격에 따라 처리되어 방송국으로 전송된다. 이에 따라 방송국에서는 신호등 정보를 포함하는 교통정보를 방송신호에 삽입하여 상기 텔레매틱스 단말기(200)으로 방송한다. 여기서, 상기 신호등 정보는 차량이 신호등에 인접할 때 신호등에 설치된 서버(도시하지 않음)로부터 수신될 수도 있다.
상기 서버는 통신망에 연결된 여러 가지 경로, 예를 들어 운영자 입력, 유무선 인터넷, TDC(Transparent Data Channel), MOC(Multimedia Object Transport)와 같은 디지털 방송 서비스, 타 서버 또는 검증 카(probe car)로부터 수집되는 각종 교통정보를, 예를 들면 교통정보 서비스를 위한 규격인 TPEG(Transport Protocol Expert Group) 규격에 따른 포맷과 같은 교통정보 포맷으로 재구성하여 방송국으로 전송한다.
상기 서버는 신호등 정보를 포함하는 TPEG 규격의 교통정보 포맷을 생성하여 방송국으로 전송할 수 있다.
방송국은 교통정보 수신 단말기 역할을 수행하는 차량 등에 탑재된 텔레매틱스 단말기(200), 예를 들어 네비게이션 장치가 수신할 수 있도록 서버로부터 수신한 신호등 정보를 포함하는 교통 정보를 방송신호에 실어 무선으로 송출한다. 상기 교통정보는 신호등 정보를 포함하며, 그 밖에 사고, 도로 상황, 교통 혼잡, 도로 건설, 도로 폐쇄, 공공 교통망 지연, 항공 운항 지연과 같은 도로, 해양, 항공 운항을 위해 필요한 각종 교통 조건에 대한 정보를 포함할 수 있다.
상기 방송국은 서버로부터 처리된 신호등 정보를 포함하는 교통정보를 수신하여, 다양한 디지털 방송 규격에 따른 디지털 신호를 통해 상기 텔레매틱스 단말기(200)에 전송한다. 이 경우, 방송 규격으로는 유레카-147[ETSI EN 300 401]에 기반한 유럽향 디지털 오디오 방송 (Digital Audio Broadcasting; DAB) 규격, 지상파 또는 위성 디지털 멀티미디어 방송(Digital Multimedia Broadcasting; DMB), 지상파 디지털 비디오 방송(Digital Video Broadcasting; DVB-T) 규격, 휴대용 디지털 비디오 방송(Digital Video Broadcasting-Handheld; DVB-H) 규격, MFLO(Media Forward Link Only) 규격과 같은 각종 디지털 방송 규격을 포함한다.
또한, 상기 방송국은 신호등 정보를 포함하는 교통정보를 유무선 인터넷과 같은 유무선 네트워크를 통해 전송할 수 있다.
상기 텔레매틱스 단말기(200)를 탑재한 상기 차량은 일반적인 승용차, 버스, 기차, 선박, 항공기 등 사람이나 물건의 이동을 목적으로 기계, 전자 장치를 이용하여 구현된 가능한 모든 운반체를 의미한다.
상기 차량은 교통정보 수신 단말기를 탑재하며, 탑재된 교통정보 수신 단말기를 이용하여 방송국으로부터 신호등 정보를 수신하고, 신호등 정보를 처리하여, 처리된 신호등 정보를 그래픽, 텍스트 및/또는 오디오를 통해 사용자에게 전달한다.
한편, 상기 텔레매틱스 단말기(200)는 이동 통신 모듈을 포함할 수 있다. 상기 이동 통신 모듈은, 이동 통신망 상에서 기지국(10), 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기서, 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 및/또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
또한, 상기 텔레매틱스 단말기(200)는 유무선 통신 방식에 의하여 차량 단말기(100)와 통신을 수행한다. 상기 차량 단말기(100)는 일반적인 차량 제어를 수행하거나, 차량의 속도 및 기어 상태 등 차량에 대한 정보를 제공하거나, 차량의 비상등을 온(On)/오프(Off) 제어하거나, 전조등(headlight)을 온/오프 제어하거나, 차량 내 좌석에 설치된 감지 센서를 통해 승객이 착석했는지를 판단하거나, 경적의 온/오프를 제어한다. 상기 차량 단말기(100)는 HUD(Head-Up Display) 또는 프로젝터(projector)를 포함할 수 있다.
도 1c은 본 발명의 일 실시 예에 따른 텔레매틱스 단말기(200)의 구성을 나타낸 블록도이다.
도 1c에 도시한 바와 같이, 텔레매틱스 단말기(200)는 텔레매틱스 단말기(200)를 전체적으로 제어하는 제어부(예를 들면, 중앙 처리 장치, CPU)(212)와, 각종 정보를 저장하는 메모리(213)와, 각종 키 신호를 제어하는 키 제어부(211)와, LCD(liquid crystal display)를 제어하는 LCD 제어부(214)를 내장한 메인 보드(210)로 구성된다.
상기 메모리(213)는 길 안내 정보를 디지털 지도상에 표시하기 위한 지도 정보(지도 데이터)를 저장한다. 또한, 상기 메모리(213)는 차량이 현재 주행하는 도로 상황에 따른 교통 정보를 입력할 수 있도록 하는 교통 정보 수집 제어 알고리즘 및 상기 알고리즘의 제어를 위한 정보를 저장한다.
상기 메인 보드(210)는 텔레매틱스 단말기(200)와 무선 통신 시스템 간의 무선 통신 또는 텔레매틱스 단말기(200)와 그 텔레매틱스 단말기(200)가 위치한 네트워크 간의 무선 통신을 수행하게 하는 무선 통신 모듈(206); 차량의 위치 안내, 출발지부터 목적지까지의 주행 경로 추적 등을 위한 GPS 신호를 수신하거나 사용자에 의해서 수집된 교통정보를 GPS(Global Positioning System) 신호로 송신하는 위치 정보 모듈(207); CD(compact disk)에 기록된 신호를 재생하기 위한 CD 데크(CD deck)(208); 자이로 센서(gyro sensor)(209) 등으로 구성된다. 상기 무선 통신 모듈(206) 및 위치 정보 모듈(207)은 각 모듈들을 위한 안테나(204, 205)를 통하여 신호를 송신/수신한다.
상기 무선 통신 모듈(206)은 고유의 기기번호가 부여된 이동 전자기기로서 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신하기 위한 이동 통신 모듈(206a); WLAN(Wireless LAN), 와이 파이(Wi-Fi), 와이브로(Wireless Broadband; Wibro), 와이맥스(World Interoperability for Microwave Access; Wimax), HSDPA(High Speed Downlink Packet Access) 등과 같은 방식으로 무선 인터넷을 접속할 수 있는 무선 인터넷 모듈(206b); 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee, Wireless LAN (Bluetooth, 802.11n 등등 프로토콜)등과 같은 방식으로 통신을 수행하는 근거리 통신 모듈(206c) 등을 포함할 수 있다.
또한, 방송 수신 모듈(222)은 상기 메인 보드(210)에 연결되고, 안테나(223)를 통해서 방송 신호를 수신한다. 상기 메인보드(210)에는 인터페이스 보드(203)를 통해서 상기 LCD 제어부(214)의 제어를 받는 표시부(LCD)(201)와, 키 제어부(211)의 제어를 받는 프론트 보드(202)와 차량의 내부 및/또는 외부를 촬영하는 카메라(227)가 연결된다. 상기 표시부(201)는, 각종 비디오 신호, 문자 신호를 표시하고, 상기 프론트 보드(202)는 각종 키 신호 입력을 위한 버튼을 구비하고, 사용자 선택이 이루어진 버튼에 해당하는 키 신호를 메인 보드(210)에 제공한다. 또한, 상기 표시부(201)는 도2의 근접 센서 및 터치 센서(터치 스크린)을 포함한다.
상기 프론트 보드(202)는 교통정보를 직접 입력하기 위한 메뉴 키를 구비하며, 상기 메뉴 키는 키 제어부(211)의 제어를 받도록 구성될 수 있다.
상기 오디오 보드(217)는 상기 메인 보드(210)와 연결되고, 각종 오디오 신호를 처리한다. 상기 오디오 보드(217)는 오디오 보드(217)의 제어를 위한 마이크로컴퓨터(219), 라디오 신호를 수신하는 튜너(218), 상기 마이크로컴퓨터(219)에 전원을 공급하는 전원부(216), 각종 음성 신호를 처리하는 신호 처리부(215)로 구성된다.
또한, 상기 오디오 보드(217)는 라디오 신호를 수신하기 위한 라디오 안테나(220)와, 오디오 테이프를 재생하기 위한 테이프 데크(221)로 구성된다. 상기 오디오 보드(217)는 상기 오디오 보드(217)에서 신호 처리된 음성 신호를 출력하기 위한 음성 출력부(예를 들면, 앰프)(226)를 더 구성할 수도 있다.
상기 음성 출력부(앰프)(226)는 차량 인터페이스(224)에 연결된다. 즉, 상기 오디오 보드(217)와 메인 보드(210)는 상기 차량 인터페이스(224)에 연결된다. 상기 차량 인터페이스(224)는 음성 신호를 입력하는 핸즈프리(225a), 탑승자 안전을 위한 에어백(225b), 차량의 속도를 검출하기 위한 속도 센서(225c) 등이 연결될 수도 있다. 상기 속도 센서(225c)는 차량 속도를 산출하고, 그 산출된 차량 속도 정보를 상기 중앙 처리 장치(212)에 제공한다.
상기 텔레매틱스 단말기(200)에 적용된 네비게이션 세션(300)은, 지도 데이터 및 차량 현재 위치 정보를 근거로 길 안내 정보를 발생하고, 그 발생된 길 안내 정보를 사용자에게 통지한다.
상기 표시부(201)는 근접 센서를 통해 표시창 내에서 근접 터치를 감지한다. 예를 들면, 상기 표시부(201)는 포인터(예를 들면, 손가락 또는 스타일러스 팬(stylus pen))가 근접 터치될 때 그 근접 터치의 위치를 검출하고, 그 검출된 위치에 대응하는 위치 정보를 상기 제어부(212)에 출력한다.
음성 인식 장치(또는 음성 인식 모듈)(301)는 사용자에 의해 발성된 음성을 인식하고, 그 인식된 음성 신호에 따라 해당 기능을 수행한다.
상기 텔레매틱스 단말기(200)에 적용된 네비게이션 세션(session)(300)은, 지도 데이터 상에 주행 경로를 표시한다.
상기 각 구성요소들 중 적어도 일부는, 이하에서 설명되는 다양한 실시 예들에 따른 차량의 동작, 제어, 또는 제어방법을 구현하기 위하여 서로 협력하여 동작할 수 있다. 또한, 상기 차량의 동작, 제어, 또는 제어방법은 상기 메모리(170)에 저장된 적어도 하나의 응용 프로그램의 구동에 의하여 차량 상에서 구현될 수 있다.
이하에서는 도 1a 및 도 1c에서 설명한 구성 요소 중 하나 이상을 포함하는 차량 제어 장치 또는 텔레매틱스 단말기에서 구현될 수 있는 차량의 제어 방법과 관련된 실시 예들에 대해 첨부된 도면을 참조하여 살펴보겠다. 본 발명은 본 발명의 정신 및 필수적 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있음은 당업자에게 자명하다. 이하의 설명에서는, 차량 제어 장치를 기준으로 설명하나, 텔레매틱스 단말기에 대해서도 동일한 제어 방법에 적용될 수 있다.
이하의 도면의 설명에서는 왼쪽 위에 그려진 도면을 기준으로, 시계 방향으로 또는 위에서 아래로 순서를 붙여 설명한다.
본 발명은 차량 주변에서 발생하는 소리에 대응되는 소리 정보를 활용하여, 차량을 제어할 수 있다. 이하에서는, 본 발명에 따른 차량 제어 장치가 차량의 주변에서 발생하는 소리에 대응되는 소리 정보에 근거하여, 차량을 제어하는 방법에 대하여, 도면과 함께 살펴본다.
도 2는 본 발명에 따른 차량 제어 장치에 있어서, 차량에 구비된 센서들의 배치를 나타낸 개념도이다.
본 발명에 따른 차량 제어 장치는 소리 센서(143, 또는 소리 감지부), 마이크(122), 음향 출력부(152), 이미지 센서를 포함한 카메라(121)를 포함할 수 있다.
본 발명은 상기 소리 센서(143)를 별도로 구비하거나, 마이크(122) 내에 포함된 소리 센서(143)를 통하여, 차량의 내부 또는 외부의 소리를 감지할 수 있다.
상기 소리 센서(143)는 차량의 내부 또는 외부의 소리를 감지하도록 형성될 수 있다. 예를 들어, 상기 소리 센서(143)는 가청 주파수보다 높은 주파수의 소리를 감지하는 초음파 센서, 가청 주파수보다 낮은 주파수의 소리를 감지하는 지진 센서, 가청 주파수의 소리를 감지하는 음성 인식 센서 등이 될 수 있다.
즉, 상기 소리 센서(143)는, 차량의 내부 또는 외부의 소리를 감지하여, 소리에 대응되는 오디오 데이터를 생성할 수 있다. 상기 오디오 데이터는, 소리 정보라고 이해될 수 있다.
또한, 상기 소리 센서(143)는, 기 설정된 방향에서 발생한 소리에 대한 민감도가 높을 수 있다. 이러한 소리 센서(143)는, 지향성 마이크와 동일한 역할을 수행할 수 있다. 또한, 상기 소리 센서(143)는, 기 설정된 방향과 다른 방향에서 발생한 소리에 대한 민감도가 낮을 수 있다. 즉, 상기 소리 센서(143)는, 기 설정전 방향에서 발생한 소리를 상기 기 설정된 방향과 다른 방향에서 발생한 소리보다 더 잘 감지할 수 있다. 예를 들어, 상기 소리 센서(143)는, 소리 센서(143)의 전면 방향에서 발생한 소리를 후면 방향에서 발생한 소리보다 더 잘 감지할 수 있다.
본 발명에 따른 차량 제어 장치는 상기 소리 센서(143)를 복수로 구비할 수 있다. 이 경우, 상기 소리 센서(143)는, 상기 차량을 기준으로, 다양한 방향에서 발생한 소리를 감지하기 위하여, 차량 본체의 외부 및 내부에 서로 다른 위치에 배치될 수 있다.
예를 들어, 도 2에 도시된 바와 같이, 복수의 소리 센서(300a, 300b, 300c, 300d)는 차량의 외부에서 발생하는 소리를 감지하도록 차량 본체의 앞쪽에 2개(300a, 300b), 뒤쪽에 2개(300c, 300d)가 배치될 수 있다. 또한, 상기 앞쪽의 2개(300a, 300b) 및 뒤쪽의 2개의 소리 센서(300c, 300d)는 차량 본체의 좌우에 서로 이격하여 배치될 수 있다. 여기에서, 상기 차량 본체의 외부에 배치된 소리 센서(300a, 300b, 300c, 300d)는 외부 소리 감지부라는 용어와 동일한 의미로 이해될 수 있다.
또 다른 예로, 비록 도시되지는 않았지만, 상기 복수의 소리 센서는 차량의 내부에서 발생하는 소리를 감지하도록 차량 본체의 내부에 서로 이격하여 배치될 수 있다. 예를 들어, 상기 복수의 소리 센서(320a, 320b, 320c, 320d)는, 차량 본체의 내부에 앞뒤좌우에 이격하여 배치될 수 있다.
상기 음향 출력부(152)는 소리 정보에 대응되는 소리를 출력할 수 있다. 예를 들어, 상기 음향 출력부(152)는 스피커가 될 수 있다.
상기 음향 출력부(152)는 기 설정된 방향으로 소리를 출력할 수 있다. 이러한 음향 출력부(152)는 지향성 스피커와 동일한 역할을 수행할 수 있다. 즉, 상기 음향 출력부(152)는 상기 기 설정된 방향과 다른 방향으로 소리를 출력하지 않을 수 있다. 예를 들어, 상기 음향 출력부(152)는, 음향 출력부(152)의 전면을 기준으로, 시계방향으로, 45도 이동한 방향으로 소리를 출력할 수 있다. 이 경우, 다른 방향에 있는 사용자는, 상기 음향 출력부(152)에서 발생한 소리를 들을 수 없다.
또한, 상기 차량은 음향 출력부(152)를 복수로 구비할 수 있다. 이 경우, 도 2에 도시된 바와 같이, 상기 차량은 다양한 방향으로 소리를 출력하기 위하여, 앞서 설명한 소리 센서와 유사하게, 복수의 음향 출력부(310a, 310b, 310c, 310d)를 차량 본체의 외부에 서로 이격하여 배치될 수 있다. 또한, 비록 도시되지는 않았지만, 상기 복수의 음향 출력부(330a, 330b, 330c, 330d)는, 본체의 내부에서 서로 이격하여 배치될 수 있다.
상기 카메라(121)는 차량의 내부 또는 외부를 촬영하도록 형성될 수 있다. 또한, 상기 카메라(121)는, 차량 본체를 중심으로, 차량 본체의 주변 영상을 촬영하도록 복수로 구비될 수 있다. 예를 들어, 상기 카메라(121)는 차량 본체의 전방, 후방 및 양쪽 사이드 미러(side mirror)에 배치되어, 차량의 전방 영상, 후방 영상 , 좌방 영상 및 우방 영상을 모두 촬영할 수 있다. 이 경우, 상기 제어부(180)는 상기 전방 영상, 후방 영상, 좌방 영상 및 우방 영상을 합성하여, 차량의 주변 영상을 생성하고, 이를 디스플레이부(151)에 표시할 수 있다. 이렇게, 차량 본체를 중심으로 차량의 주변 영상을 촬영하여, 차량 주변의 영상을 상공에서 보는 듯한 영상을 제공하는 것을 어라운드 뷰 모니터(AVM, Around View Monitor) 시스템이라고도 명명할 수 있다.
이상에서는, 본 발명에 따른 차량 제어 장치에서 소리 센서(143), 음향 출력부(152) 및 카메라(121)의 배치 구조에 대하여 설명하였다. 이하의 설명에서는, 상기 소리 센서(143), 음향 출력부(152) 및 카메라(121)가 복수로 구비한 차량을 기준으로 설명한다. 다만, 본 발명은 상기 소리 센서(143), 음향 출력부(152) 및 카메라(121)가 하나의 시스템으로 구비되거나, 하나씩 구비된 경우에 대해서도 동일하게 적용될 수 있다.
또한, 이하의 설명에서는, 지향성 소리 센서 및 지향성 음향 출력부를 가정하여 설명하나, 일반적인 소리 센서 및 일반적인 마이크에도 동일하게 적용될 수 있다.
이하에서는, 본 발명에 따른 차량 제어 장치에서, 차량 주변에서 발생하는 소리를 이용하여 차량을 제어하는 방법을 설명한다.
도 3은 본 발명에 따른 차량 제어 장치에 있어서, 차량 주변에서 발생한 소리에 대응되는 소리 정보에 근거하여, 차량을 제어하는 방법을 나타낸 흐름도이다. 도 4a부터 도 5d는 도 3의 제어방법을 나타낸 개념도들이다.
우선, 본 발명에 따른 차량 제어 장치의 제어부(180)는 차량의 외부 또는 내부에서 발생한 소리를 감지하는 단계를 진행할 수 있다(S210).
제어부(180)는 소리 센서(143)를 통하여, 차량의 외부 또는 내부에서 발생한 소리를 감지할 수 있다.
상기 차량의 외부 또는 내부에서 발생하는 소리는 차량의 내부에 위치한 사용자의 음성, 차량 본체의 진동에 의한 소리, 차량 부품에서 발생하는 소리, 차량 외부에 위치한 사람으로부터 발생한 소리, 다른 차량으로부터 발생하는 소리 등이 될 수 있다.
상기 소리가 감지되면, 본 발명에 따른 차량 제어 장치의 제어부(180)는 상기 감지된 소리에 대응되는 소리 정보에 기초하여, 상기 소리와 관련된 기능을 실행하는 단계를 진행할 수 있다(S220).
상기 제어부(180)는 상기 소리 센서(143)에서 소리가 감지되면, 상기 감지된 소리에 대응되는 소리 정보에 기초하여, 상기 소리와 관련된 기능을 실행할 수 있다.
상기 소리 정보는, 주파수(frequency), 음량(volume), 음색(color, timbre), 음고(pitch), 음가(duration or length)가 포함될 수 있다.
또한, 상기 제어부(180)는, 상기 감지된 소리에 대응되는 소리 정보에 기초하여, 상황 정보를 검출할 수 있다.
상기 외부 상황 정보는 구급차의 접근 정보, 소리 발생원의 위치 정보, 노면의 상태 정보, 차량 호출 정보, 드라이브 스루(drive through) 상태 정보, 외부 소음 정보, 외부 물체의 종류 정보, 주차 사이렌 정보, 장애물 정보 등이 포함될 수 있다.
상기 제어부(180)는, 메모리(170)에 저장된 복수의 소리 정보 중 상기 감지된 소리 정보와 일치하는 소리 정보를 검출할 수 있다.
상기 메모리(170)에는, 상기 복수의 소리 정보별로, 상황 정보를 대응시켜 저장될 수 있다. 예를 들어, 상기 메모리(170)에는, 제1소리 정보에 제1상황 정보가, 제2소리 정보에 제2상황 정보가 대응되어 저장될 수 있다.
따라서, 상기 제어부(180)는, 상기 감지된 소리의 소리 정보와 일치하는 소리 정보에 대응되어 저장된 상황 정보를 검출할 수 있다. 예를 들어, 상기 제어부(180)는, 상기 감지된 소리에 대응되는 소리 정보가 구급차의 사이렌 소리 정보와 일치하는 경우, 구급차가 접근하고 있음을 나타내는 상황 정보를 검출할 수 있다.
또한, 상기 제어부(180)는, 복수의 소리 센서(143)로부터 감지된 소리에 대응되는 소리 정보에 근거하여, 상기 소리를 발생시킨 소리 발생원의 위치를 검출할 수 있다.
보다 구체적으로, 상기 제어부(180)는 소리 발생원으로부터 발생한 소리를 복수의 소리 센서(143)로 감지하고, 상기 복수의 소리 센서(143)에서 감지한 복수의 소리 정보를 이용하여, 소리 발생원의 위치를 검출할 수 있다. 예를 들어, 상기 제어부(180)는, 각 소리 센서(143)에서 소리가 감지된 시점 정보 및 음량에 근거하여, 소리 발생원의 위치를 검출할 수 있다.
또한, 상기 제어부(180)는, 소리 정보에 기초하여, 노면 상태 정보를 검출할 수 있다. 상기 노면 상태 정보는 노면의 상태를 나타내는 정보일 수 있다. 예를 들어, 상기 노면 상태 정보는, 노면의 마찰력 정보, 노면의 장애물 유무 정보 등이 될 수 있다.
보다 구체적으로, 상기 제어부(180)는 바퀴와 노면의 마찰음에 기초하여, 노면의 마찰력을 검출할 수 있다. 예를 들어, 상기 제어부(180)는, 노면에 물기로 인한 바퀴와 노면의 마찰음이 감지된 경우, 상기 바퀴와 노면의 마찰음에 기초하여, 노면의 마찰력이 작은 상태임을 감지할 수 있다. 따라서, 사용자는, 현재 바퀴와 노면의 마찰력이 작아, 차량이 미끄러질 위험이 있음을 인지하고, 이를 고려하여 차량을 제어할 수 있다.
또한, 상기 제어부(180)는 기 설정된 단어가 포함된 소리 정보가 감지되거나, 일정 거리 내에서, 기 설정된 음량 이상의 소리가 감지되는 경우, 차량 호출 정보를 검출할 수 있다. 상기 차량 호출 정보는 외부에서 차량을 호출하였는지 여부를 나타내는 정보일 수 있다. 예를 들어, 상기 차량 호출 정보는 운전자의 이름, 차량의 번호판, 기 설정된 차량 이름에 포함된 소리 정보에 기초하여 검출될 수 있다. 또 다른 예로, 상기 차량 호출 정보는, 상기 차량을 기준으로, 일정 거리 이내에서, 기 설정된 음량 이상의 소리 정보에 기초하여 검출될 수 있다.
또한, 상기 제어부(180)는 기 설정된 단어가 포함된 소리 정보 및 위치 정보 중 적어도 하나의 정보에 근거하여, 드라이브 스루 상태 정보를 검출할 수 있다. 상기 드라이브 스루 상태 정보는 운전자가 차 내부에서, 음식을 주문하려는 상태를 나타내는 정보일 수 있다. 예를 들어, 상기 드라이브 스루 상태 정보는 "주문하시겠습니까"라는 단어가 포함된 소리 정보에 기초하여 검출될 수 있다. 또 다른 예로, 상기 드라이브 스루 상태 정보는 특정 음식점 위치 정보에 기초하여 검출될 수 있다.
또한, 상기 제어부(180)는 외부 소리에 기초하여, 외부 소음 정보, 외부 물체의 종류 정보 또는 주차 사이렌 정보를 검출할 수 있다. 상기 외부 소음 정보는, 외부의 소음량 정보일 수 있다. 상기 외부 물체의 종류 정보는 구급차, 자전거, 사람 등 소리 발생원의 종류 정보일 수 있다.
상기 제어부(180)는 소리에 기초하여, 상황 정보가 검출되면, 상기 상황 정보에 적합한 기능들을 사용자에게 추천하거나 자동으로 실행할 수 있다. 상기 상황 정보에 적합한 기능들은 소리와 관련된 기능일 수 있다.
상기 소리와 관련된 기능은 상기 소리에 대응되는 소리 정보를 입력 정보로 이용하는 기능, 상기 소리 및 소리와 관련된 알림 정보를 출력하는 기능, 상기 소리에 대응되는 소리 정보와 관련된 정보를 표시하는 기능 등이 될 수 있다.
예를 들어, 도 4a에 도시된 바와 같이, 상기 제어부(180)는 외부에서 차량을 호출하는 소리가 발생한 것이 감지되면, 상기 소리를 발생시킨 소리 발생원과 차량 내부의 사용자가 대화를 수행할 수 있도록 소리 센서(143) 및 음향 출력부(152)를 활성화시킬 수 있다.
여기에서, 활성화는, 소리 센서 또는 음향 출력부에 전원이 공급되어, 소리를 감지하거나, 소리의 출력이 가능한 상태를 의미할 수 있다. 이와 반대로, 비활성화는, 소리 센서 또는 음향 출력부에 전원의 공급이 차단되어, 소리를 감지하거나, 소리의 출력이 불가능한 상태를 의미할 수 있다.
즉, 상기 제어부(180)는 차량의 내부 또는 외부에 복수의 소리 센서 및 복수의 음향 출력부가 서로 이격하여 배치된 경우, 상기 차량을 호출하는 소리에 기초하여, 소리 발생원의 위치를 검출할 수 있다. 그리고, 상기 제어부(180)는 상기 소리 발생원의 위치를 향하여 소리를 출력하거나, 상기 소리 발생원의 위치에서 발생하는 소리를 감지하도록, 상기 복수의 소리 센서(143) 및 복수의 음향 출력부(152) 중 상기 소리 발생원의 위치에 대응되는 위치에 배치된 적어도 하나의 소리 센서(143) 및 적어도 하나의 음향 출력부(152)를 활성화시킬 수 있다.
이와 함께, 상기 제어부(180)는, 상기 소리 발생원의 위치에 대응되는 위치에 배치되지 않은 나머지 소리 센서 및 음향 출력부에 대하여, 소리의 감지도를 감소시키거나, 소리의 출력 크기를 감소시킬 수 있다. 나아가, 상기 제어부(180)는 상기 소리 발생원의 위치에 대응되는 위치에 배치되지 않은 나머지 소리 센서 및 음향 출력부를 비활성화시킬 수 있다.
즉, 본 발명은 소리 발생원에서 발생한 소리를 더 민감하게 감지하고, 소리 발생원을 향하여 출력되는 소리를 더 크게 출력시킴으로써, 소리 발생원과 차량 간의 대화를 원활하게 수행할 수 있는 방법을 제공할 수 있다.
예를 들어, 도 4a에 도시된 바와 같이, 상기 제어부(180)는 차량의 번호판을 나타내는 "5885"라는 단어가 포함된 소리가 차량의 후방에서 발생하였음을 감지할 수 있다. 이 경우, 상기 제어부(180)는 상기 소리를 차량을 호출하는 소리로 판단하고, 상기 소리에 대응되는 소리 정보에 기초하여, 상기 소리의 발생원의 위치를 검출할 수 있다.
만일, 상기 소리 발생원의 위치가 차량의 후방인 경우, 도 4a 및 도 4b에 도시된 바와 같이, 상기 제어부(180)는 복수의 소리 센서 및 복수의 음향 출력부 중 차량 후방에 배치된 소리 센서 및 음향 출력부를 활성화시킬 수 있다. 따라서, 사용자는, 차량의 후방에서 발생한 "5885"라는 소리를, 차량의 후방에 배치된 음향 출력부를 통하여 들을 수 있다. 또한, 사용자는, 차량의 후방에 위치한 소리 발생원에게 "왜불러"라는 음성을 차량의 후방에 배치된 음향 출력부를 통하여 전달할 수 있다.
이를 통하여, 사용자는 차량의 후방에서 소리 발생원이 발생시킨 소리를 들을 수 있어, 직관적으로 소리 발생원이 위치를 판단할 수 있다. 나아가, 사용자는 차량 후방의 소리 발생원에게 소리를 전달시킬 수 있어, 소리 발생원과 대화를 할 수 있다.
또한, 상기 제어부(180)는, 상기 소리 발생원의 위치와 대응되는 위치에 배치되지 않은 나머지 소리 센서 및 음향 출력부의 민감도를 감소하거나, 비활성화시킬 수 있다. 따라서, 본 발명은 소리 발생원과의 대화에 방해가 되는 소리를 차단할 수 있다.
또한, 상기 제어부(180)는, 기 설정된 조건이 만족되는 경우, 상기 소리 발생원의 영상을 상기 디스플레이부(151) 상에 표시하도록, 상기 카메라(121)를 제어할 수 있다. 상기 기 설정된 조건은 상기 소리 정보가 구급차 사이렌 정보일 조건, 상기 소리 발생원의 위치가 운전자의 시야각 밖에 위치할 조건, 차량 주변에 장애물이 기 설정된 숫자 이상일 조건, 소리 발생원의 위치가 차량을 기준으로 기 설정된 거리 밖일 조건 및 현재 위치가 위험 다발 구간일 조건 중 적어도 하나일 수 있다.
예를 들어, 도 4c에 도시된 바와 같이, 상기 제어부(180)는 소리 발생원이 운전자의 시야각 밖인 차량의 후방에 위치하였다고 판단된 경우, 상기 소리 발생원의 영상을 상기 카메라(121)를 통하여 촬영하고, 차량의 클러스터에 배치된 디스플레이부(151) 상에 소리 발생원(사람)의 영상을 표시할 수 있다. 따라서, 사용자는 시선을 이동시키지 않고, 시선 범위 밖에 있는 소리 발생원을 확인할 수 있다. 여기에서, 상기 사용자의 시야각은, 운전자의 시선을 판단하는, 시선 감지부를 통하여 감지될 수 있다. 상기 시선 감지부는 상기 운전자의 시선을 감지하도록 형성되며, 예를 들어, 운전자의 눈을 촬영하도록 형성된 카메라로 구성될 수 있다.
또 다른 예로, 상기 제어부(180)는 소리 발생원이 차량을 기준으로, 기 설정된 거리 밖에 위치한 경우, 상기 소리 발생원의 영상을 상기 카메라(121)를 통하여 촬영하고, 디스플레이부(151) 상에 상기 소리 발생원의 영상을 표시할 수 있다. 따라서, 사용자는, 시야각 내에 있는 소리 발생원이라도, 멀리 떨어져 있는 경우, 상기 소리 발생원의 영상을 디스플레이부(151)를 통하여 볼 수 있다.
이와 반대로, 상기 제어부(180)는, 상기 소리 발생원의 영상이 표시되기 위한 기 설정된 조건이 만족되지 않는 경우, 상기 소리 발생원의 영상을 상기 디스플레이부(151) 상에 표시하지 않을 수 있다.
예를 들어, 상기 제어부(180)는, 상기 소리 발생원이 운전자의 시야각 내에 위치하였다고 판단되는 경우, 상기 소리 발생원의 영상을 상기 디스플레이부(151) 상에 표시하지 않을 수 있다. 이 경우, 상기 제어부(180)는 사용자가 상기 소리 발생원을 직접 확인할 수 있다고 판단하여, 별도로 디스플레이부 상에 영상을 표시하지 않는다.
또 다른 예로, 상기 제어부(180)는, 상기 소리 발생원이 차량을 기준으로, 기 설정된 거리 이내에 위치한 경우, 상기 소리 발생원이 영상을 상기 디스플레이부(151) 상에 표시하지 않을 수 있다. 이 경우, 상기 제어부(180)는 사용자와 소리 발생원의 거리가 가까워, 사용자가 소리 발생원을 충분히 인식할 수 있다고 판단하여, 상기 디스플레이부 상에 상기 소리 발생원의 영상을 표시하지 않을 수 있다.
또한, 상기 제어부(180)는 위치 정보 및 소리 정보 중 적어도 하나에 근거하여, 상황 정보를 검출하고, 상기 상황 정보에 근거하여, 소리와 관련된 기능을 실행할 수 있다. 예를 들어, 도 5a에 도시된 바와 같이, 상기 제어부(180)는, 드라이브 스루가 가능한 위치 정보 및 "주문하시겠습니까?"라는 음성에 대응되는 소리 정보 중 적어도 하나가 감지되는 것에 기초하여, 운전자가 드라이브 스루 상황 정보를 검출할 수 있다.
상기 드라이브 스루 상황 정보가 감지되면, 상기 제어부(180)는, 소리 발생원과 대화를 할 수 있도록 소리 센서(143) 및 음향 출력부(152)를 활성화할 수 있다. 이때, 상기 제어부(180)는 상기 소리 정보에 근거하여, 소리 발생원의 위치를 검출하고, 상기 소리 발생원과 대화를 수행하도록 소리 센서(143) 및 음향 출력부(152)를 제어할 수 있다. 즉, 복수의 소리 센서 및 복수의 음향 출력부가 구비된 경우, 상기 제어부(180)는 상기 소리 발생원의 위치에 대응되는 위치에 배치된 적어도 하나의 소리 센서 및 음향 출력부를 활성화시킬 수 있다. 도 5b에 도시된 바와 같이, 상기 제어부(180)는 상기 소리 발생원이 운전석 방향에 위치한 경우, 상기 소리 발생원과 대화를 수행하도록 상기 운전석 방향과 대응되는 위치에 배치된 소리 센서 및 음향 출력부를 활성화할 수 있다. 즉, 상기 제어부(180)는, 운전석 방향과 대응되는 위치의 음향 출력부를 통하여, "주문하시겠습니까?"라는 소리를 출력할 수 있다.
또한, 도 5c에 도시된 바와 같이, 상기 제어부(180)는 차량 내부에 위치한 운전자의 발화 소리가 차량 외부의 소리 발생원을 향하도록, 운전석 방향과 대응되는 위치의 음향 출력부를 통하여, "햄버거 하나 주세요"라는 소리를 출력할 수 있다.
따라서, 사용자는 창문을 개방하지 않고도, 외부에 위치한 소리 발생원과 대화를 수행할 수 있다.
또한, 도 5d에 도시된 바와 같이, 상기 제어부(180)는 드라이브 스루 상황 정보가 검출되면, 상기 드라이드 스루 상황 정보와 관련된 정보를 디스플레이부(151) 상에 표시할 수 있다. 상기 드라이브 스루 상황 정보와 관련된 화면 정보는 음식점 메뉴 정보, 가격 정보, 할인 쿠폰 정보 및 음향 출력부 제어를 위한 그래픽 객체가 포함될 수 있다.
상기 소리 센서 및 음향 출력부의 활성화 여부를 결정하기 위한 정보는 서로 이격하여 배치된 소리 센서 및 음향 출력부의 활성화를 각각 제어하는 기능과 연계된 그래픽 객체일 수 있다. 예를 들어, 도 5d에 도시된 바와 같이, 상기 디스플레이부(151) 상에는, 운전석과 대응되는 위치에 배치된 음향 출력부의 활성화 및 비활성화를 위한 그래픽 객체(510a, 510b), 조수석과 대응되는 위치에 배치된 음향 출력부의 활성화 및 비활성화를 위한 그래픽 객체(520a, 520b), 뒷자석과 대응되는 위치에 배치된 음향 출력부의 활성화 및 비활성화를 위한 그래픽 객체(530a 내지 540b)를 포함할 수 있다.
상기 제어부(180)는, 서로 이격하여 배치된 소리 센서 및 음향 출력부의 활성화를 각각 제어하는 기능과 연계된 그래픽 객체에 대한 터치에 근거하여, 각 소리 센서 및 음향 출력부의 활성화를 제어할 수 있다. 예를 들어, 상기 제어부(180)는, 상기 조수석과 대응되는 위치에 배치된 음향 출력부의 활성화를 위한 그래픽 객체(520a)에 터치가 가해지는 것에 근거하여, 조수석과 대응되는 위치에 배치된 음향 출력부를 활성화할 수 있다. 이와 마찬가지로, 상기 제어부(180)는, 조수석과 대응되는 위치에 배치된 음향 출력부의 비활성화를 위한 그래픽 객체(520b)에 터치가 가해지는 것에 근거하여, 조수석과 대응되는 위치에 배치된 음향 출력부를 비활성화할 수 있다. 이를 통하여, 운전석에 위치한 사용자뿐만 아니라, 조수석에 위치한 사용자도 직접 음식을 주문하기 위하여, 외부 소리 발생원과 대화를 수행할 수 있다.
한편, 상기 제어부(180)는, 상기 소리 센서 및 음향 출력부를 통하여 외부의 소리 발생원과 대화를 수행하는 중, 창문의 개방 상태를 감지할 수 있다. 이 경우, 상기 제어부(180)는 상기 창문의 개방 상태에 따라, 상기 소리 센서 및 음향 출력부의 활성화 여부를 결정할 수 있다.
보다 구체적으로, 상기 제어부(180)는, 창문이 닫혀있는 상태에서 개방된 상태로 변경된 것이 감지되면, 상기 소리 센서 및 음향 출력부를 비활성화할 수 있다. 즉, 본 발명은 창문이 개방되어, 차량의 내부의 소리를 차량의 외부로 직접 전달할 수 있는 상태인 경우, 소리 센서 및 음향 출력부를 통한 소리 전달 기능을 수행하지 않을 수 있다. 따라서, 본 발명은 불필요한 소리 센서 및 음향 출력부를 활성화하지 않을 수 있다.
또한, 비록 도시되지는 않았지만, 상기 제어부(180)는 소리 발생원이 차량 사고의 위험이 있는 보행자라고 판단되는 경우, 상기 보행자에게 알림 정보를 출력할 수 있다. 이때, 상기 사고의 위험이 있는 보행자인지 여부는 소리 정보에 기초하여 결정될 수 있다.
보다 구체적으로, 상기 제어부(180)는, 소리 발생원이 상기 차량으로부터 기 설정된 거리 이내에 위치한 경우, 사고의 위험이 있는 보행자로 판단할 수 있다. 이와 반대로, 상기 제어부(180)는, 상기 소리 발생원이 상기 차량으로부터 기 설정된 거리 이내에 위치하지 않은 경우, 사고의 위험이 없는 보행자로 판단할 수 있다.
상기 알림 정보는 시각적, 청각적 및 촉각적 방식 중 어느 하나의 방식으로 출력될 수 있다. 예를 들어, 상기 알림 정보는 "차 조심하세요"라는 음성이 될 수도 있고, 보행자를 향하여 램프에서 출력되는 광이 될 수도 있다.
예를 들어, 상기 제어부(180)는, 상기 소리 발생원이 상기 차량으로부터 기 설정된 거리 이내에 위치한 경우, 음향출력부(152)를 통하여 "차 조심하세요"라는 알림 정보를 출력할 수 있다.
이와 반대로, 상기 제어부(180)는, 상기 소리 발생원이 상기 차량으로부터 기 설정된 거리 이내에 위치하지 않은 경우, 음향출력부(152)를 통하여 알림 정보가 출력되지 않도록 음향출력부를 제어할 수 있다.
또한, 본 발명은, 소리 발생원을 향하여 광이 출력되도록, 램프 구동부를 동작시킬 수 있다. 이 경우, 상기 램프 구동부는 앞서 소리 센서 및 음향 출력부를 통하여 소리가 출력되는 방식과 동일한 방식으로 출력될 수 있다. 예를 들어, 상기 제어부(180)는, 광이 소리 발생원의 위치를 향하도록, 상기 램프 구동부를 제어할 수 있다.
이상에서는, 차량 주변에서 발생하는 소리에 기초하여, 상황 정보를 검출하여, 상황 정보에 적합한 기능들을 제공하는 방법에 대하여 설명하였다.
이하에서는 차량 주변에서 발생하는 소리에 기초하여 검출된 상황 정보를 디스플레이부에 표시하고, 상기 디스플레이부에 표시된 상황 정보에 기초하여 차량의 제어를 수행하는 방법을 설명한다. 도 6a에서 도 6c는 디스플레이부에 표시된 상황 정보에 기초하여, 차량을 제어하는 방법을 나타낸 개념도들이다.
본 발명에 따른 차량 제어 장치의 제어부(180)는 차량의 내부 또는 차량의 외부 소리를 감지하여, 차량 주변의 상황 정보를 검출할 수 있다. 이때, 상기 제어부(180)는 상기 상황 정보를 시각적으로 사용자에게 제공하기 위하여, 상기 상황 정보를 그래픽화 또는 텍스트화하여, 디스플레이부(151)에 표시할 수 있다. 이때, 상기 제어부(180)는 카메라를 통하여 차량 주변의 영상을 촬영한 영상도 상기 상황 정보로써, 상기 디스플레이부(151)에 함께 표시할 수 있다.
예를 들어, 도 6a에 도시된 바와 같이, 상기 제어부(180)는, 디스플레이부 (151)상에 적어도 하나의 소리 발생원을 나타내는 그래픽 객체(600a, 600b, 600c, 600d), 외부 소음의 크기를 나타내는 그래픽 객체(610), 알림 정보의 출력 크기를 나타내는 그래픽 객체(620)를 표시할 수 있다.
상기 적어도 하나의 소리 발생원은 사람, 자전거, 자동차, 건물 등이 될 수 있다. 이때, 상기 제어부(180)는 소리에 대응되는 소리 정보에 기초하여, 소리 발생원의 종류를 판단할 수 있다. 그리고, 상기 제어부(180)는, 소리 발생원의 종류에 따라 서로 다른 그래픽 객체로 소리 발생원을 표시할 수 있다. 예를 들어, 상기 제어부(180)는 소리 발생원이 사람이라고 판단되면, 사람 형태의 그래픽 객체를 표시하고, 소리 발생원이 자전거라고 판단되면, 자전거 형태의 그래픽 객체를 표시할 수 있다.
또한, 상기 제어부(180)는, 소리 정보에 기초하여 소리 발생원의 위치를 검출할 수 있다. 그리고, 상기 제어부(180)는 상기 디스플레이부(151) 상의 전체 영역 중 상기 소리 발생원의 위치에 대응되는 영역에 상기 소리 발생원을 나타내는 그래픽 객체를 표시할 수 있다. 예를 들어, 도 6a에 도시된 바와 같이, 상기 제어부(180)는 적어도 하나의 소리 발생원을 나타내는 그래픽 객체의 위치에 대응되는 영역에 상기 적어도 하나의 소리 발생원을 나타내는 적어도 하나의 그래픽 객체(600a, 600b, 600c, 600d)를 표시할 수 있다.
또한, 상기 제어부(180)는, 소리 정보에 기초하여, 상기 소리 발생원의 안전도를 검출하고, 이를 디스플레이부(151) 상에 표시할 수 있다. 상기 안전도는 소리 발생원과 차량 사이의 사고 발생의 위험 정도를 나타내는 정보로, 사고 발생의 위험이 낮으면, 안전도가 높고, 사고 발생의 위험이 높으면, 안전도가 낮을 수 있다.
예를 들어, 도 6a에 도시된 바와 같이, 상기 제어부(180)는 안전도가 높다고 판단된 소리 발생원과 인접한 영역 상에 안전도가 높음을 나타내는 "safe"를 표시하고, 안전도가 낮다고 판단된 소리 발생원과 인접한 영역 상에 안전도가 낮음을 나타내는 "danger"를 표시할 수 있다.
상기 외부 소음의 크기를 나타내는 그래픽 객체(610)는 감지된 소리의 크기 정보를 나타낼 수 있다. 예를 들어, 도 6a에 도시된 바와 같이, 외부 소리의 크기 정보를 막대 형태의 그래프로 표시할 수 있다.
상기 알림 정보의 출력 크기를 나타내는 그래픽 객체(620)는 외부로 알림 정보를 출력하기 위하여 설정된 소리의 출력 크기를 나타낼 수 있다. 예를 들어, 도 6a에 도시된 바와 같이, 상기 제어부(180)는 "Yield please"라는 알림 정보를 4의 크기로 출력되도록 설정된 소리의 출력 크기를 표시할 수 있다.
상기 제어부(180)는 사용자의 요청 또는 상기 소리 정보가 기 설정된 조건을 만족하는 경우, 상기 소리 정보를 그래픽화 또는 텍스트화하여, 상기 디스플레이부(151) 상에 표시할 수 있다.
상기 기 설정된 조건은, 차량의 주행 시, 추가 정보가 시각적으로 제공될 필요가 있는 상황일 조건일 수 있다. 예를 들어, 상기 기 설정된 조건은 차량이 골목길에 진입하였다고 판단되는 조건, 차량의 주변에 감지된 장애물이 기 설정된 개수 이상일 조건, 외부 소음 크기가 기 설정된 값 이상으로 감지될 조건, 교통 사고 다발 구간에 진입할 조건 등이 될 수 있다.
즉, 본 발명은 골목길과 같이 차량의 속도를 낮추고 차량 주변의 장애물을 피하여 주행을 하여야하는 상황에서, 사용자에게 차량 주변의 장애물을 시각적으로 제공할 수 있다.
또한, 상기 제어부(180)는 상기 디스플레이부(151)에 가해지는 터치에 근거하여, 알림 정보를 출력할 수 있다. 보다 구체적으로, 상기 제어부(180)는, 상기 디스플레이부(151)에 표시된 적어도 하나의 소리 발생원을 나타내는 적어도 하나의 그래픽 객체(600a 부터 600d) 중 어느 하나의 그래픽 객체에 대하여 터치가 가해지는 것에 응답하여, 상기 어느 하나의 그래픽 객체가 나타내는 소리 발생원을 향하여 알림 정보가 출력되도록, 음향 출력부(152)를 제어할 수 있다. 여기에서, 음향 출력부(152)를 제어하는 것은, 차량에 구비된 복수의 음향 출력부 중 터치가 가해진 소리 발생원의 위치와 대응되는 위치에 배치된 음향 출력부를 활성화하고, 나머지 음향 출력부를 비활성화하는 것을 의미할 수 있다.
예를 들어, 도 6b에 도시된 바와 같이, 상기 제어부(180)는 적어도 하나의 그래픽 객체(600a 부터 600d) 중 어느 하나의 그래픽 객체(600b)에 대한 터치가 가해지는 것에 응답하여, 상기 어느 하나의 그래픽 객체(600b)가 나타내는 소리 발생원을 향하여 "차 조심하세요"라는 소리를 출력하도록 차량의 전방에 배치된 음향 출력부를 제어할 수 있다.
또 다른 예로, 도 6c에 도시된 바와 같이, 상기 제어부(180)는 적어도 하나의 그래픽 객체(600a 부터 600d) 중 다른 하나의 그래픽 객체(600d)에 대한 터치가 가해지는 것에 응답하여, 상기 다른 하나의 그래픽 객체(600d)가 나타내는 소리 발생원을 향하여 "차 조심하세요"라는 소리가 출력되도록 차량의 후방에 배치된 음향 출력부를 제어할 수 있다.
따라서, 소리 발생원은 자신을 향하는 알림 정보를 정확하게 들을 수 있다. 또한, 선택된 소리 발생원 이외의 나머지 소리 발생원들은 불필요한 알림 정보를 듣지 않을 수 있다.
또한, 상기 제어부(180)는, 상기 소리 발생원과 차량 간의 상대 거리 및 외부 소음 정도 중 적어도 하나에 근거하여, 알림 정보의 출력 크기를 결정할 수 있다. 상기 출력 크기는, 청각적 방식으로 출력되는 알림 정보의 음량일 수 있다. 예를 들어, 상기 제어부(180)는 상기 소리 발생원과 차량의 상대 거리가 제1거리인 경우, 제1볼륨으로 알림 정보를 출력하고, 상기 소리 발생원과 차량의 상대 거리가 제1거리보다 짧은 제2거리인 경우, 제1볼륨보다 작은 제2볼륨으로 알림 정보를 출력할 수 있다. 또 다른 예로, 상기 제어부(180)는, 상기 외부 소음 정도가 제1값을 갖는 경우, 제1볼륨으로 알림 정보를 출력하고, 상기 외부 소음 정도가 제1값보다 큰 제2값을 갖는 경우, 제1볼륨보다 큰 제2볼륨으로 알림 정보를 출력할 수 있다.
또한, 상기 제어부(180)는 상기 소리 발생원이 보행자인 경우, 소리 발생원의 영상 정보에 기초하여, 서로 다른 알림 정보를 출력할 수 있다. 이때, 상기 소리 발생원의 영상 정보는, 카메라를 통하여 수신할 수 있다.
보다 구체적으로, 상기 제어부(180)는 상기 소리 발생원의 영상 정보를 기 설정된 알고리즘에 기초하여, 분석하고, 상기 소리 발생원의 연령대, 성별을 판단할 수 있다. 상기 기 설정된 알고리즘은 일반적으로 영상에 포함된 사람의 연령대 및 성별을 판단하는 알고리즘이 사용될 수 있다.
예를 들어, 상기 제어부(180)는, 상기 소리 발생원이 높은 연령대의 보행자라고 판단되면, "양보를 부탁드립니다"라는 공손한 알림 정보를 출력하고, 상기 소리 발생원이 낮은 연령대의 보행자라고 판단되면, "차 조심해"라는 친구와 대화하는 듯한 느낌의 알림 정보를 출력할 수 있다.
또 다른 예로, 상기 제어부(180)는, 상기 소리 발생원이 여자인 경우, 여성을 나타내는 "예쁜 여성분"이라는 소리를 출력하고, 상기 소리 발생원의 남자인 경우, 남성을 나타내는 "신사분"이라는 소리를 출력할 수 있다.
또한, 비록 도시되지는 않았지만, 상기 제어부(180)는, 소리 발생원과 차량 내부의 사람이 대화를 수행한 대화 기록을 상기 디스플레이부(151)에 함께 표시할 수 있다.
이상에서는, 디스플레이부에 대한 터치를 통하여 차량을 제어하는 방법을 설명하였다.
이하에서는 디스플레이부에 표시되는 그래픽 객체가 소리 정보에 기초하여, 서로 다른 출력 형태로 표시하는 방법을 설명한다. 도 7a 및 도 7b는 디스플레이부에 표시되는 그래픽 객체가 소리 정보에 기초하여 서로 다른 출력 형태로 표시되는 방법을 나타낸 개념도들이다.
본 발명에 따른 차량 제어 장치의 제어부(180)는 차량 주변의 소리를 감지하고, 감지된 소리에 대응되는 소리 정보에 기초하여, 소리 정보를 그래픽화하여 디스플레이부(151)에 표시할 수 있다.
이때, 상기 제어부(180)는 소리 정보에 기초하여, 상기 소리 정보를 서로 다른 형태로 그래픽화할 수 있다. 보다 구체적으로, 상기 제어부(180)는 상기 소리 정보에 기초하여, 차량과 소리 발생원 사이의 상대 거리를 검출하고, 상기 상대 거리에 따라 서로 다른 출력 크기로 상기 소리 정보를 표시할 수 있다.
예를 들어, 도 7a에 도시된 바와 같이, 상기 제어부(180)는 제1소리 발생원과 차량의 상대 거리가 제1거리인 경우, 제1크기로 상기 제1소리 발생원을 나타내는 그래픽 객체(700)를 표시하고, 제2소리 발생원과 차량의 상대 거리가 상기 제1거리보다 먼 제2거리인 경우, 제1크기보다 작은 제2크기로 상기 제2소리 발생원을 나타내는 그래픽 객체(710)를 표시할 수 있다. 따라서, 사용자는 소리 발생원과 차량 사이의 상대 거리를 직관적으로 인식할 수 있다.
또한, 상기 제어부(180)는 소리 정보에 기초하여, 소리 발생원의 교통 사고 위험도를 검출할 수 있다. 여기에서, 상기 교통 사고 위험도는 교통 사고의 위험 발생 정도를 나타낼 수 있다.
보다 구체적으로, 상기 제어부(180)는 소리 정보에 기초하여, 소리 발생원과 차량 사이의 상대거리의 변화량 및 소리 발생원과 차량 사이의 상대 속도에 기초하여, 교통 사고 위험도를 검출할 수 있다. 예를 들어, 상기 제어부(180)는 소리 발생원과 차량 사이의 상대 거리가 짧아지고, 상대 속도가 점차적으로 빨라지는 경우, 교통 사고 위험도가 낮다고 판단할 수 있다.
이 경우, 상기 제어부(180)는 상기 교통 사고의 위험도에 따라, 서로 다른 출력 색상으로 소리 발생원을 나타내는 그래픽 객체를 출력할 수 있다. 예를 들어, 도 7b에 도시된 바와 같이, 상기 제어부(180)는 제1소리 발생원의 교통 사고의 위험도가 제1값을 갖는 경우, 제1소리 발생원을 나타내는 그래픽 객체(700)를 빨간색으로 표시하고, 제2소리 발생원의 교통 사고의 위험도가 제1값보다 작은 제2값을 갖는 경우, 제2소리 발생원을 나타내는 그래픽 객체(710)를 검은색으로 표시할 수 있다. 즉, 상기 제어부(180)는, 각 교통 사고의 위험도에 대응되는 색상을 미리 저장하고, 이에 따라 그래픽 객체의 출력 색상을 결정할 수 있다. 따라서, 사용자는 차량 주변에 위치한 소리 발생원과 관련된 교통 사고의 위험도를 직관적으로 판단할 수 있다.
이상에서는 차량 주변에서 발생한 소리에 대응되는 소리 정보에 기초하여, 소리 정보를 디스플레이부에 표시하는 방법에 대하여 설명하였다.
이하에서는 차량 주변에서 발생한 소리에 대응되는 소리 정보에 기초하여, 주행 가이드 정보를 제공하는 방법을 설명한다. 도 8a 및 도 8b는 차량 주변에서 발생한 소리에 대응되는 소리 정보에 기초하여, 주행 가이드 정보를 제공하는 방법을 나타낸 개념도들이다.
본 발명에 따른 차량 제어 장치의 제어부(180)는 차량 주변에서 발생한 소리에 대응되는 소리 정보에 기초하여, 상황 정보를 검출할 수 있다. 또한, 상기 제어부(180)는 상기 상황 정보에 기초하여, 주행 가이드 정보를 산출할 수 있다. 이 경우, 상기 제어부(180)는 상기 주행 가이드 정보를 음성으로 출력하거나, 디스플레이부(151)에 표시할 수 있다.
예를 들어, 도 8a에 도시된 바와 같이, 상기 제어부(180)는 구급차의 사이렌 소리에 대응되는 소리 정보에 기초하여, 구급차가 접근 중임을 나타내는 상황 정보를 검출할 수 있다. 이 경우, 상기 제어부(180)는, 구급차가 접근 중임을 나타내는 상황 정보에 근거하여, 구급차의 진행 통로를 제공하기 위하여, 차량을 도로 오른쪽으로 이동하라는 주행 가이드 정보를 산출할 수 있다.
또한, 상기 제어부(180)는 상기 주행 가이드 정보를 디스플레이부(151)에 표시할 수 있다. 예를 들어, 도 8a에 도시된 바와 같이, 상기 제어부(180)는 "구급차 왼쪽 접근 중, 오른쪽으로 차량을 이동하세요"라는 텍스트 정보와 차량의 이동 방향을 나타내는 그래픽 객체(800)를 포함하는 주행 가이드 정보와 구급차 사이렌 정보를 시각적으로 표시한 그래픽 객체(810)을 표시할 수 있다.
또한, 상기 제어부(180)는, 구급차 사이렌 소리에 대응되는 소리 정보가 감지되면, 카메라를 통하여, 구급차의 위치를 촬영할 수 있다. 그 후, 상기 제어부(180)는 상기 촬영된 구급차의 영상을 디스플레이부(151)에 표시할 수 있다.
또한, 상기 제어부(180)는 주차장의 사이렌 소리에 대응되는 소리 정보에 기초하여, 차량 주변에 주차장이 있다는 상황 정보를 검출할 수 있다. 또한, 상기 제어부(180)는 소리 정보에 기초하여, 주차장의 위치 정보도 검출할 수 있다.
이때, 도 8b에 도시된 바와 같이, 상기 제어부(180)는, 상기 디스플레이부(151) 상에 "전방 주차 사이렌 감지, 전방을 주시하세요"라는 텍스트 정보를 주행 가이드 정보로 표시할 수 있다. 또한, 상기 제어부(180)는 상기 디스플레이부(151) 상에 주차장의 위치에 대응되는 영역에 주차장을 나타내는 그래픽 객체(810)를 표시할 수 있다.
이상에서는, 소리 정보에 근거하여, 주행 가이드 정보를 제공하는 방법을 설명하였다. 따라서, 본 발명은 차량 주변의 소리에 대응되는 소리 정보에 근거하여, 주행 가이드 정보를 제공할 수 있다.
이하에서는 차량 주변의 소리에 대응되는 소리 정보에 기초하여, 소음 민감도를 제어하는 방법을 설명한다. 도 9는 차량 주변의 소리에 대응되는 소리 정보에 기초하여, 소음 민감도를 제어하는 방법을 나타낸 개념도이다.
본 발명에 따른 차량 제어 장치의 제어부(180)는 차량의 주변(내부 또는 외부)에서 발생하는 소리를 감지하고, 상기 감지된 소리에 대응되는 소리 정보에 기초하여, 상황 정보를 판단할 수 있다.
이때, 상기 제어부(180)는 상기 소리 정보에 기초하여, 차량 주변에 장애물이 많다고 판단되면, 차량의 주행에 위험한 상황임을 나타내는 상황 정보를 감지할 수 있다. 이 경우, 상기 제어부(180)는 차량의 주행에 위험한 상황임을 나타내는 상황 정보에 기초하여, 소음 민감도(sensitivity)를 높일 수 있다. 상기 장애물은 차량 주변에서 움직이는 피사체, 교차로, 건물 등일 수 있다. 상기 소음 민감도는 외부 소리에 대한 감지의 민감도를 나타낼 수 있다.
예를 들어, 상기 제어부(180)는 차량 주변에 움직이는 피사체가 많다고 판단되는 경우, 소음 민감도를 높일 수 있다. 따라서, 본 발명은 주행 안정성을 높이기 위하여, 소음 민감도를 높여, 차량 주변에 장애물을 보다 더 민감하게 감지할 수 있다.
이와 달리, 상기 제어부(180)는 사용자의 제어명령에 근거하여, 상기 소리 민감도를 변경할 수 있다. 보다 구체적으로, 상기 제어부(180)는 디스플레이부(151) 상에 소음 민감도 조절 기능과 연계된 막대 형태의 그래픽 객체를 표시할 수 있다.
상기 막대 형태의 그래픽 객체는 현재 소음 민감도 값을 표시하는 그래픽 객체(900)를 더 포함할 수 있다.
또한, 상기 제어부(180)는, 상기 막대 형태의 그래픽 객체에 대한 기 설정된방식의 터치가 가해지는 것에 근거하여, 소음 민감도를 조절할 수 있다. 예를 들어, 도 9에 도시된 바와 같이, 상기 제어부(180)는 상기 현재 소음 민감도 값을 표시하는 그래픽 객체(900)에 대한 터치가 가해지는 것에 근거하여, 상기 소음 민감도 값을 변경할 수 있다. 상기 터치는, 드래그 터치일 수 있다.
보다 구체적으로, 상기 제어부(180)는, 상기 현재 소음 민감도 값을 표시하는 그래픽 객체(900)에 대한 터치의 감지가 종료된 영역에 대응되는 소음 민감도 값으로 상기 소음 민감도 값을 변경할 수 있다. 예를 들어, 도 9에 도시된 바와 같이, 상기 제어부(180)는, 현재 소음 민감도가 제1값으로 설정된 상태에서, 상기 현재 소음 민감도 값을 표시하는 그래픽 객체(900)에 대한 터치가 가해지는 것에 근거하여, 상기 소음 민감도를 제1값보다 큰 제2값으로 변경할 수 있다.
이상에서는, 차량 주변에서 발생한 소리에 대응되는 소리 정보에 기초하여, 소음 민감도를 제어하는 방법에 대하여 설명하였다.
이하에서는 소리 정보에 기초하여, 멀티 미디어 기능을 추천하거나 자동으로 실행하는 방법에 대하여 설명한다. 도 10a부터 도 11b는 소리 정보에 기초하여, 멀티 미디어 기능을 추천하거나 실행하는 방법을 나타낸 개념도들이다.
본 발명에 따른 차량 제어 장치의 제어부(180)는 차량의 내부 또는 외부에서 발생하는 소리에 대응되는 소리 정보에 기초하여, 멀티 미디어 기능을 추천하거나, 실행할 수 있다. 상기 멀티 미디어 기능은 차량 운전을 보조하는 기능으로써, 음악 재생 기능 및 날씨 정보 제공 기능 등이 포함될 수 있다.
상기 제어부(180)는 차량 내부 및 외부에서 발생하는 소리가 기 설정된 시간 이상 검출되지 않을 수 있다.
이 경우, 상기 제어부(180)는 백색 소음을 출력하거나, 저주파를 상쇄시키거나, 멀티 미디어 기능을 추천하기 위한 가이드 정보를 출력할 수 있다. 여기에서, 백색 소음은 운전자의 졸음, 집중력 저하, 멀미 및 스트레스를 방지할 수 있는 소리로써, 재즈 음악, 빗소리, 커피잔 소리 등이 될 수 있다. 또한, 상기 저주파를 상쇄시키는 방법은 종래 사용되는 다양한 방식들이 사용 가능하며, 흡음재를 이용하거나, 추가 소음을 발생시키는 방법이 사용될 수 있다.
예를 들어, 도 10a에 도시된 바와 같이, 상기 제어부(180)는 "졸음방지를 위하여 음악을 재생할까요?"(1000)라는 가이드 정보 및 '확인' 및 '취소' 기능을 나타내는 그래픽 객체를 상기 디스플레이부(151)에 출력할 수 있다. 한편, 상기 가이드 정보는 음성으로도 출력될 수 있다.
이때, 상기 제어부(180)는 상기 가이드 정보에 대한 터치가 가해지는 것에 응답하여, 음악을 재생할 수 있다. 예를 들어, 도 10a에 도시된 바와 같이, 상기 제어부(180)는 확인 기능과 연계된 그래픽 객체에 대한 터치가 가해지는 것에 응답하여, 음악을 재생할 수 있다. 이와 달리, 상기 제어부(180)는, 취소 기능과 연계된 그래픽 객체에 대한 터치가 가해지는 것에 응답하여, 음악 재생 기능을 실행하지 않을 수 있다.
또한, 상기 제어부(180)는, 차량 외부에서 발생하는 소리에 대응되는 소리 정보가 음악 정보인 경우, 상기 음악 정보와 관련된 정보를 검출할 수 있다. 예를 들어, 상기 제어부(180)는, 음악 제목, 음악 파일, 가수 정보, 앨범 정보 등을 검출할 수 있다.
상기 제어부(180)는, 상기 음악 정보와 관련된 정보를 디스플레이부(151)에 표시할 수 있다. 또한, 도 10b에 도시된 바와 같이, 상기 제어부(180)는, 상기 음악을 재생하기 위한 가이드 정보(1020)을 출력할 수 있다. 따라서, 사용자는 외부에서 들려오는 음악에 대한 정보를 쉽게 인지할 수 있다. 한편, 상기 가이드 정보는 음성으로도 출력될 수 있다.
또한, 상기 제어부(180)는, 차량 외부에서 날씨와 관련된 소리에 대응되는 소리 정보에 기초하여, 날씨 정보 제공 기능을 실행할 수 있다. 상기 날씨와 관련된 소리는, 가청 주파수 대역을 벗어나는 천동 소리, 바퀴와 노면의 마찰음이 될 수 있다. 예를 들어, 비오는 날의 경우, 노면의 빗물로 인하여, 맑은 날의 바퀴와 노면의 마찰음과 다른 마찰음이 감지될 수 있다.
이때, 상기 제어부(180)는, 상기 날씨와 관련된 소리에 대응되는 소리 정보에 대한 경고를 알리는 알림 정보를 출력하거나, 웹 페이지에 접속하여, 날씨 정보를 제공할 수 있다.
예를 들어, 상기 제어부(180)는, 비오는 날의 경우, 노면의 미끄러움을 주의하라는 알림 정보를 음향 출력부를 통하여 출력할 수 있다.
또 다른 예로, 도 11a에 도시된 바와 같이, 상기 제어부(180)는 천둥 소리가 감지되면, "천둥 발생 3초전 입니다. 안전운행에 유의하세요"라는 알림 정보(1100)를 출력할 수 있다. 따라서, 사용자는 천둥 소리를 미리 예측하고, 안전 운전에 유의할 수 있다. 한편, 상기 가이드 정보는 음성으로도 출력될 수 있다.
또 다른 예로, 도 11b에 도시된 바와 같이, 상기 제어부(180)는 날씨 정보 검색 기능의 실행을 위한 가이드 정보(1110)를 출력할 수 있다. 이 경우, 상기 제어부(180)는 사용자로부터 날씨 정보 검색을 위한 제어 명령이 수신되는 것에 근거하여, 날씨 정보 검색 기능을 실행할 수 있다. 이 경우, 상기 제어부(180)는, 상기 검색된 날씨 정보를 디스플레이부(151)에 표시할 수 있다.
또한, 상기 제어부(180)는, 노면의 마찰음에 근거하여, 노면 상태 정보를 검출할 수 있다. 상기 제어부(180)는, 노면 상태 정보가 기 설정된 정보와 일치하는 경우, 상기 노면 상태 정보를 알리는 알림 정보를 출력할 수 있다.
상기 알림 정보는, 노면의 상태를 나타내는 정보이거나, 노면의 상태와 관련된 운전 가이드 정보일 수 있다. 예를 들어, 상기 제어부(180)는, 노면의 상태가 미끄러운 상태라고 판단하는 경우, "노면이 미끄럽습니다. 안전 운행하세요" 또는 "노면이 미끄럽습니다. 속도를 80km이하로 줄이세요"라는 알림 정보를 출력할 수 있다.
이상에서는 소리 정보에 기초하여 멀티 미디어 기능을 실행하는 방법에 대하여 설명하였다. 이를 통하여, 본 발명은, 차량의 내부 또는 외부에서 발생하는 소리에 대응되는 소리 정보를 이용하여, 사용자에게 감성 서비스를 제공할 수 있다.
이하에서는 차량에서 발생하는 소리에 대응되는 소리 정보에 근거하여, 차량의 상태를 판단하는 방법을 설명한다.
본 발명에 따른 차량 제어 장치의 제어부(180)는 차량의 부품에서 발생하는 소리 또는 바퀴와 노면의 마찰음 정보에 기초하여, 차량의 상태를 판단할 수 있다. 보다 구체적으로, 상기 제어부(180)는 바퀴와 노면의 마찰음 정보에 기초하여, 바퀴의 마모 정도를 검출할 수 있다. 또한, 상기 제어부(180)는 엔진 소음 정보, 브레이크에서 발생하는 소음 정보에 기초하여, 엔진 및 브레이크의 정상 상태 여부를 검출할 수 있다.
상기 제어부(180)는, 상기 차량의 상태가 정상 상태가 아닌 상태(비정상 상태)라고 판단되는 경우, 사용자가 인지하도록 알림 정보를 출력할 수 있다. 상기 알림 정보는 시각적, 청각적 및 촉각적 방식 중 적어도 하나의 방식으로 출력될 수 있다.
예를 들어, 상기 제어부(180)는, 엔진의 상태가 비정상 상태라고 판단되는 경우, 엔진에 문제가 발생하였음을 나타내는 알림 정보("엔진에 문제가 발생하였습니다")를 음성으로 출력할 수 있다.
이렇게 차량의 상태를 차량의 상태 정보를 실시간으로 감지하는 시스템으로 ADAS(Advanced Driver Assistance Systems) 시스템이 있다. 이때, 본 발명은 상기 ADAS 시스템에 소리 정보를 제공함으로써, 차량의 상태 정보를 감지할 수도 있고, ADAS 시스템과 독립적으로 소리 정보에 기초하여 차량의 상태 정보를 판단할 수도 있다.
본 발명은 차량의 내부 또는 외부에서 발생한 소리에 대응되는 소리 정보에 기초하여, 상황 정보를 검출할 수 있다. 이를 통하여, 사용자는 소리를 통하여 감지할 수 있는 상황 정보를 빠르게 감지하고, 이와 관련된 기능을 실행할 수 있다.
또한, 본 발명은, 소리와 관련된 정보를 제공함으로써 운전자의 편의를 제공할 수 있다.
또한 본 발명은 창문을 개방할 필요없이, 차량 내부의 운전자와 차량 외부의 보행자가 대화를 수행하는 방법을 제공할 수 있다.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 컴퓨터는 단말기의 제어부(180)를 포함할 수도 있다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.

Claims (20)

  1. 차량 주변의 영상을 촬영하도록 형성된 카메라;
    상기 카메라로부터 수신된 영상을 표시하도록 형성된 디스플레이부;
    상기 차량의 내부 및 외부에서 발생한 소리를 감지하는 소리 센서;
    상기 차량의 내부 및 외부에서 소리를 출력하도록 형성된 음향출력부; 및
    상기 소리 센서에서 감지된 소리에 대응하는 소리 정보에 기초하여, 상기 소리와 관련된 기능이 실행되도록 상기 디스플레이부, 상기 소리 센서 및 상기 음향출력부 중 적어도 하나를 활성화하는 제어부를 포함하는 차량 제어 장치.
  2. 제1항에 있어서,
    상기 제어부는
    상기 소리 정보에 기초하여, 상기 소리를 발생시킨 소리 발생원의 위치를 검출하고,
    상기 검출된 소리 발생원의 위치에 기초하여, 알림 정보가 상기 소리 발생원을 향하도록, 상기 음향출력부를 제어하는 것을 특징으로 하는 차량 제어 장치.
  3. 제2항에 있어서,
    상기 제어부는
    상기 차량의 내부에서 발생한 소리를 상기 차량의 외부에 위치한 소리 발생원의 위치를 향하여 출력되도록 상기 소리 센서 및 상기 음향출력부를 제어하는 것을 특징으로 하는 차량 제어 장치.
  4. 제2항에 있어서,
    상기 제어부는
    상기 검출된 소리 발생원의 위치가 상기 차량을 기준으로 기 설정된 거리 이내에 해당하는 경우, 상기 알림 정보가 상기 소리 발생원을 향하여 출력되도록, 상기 음향출력부를 제어하는 것을 특징으로 하는 차량 제어 장치.
  5. 제2항에 있어서,
    상기 제어부는
    상기 검출된 소리 발생원의 위치가, 상기 차량을 기준으로 기 설정된 거리 이내에 해당하지 않는 경우, 상기 알림 정보가 상기 소리 발생원을 향하여 출력되지 않도록, 상기 음향출력부를 제어하는 것을 특징으로 하는 차량 제어 장치.
  6. 제1항에 있어서,
    상기 음향출력부는 복수로 구비되며,
    상기 복수의 음향출력부는 상기 차량 내에 서로 이격하여 배치되고,
    상기 제어부는
    상기 복수의 음향출력부 중 상기 소리를 발생시킨 소리 발생원의 위치에 대응되는 위치에 배치된 음향출력부에서 상기 소리와 관련된 알림 정보가 출력되도록, 상기 복수의 음향출력부를 제어하는 것을 특징으로 하는 차량 제어 장치.
  7. 제1항에 있어서,
    상기 제어부는
    기 설정된 조건이 만족되는 경우, 상기 소리를 발생시킨 소리 발생원의 위치에 기초하여, 상기 소리 발생원의 영상이 촬영되도록, 상기 카메라를 제어하고,
    상기 카메라로부터 수신된 영상을 상기 디스플레이부에 표시하는 것을 특징으로 하는 차량 제어 장치.
  8. 제1항에 있어서,
    상기 제어부는
    상기 카메라로부터 수신된 영상에 포함된 적어도 하나의 그래픽 객체를 검출하며,
    상기 적어도 하나의 그래픽 객체로부터 수신된 각각의 소리의 소리 정보에 기초하여, 상기 적어도 하나의 그래픽 객체와 관련된 사고 발생 위험도 및 상대 거리 정보를 검출하는 것을 특징으로 하는 차량 제어 장치.
  9. 제8항에 있어서,
    상기 제어부는
    상기 적어도 하나의 그래픽 객체와 관련된 사고 발생 위험도 및 상대 거리 정보를 상기 적어도 하나의 그래픽 객체가 표시된 영역의 주변 영역 상에 함께 표시하는 것을 특징으로 하는 차량 제어 장치.
  10. 제8항에 있어서,
    상기 제어부는
    상기 적어도 하나의 객체 중 어느 하나의 객체에 대한 터치가 가해지는 것에 응답하여, 상기 어느 하나의 그래픽 객체에 대응되는 소리 발생원을 향하여, 알림 정보가 출력되도록, 상기 음향출력부를 제어하는 것을 특징으로 하는 차량 제어 장치.
  11. 제1항에 있어서,
    상기 제어부는
    상기 차량에 장착된 창문의 개폐 상태를 감지하고,
    상기 음향 출력부 및 소리 센서가 활성화된 상태에서, 상기 창문이 닫혀있는 상태에서 개방된 상태로 변경됨이 감지되는 경우, 상기 활성화된 음향 출력부 및 소리 센서를 비활성화 상태로 전환하는 것을 특징으로 하는 차량 제어 장치.
  12. 제1항에 있어서,
    상기 제어부는
    상기 소리 정보에 기초하여, 차량과 관련된 상황 정보를 검출하고,
    상기 상황 정보가 기 설정된 조건에 해당하는 경우, 상기 상황 정보를 운전자가 인지하도록 상기 상황 정보와 관련된 정보를 상기 디스플레이부에 표시하는 것을 특징으로 하는 차량 제어 장치.
  13. 제12항에 있어서,
    상기 상황 정보는
    차량의 부품 상태 정보, 차량 외부의 소음 레벨 정보, 차량 소리 발생원의 종류 정보, 장애물 정보 및 노면의 상태 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 차량 제어 장치.
  14. 제13항에 있어서,
    상기 제어부는
    상기 소리 센서를 통하여 감지된 소리가 기 설정된 시간 동안 감지되지 않는 경우, 음악을 재생하는 기능을 실행하거나, 백색 소음을 발생시키도록, 상기 음향출력부를 제어하는 것을 특징으로 하는 차량 제어 장치.
  15. 제13항에 있어서,
    상기 제어부는
    상기 소리 정보가 기 설정된 소리 정보와 일치하는 경우, 차량 주행과 관련된 주행 가이드 정보를 상기 디스플레이부에 표시하는 것을 특징으로 하는 차량 제어 장치.
  16. 제1항에 있어서,
    상기 제어부는
    상기 소리 정보에 기초하여, 차량의 주변에 장애물이 있다고 판단되는 경우, 상기 소리 센서의 소리 민감도를 제어하는 것을 특징으로 하는 차량 제어 장치.
  17. 차량의 내부 및 외부에서 발생한 소리를 감지하는 단계;
    상기 발생한 소리에 대응되는 소리 정보에 기초하여, 상기 차량과 관련된 상황 정보를 검출하는 단계; 및
    상기 차량과 관련된 상황 정보와 관련된 적어도 하나의 기능을 실행하는 단계를 포함하는 차량 제어 장치의 차량 제어 방법.
  18. 제17항에 있어서,
    상기 적어도 하나의 기능을 실행하는 단계는,
    상기 감지된 소리에 대응되는 소리 정보에 기초하여, 상기 소리의 소리 발생원의 위치를 검출하고,
    상기 소리 발생원의 위치를 향하여 알림 정보를 출력하는 것을 특징으로 하는 차량 제어 장치의 차량 제어 방법.
  19. 제18항에 있어서,
    상기 알림 정보는
    상기 소리 발생원의 위치가 상기 차량을 기준으로 기 설정된 거리 이내에 위치한 것에 근거하여, 출력되는 것을 특징으로 하는 차량 제어 장치의 차량 제어 방법.
  20. 제17항에 있어서,
    상기 적어도 하나의 기능을 실행하는 단계에서는,
    상기 감지된 소리를 발생시킨 소리 발생원과 차량 내부에 위치한 운전자가 대화를 수행하도록, 소리 센서 및 음향출력부를 제어하는 것을 특징으로 하는 차량 제어 장치의 차량 제어 방법.
KR1020150103856A 2015-07-22 2015-07-22 차량 제어 장치 및 이를 구비한 차량의 제어방법 Active KR101977090B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020150103856A KR101977090B1 (ko) 2015-07-22 2015-07-22 차량 제어 장치 및 이를 구비한 차량의 제어방법
EP15003300.9A EP3121064B1 (en) 2015-07-22 2015-11-19 Vehicle control device and vehicle control method thereof
US14/950,690 US10214145B2 (en) 2015-07-22 2015-11-24 Vehicle control device and vehicle control method thereof
CN201610083969.9A CN106364430B (zh) 2015-07-22 2016-02-06 车辆控制装置及其车辆控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150103856A KR101977090B1 (ko) 2015-07-22 2015-07-22 차량 제어 장치 및 이를 구비한 차량의 제어방법

Publications (2)

Publication Number Publication Date
KR20170011351A true KR20170011351A (ko) 2017-02-02
KR101977090B1 KR101977090B1 (ko) 2019-05-10

Family

ID=54782388

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150103856A Active KR101977090B1 (ko) 2015-07-22 2015-07-22 차량 제어 장치 및 이를 구비한 차량의 제어방법

Country Status (4)

Country Link
US (1) US10214145B2 (ko)
EP (1) EP3121064B1 (ko)
KR (1) KR101977090B1 (ko)
CN (1) CN106364430B (ko)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107933434A (zh) * 2017-11-17 2018-04-20 出门问问信息科技有限公司 智能后视镜收声模式的调整方法、设备及存储介质
WO2018194216A1 (ko) * 2017-04-20 2018-10-25 엘지전자 주식회사 차량에 구비된 차량 제어 장치 및 차량의 제어방법
CN110271543A (zh) * 2018-03-14 2019-09-24 本田技研工业株式会社 车辆控制装置、车辆控制方法及存储介质
KR20200072579A (ko) * 2018-11-29 2020-06-23 현대자동차주식회사 주변소음을 이용한 주행안전 제어시스템 및 그의 제어방법
KR102175359B1 (ko) * 2020-04-01 2020-11-09 이충환 청각 장애인을 위한 차량의 경보시스템
KR102219339B1 (ko) * 2019-10-01 2021-02-24 주식회사대성엘텍 운전 보조 장치 및 이를 이용한 운전 보조 방법
US10937424B2 (en) 2018-06-22 2021-03-02 Hyundai Motor Company Dialogue system and vehicle using the same

Families Citing this family (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6028781B2 (ja) * 2014-10-14 2016-11-16 トヨタ自動車株式会社 車両用情報処理装置
DE102015214826A1 (de) * 2015-08-04 2017-02-09 Robert Bosch Gmbh Verfahren und System zum Lokalisieren eines sich innerhalb eines Parkplatzes befindenden Fahrzeugs
GB2543759B (en) * 2015-10-23 2019-03-20 Jaguar Land Rover Ltd Vehicle user advice system
JP6265965B2 (ja) * 2015-12-22 2018-01-24 本田技研工業株式会社 車両用標識表示装置及び方法
JP2017138694A (ja) * 2016-02-02 2017-08-10 ソニー株式会社 映像処理装置及び映像処理方法
US9899018B2 (en) * 2016-06-24 2018-02-20 GM Global Technology Operations LLC Method, system and apparatus for addressing road noise
US10403141B2 (en) * 2016-08-19 2019-09-03 Sony Corporation System and method for processing traffic sound data to provide driver assistance
KR101976425B1 (ko) * 2016-09-22 2019-05-09 엘지전자 주식회사 차량 운전 보조 장치
US10471903B1 (en) * 2017-01-04 2019-11-12 Southern Audio Services, Inc. Sound bar for mounting on a recreational land vehicle or watercraft
CN107277684A (zh) * 2017-01-26 2017-10-20 问众智能信息科技（北京）有限公司 智能后视镜的收声模式调整方法及装置
US20190366920A1 (en) * 2017-02-10 2019-12-05 Timothy Klenck Heavy equipment safety communication systems and methods
DE102017204895B4 (de) * 2017-03-23 2024-06-06 Audi Ag Verfahren und System zum Unterhalten eines Nutzers eines Fahrzeugs
JP6840024B2 (ja) * 2017-04-26 2021-03-10 株式会社クボタ オフロード車両及び地面管理システム
JP6877247B2 (ja) * 2017-06-06 2021-05-26 三菱電機株式会社 提示装置
US10867501B2 (en) 2017-06-09 2020-12-15 Ibiquity Digital Corporation Acoustic sensing and alerting
TWI699104B (zh) 2017-08-30 2020-07-11 威摩科技股份有限公司 連網裝置及其控制系統與方法
JP2019067220A (ja) * 2017-10-02 2019-04-25 シャープ株式会社 駐車位置表示処理装置、駐車位置表示方法、およびプログラム
US10479300B2 (en) * 2017-10-06 2019-11-19 Ford Global Technologies, Llc Monitoring of vehicle window vibrations for voice-command recognition
CN108023937A (zh) * 2017-11-10 2018-05-11 北京汽车股份有限公司 用于车辆的交换机、车辆远程控制系统、方法及车辆
CN108146360A (zh) * 2017-12-25 2018-06-12 出门问问信息科技有限公司 车辆控制的方法、装置、车载设备和可读存储介质
JP7063005B2 (ja) * 2018-02-27 2022-05-09 トヨタ自動車株式会社 運転支援方法、車両、及び運転支援システム
JP7068875B2 (ja) * 2018-03-19 2022-05-17 本田技研工業株式会社 音出力装置の制御装置、制御方法、プログラム及び車両
CN110329260A (zh) * 2018-03-28 2019-10-15 比亚迪股份有限公司 车辆行驶控制方法、系统和辅助驾驶控制器
US10493909B1 (en) * 2018-05-22 2019-12-03 Blackberry Limited Vehicle communication systems and methods of operating vehicle communication systems
DE102018208707A1 (de) 2018-06-04 2019-12-05 Audi Ag Verfahren zum Betreiben einer Schallausgabeeinrichtung eines Kraftfahrzeugs, Sprachanalyse- und Steuereinrichtung, Kraftfahrzeug, und kraftfahrzeugexterne Servereinrichtung
CN109068101A (zh) * 2018-09-13 2018-12-21 济南铁路天龙高新技术开发有限公司 一种室外leu设备工作状态监测装置
DE102018007582A1 (de) * 2018-09-25 2020-03-26 Daimler Ag Kraftfahrzeug und Verfahren zur Verarbeitung von Schalleinwirkung von außerhalb des Kraftfahrzeugs
JP6962301B2 (ja) * 2018-09-25 2021-11-05 株式会社オートネットワーク技術研究所 中継装置
DE102018218137B4 (de) * 2018-10-23 2023-03-02 Zf Friedrichshafen Ag System, Verfahren und Computerprogrammprodukt zur Erzeugung eines Kontext abhängigen Hinweises auf ein Einsatzfahrzeug für einen Fahrzeugführer eines Egofahrzeuges
CN109040324A (zh) * 2018-10-30 2018-12-18 上海碧虎网络科技有限公司 车载数据服务推广方法、装置及计算机可读存储介质
CN109455180B (zh) 2018-11-09 2020-10-16 百度在线网络技术（北京）有限公司 用于控制无人车的方法和装置
CN113016016A (zh) * 2018-11-26 2021-06-22 三菱电机株式会社 信息提示控制装置、信息提示装置和信息提示控制方法、以及程序和记录介质
CN109591688A (zh) * 2018-11-29 2019-04-09 上海九山电子科技有限公司 车载显示器的控制系统、方法及车载显示装置的光学系统
KR102232045B1 (ko) 2019-01-08 2021-03-25 삼성전자주식회사 전자 장치, 전자 장치의 제어 방법 및 컴퓨터 판독 가능 매체.
US10780824B1 (en) * 2019-02-22 2020-09-22 Elizabeth Alvarez Safety accessory for vehicles
CN110103815B (zh) * 2019-03-05 2021-05-07 北京车和家信息技术有限公司 语音提醒的方法及装置
CN109849778A (zh) * 2019-03-31 2019-06-07 胡小凡 一种避免汽车喇叭惊吓行人的触发方法及装置
JP7147671B2 (ja) * 2019-04-11 2022-10-05 トヨタ自動車株式会社 情報処理システム及び情報処理プログラム
KR102690400B1 (ko) * 2019-07-01 2024-08-01 현대자동차주식회사 차량 및 그 제어 방법
CN110363991B (zh) * 2019-07-16 2021-01-08 珠海市杰理科技股份有限公司 路况分析方法、装置、处理设备、路况分析系统和车辆
DE102019210979A1 (de) * 2019-07-24 2021-01-28 Volkswagen Aktiengesellschaft Notfallassistenzsystem mit akustischer Außenwarnung
CN112428915A (zh) * 2019-08-26 2021-03-02 宝马股份公司 用于机动车的停车辅助方法、装置和系统以及机动车
KR102758528B1 (ko) * 2019-10-29 2025-01-21 현대자동차주식회사 뇌파 신호를 이용한 이미지 생성 장치 및 방법
KR102115022B1 (ko) * 2019-11-01 2020-05-26 심우진 차량의 경적음 출력장치
KR102550167B1 (ko) * 2020-01-29 2023-07-04 김영언 차량주변 이상 신호 알림 시스템 및 방법
CN111703510B (zh) * 2020-06-22 2021-10-08 潍坊歌尔微电子有限公司 语音采集装置、尾门控制装置及尾门控制方法
CN114426021A (zh) * 2020-10-29 2022-05-03 奥迪股份公司 辅助装置以及相应的车辆、辅助方法、计算机设备和介质
CN116391216B (zh) * 2020-11-18 2025-04-01 谷歌有限责任公司 在导航会话期间检测和处理驾驶事件声音
US11765506B2 (en) * 2021-03-01 2023-09-19 Tymphany Worldwide Enterprises Limited Automobile audio system
CN113625631B (zh) * 2021-08-10 2023-01-24 厦门市弘威崇安科技有限公司 一种无人值守的微波雷达-摄像机节点
CN113766402B (zh) * 2021-09-11 2024-04-26 武汉左点科技有限公司 一种提高环境适应性的助听方法及装置
US20230125654A1 (en) * 2021-10-21 2023-04-27 EMC IP Holding Company LLC Visual guidance of audio direction
EP4488817A4 (en) * 2022-03-30 2025-07-02 Lg Electronics Inc VEHICLE WITH SOUND CONTROL DEVICE
CN114993615B (zh) * 2022-05-23 2025-06-13 京东方科技集团股份有限公司 显示屏异音检测装置和检测笔记本电脑显示屏异音的方法
CN115662169A (zh) * 2022-10-18 2023-01-31 重庆清文科技有限公司 车路协同语音交互系统
CN116161051B (zh) * 2022-12-27 2024-10-18 小米汽车科技有限公司 针对车辆驾驶员的警示方法、装置、设备、介质及车辆
CN116131872A (zh) * 2023-01-13 2023-05-16 浙江极氪智能科技有限公司 车辆的交互系统、方法及存储介质
CN116311836A (zh) * 2023-03-20 2023-06-23 阿维塔科技(重庆)有限公司 一种车辆警示提醒方法、提醒装置及车辆

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06344839A (ja) * 1993-06-11 1994-12-20 Mitsubishi Motors Corp 車両用警報案内装置
JPH0717650U (ja) * 1993-08-31 1995-03-31 リズム時計工業株式会社 車載カメラ映像切換制御装置
JP2000118260A (ja) * 1998-10-09 2000-04-25 Honda Motor Co Ltd 車両用乗員対話装置
JP2006298245A (ja) * 2005-04-22 2006-11-02 Toyota Motor Corp 車両の警報装置および車両
JP2013256249A (ja) * 2012-06-14 2013-12-26 Mitsubishi Electric Corp 音声伝達装置
KR101519255B1 (ko) * 2013-12-10 2015-05-19 현대자동차주식회사 차량 주변 소리 알림 시스템 및 그 방법

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5917920A (en) * 1997-05-29 1999-06-29 Humphries; Alan Safety vehicle communication system
DE19749372A1 (de) * 1997-11-07 1999-05-12 Volkswagen Ag Elektronisches Erkennungssystem und -verfahren für akustische Signale
DE20113945U1 (de) * 2001-08-23 2001-11-15 Fuhrmann, Hartmut, Pat.-Ing. DI Eur.-Ing., 04209 Leipzig Aussensprechanlage für Fahrzeuge
DE10318294A1 (de) * 2003-04-15 2004-11-25 Frie, Werner, Dr. Verfahren und Vorrichtung zur Verbesserung der akkustischen Wahrnehmungsgabe eines Fahrzeugführers
US20080273715A1 (en) * 2007-05-03 2008-11-06 Snider Chris R Vehicle external speaker and communication system
KR101502012B1 (ko) * 2008-10-06 2015-03-12 엘지전자 주식회사 텔레매틱스 단말기 및 텔레매틱스 단말기의 비상 상황 알림방법
US8537030B2 (en) * 2010-02-15 2013-09-17 Ford Global Technologies, Llc Pedestrian alert system and method
JP2011232293A (ja) * 2010-04-30 2011-11-17 Toyota Motor Corp 車外音検出装置
DE102010056174A1 (de) * 2010-12-24 2012-06-28 Daimler Ag Verfahren zum Unterstützen einer Bedienperson beim Bedienen von Funktionseinheiten eines Kraftfahrzeugs mithilfe einer Spracherkennungseinrichtung und Fahrerassistenzsystem
JP5338829B2 (ja) * 2011-03-15 2013-11-13 株式会社デンソー 運転支援装置
EP2763403B1 (en) * 2011-09-29 2018-08-15 Toyota Jidosha Kabushiki Kaisha Image display device, and image display method
JP5820305B2 (ja) * 2012-02-29 2015-11-24 株式会社村上開明堂 車外音導入装置
US8751106B2 (en) * 2012-03-28 2014-06-10 GM Global Technology Operations LLC Directional horn and method of use
DE102012016819A1 (de) * 2012-08-24 2014-02-27 GM Global Technology Operations LLC (n. d. Ges. d. Staates Delaware) Verfahren und Vorrichtungen zur Fahrerunterstützung
DE102013213039A1 (de) * 2013-07-03 2015-01-08 Continental Automotive Gmbh Assistenzsystem und Assistenzverfahren zur Unterstützung bei der Steuerung eines Kraftfahrzeugs
US9800983B2 (en) * 2014-07-24 2017-10-24 Magna Electronics Inc. Vehicle in cabin sound processing system
US9855890B2 (en) * 2014-12-11 2018-01-02 Toyota Motor Engineering & Manufacturing North America, Inc. Autonomous vehicle interaction with external environment
US9844981B2 (en) * 2015-06-02 2017-12-19 Karma Automotive Llc Systems and methods for use in a vehicle for detecting external events

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06344839A (ja) * 1993-06-11 1994-12-20 Mitsubishi Motors Corp 車両用警報案内装置
JPH0717650U (ja) * 1993-08-31 1995-03-31 リズム時計工業株式会社 車載カメラ映像切換制御装置
JP2000118260A (ja) * 1998-10-09 2000-04-25 Honda Motor Co Ltd 車両用乗員対話装置
JP2006298245A (ja) * 2005-04-22 2006-11-02 Toyota Motor Corp 車両の警報装置および車両
JP2013256249A (ja) * 2012-06-14 2013-12-26 Mitsubishi Electric Corp 音声伝達装置
KR101519255B1 (ko) * 2013-12-10 2015-05-19 현대자동차주식회사 차량 주변 소리 알림 시스템 및 그 방법

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018194216A1 (ko) * 2017-04-20 2018-10-25 엘지전자 주식회사 차량에 구비된 차량 제어 장치 및 차량의 제어방법
CN107933434A (zh) * 2017-11-17 2018-04-20 出门问问信息科技有限公司 智能后视镜收声模式的调整方法、设备及存储介质
CN110271543A (zh) * 2018-03-14 2019-09-24 本田技研工业株式会社 车辆控制装置、车辆控制方法及存储介质
CN110271543B (zh) * 2018-03-14 2022-06-10 本田技研工业株式会社 车辆控制装置、车辆控制方法及存储介质
US10937424B2 (en) 2018-06-22 2021-03-02 Hyundai Motor Company Dialogue system and vehicle using the same
KR20200072579A (ko) * 2018-11-29 2020-06-23 현대자동차주식회사 주변소음을 이용한 주행안전 제어시스템 및 그의 제어방법
KR102219339B1 (ko) * 2019-10-01 2021-02-24 주식회사대성엘텍 운전 보조 장치 및 이를 이용한 운전 보조 방법
KR102175359B1 (ko) * 2020-04-01 2020-11-09 이충환 청각 장애인을 위한 차량의 경보시스템

Also Published As

Publication number Publication date
CN106364430A (zh) 2017-02-01
US10214145B2 (en) 2019-02-26
EP3121064B1 (en) 2018-01-03
US20170021768A1 (en) 2017-01-26
CN106364430B (zh) 2021-03-16
KR101977090B1 (ko) 2019-05-10
EP3121064A1 (en) 2017-01-25

Similar Documents

Publication Publication Date Title
KR101977090B1 (ko) 차량 제어 장치 및 이를 구비한 차량의 제어방법
KR101910383B1 (ko) 차량 운전 보조 장치 및 이를 구비한 차량
US10210756B2 (en) Emergency vehicle alert system
KR101632009B1 (ko) 전자기기 및 그것의 제어방법
KR20190001145A (ko) 차량용 인터페이스 시스템
KR20190005630A (ko) 차량에 구비된 차량 제어 장치 및 차량의 제어방법
WO2015141147A1 (ja) 車両用報知制御装置、及び車両用報知制御システム
CN105551283A (zh) 车辆的显示系统及控制显示系统的方法
JP2008114649A (ja) クラクション制御装置
KR101979277B1 (ko) 차량용 사용자 인터페이스 장치 및 차량
JP2017194948A (ja) 情報提示制御装置、自動運転車、及び自動運転車運転支援システム
KR101854338B1 (ko) 차량용 멀티미디어 장치
US20250234126A1 (en) Acoustic control method and acoustic control device
JP7469358B2 (ja) 交通安全支援システム
JP2019129441A (ja) 楽曲提供システム及び楽曲提供方法
JP7469359B2 (ja) 交通安全支援システム
JP2012178127A (ja) 注意喚起システム及び注意喚起装置
EP4273834A1 (en) Information processing device, information processing method, program, moving device, and information processing system
KR20120078877A (ko) 전자 기기 및 전자 기기의 차선 이탈 경보 방법
KR102023995B1 (ko) 차량 제어 방법
KR101602256B1 (ko) 차량 제어 장치 및 그 제어 방법
KR101850857B1 (ko) 디스플레이 장치 및 이를 포함하는 차량
KR20150033428A (ko) 전자기기 및 그것의 제어방법
JP2017224346A (ja) 要通知情報提示装置、要通知情報提示方法及び要通知情報提示プログラム
JP2010538884A (ja) 複雑な、メニューコントロールされる多機能の車両システム用ナビゲーションシステム

Legal Events

Date Code Title Description
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20150722

PG1501 Laying open of application
PA0201 Request for examination

Patent event code: PA02012R01D

Patent event date: 20170414

Comment text: Request for Examination of Application

Patent event code: PA02011R01I

Patent event date: 20150722

Comment text: Patent Application

E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20181018

Patent event code: PE09021S01D

E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20190401

PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20190503

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20190507

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
PR1001 Payment of annual fee

Payment date: 20220408

Start annual number: 4

End annual number: 4

PR1001 Payment of annual fee

Payment date: 20240409

Start annual number: 6

End annual number: 6

PR1001 Payment of annual fee

Payment date: 20250409

Start annual number: 7

End annual number: 7