DE102013203653A1 - Control unit for vehicle, for increasing safety of road user in traffic, displays front area image on picture screen of infotainment system, if driver of vehicle directs his attention to picture screen - Google Patents
Control unit for vehicle, for increasing safety of road user in traffic, displays front area image on picture screen of infotainment system, if driver of vehicle directs his attention to picture screen Download PDFInfo
- Publication number
- DE102013203653A1 DE102013203653A1 DE201310203653 DE102013203653A DE102013203653A1 DE 102013203653 A1 DE102013203653 A1 DE 102013203653A1 DE 201310203653 DE201310203653 DE 201310203653 DE 102013203653 A DE102013203653 A DE 102013203653A DE 102013203653 A1 DE102013203653 A1 DE 102013203653A1
- Authority
- DE
- Germany
- Prior art keywords
- screen
- vehicle
- control unit
- driver
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/24—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view in front of the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
- B60R2300/207—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using multi-purpose displays, e.g. camera image and navigation or video on same display
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/40—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components
- B60R2300/404—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components triggering from stand-by mode to operation mode
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Mechanical Engineering (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
Die Erfindung betrifft eine Vorrichtung und ein Verfahren zur Erhöhung der Sicherheit von Verkehrsteilnehmern, insbesondere in Fahrzeugen.The invention relates to a device and a method for increasing the safety of road users, especially in vehicles.
Fahrzeuge (insbesondere Personenkraftfahrzeuge oder Automobile) verfügen häufig über ein Center Display und somit über eine sogenannte Head Unit. Derartige Center Displays sind meist als Teil eines Informations- und Kommunikationssystems (IK-System) in der Mittelkonsole des Fahrzeugs angebracht. Auf dem Center Display (oder Bildschirm) des IK-Systems können Informationen, wie z. B. Navigationsinformationen, Uhrzeit, Radiosender, etc., angezeigt werden. Außerdem kann der Bildschirm des IK-Systems für die Darstellung eines Menus zur Veränderung der Einstellungen des IK-Systems verwendet werden.Vehicles (especially passenger cars or automobiles) often have a center display and thus a so-called head unit. Such center displays are usually mounted as part of an information and communication system (IK system) in the center console of the vehicle. Information can be displayed on the center display (or screen) of the IK system. B. navigation information, time, radio stations, etc., are displayed. In addition, the screen of the IK system can be used to display a menu for changing the settings of the IK system.
Der Fahrer eines Fahrzeugs wendet bei der Benutzung des IK-Systems (z. B. zur Einstellung eines neuen Radiosenders oder zur Einstellung einer neuen Navigationsroute) meist die Augen vom Straßenverkehr auf das Menu des IK-Systems. Durch diese Abkehr der Aufmerksamkeit vom Straßenverkehr wird im Allgemeinen das Unfallrisiko erhöht. Das vorliegende Dokument adressiert dieses technische Problem. Insbesondere beschreibt das vorliegende Dokument eine Vorrichtung und ein Verfahren, durch die das Unfallrisiko bei Betätigung des IK-Systems reduziert werden kann.The driver of a vehicle usually turns his eyes from the traffic to the menu of the IK system when using the IK system (eg, to set up a new radio station or to set a new navigation route). This shift away from road traffic generally increases the risk of accidents. The present document addresses this technical problem. In particular, the present document describes an apparatus and a method by which the risk of accidents when operating the IK system can be reduced.
Gemäß einem Aspekt wird eine Steuereinheit für ein Fahrzeug beschrieben. Bei dem Fahrzeug kann es sich um ein zweispuriges Fahrzeug, insbesondere um ein Kraftfahrzeug oder ein Automobil, handeln. Das Fahrzeug umfasst eine Frontkamera, die eingerichtet ist, ein Bild eines Frontbereichs des Fahrzeugs bzw. ein Bild eines Frontbereichs vor dem Fahrzeug zu erfassen. Insbesondere kann die Frontkamera eingerichtet sein, eine Sequenz von Bildern (z. B. einen Videostream oder Livestream) zu erfassen. Das Fahrzeug kann darüberhinaus ein Infotainment-System (auch Informations- und Kommunikations-System genannt) umfassen. Das Infotainment-System umfasst einen Bildschirm, auf dem eine Ausgabe des Infotainment-Systems (z. B. ein Menu oder eine Navigationsroute) angezeigt werden kann. Der Bildschirm des Infotainment-Systems kann an einer Mittelkonsole des Fahrzeugs angeordnet sein.In one aspect, a control unit for a vehicle is described. The vehicle may be a two-lane vehicle, in particular a motor vehicle or an automobile. The vehicle includes a front camera that is configured to capture an image of a front area of the vehicle or an image of a front area in front of the vehicle. In particular, the front camera may be configured to capture a sequence of images (eg, a video stream or live stream). The vehicle may also include an infotainment system (also called an information and communication system). The infotainment system includes a screen on which an output of the infotainment system (eg, a menu or navigation route) can be displayed. The screen of the infotainment system may be located on a center console of the vehicle.
Die Steuereinheit kann eingerichtet sein, ein Indiz (oder eine Vielzahl von Indizien) dafür zu erfassen, dass ein Fahrer des Fahrzeugs seine Aufmerksamkeit auf den Bildschirm gerichtet hat. Ein solches Indiz kann als Indiz für die Aufmerksamkeit bezeichnet werden. Beispielsweise kann das Infotainment-System ein Eingabemittel (z. B. eine Taste, einen berührungsempfindlichen Bildschirm und/oder einen Dreh/Drück-Knopf) zur Veränderung einer Einstellung des Infotainment-Systems umfassen. Das Eingabemittel kann es dem Fahrer ermöglichen, mit Hilfe eines auf dem Bildschirm des Infotainment-Systems angezeigten Menus, eine Einstellung des Infotainment-Systems zu verändern. Dazu richtet der Fahrer typischerweise seinen Blick auf den Bildschirm des Infotainment-Systems. Folglich, kann das Erkennen, dass das Eingabemittel des Infotainment-Systems betätigt wird, als Indiz dafür gewertet werden, dass der Fahrer des Fahrzeugs seine Aufmerksamkeit auf den Bildschirm des Infotainment-Systems gerichtet hat.The control unit may be configured to detect an indication (or a plurality of indications) that a driver of the vehicle has turned his attention to the screen. Such an indication can be called an indication of attention. For example, the infotainment system may include an input means (eg, a button, a touch-sensitive screen, and / or a spin / push button) for changing an attitude of the infotainment system. The input means may allow the driver to change a setting of the infotainment system by means of a menu displayed on the screen of the infotainment system. For this purpose, the driver typically directs his gaze to the screen of the infotainment system. Consequently, the recognition that the input means of the infotainment system is actuated may be taken as an indication that the driver of the vehicle has turned his attention to the screen of the infotainment system.
Alternativ oder ergänzend, kann das Fahrzeug eine Innenraumkamera umfassen, die eingerichtet ist, ein Bild des Kopfes des Fahrers zu erfassen. Die Steuereinheit kann eingerichtet sein, auf Basis des erfassten Bildes des Kopfes des Fahrers eine Blickrichtung des Fahrers zu ermitteln. Insbesondere kann ermittelt werden, ob der Blick des Fahrers auf den Bildschirm gerichtet ist. Somit kann das Indiz, dass der Fahrer des Fahrzeugs seine Aufmerksamkeit auf den Bildschirm gerichtet hat, auf Basis des von der Innenraumkamera ermittelten Bildes ermittelt wird.Alternatively or additionally, the vehicle may include an interior camera configured to capture an image of the driver's head. The control unit may be configured to determine a driver's line of sight based on the captured image of the driver's head. In particular, it can be determined whether the driver's gaze is directed at the screen. Thus, the indication that the driver of the vehicle has turned his attention to the screen can be determined on the basis of the image determined by the indoor camera.
Die Steuereinheit kann eingerichtet sein, in Abhängigkeit von dem erfassten Indiz (oder von den erfassten Indizien) für die Aufmerksamkeit zu veranlassen, dass das Bild des Frontbereichs auf dem Bildschirm angezeigt wird. Insbesondere kann das Anzeigen des Bildes des Frontbereichs auf dem Bildschirm des Infotainment-Systems veranlasst werden, wenn erkannt wird, dass das Eingabemittel des Infotainment-System betätigt wird und/oder wenn erkannt wird, dass der Blick des Fahrers auf den Bildschirm gerichtet ist.The control unit may be configured to cause the attention of the captured area indicia (or detected indicia) to be displayed on the screen. In particular, the display of the image of the front area on the screen of the infotainment system can be initiated if it is detected that the input means of the infotainment system is actuated and / or if it is detected that the driver's gaze is directed at the screen.
Die Steuereinheit kann eingerichtet sein, zu veranlassen, dass zusätzlich zu dem Bild des Frontbereichs eine Ausgabe des Infotainment-Systems (z. B. ein Menu) auf dem Bildschirm angezeigt wird. Dabei kann das Bild des Frontbereichs auf einem ersten Teilbereich des Bildschirms angezeigt werden. Die Ausgabe des Infotainment-Systems kann auf einem anderen zweiten Teilbereich des Bildschirms angezeigt wird (z. B. wie bei einer Bild in Bild Darstellung eines Fernsehers). Alternativ oder ergänzend kann das Bild des Frontbereichs als Hintergrundbild auf dem Bildschirm angezeigt werden, und die Ausgabe des Infotainment-Systems kann in teil-transparenter Weise über dem Hintergrundbild angezeigt wird.The control unit may be configured to cause an output of the infotainment system (eg, a menu) to be displayed on the screen in addition to the image of the front area. The image of the front area can be displayed on a first section of the screen. The output of the infotainment system may be displayed on another second portion of the screen (eg, as with a picture-in-picture representation of a television). Alternatively or additionally, the image of the front area may be displayed as a background image on the screen, and the output of the infotainment system may be displayed in a partially transparent manner over the background image.
Somit ermöglicht es die Steuereinheit, dem Fahrer Bild-Informationen über den Frontbereich des Fahrzeugs bereitzustellen, auch wenn der Fahrer seinen Blick vom Straßenverkehr weg auf den Bildschirm des Infotainment-Systems gerichtet hat. Dadurch kann das Unfallrisiko reduziert und die Sicherheit für den Fahrer erhöht werden.Thus, the control unit allows to provide the driver with image information about the front of the vehicle, even if the driver has directed his eyes away from the road on the screen of the infotainment system. This can reduce the risk of accidents and increase safety for the driver.
Die Steuereinheit kann eingerichtet sein, zu ermitteln, ob sich das Fahrzeug bewegt. Insbesondere kann die Steuereinheit eine Bewegungsrichtung und/oder eine Geschwindigkeit des Fahrzeugs ermitteln. Die Steuereinheit kann eingerichtet sein, zu veranlassen, dass das Bild des Frontbereichs nur dann auf dem Bildschirm angezeigt wird, wenn sich das Fahrzeug bewegt. Insbesondere kann die Anzeige des Bildes des Frontbereichs auf Zeitpunkte beschränkt sein, in denen sich das Fahrzeug vorwärts bewegt und/oder die Bewegungsgeschwindigkeit über einem vordefinierten Schwellwert liegt. Dadurch wird sichergestellt, dass das Bild des Frontbereichs nur dann eingeblendet wird, wenn die Bild-Information des Frontbereichs für den Fahrer relevant ist. Insbesondere kann dadurch die Beeinträchtigung der Bedienung des Infotainment-Systems aufgrund des dargestellten Bildes des Frontbereichs reduziert werden.The control unit may be configured to determine if the vehicle is moving. In particular, the control unit can determine a direction of movement and / or a speed of the vehicle. The control unit may be configured to cause the image of the front area to be displayed on the screen only when the vehicle is moving. In particular, the display of the image of the front area may be limited to times when the vehicle is moving forward and / or the movement speed is above a predefined threshold value. This ensures that the image of the front area is only displayed if the image information of the front area is relevant for the driver. In particular, this can reduce the impairment of the operation of the infotainment system due to the displayed image of the front area.
Die Steuereinheit kann weiter eingerichtet sein, zu ermitteln, ob ein elektronisches Gerät (z. B. ein Smartphone oder ein Tablet Computer) mit dem Infotainment-System (auch als Head Unit bezeichnet) verbunden ist (z. B. über eine USB oder eine Bluetooth Schnittstelle). Desweiteren kann die Steuereinheit eingerichtet sein, ein Indiz (oder eine Vielzahl von Indizien) dafür zu erfassen, dass der Fahrer des Fahrzeugs seine Aufmerksamkeit auf einen Bildschirm des elektronischen Geräts gerichtet hat. Ein solches Indiz kann als Geräte-Indiz bezeichnet werden. Wie unten dargelegt, kann ein Geräte-Indiz z. B. durch eine Frontkamera des elektronischen Geräts (ähnlich wie der oben beschriebenen Innenraumkamera des Fahrzeugs) und/oder durch Erkennung einer Betätigung eines Eingabemittels des elektronischen Geräts (z. B. einer Tastatur und/oder eines berührungsempfindlichen Bildschirms) ermittelt werden. Das Geräte-Indiz kann durch eine Software Applikation auf dem elektronischen Gerät ermittelt werden, und an die Steuereinheit weitergeleitet werden. Desweiteren kann die Steuereinheit eingerichtet sein, in Abhängigkeit von dem erfassten Geräte-Indiz (oder von den erfassten Geräte-Indizien) zu veranlassen, dass das Bild des Frontbereichs auf dem Bildschirm des elektronischen Geräts angezeigt wird. Dazu kann das Bild des Frontbereichs über eine geeignete Schnittstelle (z. B. USB oder Bluetooth) von dem Infotainment-System an das elektronische Gerät weitergeleitet werden.The control unit may be further configured to determine whether an electronic device (eg, a smartphone or a tablet computer) is connected to the infotainment system (also referred to as a head unit) (eg, via a USB or a personal computer) Bluetooth interface). Furthermore, the control unit may be configured to detect an indication (or a plurality of indications) that the driver of the vehicle has turned his attention to a screen of the electronic device. Such an indication can be called a device indicator. As set out below, a device indication z. By a front camera of the electronic device (similar to the above described interior camera of the vehicle) and / or by detecting an operation of an input means of the electronic device (eg, a keyboard and / or a touch-sensitive screen). The device indicator can be determined by a software application on the electronic device, and forwarded to the control unit. Furthermore, the control unit may be configured to cause the image of the front area to be displayed on the screen of the electronic device in dependence on the detected device indication (or the detected device indicia). For this purpose, the image of the front area can be forwarded from the infotainment system to the electronic device via a suitable interface (eg USB or Bluetooth).
Die Steuereinheit kann eingerichtet sein, ein Indiz für eine Gefahrensituation für das Fahrzeug zu erfassen (z. B. eine rote Ampel oder ein bremsendes Fahrzeug). Das Indiz für die Gefahrensituation kann z. B. auf Basis des Bildes des Frontbereichs ermittelt werden (z. B. anhand von Bildanalyseverfahren). Ein oder mehrere Indizien für die Gefahrensituation können auch durch weitere Sensoren des Fahrzeugs bereitgestellt werden (z. B. durch Abstandssensoren). Weiter kann die Steuereinheit eingerichtet sein, in Abhängigkeit von dem Indiz für die Gefahrensituation, zu veranlassen, dass das Bild des Frontbereichs aus dem Bildschirm ausgeblendet wird. Durch das Ausblenden des Bildes des Frontbereichs bei Gefahrensituationen kann erreicht werden, dass die Aufmerksamkeit und/oder der Blick des Fahrers wieder auf den Straßenverkehr (und weg vom Bildschirm des Infotainment-Systems) gelenkt wird. Das Ausblenden des Bildes des Frontbereichs bei Gefahrensituationen kann mit einem akustischen und/oder visuellen Warnhinweis einhergehen.The control unit may be configured to detect an indication of a dangerous situation for the vehicle (eg a red traffic light or a braking vehicle). The indication of the danger situation can be z. B. based on the image of the front area can be determined (eg., Using image analysis method). One or more indicators for the dangerous situation can also be provided by further sensors of the vehicle (eg by distance sensors). Furthermore, the control unit may be set up, depending on the indication of the dangerous situation, to cause the image of the front area to be hidden from the screen. By hiding the image of the front area in dangerous situations can be achieved that the attention and / or the driver's view is directed back to the traffic (and away from the screen of the infotainment system). Hiding the image of the front area in dangerous situations may be accompanied by an audible and / or visual warning.
Die Steuereinheit kann eingerichtet sein, ein Indiz dafür zu erfassen, dass der Fahrer seine Aufmerksamkeit von dem Bildschirm genommen hat. Dies kann als Indiz für die genommene Aufmerksamkeit bezeichnet werden. Das Indiz kann z. B. umfassen, dass das Eingabemittel des Infotainment-Systems nicht mehr betätigt wird (und typischerweise auch kein anderes Eingabemittel des Infotainment-Systems betätigt wird). Alternativ oder ergänzend kann auf ein von der Innenraumkamera erfasstes Bild des Kopfes des Fahrers zurückgegriffen werden, um zu erkennen, dass der Blick des Fahrers nicht mehr auf den Bildschirm des Fahrers gerichtet ist. Die Steuereinheit kann eingerichtet sein, in Abhängigkeit von dem Indiz für die genommene Aufmerksamkeit zu veranlassen, dass das Bild des Frontbereichs nach einem vordefinierten Zeitintervall aus dem Bildschirm ausgeblendet wird. Der vordefinierte Zeitraum kann z. B. ein oder mehrere Sekunden umfassen. Durch das Ausblenden des Bildes des Frontbereichs wird erreicht, dass der Fahrer beim Fahren nicht durch ein Bewegt-Bild auf dem Bildschirm abgelenkt wird. Außerdem kann das Ausblenden des Bildes des Frontbereichs nach Ablauf des vordefinierten Zeitraums den Fahrer dazu anhalten, den Blick wieder auf die Straße zu wenden; nicht nur bei einer erkannten Gefahrensituation.The control unit may be configured to detect an indication that the driver has withdrawn his attention from the screen. This can be called an indication of the attention taken. The indication can z. B. include that the input means of the infotainment system is no longer actuated (and typically no other input means of the infotainment system is actuated). Alternatively or additionally, an image of the head of the driver captured by the interior camera can be used to recognize that the driver's gaze is no longer directed toward the driver's screen. The control unit may be configured to cause the image of the front area to be hidden from the screen after a predefined time interval, depending on the indication of the attention taken. The predefined period can be z. B. one or more seconds. Hiding the image of the front area ensures that the driver is not distracted by a moving image on the screen when driving. In addition, hiding the image of the front area after the predefined time period has elapsed may force the driver to look back at the road; not only with a recognized dangerous situation.
Die Steuereinheit kann eingerichtet sein, zwischen dem erneuten Einblenden des Bildes des Frontbereichs und dem Ausblenden des Bildes des Frontbereichs eine vordefinierte Pausenzeit zu gewährleisten, in der kein Bild des Frontbereichs im Bildschirm des Infotainment-Systems eingeblendet wird. Dadurch kann ein extensives Fahren anhand des Bildes des Frontbereichs vermieden werden.The control unit may be configured to provide a pre-defined pause time between re-fading in the image of the front area and fading out the image of the front area, in which no image of the front area is displayed on the screen of the infotainment system. This can avoid extensive driving based on the image of the front area.
Gemäß einem weiteren Aspekt wird ein Fahrzeug mit der oben genannten Steuereinheit beschrieben.In another aspect, a vehicle having the above control unit is described.
Gemäß einem weiteren Aspekt wird ein elektronisches Gerät (z. B. ein Smartphone und/oder ein tragbarer Tablet-Computer) beschrieben. Das Gerät umfasst einen auf einer Vorderseite des Geräts angeordneten Bildschirm (z. B. einen berührungsempfindlichen Bildschirm), der eingerichtet ist, einem Benutzer des Gerätes eine visuelle Ausgabe bereitzustellen. Insbesondere kann über den Bildschirm eine Anwendung des Geräts (z. B. eine sogenannte App) ausgegeben und/oder bedient werden.In another aspect, an electronic device (eg, a smartphone and / or a portable tablet computer) is described. The device includes a screen disposed on a front of the device (eg, a touch-sensitive screen) configured to provide a visual output to a user of the device. In particular, an application of the device (eg a so-called app) can be output and / or operated via the screen.
Das Gerät umfasst weiter eine auf einer Rückseite des Geräts angeordnete Kamera, die eingerichtet ist, ein Bild einer Umgebung der Rückseite des Geräts zu erfassen. Das Gerät kann eingerichtet sein, ein Indiz dafür zu erfassen, dass der Benutzer des Geräts seine Aufmerksamkeit auf den Bildschirm des Geräts gerichtet hat. Das Indiz kann z. B. durch eine Frontkamera des Geräts (ähnlich wie der oben beschriebenen Innenraumkamera des Fahrzeugs) und/oder durch Erkennung einer Betätigung eines Eingabemittels des Geräts (z. B. einer Tastatur und/oder eines berührungsempfindlichen Bildschirms) ermittelt werden.The device further includes a camera disposed on a back of the device configured to capture an image of an environment of the back of the device. The device may be configured to detect an indication that the user of the device has turned his attention to the screen of the device. The indication can z. B. by a front camera of the device (similar to the above-described interior camera of the vehicle) and / or by detecting an operation of an input means of the device (eg., A keyboard and / or a touch-sensitive screen) are determined.
Das Gerät kann weiter eingerichtet sein, eine Bewegung des Gerätes zu erfassen. Dies kann z. B. anhand eines Gyroskops und/oder anhand eines GPS-Empfängers erfolgen. Darüber hinaus kann das Gerät eingerichtet sein, in Abhängigkeit von dem erfassten Indiz (oder den erfassten Indizien) für die Aufmerksamkeit und in Abhängigkeit von der erfassten Bewegung des Geräts, das Bild der Umgebung der Rückseite des Geräts auf dem Bildschirm anzuzeigen. So kann erreicht werden, dass ein Benutzer des Geräts auch beim Gehen mit dem Gerät, das Gerät sicher bedienen kann. Insbesondere kann das Unfallrisiko reduziert werden, da der Benutzer ein Bild der Umgebung des Geräts einsehen kann.The device may be further configured to detect movement of the device. This can be z. B. using a gyroscope and / or using a GPS receiver. In addition, the device may be arranged to display the image of the surroundings of the back of the device on the screen depending on the detected indicia (or detected indicia) for attention, and depending on the sensed movement of the device. It can thus be achieved that a user of the device can operate the device safely even while walking with the device. In particular, the risk of accident can be reduced because the user can see an image of the environment of the device.
Dabei kann die Anzeige des Bildes der Umgebung der Rückseite des Geräts auf dem Bildschirm des Geräts auf einen vorgegebenen Bereich der Bewegungsgeschwindigkeit des Geräts beschränkt. Der vorgegebene Bereich kann eine Minimalgeschwindigkeit (z. B. 1 km/h) umfassen, um sicherzustellen, dass das Bild der Umgebung der Rückseite des Geräts nur angezeigt wird, wenn der Benutzer geht (und nicht steht). Andererseits kann der vorgegebene Bereich eine Maximalgeschwindigkeit (z. B. 10 km/h) umfassen, um sicherzustellen, dass das Bild der Umgebung der Rückseite des Geräts nicht angezeigt wird, wenn der Benutzer z. B. in einem fahrenden Bus oder einem anderen Fahrzeug sitzt.In this case, the display of the image of the environment of the back of the device on the screen of the device can be limited to a predetermined range of the movement speed of the device. The predetermined range may include a minimum speed (eg, 1 km / h) to ensure that the image of the environment of the back of the device is only displayed when the user walks (and does not stop). On the other hand, the predetermined range may include a maximum speed (eg, 10 km / h) to ensure that the image of the environment of the back of the device is not displayed when the user, e.g. B. sitting in a moving bus or another vehicle.
Alternativ oder ergänzend können „typische” Bewegungsmuster verwendet werde, z. B. das Auf und Ab beim Laufen/Gehen, und/oder der Schrägwinkel des Geräts (beim Laufen hält man ein Smartphone typischerweise vertikaler als im Sitzen). Eine aktuelle Bewegung kann mit einer Vielzahl von vordefinierten Bewegungsmustern verglichen werden, und so anhand der Vielzahl von vordefinierten Bewegungsmustern ermittelt werden, ob der Benutzer des elektronischen Geräts geht oder nicht. Die Anzeige des Bildes der Umgebung der Rückseite des Geräts auf dem Bildschirm des Geräts kann dann davon abhängig gemacht werden, ob der Benutzer des elektronischen Geräts geht oder nicht.Alternatively or additionally, "typical" movement patterns may be used, e.g. For example, the up and down while walking / walking, and / or the slant angle of the device (when running one holds a smartphone typically vertical than sitting). A current motion can be compared with a plurality of predefined motion patterns, and thus, based on the plurality of predefined motion patterns, it can be determined whether or not the user of the electronic device is walking. The display of the image of the surroundings of the back of the device on the screen of the device may then be made dependent on whether the user of the electronic device is going or not.
Desweiteren kann die Einblendung des Bildes der Umgebung der Rückseite des Geräts von einem Höhenwinkel des Geräts abhängen, mit dem das Gerät gehalten wird. Der Höhenwinkel kann z. B. anhand eines Gyroskops/Drehratensensor des Geräts und/oder anhand der Kamera auf der Rückseite des Geräts (insbesondere anhand des erfassten Bildes der Umgebung der Rückseite) ermittelt werden. So kann sichergestellt werden, dass das Bild der Umgebung der Rückseite nur dann eingeblendet wird, wenn das Bild sinnvolle Informationen bzgl. der Laufrichtung des Benutzers des Geräts enthält.Furthermore, the display of the image of the surroundings of the back of the device may depend on an elevation angle of the device with which the device is held. The elevation angle can z. B. based on a gyroscope / rotation rate sensor of the device and / or on the basis of the camera on the back of the device (in particular based on the captured image of the environment of the back) are determined. This ensures that the image of the surroundings of the back side is only displayed if the image contains useful information regarding the direction of the device's user.
Gemäß einem weiteren Aspekt wird ein Verfahren zur Erhöhung der Sicherheit eines Verkehrsteilnehmers (z. B. einer Person) im Straßenverkehr beschrieben. Der Verkehrsteilnehmer kann über eine Vorrichtung mit einem Bildschirm (z. B. über das beschriebene elektronische Gerät oder über das Infotainment-System eines Fahrzeugs) verfügen. Die Vorrichtung ist typischerweise derart ausgestaltet, dass der Verkehrsteilnehmer zur Betrachtung des Bildschirms seinen Blick vom Straßenverkehr nimmt bzw. nehmen muss.According to a further aspect, a method for increasing the safety of a road user (eg a person) in road traffic is described. The road user may have a device with a screen (eg via the described electronic device or via the infotainment system of a vehicle). The device is typically designed in such a way that the road user has to take his eyes off the road for viewing the screen.
Darüberhinaus verfügt der Verkehrsteilnehmer über eine Kamera, die eingerichtet ist, ein Bild des Straßenverkehrs zu erfassen. Bei der Kamera kann es sich um eine Kamera auf der Rückseite eines elektronischen Geräts oder um die Frontkamera eines Fahrzeugs handeln. Das Verfahren umfasst das Erfassen von einem Indiz dafür, dass der Verkehrsteilnehmer seine Aufmerksamkeit auf den Bildschirm gerichtet hat. Desweiteren umfasst das Verfahren das Anzeigen des Bildes des Straßenverkehrs auf dem Bildschirm, in Abhängigkeit von dem erfassten Indiz für die Aufmerksamkeit.In addition, the road user has a camera that is set up to capture a picture of road traffic. The camera may be a camera on the back of an electronic device or the front camera of a vehicle. The method includes detecting an indication that the road user has turned his attention to the screen. Furthermore, the method includes displaying the image of the traffic on the screen depending on the detected indication of attention.
Gemäß einem weiteren Aspekt wird ein Software (SW) Programm beschrieben. Das SW Programm kann eingerichtet werden, um auf einem Prozessor ausgeführt zu werden, und um dadurch das in diesem Dokument beschriebene Verfahren auszuführen.In another aspect, a software (SW) program is described. The SW program can be set up to run on a processor and thereby perform the method described in this document.
Gemäß einem weiteren Aspekt wird ein Speichermedium beschrieben. Das Speichermedium kann ein SW Programm umfassen, welches eingerichtet ist, um auf einem Prozessor ausgeführt zu werden, und um dadurch das in diesem Dokument beschriebene Verfahren auszuführen.In another aspect, a storage medium is described. The storage medium may include a SW program that is set up to run on a processor and thereby perform the method described in this document.
Es ist zu beachten, dass die in diesem Dokument beschriebenen Verfahren, Vorrichtungen und Systeme sowohl alleine, als auch in Kombination mit anderen in diesem Dokument beschriebenen Verfahren, Vorrichtungen und Systemen verwendet werden können. Desweiteren können jegliche Aspekte der in diesem Dokument beschriebenen Verfahren, Vorrichtung und Systemen in vielfältiger Weise miteinander kombiniert werden. Insbesondere können die Merkmale der Ansprüche in vielfältiger Weise miteinander kombiniert werden. It should be understood that the methods, devices and systems described herein may be used alone as well as in combination with other methods, devices and systems described in this document. Furthermore, any aspects of the methods, apparatus, and systems described herein may be combined in a variety of ways. In particular, the features of the claims can be combined in a variety of ways.
Im Weiteren wird die Erfindung anhand von Ausführungsbeispielen näher beschrieben. Dabei zeigtFurthermore, the invention will be described in more detail with reference to exemplary embodiments. It shows
Wie bereits eingangs dargelegt, verfügen Fahrzeuge meist über ein IK-System oder ein Infotainment-System mit einem Bildschirm. Der Bildschirm dient zur Ausgabe von Informationen an den Benutzer des IK-Systems, insbesondere an den Fahrer des Fahrzeugs. Bei Manipulation des IK-Systems (z. B. zur Einstellung eines neuen Radiosenders, zur Suche einer Telefonnummer, oder zur Einstellung einer neuen Reiseroute) richtet der Fahrer des Fahrzeugs meist seine Augen auf den Bildschirm des IK-Systems. Dadurch steigt das Unfallrisiko, da der Fahrer potentielle Gefahren auf der Straße nicht mehr wahrnimmt.As stated above, vehicles usually have an IK system or an infotainment system with a screen. The screen is used to output information to the user of the IK system, in particular to the driver of the vehicle. When manipulating the IK system (eg, to tune in a new radio station, search for a telephone number, or set a new route), the driver of the vehicle usually focuses his eyes on the screen of the IK system. This increases the risk of accidents as the driver no longer perceives potential dangers on the road.
Desweiteren verfügen Fahrzeuge häufig über ein oder mehrere Frontkameras, die z. B. für die automatische Erkennung von Verkehrszeichen eingesetzt werden können. Außerdem können Fahrzeuge über Kamerasysteme verfügen, die den Fahrer im Innenraum des Fahrzeugs ”beobachten”, um z. B. anhand des Augenlidschlags die Müdigkeit des Fahrers zu bestimmen.Furthermore, vehicles often have one or more front cameras, the z. B. can be used for the automatic detection of traffic signs. In addition, vehicles may have camera systems that "observe" the driver inside the vehicle, e.g. B. determine the fatigue of the driver based on the eyelid impact.
Außerdem können Fahrzeuge mit Assistenzsystemen ausgerüstet werden, die den Fahrer eines Fahrzeugs vor gefährlichen Situationen warnen. Diese Warnungen können z. B. über Audio erfolgen (z. B. Ausgabe eines Ton bei Überschreitung einer vorgegebenen Geschwindigkeit), und/oder in Form einer Anzeige (z. B. zur Anzeige einer Auffahrwarnung). Dabei kann mittels einer entsprechenden Anzeige im Kombiinstrument (welches meist direkt vor dem Fahrer angeordnet ist) und/oder im Center Display (welches meist an der Mittelkonsole des Fahrzeugs angeordnet ist) der Fahrer auf die gefährliche Situation hingewiesen werden.In addition, vehicles can be equipped with assistance systems that warn the driver of a vehicle of dangerous situations. These warnings can z. This can be done, for example, via audio (for example, output of a sound when a predetermined speed is exceeded), and / or in the form of a display (for example, for displaying a collision warning). In this case, by means of a corresponding display in the instrument cluster (which is usually arranged directly in front of the driver) and / or in the center display (which is usually arranged on the center console of the vehicle), the driver will be made aware of the dangerous situation.
Im vorliegenden Dokument wird vorgeschlagen, dem Fahrer selektiv ein von der Frontkamera erfasstes Bild des Frontbereichs vor dem Fahrzeug als ”kleines Bild” im Center Display einzuspielen. Das Bild der Frontkamera kann z. B. als „Bild im Bild” wie in einem Fernseher auf dem Bildschirm des IK-Systems angezeigt werden. Dadurch kann der Fahrer auch bei Bedienung des IK-Systems weiterhin über die Verkehrssituation im Frontbereich vor dem Fahrzeug informiert werden. Alternativ kann das Bild der Frontkamera als Hintergrundfilm flächendeckend dargestellt werden. Das Menü für die Bedienung des Mensch-Maschine Interfaces des IK-System kann opaque bzw. teil-durchsichtig über das Bild der Frontkamera gelegt wird. Bei entsprechender Gestaltung lässt sich so auch bei der letzteren Ausgestaltung erkennen, was sich vor dem Fahrzeug abspielt. Gleichzeitig hat der Fahrer weiterhin die Möglichkeit das Menu des IK-Systems zu sehen.In the present document, it is suggested that the driver selectively record an image of the front area in front of the vehicle captured by the front camera as a "small image" in the center display. The image of the front camera can z. As a "picture in picture" as in a TV on the screen of the IK system are displayed. As a result, the driver can continue to be informed about the traffic situation in the front area in front of the vehicle even when operating the IK system. Alternatively, the image of the front camera can be displayed as a background film. The menu for the operation of the human-machine interface of the IK system can be placed opaque or partially transparent over the image of the front camera. With appropriate design can be seen so even in the latter embodiment, what happens in front of the vehicle. At the same time, the driver still has the opportunity to see the menu of the IK system.
Das System
Die Erkennung, ob der Fahrer seinen Blick auf das Center Display
Das System
Alternativ oder ergänzend zur Erkennung des Fokus der Aufmerksamkeit des Fahrers auf Basis der Eingabemittel des IK-System, kann ein Kamera-basiertes System im Fahrzeug verwendet werden, das z. B. die Augenbewegungen des Fahrers beobachtet. Ein derartiges Kamera-basiertes System umfasst typischerweise eine auf den Kopf des Fahrers gerichtete Kamera. Damit können z. B. die Lidschläge der Augen identifiziert werden und daraus Rückschlüsse auf die Müdigkeit des Fahrers gezogen werden. Mit einem solchen Bilderkennungssystem lässt sich auch herausfinden, wohin der Fahrer gerade schaut. Richtet der Fahrer seine Augen auf das Center Display
Wie bereits oben dargelegt, kann auf dem Bildschirm
Wie bereits oben dargelegt, besteht eine weitere Ausgestaltungsmöglichkeit darin, dass das System
Das System
Die Oberseite des Geräts
Das Verfahren
Durch die in diesem Dokument beschriebenen Systeme und Verfahren wird die Sicherheit in Phasen im Fahrbetrieb gesteigert, in denen der Fahrer seine Aufmerksamkeit von der Straße abwendet. Dadurch hat der Fahrer den Eindruck, dass sich das Auto ”um seine Sicherheit kümmert”. Durch das gezielte Ausblenden kann erreicht werden, dass die Aufmerksamkeit wieder rechtzeitig auf die Straße gelenkt wird. Für die in diesem Dokument beschriebenen Systeme ist keine zusätzliche Hardware erforderlich. Somit können die zusätzlichen Funktionen kostengünstig bereitgestellt werden.The systems and methods described in this document increase safety in driving phases in which the driver averts his attention from the road. This gives the driver the impression that the car "cares about its safety". By selectively fading can be achieved that the attention is directed back to the road in time. The systems described in this document do not require additional hardware. Thus, the additional functions can be provided inexpensively.
Die vorliegende Erfindung ist nicht auf die gezeigten Ausführungsbeispiele beschränkt. Insbesondere ist zu beachten, dass die Beschreibung und die Figuren nur das Prinzip der vorgeschlagenen Verfahren, Vorrichtungen und Systeme veranschaulichen sollen.The present invention is not limited to the embodiments shown. In particular, it should be noted that the description and figures are intended to illustrate only the principle of the proposed methods, apparatus and systems.
Claims (10)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE201310203653 DE102013203653A1 (en) | 2013-03-04 | 2013-03-04 | Control unit for vehicle, for increasing safety of road user in traffic, displays front area image on picture screen of infotainment system, if driver of vehicle directs his attention to picture screen |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE201310203653 DE102013203653A1 (en) | 2013-03-04 | 2013-03-04 | Control unit for vehicle, for increasing safety of road user in traffic, displays front area image on picture screen of infotainment system, if driver of vehicle directs his attention to picture screen |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| DE102013203653A1 true DE102013203653A1 (en) | 2014-09-04 |
Family
ID=51353100
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| DE201310203653 Withdrawn DE102013203653A1 (en) | 2013-03-04 | 2013-03-04 | Control unit for vehicle, for increasing safety of road user in traffic, displays front area image on picture screen of infotainment system, if driver of vehicle directs his attention to picture screen |
Country Status (1)
| Country | Link |
|---|---|
| DE (1) | DE102013203653A1 (en) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102015223367A1 (en) | 2015-11-26 | 2017-06-01 | Bayerische Motoren Werke Aktiengesellschaft | Method for controlling a vehicle system |
| DE102017204256A1 (en) * | 2017-03-14 | 2018-09-20 | Bayerische Motoren Werke Aktiengesellschaft | Method and device for reminding a driver to start on a light-emitting device with variable output function |
| US10930148B2 (en) | 2017-03-14 | 2021-02-23 | Bayerische Motoren Werke Aktiengesellschaft | Method and device for reminding a driver about an approach to a light signal apparatus |
| US11260793B2 (en) * | 2014-04-25 | 2022-03-01 | Sumitomo (S.H.I.) Construction Machinery Co., Ltd. | Construction machine and method of controlling construction machine |
| DE102020214908A1 (en) | 2020-11-27 | 2022-06-02 | Volkswagen Aktiengesellschaft | Method and device for monitoring the viewing direction of a driver when driving a motor vehicle |
| DE102023135882A1 (en) * | 2023-10-23 | 2025-04-24 | GM Global Technology Operations LLC | FEEDBACK SYSTEMS FOR OPTIMIZED DISPLAY OPERATION |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102004008867A1 (en) * | 2003-02-22 | 2004-09-09 | Daimlerchrysler Ag | Image processing system for motor vehicles |
| DE102006029692A1 (en) * | 2005-06-30 | 2007-01-25 | General Motors Corp., Detroit | Method for adjusting blocking of navigation and audio system functions while driving |
| DE102008041295A1 (en) * | 2008-08-18 | 2010-02-25 | Robert Bosch Gmbh | Mobile navigation device and related method |
| DE102008042521A1 (en) * | 2008-10-01 | 2010-04-08 | Robert Bosch Gmbh | Procedure for displaying a visual warning |
| DE102009048493A1 (en) * | 2009-09-25 | 2011-04-07 | Valeo Schalter Und Sensoren Gmbh | A driver assistance system for a vehicle, vehicle with a driver assistance system, and method for assisting a driver in driving a vehicle |
-
2013
- 2013-03-04 DE DE201310203653 patent/DE102013203653A1/en not_active Withdrawn
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102004008867A1 (en) * | 2003-02-22 | 2004-09-09 | Daimlerchrysler Ag | Image processing system for motor vehicles |
| DE102006029692A1 (en) * | 2005-06-30 | 2007-01-25 | General Motors Corp., Detroit | Method for adjusting blocking of navigation and audio system functions while driving |
| DE102008041295A1 (en) * | 2008-08-18 | 2010-02-25 | Robert Bosch Gmbh | Mobile navigation device and related method |
| DE102008042521A1 (en) * | 2008-10-01 | 2010-04-08 | Robert Bosch Gmbh | Procedure for displaying a visual warning |
| DE102009048493A1 (en) * | 2009-09-25 | 2011-04-07 | Valeo Schalter Und Sensoren Gmbh | A driver assistance system for a vehicle, vehicle with a driver assistance system, and method for assisting a driver in driving a vehicle |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11260793B2 (en) * | 2014-04-25 | 2022-03-01 | Sumitomo (S.H.I.) Construction Machinery Co., Ltd. | Construction machine and method of controlling construction machine |
| DE102015223367A1 (en) | 2015-11-26 | 2017-06-01 | Bayerische Motoren Werke Aktiengesellschaft | Method for controlling a vehicle system |
| DE102017204256A1 (en) * | 2017-03-14 | 2018-09-20 | Bayerische Motoren Werke Aktiengesellschaft | Method and device for reminding a driver to start on a light-emitting device with variable output function |
| US10930148B2 (en) | 2017-03-14 | 2021-02-23 | Bayerische Motoren Werke Aktiengesellschaft | Method and device for reminding a driver about an approach to a light signal apparatus |
| US11113550B2 (en) | 2017-03-14 | 2021-09-07 | Bayerische Motoren Werke Aktiengesellschaft | Method and device for reminding a driver to start at a light signal device with variable output function |
| DE102020214908A1 (en) | 2020-11-27 | 2022-06-02 | Volkswagen Aktiengesellschaft | Method and device for monitoring the viewing direction of a driver when driving a motor vehicle |
| DE102020214908B4 (en) | 2020-11-27 | 2024-01-04 | Volkswagen Aktiengesellschaft | Method and device for monitoring the line of sight of a driver when driving a motor vehicle |
| DE102023135882A1 (en) * | 2023-10-23 | 2025-04-24 | GM Global Technology Operations LLC | FEEDBACK SYSTEMS FOR OPTIMIZED DISPLAY OPERATION |
| US12388961B2 (en) | 2023-10-23 | 2025-08-12 | GM Global Technology Operations LLC | Feedback systems for optimized display operation |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| EP2172801B1 (en) | Method for displaying a visual warning sign | |
| DE102013021834B4 (en) | Device and method for navigating within a menu for vehicle control and selecting a menu entry from the menu | |
| EP1182089B1 (en) | Vehicle driver warning procedure | |
| DE102007045932B4 (en) | Method and device for warning a driver of a vehicle | |
| WO2019101491A1 (en) | Method for displaying the course of a safety zone in front of a vehicle or an object by means of a display unit, device for carrying out the method, and motor vehicle and computer program | |
| DE102012006966A1 (en) | A method for triggering a vehicle function by gaze-controlled operation and motor vehicle | |
| DE102013203653A1 (en) | Control unit for vehicle, for increasing safety of road user in traffic, displays front area image on picture screen of infotainment system, if driver of vehicle directs his attention to picture screen | |
| WO2013037694A1 (en) | Maneuvering system and method for automatically maneuvering a motor vehicle, motor vehicle, portable communication device, and computer program | |
| DE102016120999B4 (en) | User interface and method for inputting and outputting information in a vehicle | |
| WO2012172077A1 (en) | Method and device for assisting a driver in performing lateral guidance of a vehicle on a carriageway | |
| DE102004041239A1 (en) | Warning device in a vehicle | |
| DE102012014074B4 (en) | A method of operating a vehicle, system comprising a vehicle and a portable terminal and vehicle | |
| EP3254172B1 (en) | Determination of a position of a non-vehicle object in a vehicle | |
| EP3044650A1 (en) | Methods and system for operating a plurality of display devices of a motor vehicle and motor vehicle having a system for operating a plurality of display devices | |
| DE102013222584A1 (en) | Optical playback and recognition system in a vehicle | |
| JP2019116220A (en) | Vehicular visible device | |
| DE102019004692B3 (en) | Device and method for determining image data of the eyes, eye positions and / or a line of sight of a vehicle user in a vehicle | |
| DE102016210088B3 (en) | Method and device for representing an environment of a motor vehicle | |
| DE102014214701A1 (en) | Method and device for influencing the presentation of information on a display device in a vehicle | |
| EP3583488B1 (en) | Automated activation of a vision support system | |
| JP6115278B2 (en) | Vehicle display device | |
| EP4302174B1 (en) | Detecting user input in a motor vehicle and determining a permissibility of the user input | |
| DE102018218746B4 (en) | Method for avoiding a disturbance in the field of vision for an operator of an object, device for carrying out the method, and vehicle and computer program | |
| DE102017206312A1 (en) | Support handling of an object located within a passenger compartment and motor vehicle | |
| DE102019208235B4 (en) | Method for operating an HMD display unit for a vehicle, HMD display unit, multifunction steering wheel and vehicle for use in the method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| R163 | Identified publications notified | ||
| R005 | Application deemed withdrawn due to failure to request examination |