DE102014222355A1 - Fatigue detection with sensors of data glasses - Google Patents
Fatigue detection with sensors of data glasses Download PDFInfo
- Publication number
- DE102014222355A1 DE102014222355A1 DE102014222355.5A DE102014222355A DE102014222355A1 DE 102014222355 A1 DE102014222355 A1 DE 102014222355A1 DE 102014222355 A DE102014222355 A DE 102014222355A DE 102014222355 A1 DE102014222355 A1 DE 102014222355A1
- Authority
- DE
- Germany
- Prior art keywords
- data glasses
- driver
- data
- vehicle
- sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
- G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/024—Detecting, measuring or recording pulse rate or heart rate
- A61B5/02438—Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/107—Measuring physical dimensions, e.g. size of the entire body or parts thereof
- A61B5/1075—Measuring physical dimensions, e.g. size of the entire body or parts thereof for measuring dimensions by non-invasive methods, e.g. for determining thickness of tissue layer
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1103—Detecting eye twinkling
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/163—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/398—Electrooculography [EOG], e.g. detecting nystagmus; Electroretinography [ERG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/6802—Sensor mounted on worn items
- A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/08—Detecting, measuring or recording devices for evaluating the respiratory organs
- A61B5/0816—Measuring devices for examining respiratory frequency
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1107—Measuring contraction of parts of the body, e.g. organ, muscle
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/14542—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring blood gases
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
Abstract
Offenbart wird eine Datenbrille, umfassend eine Anzeige sowie einen Sensor zur Messung einer Eigenschaft des Körpers des Trägers der Datenbrille; wobei zumindest ein Teil des Sensors dazu eingerichtet ist, beim bestimmungsgemäßen Tragen der Datenbrille in Kontakt zum Körper des Trägers der Datenbrille zu sein.Disclosed is a data goggles comprising a display and a sensor for measuring a characteristic of the body of the wearer of the data goggles; wherein at least a part of the sensor is adapted to be in proper wear of the data glasses in contact with the body of the wearer of the data glasses.
Description
Die Erfindung betrifft eine Datenbrille mit einem kontaktbasierten Sensor zur Ermittlung einer Körpereigenschaft des Trägers der Datenbrille. Hieraus wird auf den Fahrerzustand geschlossen. The invention relates to data glasses with a contact-based sensor for determining a physical property of the wearer of the data glasses. From this, the driver state is closed.
Heutzutage sind Datenbrillen bekannt, mit deren Hilfe dem Träger der Datenbrille Informationen angezeigt werden können. Die Datenbrille wird dabei wie eine gewöhnliche Brille, die als Sehhilfe verwendet wird, auf dem Kopf getragen. Gegenüber einer gewöhnlichen Brille umfasst die Datenbrille jedoch Sensorik und insbesondere eine Anzeige, die beim Tragen der Datenbrille nahe dem oder den Augen des Benutzers angeordnet ist. Die Anzeige kann dabei zwei Teilanzeigen umfassen, eine für jedes Auge. Auf der Anzeige können dem Benutzer Informationen in Form von Text, graphischen Darstellungen oder Mischungen davon angezeigt werden. Die Anzeige kann insbesondere teildurchlässig sein, also so ausgestaltet sein, dass der Träger auch die Umgebung hinter der Anzeige erkennen kann. Besonders bevorzugt werden dem Träger die Informationen kontaktanalog angezeigt, was manchmal auch als Augmented Reality bezeichnet wird. Dabei wird dem Träger der Datenbrille die Information an einem Ort angezeigt, der an dem Ort eines Objektes in der Umgebung orientiert ist, also beispielsweise an das Objekt angrenzend oder dieses überlagernd. Zur Realisierung der Kontaktanalogie, muss typischerweise die Position des Objektes in der Umgebung, die Pose der Datenbrille in Relation zum Objekt sowie die Pose der Datenbrille zu den Augen des Trägers bekannt sein. Pose beschreibt hier sowohl die Position der Datenbrille als auch die Ausrichtung der Datenbrille. Generell lassen sich Datenbrillen auch beim Führen von Kraftfahrzeugen verwenden. Besonders Datenbrillen mit halb-transparenten Anzeigen eignen sich hierzu, da der Fahrer bei diesen Datenbrillen die Umgebung durch die Anzeige hindurch direkt wahrnehmen kann. Die für die Fahraufgabe nötige Wahrnehmung der Verkehrssituation um das Fahrzeug herum ist somit möglich. Today, data glasses are known, with the help of the wearer of the data glasses information can be displayed. The data glasses are worn like ordinary glasses, which is used as a visual aid on the head. Compared to ordinary eyeglasses, however, the data glasses include sensors and in particular a display, which is arranged when wearing the data glasses near the eyes or the eyes of the user. The display can include two partial displays, one for each eye. On the display, information may be displayed to the user in the form of text, graphics or mixtures thereof. In particular, the display may be semitransparent, that is configured in such a way that the wearer can also recognize the surroundings behind the display. Particularly preferably, the information is displayed to the wearer contact-analog, which is sometimes referred to as augmented reality. In this case, the carrier of the data glasses, the information is displayed at a location that is oriented to the location of an object in the area, so for example, adjacent to the object or this superimposed. In order to realize the contact analogy, typically the position of the object in the environment, the pose of the data glasses in relation to the object as well as the pose of the data glasses to the eyes of the wearer must be known. Pose describes both the position of the data glasses and the orientation of the data glasses. In general, data glasses can also be used when driving motor vehicles. Particularly data glasses with semi-transparent displays are suitable for this, as the driver can perceive the environment directly through the display with these data glasses. The perception of the traffic situation around the vehicle necessary for the driving task is thus possible.
Bekannt sind kontaktlose, kontaktbasierte sowie invasive Sensoren zur Detektion verschiedener Körpereigenschaften (auch Biovitaldaten genannt) wie Puls, Hautleitwert, Atmung, Blutdruck, Sauerstoffsättigung, Augenliedschluss, Pupillengröße, EEG, Muskel Kontraktion. Ein Großteil der Systeme arbeitet dabei kontaktbasiert (nicht kontaktlos oder invasiv) mit einer hohen Qualität, also Messgenauigkeit und Verfügbarkeit. Contactless, contact-based and invasive sensors for detecting various body properties (also known as biovital data) such as pulse, skin conductance, respiration, blood pressure, oxygen saturation, eyelid closure, pupil size, EEG, muscle contraction are known. Most of the systems work contact-based (non-contact or invasive) with high quality, ie measurement accuracy and availability.
Im Fahrzeugbereich sind Systeme zum Erkennen des Fahrerzustandes, insbesondere, ob der Fahrer müde ist, bekannt. Ein typisches Beispiel hierfür ist der Lenkwinkel, aber auch Kamerasysteme im Cockpit, die auf die Augen des Fahrer gerichtet sind und den Liedschluss messen oder Systeme im Lenkrad, die bei Auflage beider Hände den Puls detektieren. In the vehicle sector, systems for detecting the driver's condition, in particular whether the driver is tired, are known. A typical example of this is the steering angle, but also camera systems in the cockpit, which are directed to the driver's eyes and measure the song's conclusion or systems in the steering wheel, which detect the pulse when both hands rest.
In der Verwendung im Fahrzeug scheiden invasive Systeme meist aus. Im Stand der Technik bekannte kontaktbasierte Systeme sind meist nicht ausreichend verfügbar, da ein dauerhaftes Berühren an definierten Positionen (z.B. Lenkrad, Bedienelemente) nicht gewährleistet ist. Insgesamt ist die Qualität der Erkennungssysteme im Wesentlichen abnehmend von invasiv, kontaktbasiert bis hin zu kontaktlosen Systemen. When used in the vehicle invasive systems are usually eliminated. In the prior art known contact-based systems are usually not sufficiently available, since a permanent contact at defined positions (e.g., steering wheel, controls) is not guaranteed. Overall, the quality of the detection systems is essentially decreasing from invasive, contact-based to contactless systems.
Zur Erkennung des Fahrerzustandes werden im Stand der Technik in Fahrzeugen im Wesentlichen indirekte Größen (wie Lenkwinkel) oder kontaktlose Systeme eingesetzt mit entsprechend schlechter Qualität zur Aussage der Fitness/Müdigkeit. Die Information des Lenkwinkels (beispielsweise mithilfe der im Stand der Technik bekannten Ackermann Gierrate) gibt eine Information über die Ablenkung des Fahrers, nicht jedoch über dessen Müdigkeit oder Fitness-Zustand und ist daher schlecht zur Ableitung entsprechender Empfehlungen geeignet. In order to detect the condition of the driver, in the state of the art in vehicles essentially indirect variables (such as steering angle) or contactless systems are used with correspondingly poor quality for the statement of fitness / fatigue. The information of the steering angle (for example using the Ackermann yaw rate known in the prior art) provides information about the distraction of the driver, but not about his tiredness or fitness condition and is therefore poorly suited for deriving corresponding recommendations.
Weiterhin sind aus der Druckschrift
Der Erfindung liegt dementsprechend die Aufgabe zugrunde eine Sensorik und Auswerteeinheit bereitzustellen, mit der Körpereigenschaften des Fahrers eines Fahrzeugs zuverlässig und mit guter Qualität erfasst werden können. The invention is therefore based on the object to provide a sensor and evaluation, can be detected with the body characteristics of the driver of a vehicle reliably and with good quality.
Die Aufgabe wird durch die Datenbrille und das Verfahren gemäß den unabhängigen Ansprüchen gelöst. Vorteilhafte Weiterbildungen sind in den abhängigen Ansprüchen definiert. The object is achieved by the data glasses and the method according to the independent claims. Advantageous developments are defined in the dependent claims.
Ein erster Aspekt der Erfindung betrifft eine Datenbrille, umfassend eine Anzeige sowie einen Sensor zur Messung einer Eigenschaft des Körpers des Trägers der Datenbrille; wobei zumindest ein Teil des Sensors dazu eingerichtet ist, beim bestimmungsgemäßen Tragen der Datenbrille in Kontakt zum Körper des Trägers der Datenbrille zu sein. Die Anzeige befindet sich beim bestimmungsgemäßen Gebrauch im Sichtfeld des Trägers und ist insbesondere halbtransparent. Bei dem Sensor handelt es sich um einen kontaktbasierten Sensor. Die über den Kontakt durchführbaren Messungen ermöglichen eine Bestimmung der Körpereigenschaft oder -eigenschaften. Es kann vorgesehen sein, dass die Datenbrille auch dazu eingerichtet ist, den Fahrerzustand basierend auf der Messung zu bestimmen bzw. schätzen. A first aspect of the invention relates to data glasses comprising a display and a sensor for measuring a characteristic of the body of the wearer of the data glasses; wherein at least a part of the sensor is adapted to be in proper wear of the data glasses in contact with the body of the wearer of the data glasses. The display is in intended use in the field of view of the wearer and is particularly semi-transparent. The sensor is a contact-based sensor. The measurements made by the contact allow a determination of the body property or properties. It can be provided that the data glasses are also set up to determine or estimate the driver status based on the measurement.
Durch das Einbringen der Sensoren in eine Vorrichtung (die Datenbrille), die am Körper des Fahrers getragen wird, wird eine hohe Verfügbarkeit der Sensormessungen erreicht. Gleichzeitig muss vom Fahrer kein zur Datenbrille zusätzliches Gerät vom Fahrer mitgeführt und getragen werden. Die Datenbrille stellt dem Fahrer über ihre Anzeigen bereits eine Funktion bereit (beispielsweise kontaktanaloge Anzeigen) und bietet dem Fahrer somit einen direkt wahrnehmbaren Vorteil. Die Messung der Vitalwerte des Fahrers ist insbesondere in Ausnahmesituationen zur Erhöhung der Verkehrssicherheit nötig und die Akzeptanz von Fahrern eine reine Messvorrichtung zu tragen kann niedrig sein. Gemäß der vorgeschlagenen Erfindung wird die Messeinrichtung in die Datenbrille integriert, von der erwartet wird, dass sie akzeptiert und zuverlässig getragen wird aufgrund der direkt wahrnehmbaren Funktion (Anzeige) für den Fahrer. Somit kann von einer höheren Verfügbarkeit des Messungen der Datenbrille gegenüber Messungen beispielsweise am Lenkrad oder Bedienelementen des Fahrzeugs ausgegangen werden. Ferner werden die Körpereigenschaften direkt gemessen und nicht beispielsweise über Beobachtungen des Lenkwinkels indirekt eruiert bzw. nur grob geschätzt. The introduction of the sensors into a device (the data glasses), which is worn on the body of the driver, a high availability of the sensor measurements is achieved. At the same time, the driver does not need to carry or carry any additional equipment for the data glasses. The data glasses already provide the driver with a function via their displays (for example, contact-analogue displays) and thus offer the driver a directly perceptible advantage. The measurement of the vital signs of the driver is necessary especially in exceptional situations to increase traffic safety and the acceptance of drivers to wear a pure measuring device can be low. According to the proposed invention, the measuring device is integrated into the data goggles, which are expected to be accepted and reliably worn due to the driver's direct perceptible function (display). Thus, a higher availability of the measurements of the data glasses compared to measurements, for example on the steering wheel or operating elements of the vehicle can be assumed. Furthermore, the body properties are measured directly and not determined indirectly, for example via observations of the steering angle or only roughly estimated.
Somit können durch die Integration zusätzlicher Biosensorik in eine Datenbrille kontaktbasierte Systeme zum Einsatz kommen und die Qualität der gemessenen Biovitaldaten deutlich erhöht werden. Gleichzeitig kann die aufwändige und teurer Integration von Messsensorik für Vitaldaten in Fahrzeuge vermieden werden. Thus, the integration of additional biosensors in a data goggles contact-based systems can be used and the quality of the measured Biovitaldaten be significantly increased. At the same time, the time-consuming and expensive integration of measuring sensors for vital data into vehicles can be avoided.
Der Sensor ist vorteilhafterweise ein im Stand der Technik bekannter hochwertiger Sensor. Er ist typischerweise zur Messung einer oder mehrerer der folgenden Eigenschaften des Körpers eingerichtet: Puls, Hautleitwert, Atemfrequenz, Atemtiefe, Blutdruck, Sauerstoffsättigung des Blutes, Augenliedschluss, Pupillengröße, Spannungsschwankungen an der Kopfoberfläche, Muskelkontraktion. The sensor is advantageously a high quality sensor known in the art. It is typically designed to measure one or more of the following characteristics of the body: pulse, skin conductance, respiratory rate, respiratory depression, blood pressure, blood oxygen saturation, eyelid closure, pupil size, head surface tension fluctuations, muscle contraction.
In einer bevorzugten Weiterbildung umfasst die Datenbrille ferner einen zweiten Sensor zur Messung einer Eigenschaft des Körpers des Trägers der Datenbrille; wobei der Sensors dazu eingerichtet ist, beim bestimmungsgemäßen Tragen der Datenbrille ohne Kontakt zum Körper des Trägers der Datenbrille zu sein. Es handelt sich somit um die Integration eines kontaktlosen Sensors, beispielsweise um eine Kamera, die dazu eingerichtet ist, Aufnahmen eines Auges des Trägers der Datenbrille zu machen. Diese im Stand der Technik bekannte Kamera wird manchmal auch Eye-Tracker genannt und mithilfe ihrer Aufnahmen kann beispielsweise der Lidschluss bestimmt werden. Durch den Einsatz eines kontaktlosen Sensors in der Datenbrille anstatt der Verwendung eines im Fahrzeug installierten Kamerasystems wird der Abstand zum Messobjekt (dem Fahrer) reduziert und somit weitere Messmethoden ermöglicht bzw. die Qualität existierender, kontaktloser Methoden verbessert. In a preferred embodiment, the data glasses also comprise a second sensor for measuring a property of the body of the wearer of the data glasses; wherein the sensor is adapted to be in the intended use of the data glasses without contact with the body of the wearer of the data glasses. It is thus the integration of a contactless sensor, for example, a camera which is adapted to take pictures of an eye of the wearer of the data glasses. This known in the prior art camera is sometimes called eye tracker and using their recordings, for example, the lid closure can be determined. By using a non-contact sensor in the data glasses instead of using a camera system installed in the vehicle, the distance to the measured object (the driver) is reduced, thus enabling further measurement methods or improving the quality of existing, contactless methods.
In einem erweiterten Ausführungsbeispiel umfasst die Datenbrille ferner ein Kommunikationsmodul, wobei die Datenbrille dazu eingerichtet ist, Messdaten des Sensors an ein Fahrzeug zu übertragen. Die Übertragung der Messdaten ermöglicht eine Reaktion des Fahrzeugs, in Form der Aktivierung von Funktionen. Hierdurch kann bei kritischen Fahrerzuständen, beispielsweise starke Müdigkeit, versucht werden, den Fahrer in einen sicheren Zustand zu überführen, beispielsweise die Aufmerksamkeit und Vitalität des Fahrers erhöht werden. In an extended embodiment, the data glasses further comprise a communication module, wherein the data glasses are adapted to transmit measurement data of the sensor to a vehicle. The transmission of the measured data enables a reaction of the vehicle, in the form of the activation of functions. In this way, in the case of critical driver states, for example severe tiredness, attempts can be made to transfer the driver to a safe state, for example, increasing the driver's attention and vitality.
Ein anderer Aspekt der Erfindung betrifft ein Verfahren zur Erkennung des Zustandes eines Fahrers eines Fahrzeugs, wobei der Fahrer eine der oben erläuterten Datenbrillen bestimmungsgemäß trägt, wobei die Datenbrille eine Anzeige umfasst; wobei das Verfahren umfasst: Messen einer Eigenschaft des Körpers des Fahrers mithilfe des Sensors der Datenbrille; Erkennen des Zustandes des Fahrers unter Verwendung der Messung. Unter einem bestimmungsgemäßen Tragen der Datenbrille wird hierin das Aufsetzen der Datenbrille entsprechend einer gewöhnlichen Brille mit einem Aufliegen der Datenbrille (insbesondere der Bügel und des Nasenaufliegers) im Gesicht (umfassend die Ohren) des Benutzers verstanden. Die oben vorgestellte Datenbrille wird gemäß dem Verfahren also zur Messung von Körpereigenschaften verwendet. Another aspect of the invention relates to a method for detecting the condition of a driver of a vehicle, wherein the driver wears one of the above-described data glasses as intended, wherein the data glasses comprises a display; the method comprising: measuring a characteristic of the driver's body using the sensor of the data glasses; Recognizing the condition of the driver using the measurement. A proper wearing of the data glasses is understood herein to mean the placement of the data glasses in accordance with ordinary glasses with the data glasses (in particular the stirrups and the nose piece) resting on the face (including the ears) of the user. The data glasses presented above are thus used according to the method for measuring body characteristics.
In einer vorteilhaften Weiterbildung werden die Messdaten von der Datenbrille an das Fahrzeug übertragen. Insbesondere wird dabei der Zustand des Fahrers durch das Fahrzeug erkannt, das dabei auch Messdaten des Fahrzeugs, insbesondere zum Fahrverhalten des Fahrers (beispielsweise kann der Lenkwinkel als Messdaten bestimmt werden), berücksichtigen kann. Die Messungen der Datenbrille und des Fahrzeugs werden also kombiniert bzw. fusioniert und darauf basierend der Fahrerzustand bestimmt. Diese Kombination bietet den Vorteil einer möglichst ganzheitlichen Bestimmung und damit einer verbesserten Qualität der Fahrerzustandsbestimmung. In an advantageous development, the measurement data is transmitted from the data glasses to the vehicle. In particular, the state of the driver is recognized by the vehicle, which can also take into account measurement data of the vehicle, in particular the driving behavior of the driver (for example, the steering angle can be determined as measured data). The measurements of the data glasses and the vehicle are thus combined or merged and the driver state determined thereon. This combination offers the advantage of a holistic as possible determination and thus an improved quality of the driver condition determination.
Es kann vorgesehen sein, dass beim Erkennen eines vorbestimmten Zustandes des Fahrers eine oder mehrere vorbestimmte Funktionen des Fahrzeugs und/oder der Datenbrille aktiviert werden. Der vorbestimmte Zustand kann beispielsweise die Müdigkeit des Fahrers repräsentieren. Die vorbestimmte Funktion kann die Ausgabe einer optischen und/oder akustischen Warnung, die Änderung der Fahrzeugklimatisierung und/oder das Einleiten von Gerüchen in den Fahrzeuginnenraum umfassen. Diese Maßnahmen haben den Zweck, den Fahrer in einen sichereren Zustand zu überführen, beispielsweise seine Müdigkeit zu vertreiben, Sekundenschlaf zu vermeiden und die Fahrtüchtigkeit wieder herzustellen. It can be provided that one or more predetermined functions of the vehicle and / or the data glasses are activated when a predetermined state of the driver is detected. The predetermined state may represent, for example, the tiredness of the driver. The predetermined function may include issuing an optical and / or audible warning, changing the vehicle air conditioning, and / or introducing odors into the vehicle interior. These Measures have the purpose to bring the driver to a safer state, for example, to expel his tiredness, to avoid microsleep and restore the ability to drive.
KURZE BESCHREIBUNG DER ZEICHNUNG BRIEF DESCRIPTION OF THE DRAWING
DETAILLIERTE BESCHREIBUNG DES AUSFÜHRUNGSBEISPIELS DETAILED DESCRIPTION OF THE EMBODIMENT
Die Datenbrille umfasst ferner zwei metallische Kontaktpads
Ferner ermittelt die Datenbrille mithilfe der Kameras
Die Datenbrille
Wenn ein derartiger Zustand erkannt wird, gibt das Fahrzeug über die Lautsprecher einen merklich hörbaren Warnton aus und erhöht die Frischluftzufuhr durch die Klimaanlage des Fahrzeugs. Hierdurch wird der Fahrer aufgeweckt bzw. seine Konzentration wieder erhöht und die Verkehrssicherheit gesteigert. When such a condition is detected, the vehicle emits a loud audible warning sound through the speakers and increases the supply of fresh air through the vehicle's air conditioner. This awakens the driver or increases his concentration again and increases traffic safety.
ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturCited patent literature
- WO 2013/066634 A1 [0007] WO 2013/066634 A1 [0007]
Claims (10)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102014222355.5A DE102014222355A1 (en) | 2014-11-03 | 2014-11-03 | Fatigue detection with sensors of data glasses |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102014222355.5A DE102014222355A1 (en) | 2014-11-03 | 2014-11-03 | Fatigue detection with sensors of data glasses |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102014222355A1 true DE102014222355A1 (en) | 2016-05-04 |
Family
ID=55753747
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102014222355.5A Pending DE102014222355A1 (en) | 2014-11-03 | 2014-11-03 | Fatigue detection with sensors of data glasses |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102014222355A1 (en) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106971505A (en) * | 2017-05-09 | 2017-07-21 | 广东小天才科技有限公司 | The reminding method and user equipment of a kind of eye fatigue |
CN107468233A (en) * | 2017-09-14 | 2017-12-15 | 成亮 | A kind of supra-aural health sign monitor for being used to share driver |
WO2018077520A1 (en) * | 2016-10-26 | 2018-05-03 | Bayerische Motoren Werke Aktiengesellschaft | Method and device for operating a display system comprising a head-mounted display |
DE102017220120A1 (en) | 2017-11-13 | 2019-05-16 | Volkswagen Aktiengesellschaft | An apparatus, system, method and computer readable storage medium having instructions to assist a person to relax, means of transportation |
DE102019204201A1 (en) * | 2019-03-27 | 2020-10-01 | Volkswagen Aktiengesellschaft | Method and device for adapting a driving strategy of an at least partially automated vehicle |
US11718327B1 (en) * | 2022-08-08 | 2023-08-08 | Toyota Motor Engineering & Manufacturing North America, Inc. | Systems and methods for operating a vehicle based on a user's health and emotional state |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE29821264U1 (en) * | 1998-11-27 | 1999-02-04 | Goecke Wilhelm Dipl Ing | Driver sleepiness detection device |
DE19802220A1 (en) * | 1998-01-22 | 1999-07-29 | Bosch Gmbh Robert | Information display device used with computer or onboard automobile |
US20040044293A1 (en) * | 1999-01-27 | 2004-03-04 | David Burton | Vigilance monitoring system |
US20070273611A1 (en) * | 2004-04-01 | 2007-11-29 | Torch William C | Biosensors, communicators, and controllers monitoring eye movement and methods for using them |
WO2013066634A1 (en) | 2011-11-02 | 2013-05-10 | Google Inc. | Eye gaze detection to determine speed of image movement |
WO2014015378A1 (en) * | 2012-07-24 | 2014-01-30 | Nexel Pty Ltd. | A mobile computing device, application server, computer readable storage medium and system for calculating a vitality indicia, detecting an environmental hazard, vision assistance and detecting disease |
US20140152792A1 (en) * | 2011-05-16 | 2014-06-05 | Wesley W. O. Krueger | Physiological biosensor system and method for controlling a vehicle or powered equipment |
-
2014
- 2014-11-03 DE DE102014222355.5A patent/DE102014222355A1/en active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE19802220A1 (en) * | 1998-01-22 | 1999-07-29 | Bosch Gmbh Robert | Information display device used with computer or onboard automobile |
DE29821264U1 (en) * | 1998-11-27 | 1999-02-04 | Goecke Wilhelm Dipl Ing | Driver sleepiness detection device |
US20040044293A1 (en) * | 1999-01-27 | 2004-03-04 | David Burton | Vigilance monitoring system |
US20070273611A1 (en) * | 2004-04-01 | 2007-11-29 | Torch William C | Biosensors, communicators, and controllers monitoring eye movement and methods for using them |
US20140152792A1 (en) * | 2011-05-16 | 2014-06-05 | Wesley W. O. Krueger | Physiological biosensor system and method for controlling a vehicle or powered equipment |
WO2013066634A1 (en) | 2011-11-02 | 2013-05-10 | Google Inc. | Eye gaze detection to determine speed of image movement |
WO2014015378A1 (en) * | 2012-07-24 | 2014-01-30 | Nexel Pty Ltd. | A mobile computing device, application server, computer readable storage medium and system for calculating a vitality indicia, detecting an environmental hazard, vision assistance and detecting disease |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018077520A1 (en) * | 2016-10-26 | 2018-05-03 | Bayerische Motoren Werke Aktiengesellschaft | Method and device for operating a display system comprising a head-mounted display |
US10866423B2 (en) | 2016-10-26 | 2020-12-15 | Bayerische Motoren Werke Aktiengesellschaft | Method and device for operating a display system comprising a head-mounted display |
CN106971505A (en) * | 2017-05-09 | 2017-07-21 | 广东小天才科技有限公司 | The reminding method and user equipment of a kind of eye fatigue |
CN107468233A (en) * | 2017-09-14 | 2017-12-15 | 成亮 | A kind of supra-aural health sign monitor for being used to share driver |
DE102017220120A1 (en) | 2017-11-13 | 2019-05-16 | Volkswagen Aktiengesellschaft | An apparatus, system, method and computer readable storage medium having instructions to assist a person to relax, means of transportation |
DE102019204201A1 (en) * | 2019-03-27 | 2020-10-01 | Volkswagen Aktiengesellschaft | Method and device for adapting a driving strategy of an at least partially automated vehicle |
CN111762176A (en) * | 2019-03-27 | 2020-10-13 | 大众汽车有限公司 | Method and device for adjusting a driving strategy of an at least partially automated driving vehicle |
US11453414B2 (en) | 2019-03-27 | 2022-09-27 | Volkswagen Aktiengesellschaft | Method and device for adapting a driving strategy of an at least partially automated transportation vehicle |
CN111762176B (en) * | 2019-03-27 | 2024-04-23 | 大众汽车有限公司 | Method and device for adjusting a driving strategy of an at least partially automated driven vehicle |
US11718327B1 (en) * | 2022-08-08 | 2023-08-08 | Toyota Motor Engineering & Manufacturing North America, Inc. | Systems and methods for operating a vehicle based on a user's health and emotional state |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102014222355A1 (en) | Fatigue detection with sensors of data glasses | |
DE102014220759B4 (en) | Monitoring a degree of attention of a driver of a vehicle | |
EP3164756B1 (en) | Locating an hmd in a vehicle | |
DE102015115666A1 (en) | Performance driving system and performance driving method | |
DE102014004395B3 (en) | Method for operating a driver assistance system and motor vehicle | |
DE102014214514A1 (en) | Apparatus and method for exchanging data between vehicles for setting up a convoy | |
EP3191919B1 (en) | Determining the pose of a head-mounted display | |
WO2014170280A1 (en) | Method for selecting an information source for display on data spectacles | |
DE102015205921A1 (en) | Information types to be displayed on data goggles in the vehicle context | |
DE102016218811B4 (en) | Warning system in case of fatigue of a driver and procedures for this | |
DE112015006809T5 (en) | PORTABLE VEHICLE INTERIOR LIGHT DETECTION | |
DE102015220398A1 (en) | Method for transmitting information to a driver of a motor vehicle and adaptive driver assistance system | |
DE102016206694A1 (en) | Assistance system and procedure of a highly automated vehicle to improve interaction with other road users | |
DE102016223317A1 (en) | INFORMATION DISPLAY DEVICE FOR A VEHICLE | |
DE102014207398A1 (en) | Object association for contact-analogue display on an HMD | |
DE102019003557A1 (en) | Method for operating a vehicle | |
DE102019116089A1 (en) | Method and device for operating a display system with data glasses | |
DE102011016776A1 (en) | Method and device for operating a safety device for a vehicle | |
DE102014206960A1 (en) | Method for avoiding accidents or reducing the consequences of accidents in a vehicle | |
DE102019103360A1 (en) | Method and device for operating a display system with data glasses | |
DE102014100965B4 (en) | Driver assistance system | |
EP3695268B1 (en) | Portable device for reducing simulator sickness-induced impairments during the use of electronic augmented reality glasses in a vehicle | |
DE102016225262A1 (en) | Method and device for operating a display system with data glasses | |
DE102014224955A1 (en) | Determining the position of an HMD relative to the head of the wearer | |
DE102011002569A1 (en) | Clothing and system for monitoring the physical condition of a motorcyclist |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R163 | Identified publications notified | ||
R012 | Request for examination validly filed |