Movatterモバイル変換


[0]ホーム

URL:


DE102020131926A1 - Adaptive human-machine interface for a vehicle - Google Patents

Adaptive human-machine interface for a vehicle
Download PDF

Info

Publication number
DE102020131926A1
DE102020131926A1DE102020131926.6ADE102020131926ADE102020131926A1DE 102020131926 A1DE102020131926 A1DE 102020131926A1DE 102020131926 ADE102020131926 ADE 102020131926ADE 102020131926 A1DE102020131926 A1DE 102020131926A1
Authority
DE
Germany
Prior art keywords
autonomous vehicle
function
machine interface
occupant
actuating element
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102020131926.6A
Other languages
German (de)
Inventor
Ulrich Müller
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Audi AG
Original Assignee
Audi AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Audi AGfiledCriticalAudi AG
Priority to DE102020131926.6ApriorityCriticalpatent/DE102020131926A1/en
Publication of DE102020131926A1publicationCriticalpatent/DE102020131926A1/en
Withdrawnlegal-statusCriticalCurrent

Links

Images

Classifications

Landscapes

Abstract

Translated fromGerman

Verfahren zum Betreiben einer Mensch-Maschine-Schnittstelle eines autonomen Fahrzeugs, bei dem ein Betätigungselement einer Mensch-Maschine-Schnittstelle eines autonomen Fahrzeugs von einem Insassen des autonomen Fahrzeugs betätigt wird und ein Steuergerät der Mensch-Maschine-Schnittstelle infolge des Betätigens des Betätigungselements eine dem Betätigungselement zugeordnete Funktion des autonomen Fahrzeugs steuert, Mensch-Maschine-Schnittstelle für ein autonomes Fahrzeug und autonomes Fahrzeug.

Figure DE102020131926A1_0000
Method for operating a human-machine interface of an autonomous vehicle, in which an actuating element of a human-machine interface of an autonomous vehicle is actuated by an occupant of the autonomous vehicle and a control unit of the human-machine interface as a result of actuating the actuating element a dem Actuator associated function of the autonomous vehicle controls human-machine interface for an autonomous vehicle and autonomous vehicle.
Figure DE102020131926A1_0000

Description

Translated fromGerman

Die Erfindung betrifft ein Verfahren zum Betreiben einer Mensch-Maschine-Schnittstelle eines autonomen Fahrzeugs, bei dem ein Betätigungselement einer Mensch-Maschine-Schnittstelle eines autonomen Fahrzeugs von einem Insassen des autonomen Fahrzeugs betätigt wird und ein Steuergerät der Mensch-Maschine-Schnittstelle infolge des Betätigens des Betätigungselements eine dem Betätigungselement zugeordnete Funktion des autonomen Fahrzeugs steuert. Ferner betrifft die Erfindung eine Mensch-Maschine-Schnittstelle und ein autonomes Fahrzeug.The invention relates to a method for operating a human-machine interface of an autonomous vehicle, in which an actuating element of a human-machine interface of an autonomous vehicle is actuated by an occupant of the autonomous vehicle and a control device of the human-machine interface as a result of the actuation of the actuating element controls a function of the autonomous vehicle that is assigned to the actuating element. Furthermore, the invention relates to a human-machine interface and an autonomous vehicle.

Moderne Fahrzeuge sind weit verbreitete komplexe Maschinen mit einer Vielzahl von Funktionen und umfassen ebenso komplexe Mensch-Maschine-Schnittstellen zum Steuern der vielen Funktionen, d. h. zum Bedienen des Fahrzeugs. Eine Mensch-Maschine-Schnittstelle eines Fahrzeugs umfasst in der Regel eine Mehrzahl von physischen Betätigungselementen wie beispielsweise ein Lenkrad, Pedale zum Bremsen, Beschleunigen oder Kuppeln des Fahrzeugs, einen Schaltknüppel, Schalter, Hebel, Sensoren und zunehmend einen berührungsempfindlichen Anzeigeschirm mit weiteren virtuellen Betätigungselementen.Modern vehicles are widespread complex machines with a multitude of functions and also include complex human-machine interfaces for controlling the many functions, i. H. to operate the vehicle. A human-machine interface of a vehicle typically includes a plurality of physical actuators such as a steering wheel, pedals for braking, accelerating or clutching the vehicle, a gear stick, switches, levers, sensors and increasingly a touch-sensitive display screen with other virtual actuators.

Entsprechend sind Betriebsverfahren für eine Mensch-Maschine-Schnittstelle (Human Machine Interface, HMI) in unterschiedlichen Ausgestaltungen bekannt und erlauben einem Insassen des Fahrzeugs, zumeist einem Fahrer des Fahrzeugs, das Steuern der Funktionen des Fahrzeugs. Zum Bedienen des Fahrzeugs betätigt die Person ein Betätigungselement der Mensch-Maschine-Schnittstelle. Das betätigte Betätigungselement veranlasst ein Steuergerät der Mensch-Maschine-Schnittstelle, eine Funktion oder mehrere Funktionen des Fahrzeugs entsprechend der Betätigung zu steuern. Dank dem Betriebsverfahren ermöglicht die Mensch-Maschine-Schnittstelle dem Insassen ein manuelles Steuern der Funktionen des Fahrzeugs.Accordingly, operating methods for a human-machine interface (HMI) are known in different configurations and allow an occupant of the vehicle, mostly a driver of the vehicle, to control the functions of the vehicle. To operate the vehicle, the person actuates an actuating element of the man-machine interface. The actuated actuator causes a controller of the human-machine interface to control one or more functions of the vehicle according to the actuation. Thanks to the operating method, the human-machine interface allows the occupant to manually control the functions of the vehicle.

Autonome Fahrzeuge sind darüber hinaus konfiguriert, wahlweise die Funktionen zumindest teilweise selbständig, d. h. ohne ein manuelles Eingreifen eines Insassen des Fahrzeugs, zu steuern. Es werden verschiedene Stufen der Autonomie unterschieden, zu welchen auch die höchste Stufe eines hoch-autonomen Fahrens (HAF) gehört. Während des hoch-autonomen Fahrens steuert sich das autonome Fahrzeug vollkommen selbständig.Autonomous vehicles are also configured to optionally perform the functions at least partially independently, i. H. without manual intervention by an occupant of the vehicle. Different levels of autonomy are distinguished, including the highest level of highly autonomous driving (HAF). During highly autonomous driving, the autonomous vehicle controls itself completely independently.

Ein wesentliches Erfordernis der Mensch-Maschine-Schnittstelle eines autonomen Fahrzeugs, welches auch während eines hoch-autonomen Fahrens des autonomen Fahrzeugs ununterbrochen erfüllt sein muss, ist die unmittelbare Bedienbarkeit der Mensch-Maschine-Schnittstelle. Nur auf diese Weise kann ein Insasse des Fahrzeugs das Steuern des Fahrzeugs jederzeit manuell beeinflussen.An essential requirement of the human-machine interface of an autonomous vehicle, which must be fulfilled without interruption even during highly autonomous driving of the autonomous vehicle, is the direct operability of the human-machine interface. Only in this way can an occupant of the vehicle manually influence the control of the vehicle at any time.

Allerdings kann eine von einem Insassen des autonomen Fahrzeugs, insbesondere dem Fahrer, während eines hoch-autonomen Fahrens des autonomen Fahrzeugs mittels der Mensch-Maschine-Schnittstelle insbesondere versehentlich gesteuerte Funktion des autonomen Fahrzeugs eine Gefahr eines Unfalls des autonomen Fahrzeugs erhöhen.However, a function of the autonomous vehicle controlled inadvertently by an occupant of the autonomous vehicle, in particular the driver, during highly autonomous driving of the autonomous vehicle using the human-machine interface can increase the risk of an accident of the autonomous vehicle.

Der Erfindung liegt daher die Aufgabe zugrunde, ein Verfahren zum Betreiben einer Mensch-Maschine-Schnittstelle eines autonomen Fahrzeugs vorzuschlagen, welches eine Sicherheit des autonomen Fahrzeugs erhöht.The invention is therefore based on the object of proposing a method for operating a human-machine interface of an autonomous vehicle, which increases the safety of the autonomous vehicle.

Ein Gegenstand der Erfindung ist ein Verfahren zum Betreiben einer Mensch-Maschine-Schnittstelle eines autonomen Fahrzeugs, bei dem ein Betätigungselement einer Mensch-Maschine-Schnittstelle eines autonomen Fahrzeugs von einem Insassen des autonomen Fahrzeugs betätigt wird und ein Steuergerät der Mensch-Maschine-Schnittstelle infolge des Betätigens des Betätigungselements eine dem Betätigungselement zugeordnete Funktion des autonomen Fahrzeugs steuert. Das Betriebsverfahren wird von dem Steuergerät definiert und ermöglicht es einem Insassen, insbesondere einem Fahrer, des Fahrzeugs, die zugeordnete Funktion des Fahrzeugs mittels des Betätigungselements zu steuern. Das Steuern umfasst ein Einschalten, ein veränderndes Beeinflussen der eingeschalteten Funktion oder ein Ausschalten der eingeschalteten Funktion.One subject of the invention is a method for operating a human-machine interface of an autonomous vehicle, in which an actuating element of a human-machine interface of an autonomous vehicle is actuated by an occupant of the autonomous vehicle and a control unit is actuated by the human-machine interface as a result of actuating the actuating element controls a function of the autonomous vehicle that is assigned to the actuating element. The operating method is defined by the control device and enables an occupant, in particular a driver, of the vehicle to control the assigned function of the vehicle using the actuating element. Controlling includes switching on, influencing the switched-on function in a changing manner, or switching off the switched-on function.

Erfindungsgemäß bestimmt das Steuergerät die zugeordnete Funktion bei dem Betätigen des Betätigungselements variabel. Mit anderen Worten ist die Zuordnung der Funktion zu dem Betätigungselement nicht konstant. Entsprechend kann das Steuergerät bei verschiedenen gleichartigen Betätigungen desselben Betätigungselements jeweils verschiedene Funktionen steuern. Auf diese Weise versieht das Betriebsverfahren die Mensch-Maschine-Schnittstelle mit einer Flexibilität, welche zur Erhöhung der Sicherheit des autonomen Fahrzeugs während eines insbesondere hoch-autonomen Fahrens genutzt werden kann.According to the invention, the control unit variably determines the assigned function when the actuating element is actuated. In other words, the assignment of the function to the actuating element is not constant. Correspondingly, the control unit can control different functions when the same actuation element is actuated in different ways. In this way, the operating method provides the man-machine interface with a flexibility that can be used to increase the safety of the autonomous vehicle, particularly during highly autonomous driving.

Bevorzugt bestimmt das Steuergerät die zugeordnete Funktion abhängig von einem Umgebungsmodell des autonomen Fahrzeugs, einem Zustandsmodell des autonomen Fahrzeugs und/oder einem Zustandsmodell des Insassen des autonomen Fahrzeugs. Das autonome Fahrzeug erzeugt und aktualisiert während der Fahrt fortlaufend das Umgebungsmodell, welches eine Umgebung, d .h. eine äußere Verkehrssituation, des autonomen Fahrzeugs modelliert, das Zustandsmodell des autonomen Fahrzeugs, welches einen Betriebszustand, d. h. eine Mehrzahl von Betriebsgrößen, des autonomen Fahrzeugs modelliert, und das Zustandsmodell des Insassen, welches eine Verfasstheit, insbesondere einen Aufmerksamkeitsgrad, des Insassen modelliert. Durch das Berücksichtigen des Umgebungsmodells und der beiden Zustandsmodelle kann die zugeordnete Funktion passend zu der äußeren Verkehrssituation, dem Betriebszustand und dem Aufmerksamkeitsgrad bestimmt werden.The control unit preferably determines the assigned function depending on an environment model of the autonomous vehicle, a status model of the autonomous vehicle and/or a status model of the occupant of the autonomous vehicle. The autonomous vehicle continuously generates and updates the environment model while driving. an external traffic situation, of autonomous driving vehicle, the state model of the autonomous vehicle, which models an operating state, ie a plurality of operating variables, of the autonomous vehicle, and the state model of the occupant, which models a condition, in particular a degree of attentiveness, of the occupant. By taking into account the environment model and the two state models, the assigned function can be determined to match the external traffic situation, the operating state and the level of alertness.

Vorteilhaft bestimmt das Steuergerät eine Nullfunktion als die zugeordnete Funktion, wenn das Zustandsmodell des Fahrers ein Unaufmerksamsein des Insassen anzeigt. Die Nullfunktion ist wirkungslos. Durch das Zuordnen der Nullfunktion wird ein unaufmerksames Betätigen des Betätigungselements ignoriert.Advantageously, the controller determines a null function as the associated function when the driver state model indicates occupant inattentiveness. The null function has no effect. By assigning the zero function, inattentive actuation of the actuating element is ignored.

Günstigerweise bestimmt das Steuergerät eine Nullfunktion oder eine Weckfunktion als die zugeordnete Funktion, wenn das Zustandsmodell des Insassen ein Schlafen des Insassen anzeigt. Der Schlaf ist ein Zustand maximaler Unaufmerksamkeit. Anstelle der Nullfunktion kann das Steuergerät eine Weckfunktion einschalten, beispielsweise einen Weckton ausgeben, um den Insassen aufzuwecken.Conveniently, the controller determines a null function or a wake-up function as the assigned function when the occupant state model indicates occupant sleeping. Sleep is a state of maximum inattention. Instead of the null function, the control unit can switch on a wake-up function, for example an alarm tone, to wake up the occupant.

Idealerweise bestimmt das Steuergerät aus einer dem Betätigungselement zugeordneten Gruppe von ähnlichen hinsichtlich ihrer Wirkung abgestuften Funktionen diejenige Funktion als die zugeordnete Funktion, welche eine maximale mit dem Umgebungsmodell des autonomen Fahrzeugs, dem Zustandsmodell des autonomen Fahrzeugs und/oder dem Zustandsmodell des Insassen verträgliche Wirkung aufweist. Die bestimmte zugeordnete Funktion ist die wirksamste einen Unfall des autonomen Fahrzeugs verhindernde Funktion.Ideally, from a group of similar functions, graded in terms of their effect, assigned to the actuating element, the control unit determines that function as the assigned function which has a maximum effect that is compatible with the environment model of the autonomous vehicle, the state model of the autonomous vehicle and/or the state model of the occupant. The specific assigned function is the most effective crash-preventing function of the autonomous vehicle.

In manchen Ausführungsformen bestimmt das Steuergerät eine Abfolge von Funktionen als die zugeordnete Funktion. Eine in der Abfolge früher gesteuerte Funktion kann eine in der Abfolge später gesteuerte Funktion vorbereiten. Dank der Vorbereitung ist die später gesteuerte Funktion von einer Unfallgefahr des autonomen Fahrzeugs befreit.In some embodiments, the controller determines a sequence of functions as the assigned function. A function controlled earlier in the sequence may prepare a function controlled later in the sequence. Thanks to the preparation, the function that will be controlled later is freed from the risk of an accident involving the autonomous vehicle.

Das Steuergerät kann die zugeordnete Funktion erst nach einem wiederholten Betätigen des Betätigungselements steuern. Dadurch wird ein versehentliches Bedienen des Fahrzeugs verlässlich ausgeschlossen. Das Steuergerät kann zum Steuern der zugeordneten Funktion eine vorbestimmte Anzahl von Wiederholungen der Betätigung verlangen.The control unit can only control the assigned function after repeated actuation of the actuating element. This reliably prevents accidental operation of the vehicle. The controller may require a predetermined number of repetitions of actuation to control the associated function.

Ein weiterer Gegenstand der Erfindung ist eine Mensch-Maschine-Schnittstelle für ein autonomes Fahrzeug, welche ein Betätigungselement zum Steuern einer Funktion eines autonomen Fahrzeugs und ein mit dem Betätigungselement verbundenes Steuergerät umfasst. Das Steuergerät definiert ein Betriebsverfahren für die Mensch-Maschine-Schnittstelle. Das Steuergerät kann ein Softwareprogramm umfassen, welches das Steuergerät veranlasst, das definierte Betriebsverfahren auszuführen, wenn das Softwareprogramm von einem Prozessor des Steuergeräts ausgeführt wird. Wenn das Softwareprogramm das Betriebsverfahren des Steuergeräts definiert, kann das Steuergerät einfach und kostengünstig aktualisiert werden.Another subject matter of the invention is a human-machine interface for an autonomous vehicle, which comprises an actuating element for controlling a function of an autonomous vehicle and a control device connected to the actuating element. The controller defines an operating method for the human-machine interface. The controller may include a software program that causes the controller to execute the defined operating method when the software program is executed by a processor of the controller. If the software program defines the method of operation of the controller, the controller can be easily and inexpensively updated.

Erfindungsgemäß ist die Mensch-Maschine-Schnittstelle konfiguriert, ein erfindungsgemäßes Verfahren auszuführen. Die auf diese Weise konfigurierte Mensch-Maschine-Schnittstelle erhöht eine Sicherheit des autonomen Fahrzeugs, in welchem sie verbaut ist.According to the invention, the man-machine interface is configured to carry out a method according to the invention. The human-machine interface configured in this way increases the safety of the autonomous vehicle in which it is installed.

Bevorzugt ist die Mensch-Maschine-Schnittstelle konfigurierbar und/oder parametrisierbar ausgebildet. Die Konfigurierbarkeit und/oder Parametrisierbarkeit ermöglicht ein nachträgliches Verändern einer Zuordnungslogik oder ein nachträgliches Anpassen der Mensch-Maschine-Schnittstelle an ein logisch modifiziertes Umgebungsmodell des autonomen Fahrzeugs, ein logisch modifiziertes Zustandsmodell des autonomen Fahrzeugs oder ein logisch modifiziertes Zustandsmodell des Insassen.The man-machine interface is preferably designed to be configurable and/or parameterizable. The configurability and/or the ability to parameterize allows a subsequent change of an assignment logic or a subsequent adaptation of the human-machine interface to a logically modified environment model of the autonomous vehicle, a logically modified state model of the autonomous vehicle or a logically modified state model of the occupant.

Noch ein Gegenstand der Erfindung ist ein autonomes Fahrzeug. Das autonome Fahrzeug kann für ein hoch-autonomes Fahren ausgebildet sein.Another subject of the invention is an autonomous vehicle. The autonomous vehicle can be designed for highly autonomous driving.

Das autonome Fahrzeug kann zumindest einen mit dem Steuergerät verbundenen Sensor zum Erfassen einer Umgebung des autonomen Fahrzeugs, eines Zustands des autonomen Fahrzeugs und/oder eines Zustands eines Insassen des autonomen Fahrzeugs umfassen, welcher Daten für ein Umgebungsmodell des autonomen Fahrzeugs, ein Zustandsmodell des autonomen Fahrzeugs und/oder ein Zustandsmodell des Insassen bereitstellt. Ferner kann das autonome Fahrzeug einen Rechner zum Erzeugen und Aktualisieren des Umgebungsmodells oder der beiden Zustandsmodelle umfassen.The autonomous vehicle can include at least one sensor connected to the control unit for detecting an environment of the autonomous vehicle, a state of the autonomous vehicle and/or a state of an occupant of the autonomous vehicle, which data for an environment model of the autonomous vehicle, a state model of the autonomous vehicle and/or provides a state model of the occupant. Furthermore, the autonomous vehicle can include a computer for generating and updating the environment model or the two state models.

Erfindungsgemäß umfasst das autonome Fahrzeug eine erfindungsgemäße Mensch-Maschine-Schnittstelle. Dank der Mensch-Maschine-Schnittstelle ist eine Sicherheit des autonomen Fahrzeugs erhöht.According to the invention, the autonomous vehicle includes a man-machine interface according to the invention. Thanks to the human-machine interface, the safety of the autonomous vehicle is increased.

Ein wesentlicher Vorteil des erfindungsgemäßen Verfahrens besteht darin, dass sich die betriebene Mensch-Maschine-Schnittstelle dank dem Verfahren während eines Fahrens eines autonomen Fahrzeugs flexibel an eine Umgebung des autonomen Fahrzeugs, einen Zustand des autonomen Fahrzeugs oder einen Zustand eines Insassen des autonomen Fahrzeugs adaptiert. Auf diese Weise kann eine Wirkung einer Betätigung der Mensch-Maschine-Schnittstelle situationsabhängig auf ein für das autonome Fahrzeug ungefährliches Maß reduziert werden.An essential advantage of the method according to the invention is that thanks to the method, the operated human-machine interface adapts flexibly to an environment of the autonomous vehicle, a state of the autonomous vehicle or a state of an occupant of the autonomous vehicle while driving an autonomous vehicle. In this way, an effect of an actuation of the man-machine interface can be reduced to a level that is not dangerous for the autonomous vehicle, depending on the situation.

Die Erfindung ist anhand einer Ausführungsform in der Zeichnung schematisch dargestellt und wird unter Bezugnahme auf die Zeichnung weiter beschrieben. Es zeigt:

  • 1 in einem Blockdiagramm ein autonomes Fahrzeug mit einer Mensch-Maschine-Schnittstelle nach einer Ausführungsform der Erfindung.
The invention is shown schematically using an embodiment in the drawing and is further described with reference to the drawing. It shows:
  • 1 in a block diagram an autonomous vehicle with a human-machine interface according to an embodiment of the invention.

1 zeigt in einem Blockdiagramm ein autonomes Fahrzeug 10 mit einer Mensch-Maschine-Schnittstelle 20 nach einer Ausführungsform der Erfindung. Das autonome Fahrzeug 10 umfasst eine Mehrzahl von sicherheitskritischen oder komfortbezogenen Funktionen 30, 40, 50, welche von Geräten des autonomen Fahrzeugs 10 bereitgestellt werden und von denen beispielhaft und nicht einschränkend drei abgebildet sind. Die Funktionen 30, 40, 50 können ein Starten bzw. Stoppen, d. h. Einschalten bzw. Ausschalten, des autonomen Fahrzeugs 10, ein Einschalten bzw. Ausschalten eines Warnblinkens, eines Scheibenwischens, eines Türöffnens oder eines zentralen Verriegelns des autonomen Fahrzeugs 10, ein Bremsen bzw. Beschleunigen des autonomen Fahrzeugs 10, ein Aktivieren oder Deaktivieren einer Feststellbremse des autonomen Fahrzeugs 10 oder ein Wählen eines Ganges oder einer Helligkeit einer Außenbeleuchtung des autonomen Fahrzeugs 10 umfassen.1 12 is a block diagram of anautonomous vehicle 10 having a human-machine interface 20 according to an embodiment of the invention. Theautonomous vehicle 10 includes a plurality of safety-critical or comfort-related functions 30, 40, 50, which are provided by devices of theautonomous vehicle 10 and of which three are shown by way of example and not by way of limitation. Thefunctions 30, 40, 50 can start or stop, ie switch on or off, theautonomous vehicle 10, switch on or off hazard warning lights, wipe the windshield, open a door or central lock theautonomous vehicle 10, brake or accelerating theautonomous vehicle 10, activating or deactivating a parking brake of theautonomous vehicle 10, or selecting a gear or a brightness of an exterior light of theautonomous vehicle 10.

Ferner umfasst das Fahrzeug eine Mehrzahl von Sensoren 70, 80, 90, von denen beispielhaft und nicht einschränkend drei abgebildet sind. Die Sensoren 70, 80, 90 können einen Umgebungssensor 70 wie eine Kamera, einen Ultraschallsensor, einen Temperatursensor oder einen Regensensor, einen Fahrzeugsensor 80 wie einen Geschwindigkeitssensor, einen Tankfüllstandssensor oder einen Lenkwinkelsensor sowie einen Insassensensor 90 wie eine Kamera, einen Pulssensor oder einen Atemsensor umfassen.The vehicle also includes a plurality ofsensors 70, 80, 90, three of which are shown by way of example and not limitation. Thesensors 70, 80, 90 may include anenvironment sensor 70 such as a camera, ultrasonic sensor, temperature sensor, or rain sensor, avehicle sensor 80 such as a speed sensor, fuel level sensor, or steering angle sensor, and anoccupant sensor 90 such as a camera, heart rate sensor, or breath sensor .

Zu dem autonomen Fahrzeug 10 gehört auch ein mit den Sensoren 70, 80, 90 wie üblich, beispielsweise mittels eines Fahrzeugbussystems, verbundener Rechner 60, welcher konfiguriert ist, ein Umgebungsmodell 11 des autonomen Fahrzeugs 10, ein Zustandsmodell 12 des autonomen Fahrzeugs 10 und/oder ein Zustandsmodell eines in dem autonomen Fahrzeug 10 angeordneten Insassen 100, insbesondere eines Fahrers des autonomen Fahrzeugs 10, zu erzeugen und während eines Fahrens des autonomen Fahrzeugs 10 fortlaufend zu aktualisieren.Theautonomous vehicle 10 also includes acomputer 60 connected to thesensors 70, 80, 90 as usual, for example by means of a vehicle bus system, which is configured to have anenvironment model 11 of theautonomous vehicle 10, astate model 12 of theautonomous vehicle 10 and/or to generate a state model of an occupant 100 arranged in theautonomous vehicle 10, in particular of a driver of theautonomous vehicle 10, and to continuously update it while theautonomous vehicle 10 is being driven.

Die Mensch-Maschine-Schnittstelle 20 ist mit dem Rechner 60 und den die Funktionen 30, 40, 50 bereitstellenden Geräten des autonomen Fahrzeugs 10 wie üblich, beispielsweise mittels des Fahrzeugbussystems, verbunden und umfasst ein Betätigungselement 22 zum Steuern einer Funktion 30, 40, 50 des autonomen Fahrzeugs 10 und ein mit dem Betätigungselement 22 verbundenes Steuergerät 21. Die Mensch-Maschine-Schnittstelle 20, insbesondere das Steuergerät 21 kann ein Softwareprogramm umfassen und konfigurierbar und/oder parametrisierbar ausgebildet sein.The man-machine interface 20 is connected to thecomputer 60 and the devices of theautonomous vehicle 10 that provide thefunctions 30, 40, 50 as usual, for example by means of the vehicle bus system, and includes anactuating element 22 for controlling afunction 30, 40, 50 of theautonomous vehicle 10 and a control unit 21 connected to theactuating element 22. The man-machine interface 20, in particular the control unit 21, can comprise a software program and can be designed to be configurable and/or parameterizable.

Die Mensch-Maschine-Schnittstelle 20 ist konfiguriert, während eines Fahrens, insbesondere eines hoch-autonomen Fahrens, des autonomen Fahrzeugs 10 mit dem folgenden Verfahren betrieben zu werden, d. h. während eines normalen Betriebs das folgende Verfahren auszuführen.The human-machine interface 20 is configured to be operated with the following method during driving, particularly high-autonomous driving, of theautonomous vehicle 10 , i. H. perform the following procedure during normal operation.

Das Betätigungselement 22 der Mensch-Maschine-Schnittstelle 20 des autonomen Fahrzeugs 10 wird von dem Insassen 100 des autonomen Fahrzeugs 10 betätigt. Das Steuergerät 21 der Mensch-Maschine-Schnittstelle 20 steuert infolge des Betätigens des Betätigungselements 22 eine dem Betätigungselement 22 zugeordnete Funktion 30, 40, 50 des autonomen Fahrzeugs 10 und bestimmt die zugeordnete Funktion 30, 40, 50 bei dem Betätigen des Betätigungselements 22 variabel.The operatingelement 22 of the human-machine interface 20 of theautonomous vehicle 10 is operated by the occupant 100 of theautonomous vehicle 10 . As a result of actuating theactuating element 22, the control unit 21 of the man-machine interface 20 controls afunction 30, 40, 50 of theautonomous vehicle 10 assigned to theactuating element 22 and determines the assignedfunction 30, 40, 50 variably when theactuating element 22 is actuated.

Der Rechner 60 empfängt Daten von den Sensoren 70, 80, 90, erzeugt und aktualisiert fortlaufend das Umgebungsmodell 11 des autonomen Fahrzeugs 10, das Zustandsmodell 12 des autonomen Fahrzeugs 10 und/oder das Zustandsmodell 13des Insassen 100 und übermittelt die Modelle 11, 12, 13, genauer gesagt aus den Modellen 11, 12, 13 abgeleitete und für das Bestimmen der zugeordneten Funktion 30, 40, 50 relevante Daten, an das Steuergerät 21. Das Steuergerät 21 bestimmt die dem Betätigungselement 20 zugeordnete Funktion 30, 40, 50 abhängig von dem Umgebungsmodell 11 des autonomen Fahrzeugs 10, dem Zustandsmodell 12 des autonomen Fahrzeugs 10 und/oder dem Zustandsmodell 13 des Insassen 100 des autonomen Fahrzeugs 10.Computer 60 receives data fromsensors 70, 80, 90, generates and continuously updatesenvironment model 11 ofautonomous vehicle 10,status model 12 ofautonomous vehicle 10 and/orstatus model 13 of occupant 100, and transmitsmodels 11, 12, 13 More precisely, data derived from themodels 11, 12, 13 and relevant for determining the assignedfunction 30, 40, 50 to the control unit 21. The control unit 21 determines thefunction 30, 40, 50 assigned to theactuating element 20 depending on theEnvironment model 11 of theautonomous vehicle 10, thestate model 12 of theautonomous vehicle 10 and/or thestate model 13 of the occupant 100 of theautonomous vehicle 10.

Das Steuergerät 21 kann eine Nullfunktion als die zugeordnete Funktion 30, 40, 50 bestimmen, wenn das Zustandsmodell 13 des Insassen 100 ein Unaufmerksamsein des Insassen 100 anzeigt. Das Steuergerät 21 kann eine Nullfunktion oder eine Weckfunktion als die zugeordnete Funktion 30, 40, 50 bestimmen, wenn das Zustandsmodell 13 des Insassen 100 ein Schlafen des Insassen 100 anzeigt. Beispielsweise kann ein Betätigen eines Schalters der Warnblinkanlage oder eines Hebels der Schweibenwischanlage des autonomen Fahrzeugs 10 die Weckfunktion steuern, wenn von dem Sensor 90 ein Schlafen des Insassen 100 erfasst wird.The control unit 21 can determine a null function as the assignedfunction 30, 40, 50 if thestate model 13 of the occupant 100 indicates that the occupant 100 is inattentive. That Controller 21 can determine a null function or a wake-up function as the assignedfunction 30, 40, 50 when thestate model 13 of the occupant 100 indicates that the occupant 100 is asleep. For example, actuating a switch of the hazard warning system or a lever of the windshield wiper system of theautonomous vehicle 10 can control the wake-up function when thesensor 90 detects that the occupant 100 is sleeping.

Das Steuergerät 21 kann aus einer dem Betätigungselement 22 zugeordneten Gruppe von ähnlichen hinsichtlich ihrer Wirkung abgestuften Funktionen 30, 40, 50 diejenige Funktion 30, 40, 50 als die zugeordnete Funktion 30, 40, 50 bestimmen, welche eine maximale mit dem Umgebungsmodell 11 des autonomen Fahrzeugs 10, dem Zustandsmodell 12 des autonomen Fahrzeugs 10 und/oder dem Zustandsmodell 13 des Insassen 100 verträgliche Wirkung aufweist. Beispielsweise kann ein Betätigen eines Start-Stopp-Knopfs oder eines Gangwahlhebels oder eines Umschaltknopfs von Abblendlicht auf Standlicht als des Betätigungselements 22 nur dann zu einer Notabschaltung des autonomen Fahrzeugs 22 führen, wenn von dem Sensor 90 zumindest ein vorbestimmter minimaler Aufmerksamkeitsgrad des Insassen 100 erfasst wird.From a group ofsimilar functions 30, 40, 50, graded in terms of their effect, which are assigned to theactuating element 22, the control unit 21 can determine thatfunction 30, 40, 50 as the assignedfunction 30, 40, 50 which has a maximum correlation with theenvironment model 11 of theautonomous Vehicle 10, thestate model 12 of theautonomous vehicle 10 and/or thestate model 13 of the occupant 100 has a compatible effect. For example, an actuation of a start-stop button or a gear selector lever or a button to switch from low beam to parking light as theactuating element 22 can only lead to an emergency shutdown of theautonomous vehicle 22 if thesensor 90 detects at least a predetermined minimum degree of attention of the occupant 100 .

Das Steuergerät 21 kann eine Abfolge von Funktionen 30, 40, 50 als die zugeordnete Funktion 30, 40, 50 bestimmen. Beispielsweise kann ein Betätigen eines Schalters einer elektrischen Feststellbremse, d. h. einer Parkbremse, des autonomen Fahrzeugs 10 ein Bremssystem des autonomen Fahrzeugs 10 zu einem Notbremsen des autonomen Fahrzeugs 10 veranlassen, wenn während eines manuell gesteuerten oder hoch-autonomen Fahrens des Elektrofahrzeugs 10 zumindest ein vorbestimmter minimaler Aufmerksamkeitsgrad des Insassen 100 erfasst wird. Das Betätigen des Schalters der elektrischen Feststellbremse kann das Bremssystem des autonomen Fahrzeugs 10 veranlassen, stark zu bremsen, eine Bremswarnung auszugeben und das autonomen Fahrzeug 10 sofort anzuhalten, wenn eine von dem Sensor 70 erfasste Verkehrssituation ein unmittelbares Halten des autonomen Fahrzeugs 10 erlaubt und der Insasse 100 seinen Blick nicht in die Umgebung richtet oder von dem Sensor 90 ein niedrigerer als der vorbestimmte minimale Aufmerksamkeitsgrad des Insassen 100 erfasst wird. Das Betätigen des Schalters der elektrischen Feststellbremse kann das Bremssystem des autonomen Fahrzeugs 10 veranlassen, moderat zu bremsen, eine Bremswarnung auszugeben und zu einer nächstmöglichen Halteposition zu fahren, wenn eine von dem Sensor 70 erfasste Verkehrssituation, beispielsweise eine enge Baustellenspur ohne Randstreifen, ein unmittelbares Halten des autonomen Fahrzeugs 10 verbietet und der Insasse 100 seinen Blick nicht in die Umgebung richtet oder von dem Sensor 90 ein niedrigerer als der vorbestimmte minimale Aufmerksamkeitsgrad des Insassen 100 erfasst wird.The control unit 21 can determine a sequence offunctions 30, 40, 50 as the assignedfunction 30, 40, 50. For example, actuating a switch of an electric parking brake, i. H. a parking brake, of theautonomous vehicle 10 cause a braking system of theautonomous vehicle 10 to perform emergency braking of theautonomous vehicle 10 if at least a predetermined minimum degree of attention of the occupant 100 is detected during manually controlled or highly autonomous driving of theelectric vehicle 10. Pressing the electric parking brake switch can cause the braking system of theautonomous vehicle 10 to brake hard, issue a brake warning, and stop theautonomous vehicle 10 immediately when a traffic situation detected by thesensor 70 allows theautonomous vehicle 10 and the occupant to stop immediately 100 does not look into the surroundings or thesensor 90 detects a lower than the predetermined minimum level of attention of the occupant 100. Actuating the switch of the electric parking brake can cause the braking system of theautonomous vehicle 10 to brake moderately, issue a braking warning and drive to the next possible stopping position if a traffic situation detected by thesensor 70, for example a narrow roadworks lane without hard shoulders, requires an immediate stop of theautonomous vehicle 10 and the occupant 100 does not direct his/her gaze into the surroundings or a lower than the predetermined minimum level of attention of the occupant 100 is detected by thesensor 90 .

Das Steuergerät 21 kann ferner die zugeordnete Funktion 30, 40, 50 erst nach einem wiederholten Betätigen des Betätigungselements 22 steuern. Beispielsweise kann ein Betätigen eines Schalters zum Türöffnen oder zum zentralen Verriegeln des autonomen Fahrzeugs 10 nur dann die jeweiligen Wirkungen verursachen, wenn der Schalter von dem Insassen 100 mehrmals hintereinander betätigt wird oder von dem Sensor 90 ein zumindest ein vorbestimmter minimaler Aufmerksamkeitsgrad des Insassen 100 erfasst wird.The control unit 21 can also control the assignedfunction 30, 40, 50 only after theactuating element 22 has been actuated repeatedly. For example, actuating a switch to open the door or to lock theautonomous vehicle 10 centrally can only cause the respective effects if the switch is actuated several times in succession by the occupant 100 or at least one predetermined minimum level of attention of the occupant 100 is detected by thesensor 90 .

BezugszeichenlisteReference List

1010
autonomes Fahrzeugautonomous vehicle
1111
Umgebungsmodell des autonomen FahrzeugsEnvironment model of the autonomous vehicle
1212
Zustandsmodell des autonomen FahrzeugsState model of the autonomous vehicle
1313
Zustandsmodell eines InsassenCondition model of an occupant
2020
Mensch-Maschine-Schnittstellehuman-machine interface
2121
Steuergerätcontrol unit
2222
Betätigungselementactuator
3030
Funktion des autonomen FahrzeugsFunction of the autonomous vehicle
4040
Funktion des autonomen FahrzeugsFunction of the autonomous vehicle
5050
Funktion des autonomen FahrzeugsFunction of the autonomous vehicle
6060
Rechnercalculator
7070
Sensorsensor
8080
Sensorsensor
9090
Sensorsensor
100100
Insasseinmate

Claims (10)

Translated fromGerman
Verfahren zum Betreiben einer Mensch-Maschine-Schnittstelle (20) eines autonomen Fahrzeugs (10), bei dem- ein Betätigungselement (22) einer Mensch-Maschine-Schnittstelle (20) eines autonomen Fahrzeugs (10) von einem Insassen (100) des autonomen Fahrzeugs (10) betätigt wird,- ein Steuergerät (21) der Mensch-Maschine-Schnittstelle (20) infolge des Betätigens des Betätigungselements (22) eine dem Betätigungselement (22) zugeordnete Funktion (30, 40, 50) des autonomen Fahrzeugs (10) steuert, und- das Steuergerät (21) die zugeordnete Funktion (30, 40, 50) bei dem Betätigen des Betätigungselements (22) variabel bestimmt.Method for operating a man-machine interface (20) of an autonomous vehicle (10), in which- an actuating element (22) of a man-machine interface (20) of an autonomous vehicle (10) is actuated by an occupant (100) of the autonomous vehicle (10),- A control unit (21) of the human-machine interface (20) controls a function (30, 40, 50) of the autonomous vehicle (10) associated with the actuating element (22) as a result of actuating the actuating element (22), and- The control unit (21) determines the associated function (30, 40, 50) when the actuating element (22) is actuated.Verfahren nachAnspruch 1, bei dem das Steuergerät (21) die zugeordnete Funktion (30, 40, 50) abhängig von einem Umgebungsmodell (11) des autonomen Fahrzeugs (10), einem Zustandsmodell (12) des autonomen Fahrzeugs (10) und/oder einem Zustandsmodell (13) des Insassen (100) des autonomen Fahrzeugs (10) bestimmt.procedure after claim 1 , in which the control unit (21) the assigned function (30, 40, 50) depending on an environment model (11) of the autonomous vehicle (10), a state model (12) of the autonomous vehicle (10) and / or a state model (13 ) of the occupant (100) of the autonomous vehicle (10).Verfahren nachAnspruch 2, bei dem das Steuergerät (21) eine Nullfunktion als die zugeordnete Funktion (30, 40, 50) bestimmt, wenn das Zustandsmodell (13) des Insassen (100) ein Unaufmerksamsein des Insassen (100) anzeigt.procedure after claim 2 wherein the control unit (21) determines a null function as the assigned function (30, 40, 50) when the state model (13) of the occupant (100) indicates inattentiveness of the occupant (100).Verfahren nachAnspruch 2 oder3, bei dem das Steuergerät (21) eine Nullfunktion oder eine Weckfunktion als die zugeordnete Funktion (30, 40, 50) bestimmt, wenn das Zustandsmodell (13) des Insassen (100) ein Schlafen des Insassen (100) anzeigt.procedure after claim 2 or 3 wherein the control unit (21) determines a null function or a wake-up function as the assigned function (30, 40, 50) when the state model (13) of the occupant (100) indicates that the occupant (100) is sleeping.Verfahren nach einem derAnsprüche 2 bis4, bei dem das Steuergerät (21) aus einer dem Betätigungselement (22) zugeordneten Gruppe von ähnlichen hinsichtlich ihrer Wirkung abgestuften Funktionen (30, 40, 50) diejenige Funktion (30, 40, 50) als die zugeordnete Funktion (30, 40, 50) bestimmt, welche eine maximale mit dem Umgebungsmodell (11) des autonomen Fahrzeugs (10), dem Zustandsmodell (12) des autonomen Fahrzeugs (10) und/oder dem Zustandsmodell (13) des Insassen (100) verträgliche Wirkung aufweist.Procedure according to one of claims 2 until 4 , in which the control unit (21) selects that function (30, 40, 50) from a group of similar functions (30, 40, 50) which are graded in terms of their effect and is assigned to the actuating element (22) as the assigned function (30, 40, 50 ) determines which has a maximum with the environment model (11) of the autonomous vehicle (10), the state model (12) of the autonomous vehicle (10) and / or the state model (13) of the occupant (100) compatible effect.Verfahren nach einem derAnsprüche 1 bis5, bei dem das Steuergerät (21) eine Abfolge von Funktionen (30, 40, 50) als die zugeordnete Funktion (30, 40, 50) bestimmt.Procedure according to one of Claims 1 until 5 , in which the control unit (21) determines a sequence of functions (30, 40, 50) as the assigned function (30, 40, 50).Verfahren nach einem derAnsprüche 1 bis6, bei dem das Steuergerät (21) die zugeordnete Funktion (30, 40, 50) erst nach einem wiederholten Betätigen des Betätigungselements (22) steuert.Procedure according to one of Claims 1 until 6 In which the control unit (21) controls the assigned function (30, 40, 50) only after repeated actuation of the actuating element (22).Mensch-Maschine-Schnittstelle (20) für ein autonomes Fahrzeug (10), welche ein Betätigungselement (22) zum Steuern einer Funktion (30, 40, 50) eines autonomen Fahrzeugs (10) und ein mit dem Betätigungselement (22) verbundenes Steuergerät (21) umfasst und konfiguriert ist, ein Verfahren nach einem derAnsprüche 1 bis7 auszuführen.Human-machine interface (20) for an autonomous vehicle (10), which has an actuating element (22) for controlling a function (30, 40, 50) of an autonomous vehicle (10) and a control device ( 21) includes and is configured, a method according to any one of Claims 1 until 7 to execute.Mensch-Maschine-Schnittstelle nachAnspruch 8, welche konfigurierbar und/oder parametrisierbar ausgebildet ist.human-machine interface claim 8 , which is designed to be configurable and/or parameterizable.Autonomes Fahrzeug (10), mit einer Mensch-Maschine-Schnittstelle (20) nachAnspruch 8 oder9.Autonomous vehicle (10), with a man-machine interface (20). claim 8 or 9 .
DE102020131926.6A2020-12-022020-12-02 Adaptive human-machine interface for a vehicleWithdrawnDE102020131926A1 (en)

Priority Applications (1)

Application NumberPriority DateFiling DateTitle
DE102020131926.6ADE102020131926A1 (en)2020-12-022020-12-02 Adaptive human-machine interface for a vehicle

Applications Claiming Priority (1)

Application NumberPriority DateFiling DateTitle
DE102020131926.6ADE102020131926A1 (en)2020-12-022020-12-02 Adaptive human-machine interface for a vehicle

Publications (1)

Publication NumberPublication Date
DE102020131926A1true DE102020131926A1 (en)2022-06-02

Family

ID=81585804

Family Applications (1)

Application NumberTitlePriority DateFiling Date
DE102020131926.6AWithdrawnDE102020131926A1 (en)2020-12-022020-12-02 Adaptive human-machine interface for a vehicle

Country Status (1)

CountryLink
DE (1)DE102020131926A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication numberPriority datePublication dateAssigneeTitle
WO2024094768A1 (en)*2022-11-032024-05-10Volkswagen AktiengesellschaftMethod for carrying out a situation-contingent braking operation of a vehicle by means of an electronic parking brake, electronic braking system and motor vehicle

Citations (6)

* Cited by examiner, † Cited by third party
Publication numberPriority datePublication dateAssigneeTitle
DE102015120831A1 (en)2014-12-072016-06-09Toyota Motor Engineering & Manufacturing North America Inc. Mixed autonomous and manual control of autonomous vehicles
US20170235305A1 (en)2016-02-112017-08-17Samsung Electronics Co., Ltd.Method and apparatus for controlling vehicle
DE102016222499A1 (en)2016-11-162018-05-17Audi Ag A method of operating a motor vehicle in response to a driver condition
DE102017219065A1 (en)2017-10-252019-04-25Bayerische Motoren Werke Aktiengesellschaft METHOD AND DEVICE FOR CONFIGURING AN AUTOMATED VEHICLE GUIDANCE
DE102019105490A1 (en)2019-03-052020-09-10Bayerische Motoren Werke Aktiengesellschaft Method, device and computer program for operating a vehicle using a mobile user device
DE102019206981A1 (en)2019-05-142020-11-19Volkswagen Aktiengesellschaft Method for detecting unintentional operation of a control device in an at least partially autonomous motor vehicle

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication numberPriority datePublication dateAssigneeTitle
DE102015120831A1 (en)2014-12-072016-06-09Toyota Motor Engineering & Manufacturing North America Inc. Mixed autonomous and manual control of autonomous vehicles
US20170235305A1 (en)2016-02-112017-08-17Samsung Electronics Co., Ltd.Method and apparatus for controlling vehicle
DE102016222499A1 (en)2016-11-162018-05-17Audi Ag A method of operating a motor vehicle in response to a driver condition
DE102017219065A1 (en)2017-10-252019-04-25Bayerische Motoren Werke Aktiengesellschaft METHOD AND DEVICE FOR CONFIGURING AN AUTOMATED VEHICLE GUIDANCE
DE102019105490A1 (en)2019-03-052020-09-10Bayerische Motoren Werke Aktiengesellschaft Method, device and computer program for operating a vehicle using a mobile user device
DE102019206981A1 (en)2019-05-142020-11-19Volkswagen Aktiengesellschaft Method for detecting unintentional operation of a control device in an at least partially autonomous motor vehicle

Cited By (1)

* Cited by examiner, † Cited by third party
Publication numberPriority datePublication dateAssigneeTitle
WO2024094768A1 (en)*2022-11-032024-05-10Volkswagen AktiengesellschaftMethod for carrying out a situation-contingent braking operation of a vehicle by means of an electronic parking brake, electronic braking system and motor vehicle

Similar Documents

PublicationPublication DateTitle
DE102013222048B4 (en) Method and device for activating or deactivating an automatic driving function
EP3423328B1 (en)Device for controlling longitudinal guidance of a vehicle designed to be driven in an at least partly automated manner
EP3068672B1 (en)Changing of the driving mode for a driver assistance system
EP3180221B1 (en)Driver assistance system
EP2162337B1 (en)Cruise control for motor vehicles
DE102013013539A1 (en) Driver assistance system and method for operating a driver assistance system
WO2018211033A1 (en)Driver assistance system with hands-on detection with distinction between the placement of only one hand and both hands on the steering wheel
WO2008067872A1 (en)Driver assistance system for motor vehicles
DE102015224555A1 (en) Method for operating a vehicle
DE102011101541B4 (en) Operating unit for a driver assistance system and method for operating a driver assistance system by means of such an operating unit
DE102020131926A1 (en) Adaptive human-machine interface for a vehicle
WO2021204632A1 (en)Method for operating a driver assistance system of a vehicle, comprising driver moderation for partially-automated functions, driver assistance system, and vehicle
EP3740406A1 (en)Assistance system for a vehicle
EP4259467B1 (en)Method and apparatus for involvement-dependent dynamic blocking of an operating device
DE102017213205A1 (en) Pedal system with at least one variable meaning of the operation of at least one pedal
DE102015204365B4 (en) Device and method for autonomous or semi-autonomous control of a vehicle
DE102014011596B4 (en) Motor vehicle with a driver assistance device and a control device and method for operating a control device for a driver assistance device
DE102019000461B4 (en) Method for operating a lane guidance system and lane guidance system
DE102018211339B3 (en) Assistance system for a vehicle
DE10306136B4 (en) Safety device for a motor vehicle
DE102020112142B4 (en) Vehicle system and method for interacting with a driver of a vehicle
WO2018189052A1 (en)Steering device assembly for a vehicle and method for avoiding incorrect inputs on a vehicle horn
WO2021175621A1 (en)Controller and method for controlling an operating element
WO2021151671A1 (en)Device and method for assisting a driver of an autonomous vehicle
EP3747720A1 (en)Vehicle guidance system and method for operating a vehicle with a plurality of predetermined manual steering semiautonomous modes and non-manual steering semiautonomous modes

Legal Events

DateCodeTitleDescription
R163Identified publications notified
R082Change of representative

Representative=s name:RDL PATENTANWAELTE PARTG MBB, DE

Representative=s name:RAIBLE, DEISSLER, LEHMANN PATENTANWAELTE PARTG, DE

R119Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee

[8]ページ先頭

©2009-2025 Movatter.jp