

Die Erfindung geht aus von einem Verfahren zur Wiedergabe von Multimediadateien in einem Endgerät nach der Gattung des unabhängigen Patentanspruchs.The invention relates to a method for reproducing multimedia files in a terminal according to the preamble of the independent claim.
Aus der Offenlegungsschrift
Aus der
Das erfindungsgemässe Verfahren zur Wiedergabe von Multimediadateien in einem Endgeräten mit den Merkmalen des unabhängigen Patentanspruchs hat demgegenüber den Vorteil, dass bei der Verwaltung von Multimediadateien situationsbedingt Audiodateien abgespielt werden, um einen Benutzer eine blinde Navigation in den Multimediadateien zu ermöglichen. Dies ist insbesondere für einen Benutzer in einem Kraftfahrzeug interessant, so dass er sich nicht visuell auf ein Endgerät konzentrieren muss. Damit wird der Komfort des Benutzers gesteigert, er ist unabhängig von einer benutzten Sprache und ein Display ist nicht unbedingt notwendig. Erfindungsgemäß wird zumindest ein Teil der Audiodateien durch einen Benutzer erzeugt wird. Dies kann beispielsweise textuell über eine manuelle Eingabe geschehen, durch Eingeben von Texten, die dann mittels eines Synthesizers in Sprache umgewandelt werden oder durch die Verwendung eines Mikrofons, indem der Benutzer selbst den Text angibt. Zusätzlich muss er auch die Situation angeben, in der diese Audiodatei abgespielt werden soll. Durch eine einfache Menüführung können diese einem Benutzer solche Eingaben und damit die Erzeugung einer solchen Audiodatei wesentlich erleichtert werden.The inventive method for playback of multimedia files in a terminal with the features of the independent claim has the advantage that in the management of multimedia files Depending on the situation, audio files are played in order to allow a user to navigate blindly in the multimedia files. This is particularly interesting for a user in a motor vehicle, so that he does not have to focus visually on a terminal. This increases the comfort of the user, it is independent of a used language and a display is not absolutely necessary. According to the invention, at least a part of the audio files is generated by a user. This can be done, for example, textually via a manual input, by entering texts which are then converted into speech by means of a synthesizer or by the use of a microphone by the user himself indicating the text. In addition, he must also specify the situation in which this audio file is to be played. Simple menu navigation makes it much easier for such users to make such inputs and thus to generate such an audio file.
Durch die in den abhängigen Ansprüchen aufgeführten Maßnahmen und Weiterbildungen sind vorteilhafte Verbesserungen des Verfahrens zur Wiedergabe von Multimediadateien in einem Endgerät möglich.The measures and refinements recited in the dependent claims make possible advantageous improvements of the method for reproducing multimedia files in a terminal.
Weiterhin ist es von Vorteil, das die Multimediadaten und/oder die Audiodaten mittels Funksignalen empfangen werden und dann lokal in dem Endgerät gespeichert werden. Damit werden einem Benutzer von einem Rundfunkanbieter oder einem Funknetzbetreiber die Audiodaten zur Verwaltung der Multimediadateien automatisch geliefert. Vorteilhafter Weise kann dann der Rundfunkanbieter oder der Erzeuger der Audiodateien diese mit Werbung versehen. Dann ist es nicht mehr notwendig, dass der Benutzer selbst diese Audiodateien erzeugt oder sich besorgt.Furthermore, it is advantageous that the multimedia data and / or the audio data are received by means of radio signals and then stored locally in the terminal. Thus, the audio data for managing the multimedia files is automatically supplied to a user by a broadcast provider or a wireless network operator. Advantageously, the broadcaster or the producer of the audio files can then provide them with advertising. In that case, it is no longer necessary for the user himself to create or obtain these audio files.
Weiterhin ist es von Vorteil, dass die Multimediadaten klassifiziert abgespeichert werden, nachdem sie empfangen wurden. Das heißt, anhand einer zusätzlichen Information zu der Multimediadatei wird erkannt, zu welcher Klasse diese Multimediadatei gehört. Solche Klassen sind beispielsweise Sport, Nachrichten, Wetter oder Börse. Dabei kann dann auch noch durch Unterklassifizierungen, beispielsweise Nachrichten international, lokal oder unterschiedliche Sportarten Fußball, Leichtathletik eine feinere Klassifizierung erreicht werden. Dies wird dann automatisch von dem Prozessor des Endgeräts durchgeführt und erkannt.Furthermore, it is advantageous that the multimedia data are stored classified after they have been received. That is, additional information about the multimedia file is used to identify which class this multimedia file belongs to. Such classes are for example sport, news, weather or stock market. It can also be achieved by sub-classifications, such as news international, local or different sports football, athletics a finer classification. This is then automatically performed and recognized by the processor of the terminal.
Darüber hinaus ist es von Vorteil, dass diese Audiodateien und/oder Multimediadateien mit einer Priorität versehen werden und nach dieser Priorität abgespeichert bzw. gelöscht werden. Bei Speicherknappheit werden so Audiodateien und/oder Multimediadateien mit einer niedrigen Priorität früher gelöscht und halten so den Betrieb des Endgeräts aufrecht.Moreover, it is advantageous that these audio files and / or multimedia files are given a priority and are stored or deleted after this priority. In the event of a shortage of storage, audio files and / or multimedia files with a low priority are deleted earlier, thus maintaining the operation of the terminal.
Es ist insbesondere von Vorteil, dass als Funksignale digitale Rundfunksignale wie DAB (Digital Audio Broadcasting), DRM (Digital Regio Mondial) oder DVB (Digital Video Broadcasting) eingesetzt werden. Mit diesen digitalen Rundfunksignalen ist insbesondere die Übertragung von Multimediadateien äußerst einfach, da mittels der verwendeten Rahmenstruktur fast beliebige Multimediaobjekte übertragen werden können.It is of particular advantage that digital broadcast signals such as DAB (Digital Audio Broadcasting), DRM (Digital Regio Mondial) or DVB (Digital Video Broadcasting) are used as the radio signals. With these digital broadcasting signals, in particular, the transmission of multimedia files is extremely simple, since by means of the used frame structure almost any multimedia objects can be transmitted.
Darüber hinaus ist es von Vorteil, dass ein Endgerät zur Durchführung des erfindungsgemässen Verfahrens vorliegt, das einen Speicher zur Abspeicherung der Multimediadateien und der Audiodateien, eine Eingabevorrichtung zur Verwaltung der Multimediadateien, einen Lautsprecher zur Wiedergabe der Multimediadateien und der Audiodateien und einen Prozessor zur Decodierung der Multimediadateien und der Audiodateien unter situationsbedingten Wiedergabe der Audiodateien bei der Verwaltung der Multimediadateien aufweist: Dabei kann das Endgerät eine Funkstation zum Empfang der Multimediadateien und Audiodateien aufweisen, bzw. dann auch als digitaler Rundfunkempfänger ausgebildet sein.Moreover, it is advantageous that there is a terminal for carrying out the method according to the invention, which has a memory for storing the multimedia files and the audio files, an input device for managing the multimedia files, a loudspeaker for reproducing the multimedia files and the audio files, and a processor for decoding the Multimedia files and the audio files under situational playback of the audio files in the management of multimedia files has: In this case, the terminal may have a radio station for receiving the multimedia files and audio files, or then be designed as a digital radio receiver.
Ausführungsbeispiele der Erfindung sind in der Zeichnung dargestellt und werden in der nachfolgenden Beschreibung näher erläutert. Es zeigt
DAB (Digital Audio Broadcasting) ist ein Rundfunkübertragungsverfahren, das dem Hörer fertig zusammengestellte Radioprogramme bietet. Eine Erweiterung sind personalisierte Varianten. Hierbei werden Multimediaobjekte, vorzugsweise Audiodateien ausgestrahlt, lokal im Rundfunkempfänger gespeichert und offline nach Benutzerwünschen abgespielt. Eine Navigation innerhalb dieser Multimediaobjekte erfolgt beispielsweise über eine Fernbedienung, wie sie schon von Navigations- und Autoradiogeräten bekannt ist oder durch Bedientasten direkt am Gerät. In bestimmten Situationen, beispielsweise bei einer Benutzereingabe sollen nun erfindungsgemäss vordefinierte Audiodateien abgespielt werden, dadurch erhält der Benutzer ein direktes Audiofeedback seiner Handlungen.DAB (Digital Audio Broadcasting) is a broadcasting technique that provides the listener with ready-made radio programs. An extension are personalized variants. This multimedia objects, preferably audio files are broadcast locally stored in the radio receiver and played offline to user preferences. Navigation within these multimedia objects takes place, for example, via a Remote control, as it is already known from navigation and car audio equipment or by control buttons directly on the device. In certain situations, for example in the case of user input, predefined audio files are now to be played according to the invention, thereby giving the user direct audio feedback of his actions.
Eine Antenne 1 ist an einen Eingang eines Hochfrequenzempfängers 2 angeschlossen. Ein Ausgang des Hochfrequenzempfängers 2 ist an einen ersten Dateneingang eines Prozessors 3 angeschlossen, der über einen Datenein-/- ausgang mit einem Speicher 4 verbunden ist. Über einen Ausgang ist der Prozessor 3 mit einem Audioverstärker 5 verbunden, der einen Lautsprecher 6 treibt. An einen zweiten Dateneingang des Prozessors 3 ist eine Signalverarbeitung 7 angeschlossen, die Eingabesignale von einer Eingabevorrichtung 8 verarbeitet. An einen dritten Dateneingang ist eine Signalverarbeitung 9 angeschlossen, die Signale von einem Mikrofon 10 verarbeitet. Über einen Datenausgang ist der Prozessor 3 an eine Signalverarbeitung 30 angeschlossen, die einen Monitor 31 ansteuert. Der Monitor 31 kann als LCD- oder als Plasma-Bildschirm oder in einer anderen bekannten Anzeigetechnik ausgebildet sein. Alternativ ist es möglich, dass anstatt eines Hochfrequenzempfängers 2 eine Sende/Empfangsstation vorliegt oder auf einen Funkempfang völlig verzichtet wird und nur mit stationär vorhandenen Daten gearbeitet wird.An
Die Multimediadateien werden mittels der Antenne 1 und des Hochfrequenzempfängers 2 als Rundfunksignale empfangen, verstärkt und in eine Zwischenfrequenz umgesetzt sowie digitalisiert. Der Prozessor 3 erkennt die empfangenen Multimediadateien und speichert sie entsprechend einer Klassifizierung im Speicher 4 ab. Der Speicher 4 kann eine Festplatte, eine Chipkarte oder ein anderer wiederbeschreibbarer Speicher, wie ein Halbleiterspeicher sein. Diese lokale Speicherung kann hier in einer Directory-Struktur erfolgen, die in der Hauptebene Ordner für Sport, Nachrichten, Wetter und Börse hat. Weitere Unterordner splitten die genannten Thematiken noch weiter auf. Eine Navigation innerhalb der Klassifizierungen erfolgt z. B. mit der Eingabevorrichtung 8, die hier als Pfeiltasten ausgebildet sind. Der Monitor 31 kann dabei dem Benutzer eine visuelle Rückmeldung über die gerade aktuelle Klasse geben, also beispielsweise Nachrichten oder Nachrichten lokal anzeigen. In diesem Fall ist der Monitor 31 als ein einzeiliges Display ausgebildet. Andere Klassifizierung sind hier fast beliebig durch entsprechende Vorgaben einsetzbar.The multimedia files are received by means of the
Beim Navigieren durch die Ordner werden nun dem Benutzer Audiorückmeldungen gegeben, die an bestimmte Situationen gebunden sind. Solche Situationen sind beispielsweise das Anwählen eines Ordners wie Nachrichten. Die entsprechend mit diesem Ordner verknüpften Audiodateien, die dem Benutzer die Verwaltung erleichtern sollen, geben dann an, in welchem Ordner (beispielsweise Nachrichten) er sich befindet, ob Elemente vorhanden sind, ob keine Elemente vorhanden, ob neue Elemente vorhanden sind, ob noch nicht gehörte Elemente in diesem Ordner vorhanden sind oder wie viele Elemente in diesem Ordner abgespeichert sind. Weitere Möglichkeiten sind hier denkbar. Diese Audiorückmeldungen können alternativ zusätzlich zu der textuellen Ausgabe erfolgen.Navigating the folders now gives the user audio feedback tied to specific situations. Such situations include, for example, selecting a folder such as messages. The audio files associated with this folder, which are intended to make the user's administration easier, then indicate which folder (for example, messages) it is in, whether there are any items, if there are no items, if there are any new items, yet belonged to elements in this folder or how many items are stored in this folder. Other possibilities are conceivable here. These audio confirmations may alternatively be in addition to the textual output.
Bei einer Anordnung der Multimediadateien in einer Directory-Struktur kann dies durch ein Index.mp3-Objekt in den jeweiligen Ordner erfolgen. Dies wird automatisch bei der Auswahl des Ordners abgespielt. Eine andere Möglichkeit ist, die Audiodatei nach der Klassifizierung selber zu benennen, also Nachrichten lokal.mp3 und sie bei Bedarf aufzurufen. Dieser Bedarf wird von dem Prozessor 3 erkannt und hängt von der manuellen Auswahl mittels der Eingabevorrichtung 8 ab. Dieses Index-Objekt kann im mp3-Format oder einem anderen Audiocodierformat codiert sein, also beispielsweise MPEG 1, 2, 4 dabei layer 1 bis 3, ACC oder Text-to-Speech.When arranging the multimedia files in a directory structure, this can be done by an Index.mp3 object in the respective folder. This is automatically played when the folder is selected. Another possibility is to name the audio file after the classification itself, ie messages lokal.mp3 and call them if necessary. This need is recognized by the processor 3 and depends on the manual selection by means of the input device 8. This index object may be encoded in mp3 or other audio encoding format, such as
Die erfindungsgemässe Vorrichtung ermöglicht nun, dass eine blinde Bedienung erlaubt wird, da durch die Audiodateien dem Benutzer jeweils angegeben wird, in welchem Ordner er sich befindet. Dies kann dahingehend erweitert werden, dass in den Audiodateien angegeben wird, welche Audiofiles oder Multimediafiles hier abgelegt sind, dass also letztlich eine Liste in der jeweiligen Audiodatei angelegt wird. Dies kann durch den Prozessor 3 automatisch erfolgen.The device according to the invention now makes it possible to allow blind operation since the audio files indicate to the user in which folder he is located. This can be extended to the effect that the audio files specify which audio files or multimedia files are stored here, so that ultimately a list is created in the respective audio file. This can be done automatically by the processor 3.
Dieses System ist dann unabhängig von der benutzten Sprache und dynamisch erweiterbar, da der Inhalt der Audiodateien alleine von den Sendeanstalten produziert oder ausgesendet wird, bzw. vom Benutzter erzeugt wird. Der allgemeine Höreindruck kann dahingehend verbessert werden, dass diese Texte von einem menschlichen Sprecher kommen, also nicht durch künstliche Sprache erzeugt werden. Solche Texte können ggf. mit Werbebotschaften verknüpft werden, beispielsweise "Nachrichten gesponsert von Bosch". Durch die Verwendung von Prioritäten für diese Audiodateien, ist es möglich bei einem knappen Speichervolumen, sich von Audiodateien mit niedriger Priorität zu trennen. Werden alle Dateien, also auch die Multimediadateien, mit Prioritäten versehen, ist es auch möglich, dass Multimediadateien ggf. gelöscht werden.This system is then independent of the language used and dynamically expandable, since the content of the audio files is produced or sent by the broadcasters alone, or is generated by the user. The general listening impression can be improved so that these texts come from a human speaker, so they are not produced by artificial language. Such texts may possibly be linked with advertising messages, for example "News sponsored by Bosch". By using priorities for these audio files, it is possible for a small amount of memory to separate from low-priority audio files. If all files, including the multimedia files, are assigned priorities, it is also possible that multimedia files may be deleted.
In Verfahrensschritt 13 werden den einzelnen Ordnern die Audiodateien zugeordnet, die bei der Auswahl der Ordner situationsbedingt abgespielt werden, um dem Benutzer eine blinde Benutzung der Vorrichtung zu ermöglichen. Verfahrensschritt 14 erfolgt nun die Verwaltung der Multimediadateien durch einen Benutzer. Durch den Prozessor 3 werden dann Situationen in Verfahrensschritt 15 erkannt, wie die Auswahl eines bestimmten Ordners. Liegt dann eine entsprechende Audiodatei vor, dann wird in Verfahrensschritt 16 diese Audiodatei abgespielt, um dem Benutzer ein Audiofeedback über seine Handlung zu geben. Damit wird die blinde Benutzung für den Benutzer ermöglicht. Wird eine vorgegebene Situation in Verfahrensschritt 15 nicht erkannt, dann wird keine Audiodatei abgespielt, und es wird zurück zu Verfahrensschritt 14 gesprungen, um die Multimediadateienverwaltung fortzusetzen.In
| Application Number | Priority Date | Filing Date | Title | 
|---|---|---|---|
| DE10141607ADE10141607A1 (en) | 2001-08-24 | 2001-08-24 | Method for playing multimedia files in a terminal | 
| DE10141607 | 2001-08-24 | ||
| PCT/DE2002/003002WO2003019801A2 (en) | 2001-08-24 | 2002-08-16 | Method for reproducing multimedia files in a terminal | 
| Publication Number | Publication Date | 
|---|---|
| EP1421701A2 EP1421701A2 (en) | 2004-05-26 | 
| EP1421701B1true EP1421701B1 (en) | 2014-04-02 | 
| Application Number | Title | Priority Date | Filing Date | 
|---|---|---|---|
| EP02758145.3AExpired - LifetimeEP1421701B1 (en) | 2001-08-24 | 2002-08-16 | Method for reproducing multimedia files in a terminal | 
| Country | Link | 
|---|---|
| US (1) | US20040264283A1 (en) | 
| EP (1) | EP1421701B1 (en) | 
| JP (1) | JP2005502236A (en) | 
| DE (1) | DE10141607A1 (en) | 
| WO (1) | WO2003019801A2 (en) | 
| Publication number | Priority date | Publication date | Assignee | Title | 
|---|---|---|---|---|
| WO2005107262A1 (en)* | 2004-04-30 | 2005-11-10 | Gen-Data Pte Ltd (Sg) | An entertainment system | 
| KR100726683B1 (en)* | 2005-09-13 | 2007-06-11 | 엘지전자 주식회사 | Mobile terminal and method for storing attached files | 
| Publication number | Priority date | Publication date | Assignee | Title | 
|---|---|---|---|---|
| DE3842417A1 (en)* | 1988-12-16 | 1990-06-21 | Bosch Gmbh Robert | DEVICE FOR INFORMATION TO THE DRIVER OF A MOTOR VEHICLE | 
| DE19529571A1 (en)* | 1995-08-11 | 1997-02-13 | Becker Gmbh | Motor vehicle equipment operating unit - detects proximity to operating element and actuates function before element is operated, e.g. speech output | 
| US5911118A (en)* | 1997-03-14 | 1999-06-08 | Morris; Jeffrey S | Scanner with audible identification of tuned channel | 
| WO1999039466A1 (en)* | 1998-01-29 | 1999-08-05 | Kwoh Daniel S | Apparatus, systems and methods for providing on-demand radio | 
| DE19818763A1 (en)* | 1998-04-27 | 1999-11-04 | Tsp Ges Fuer Teleprocessing Sy | Graphical user interface for multimedia data communications between a computer with display and at least one peripheral equipment | 
| TW448666B (en)* | 1999-01-28 | 2001-08-01 | Ibm | Method and apparatus for automotive radio time shifting personalized to multiple drivers | 
| US6600908B1 (en)* | 1999-02-04 | 2003-07-29 | Hark C. Chan | Method and system for broadcasting and receiving audio information and associated audio indexes | 
| DE19942842A1 (en)* | 1999-09-08 | 2001-04-12 | Bosch Gmbh Robert | Process for data processing in a radio receiver | 
| DE10004965C2 (en)* | 2000-02-04 | 2003-08-21 | Bosch Gmbh Robert | Device for the manual operation of devices in a vehicle | 
| US6658062B1 (en)* | 2000-05-09 | 2003-12-02 | Sony Corporation | User-demand information and entertainment system using wide area digital broadcast | 
| Publication number | Publication date | 
|---|---|
| DE10141607A1 (en) | 2003-03-20 | 
| US20040264283A1 (en) | 2004-12-30 | 
| EP1421701A2 (en) | 2004-05-26 | 
| JP2005502236A (en) | 2005-01-20 | 
| WO2003019801A2 (en) | 2003-03-06 | 
| WO2003019801A3 (en) | 2003-08-07 | 
| Publication | Publication Date | Title | 
|---|---|---|
| EP1382200B1 (en) | Method for playing back audio data by means of an entertainment device | |
| DE69535143T2 (en) | METHOD AND RECEIVER FOR RECEIVING DATA IN A TRANSMISSION SIGNAL AND METHOD FOR TRANSMITTING DATA | |
| DE69422613T2 (en) | BROADCAST RECEIVER FOR DISTRIBUTION OF INFORMATION USING AN AUXILIARY | |
| DE69709265T2 (en) | Automatic recording device in accordance with character information | |
| EP2192693B1 (en) | Information and entertainment system in a vehicle | |
| DE112006003117T5 (en) | System and method for targeted advertising | |
| DE10306277B4 (en) | Method for recording a plurality of audio signals in an audio system of a motor vehicle and audio recording system in a vehicle | |
| DE10196456T5 (en) | Personal disc jockey system | |
| DE102005061505B4 (en) | Method for providing information in a vehicle | |
| DE10306563B4 (en) | Personal audio recorder in a vehicle audio system | |
| DE4222777A1 (en) | AUDIO SYSTEM WITH FM RADIO RECEIVER | |
| EP1421701B1 (en) | Method for reproducing multimedia files in a terminal | |
| DE10116722C1 (en) | Entertainment device | |
| EP1489880A1 (en) | Device and method for processing sound signals with automatic selection of acoustic spectrum | |
| DE102019203533A1 (en) | Method of reproducing audio content and audio reproduction system | |
| DE102017214237A1 (en) | Media playback device for playing back content-like media signals | |
| EP1219027B1 (en) | Method and device for operating an audio device in a motor vehicle | |
| DE10057261C2 (en) | Audio system for a motor vehicle | |
| DE102010060622A9 (en) | Device and method for automatically exchanging a wireless connection | |
| DE102006017169B4 (en) | Method for providing information in a vehicle | |
| DE10065520C1 (en) | Radio data reception device for automobile has input device provided with simple operating control for data mode selection by driver | |
| DE29723369U1 (en) | Receiving device | |
| DE10313742A1 (en) | Radio with a song recognition device for received songs and a title storage unit | |
| DE102022102563A1 (en) | Method for providing a radio program or an entertainment program in a motor vehicle | |
| WO2015036126A1 (en) | Device and method for reproducing digital receiver signals | 
| Date | Code | Title | Description | 
|---|---|---|---|
| PUAI | Public reference made under article 153(3) epc to a published international application that has entered the european phase | Free format text:ORIGINAL CODE: 0009012 | |
| 17P | Request for examination filed | Effective date:20040324 | |
| AK | Designated contracting states | Kind code of ref document:A2 Designated state(s):AT BE BG CH CY CZ DE DK EE ES FI FR GB GR IE IT LI LU MC NL PT SE | |
| AX | Request for extension of the european patent | Extension state:AL LT LV MK RO SI | |
| 17Q | First examination report despatched | Effective date:20121019 | |
| REG | Reference to a national code | Ref country code:DE Ref legal event code:R079 Ref document number:50215906 Country of ref document:DE Free format text:PREVIOUS MAIN CLASS: H04B0001000000 Ipc:H04H0040180000 | |
| RIC1 | Information provided on ipc code assigned before grant | Ipc:H04H 40/18 20080101AFI20131010BHEP Ipc:H04H 60/27 20080101ALI20131010BHEP | |
| GRAP | Despatch of communication of intention to grant a patent | Free format text:ORIGINAL CODE: EPIDOSNIGR1 | |
| INTG | Intention to grant announced | Effective date:20140110 | |
| GRAS | Grant fee paid | Free format text:ORIGINAL CODE: EPIDOSNIGR3 | |
| GRAA | (expected) grant | Free format text:ORIGINAL CODE: 0009210 | |
| AK | Designated contracting states | Kind code of ref document:B1 Designated state(s):DE FR IT | |
| REG | Reference to a national code | Ref country code:DE Ref legal event code:R096 Ref document number:50215906 Country of ref document:DE Effective date:20140515 | |
| REG | Reference to a national code | Ref country code:DE Ref legal event code:R097 Ref document number:50215906 Country of ref document:DE | |
| PLBE | No opposition filed within time limit | Free format text:ORIGINAL CODE: 0009261 | |
| STAA | Information on the status of an ep patent application or granted ep patent | Free format text:STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT | |
| 26N | No opposition filed | Effective date:20150106 | |
| REG | Reference to a national code | Ref country code:DE Ref legal event code:R097 Ref document number:50215906 Country of ref document:DE Effective date:20150106 | |
| REG | Reference to a national code | Ref country code:FR Ref legal event code:PLFP Year of fee payment:15 | |
| PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] | Ref country code:IT Payment date:20160823 Year of fee payment:15 | |
| PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] | Ref country code:FR Payment date:20160825 Year of fee payment:15 | |
| PGFP | Annual fee paid to national office [announced via postgrant information from national office to epo] | Ref country code:DE Payment date:20161027 Year of fee payment:15 | |
| REG | Reference to a national code | Ref country code:DE Ref legal event code:R119 Ref document number:50215906 Country of ref document:DE | |
| REG | Reference to a national code | Ref country code:FR Ref legal event code:ST Effective date:20180430 | |
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] | Ref country code:DE Free format text:LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date:20180301 | |
| PG25 | Lapsed in a contracting state [announced via postgrant information from national office to epo] | Ref country code:IT Free format text:LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date:20170816 Ref country code:FR Free format text:LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES Effective date:20170831 |