EP1071056A2 - Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssytem und einem fahrzeuexternen Zentralrechner - Google Patents

Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssytem und einem fahrzeuexternen Zentralrechner Download PDF

Info

Publication number
EP1071056A2
EP1071056A2 EP00112123A EP00112123A EP1071056A2 EP 1071056 A2 EP1071056 A2 EP 1071056A2 EP 00112123 A EP00112123 A EP 00112123A EP 00112123 A EP00112123 A EP 00112123A EP 1071056 A2 EP1071056 A2 EP 1071056A2
Authority
EP
European Patent Office
Prior art keywords
vehicle
communication system
central computer
message
phonetic transcription
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP00112123A
Other languages
English (en)
French (fr)
Other versions
EP1071056B1 (de
EP1071056A3 (de
Inventor
Ulrich Dr. Weinmann
Mike Peters
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bayerische Motoren Werke AG
Original Assignee
Bayerische Motoren Werke AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bayerische Motoren Werke AG filed Critical Bayerische Motoren Werke AG
Publication of EP1071056A2 publication Critical patent/EP1071056A2/de
Publication of EP1071056A3 publication Critical patent/EP1071056A3/de
Application granted granted Critical
Publication of EP1071056B1 publication Critical patent/EP1071056B1/de
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00Speech synthesis; Text to speech systems
    • G10L13/08Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/091Traffic information broadcasting
    • G08G1/092Coding or decoding of the information
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/091Traffic information broadcasting

Definitions

  • the invention relates to a method for wireless transmission of Messages between an in-vehicle communication system and a central computer external to the vehicle.
  • Method for the wireless transmission of messages between one vehicle-internal communication system and a vehicle-external central computer are for example in connection with RDS (radio data system) known for a long time.
  • Current traffic news is in particular transmitted via RDS transmitted to the driver in the form of speech.
  • TTS Text-To-Speech
  • the in-vehicle communication system for wireless transmission of messages between an in-vehicle communication system and an in-vehicle communication system
  • Central computer the in-vehicle communication system an acoustic output unit for playing back a received message on.
  • this is initially in text form Present to be sent to the in-vehicle communication system
  • Message transformed into a phonetic transcription and in the form of the phonetic transcription for in-vehicle communication system transmitted.
  • the phonetic transcription is transformed into speech and over the acoustic output unit is output.
  • a E-mail arrived at the central computer to the vehicle and be read aloud.
  • the in-vehicle communication system preferably also has one acoustic input unit via which a spoken message is recorded is what this spoken message inside the vehicle Communication system transformed into phonetic transcription and on the vehicle external Central computer is transmitted, which is then in phonetic transcription transmitted message converted into text and saved in this form and / or processed. For example, there is an email message it is forwarded from the central computer to the recipient.
  • the messages can be stored in the vehicle in the form of phonetic transcription and managed.
  • the less complex transformation of phonetic transcription into speech and vice versa is carried out according to the invention in the vehicle.
  • the high computing power, needed to translate phonetic transcription into text and vice versa is based on a system external to the vehicle that has sufficient computing power has shifted.
  • phonetic transcription gives speech in the form of compressed audio data again. Therefore, when sending and receiving the phonetic transcription the effective bandwidth requirement for signal transmission is severely limited the loading times in the in-vehicle communication system be minimized.

Abstract

Bei einem Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssystem und einem fahrzeugexternen Zentralrechner, bei dem das fahrzeuginterne Kommunikationssystem eine akustische Ausgabeeinheit zur Wiedergabe einer empfangenen Nachricht aufweist, wird im fahrzeugexternen Zentralrechner die zunächst in Textform vorliegende, an das fahrzeuginterne Kommunikationssystem zu sendende Nachricht in eine Lautschrift umgeformt und in Form der Lautschrift zum fahrzeuginternen Kommunikationssystem übermittelt. Weiterhin wird im fahrzeuginternen Kommunikationssystem die Lautschrift in Sprache umgeformt und über die akustische Ausgabeeinheit ausgegeben.

Description

Die Erfindung bezieht sich auf ein Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssystem und einem fahrzeugexternen Zentralrechner.
Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssystem und einem fahrzeugexternen Zentralrechner sind beispielsweise im Zusammenhang mit RDS (Radio-Data-System) seit langem bekannt. Über RDS werden insbesondere aktuelle Verkehrsnachrichten in Form von Sprache an den Fahrer übermittelt.
Weiterhin sind allgemein Verfahren zur elektronischen Erzeugung eines gesprochenen Textes bzw. Verfahren zur Umformung von Text in Sprache (TTS=Text-To-Speech) bekannt, bei den in einem ersten Schritt der Text in Lautschrift (phonetisch-prosodische Parameter) und in einem zweiten Schritt die Lautschrift in Sprache transformiert wird. Ein derartiges Verfahren ist beispielsweise in der US 5,592,585 beschrieben. Hierbei werden beide Schritte von einem einzigen speziellen Rechner durchgeführt.
In Zukunft soll in Kraftfahrzeugen das Senden und Empfangen auch von längeren Textnachrichten, wie beispielsweise von Diktaten und/oder von E-mail-Nachrichten, ermöglicht werden. Die Eingabe von Text zum Senden einer Nachricht über eine Tastatur oder das Lesen von Text einer empfangenen Nachricht lenkt insbesondere während der Fahrt vom Verkehrsgeschehen ab. Daher ist es wünschenswert, fahrzeugseitig das Senden von Nachrichten, die beim Empfänger in Form von Text ankommen sollen, und das Empfangen von Nachrichten, die vom Sender in Form von Text verfaßt werden, auf akustischem Wege zu ermöglichen. Mit herkömmlichen Systemen wäre hierzu im Fahrzeug ein Spracherkennungssystem und ein Text-To-Speech-System erforderlich. Hierzu wäre ein fahrzeuginternes Kommunikationssystem in seinem Systemaufwand stark zu erweitern. Dies ist jedoch nicht wünschenswert, da ein derartiges Kommunikationssystem noch eine Vielzahl anderer Funktionen übernehmen soll, wie beispielsweise den Betrieb eines Navigationssystems und/oder einer Telefonanlage.
Es ist Aufgabe der Erfindung, in Kraftfahrzeugen mittels eines fahrzeuginternen Kommunikationssystems das Senden und Empfangen auch von längeren Textnachrichten fahrzeugseitig auf akustischem Wege zu ermöglichen und dabei die erforderliche Rechenleistung des fahrzeuginternen Kommunikationssystems zu minimieren.
Diese Aufgabe wird durch die Merkmale des Patentanspruchs 1 gelöst.
Erfindungsgemäß weist zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssystem und einem fahrzeugexternen Zentralrechner das fahrzeuginterne Kommunikationssystem eine akustische Ausgabeeinheit zur Wiedergabe einer empfangenen Nachricht auf. Im fahrzeugexternen Zentralrechner wird die zunächst in Textform vorliegende, an das fahrzeuginterne Kommunikationssystem zu sendende Nachricht in eine Lautschrift umgeformt und in Form der Lautschrift zum fahrzeuginternen Kommunikationssystem übermittelt. Im fahrzeuginternen Kommunikationssystem wird die Lautschrift in Sprache umgeformt und über die akustische Ausgabeeinheit ausgegeben. Somit kann beispielsweise eine am Zentralrechner angekommene E-mail an das Fahrzeug übertragen und vorgelesen werden.
Vorzugsweise weist das fahrzeuginterne Kommunikationssystem auch eine akustische Eingabeeinheit auf, über die eine gesprochene Nachricht aufgenommen wird, wonach diese gesprochene Nachricht im fahrzeuginternen Kommunikationssystem in Lautschrift umgeformt und an den fahrzeugexternen Zentralrechner übermittelt wird, der anschließend die in Lautschrift übermittelte Nachricht in Text umformt und in dieser Form abspeichert und/oder weiterverarbeitet. Liegt beispielsweise eine E-Mail-Nachricht vor wird diese vom Zentralrechner an den Empfänger weitergeleitet.
Die Nachrichten können im Fahrzeug in Form von Lautschrift gespeichert und verwaltet werden.
Die weniger aufwendige Umformung von Lautschrift in Sprache und umgekehrt wird erfindungsgemäß im Fahrzeug vorgenommen. Die hohe Rechenleistung, die zur Übersetzung der Lautschrift in Text und umgekehrt benötigt wird, wird auf ein fahrzeugexternes System, das ausreichende Rechenleistung aufweist, verlagert.
Darüber hinaus gibt eine Lautschrift Sprache in Form von komprimierten Audiodaten wieder. Daher kann beim Senden und Empfangen der Lautschrift der effektive Bandbreitebedarf zur Signalübertragung stark eingeschränkt werden, wodurch die Ladezeiten im fahrzeuginternen Kommunikationssystem minimiert werden.

Claims (2)

  1. Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssystem und einem fahrzeugexternen Zentralrechner, bei dem das fahrzeuginterne Kommunikationssystem eine akustische Ausgabeeinheit zur Wiedergabe einer empfangenen Nachricht aufweist, bei dem im fahrzeugexternen Zentralrechner die zunächst in Textform vorliegende, an das fahrzeuginterne Kommunikationssystem zu sendende Nachricht in eine Lautschrift umgeformt wird und in Form der Lautschrift zum fahrzeuginternen Kommunikationssystem übermittelt wird und bei dem im fahrzeuginternen Kommunikationssystem die Lautschrift in Sprache umgeformt wird und über die akustische Ausgabeeinheit ausgegeben wird.
  2. Verfahren nach Patentanspruch 1, dadurch gekennzeichnet, daß das fahrzeuginterne Kommunikationssystem auch eine akustische Eingabeeinheit aufweist, über die eine gesprochene Nachricht aufgenommen wird, wonach diese gesprochene Nachricht im fahrzeuginternen Kommunikationssystem in Lautschrift umgeformt und an den fahrzeugexternen Zentralrechner übermittelt wird, der anschließend die in Lautschrift übermittelte Nachricht in Text umformt und in dieser Form abspeichert und/oder weiterverarbeitet.
EP00112123A 1999-07-16 2000-06-06 Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssytem und einem fahrzeugexternen Zentralrechner Expired - Lifetime EP1071056B1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE19933318A DE19933318C1 (de) 1999-07-16 1999-07-16 Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssystem und einem fahrzeugexternen Zentralrechner
DE19933318 1999-07-16

Publications (3)

Publication Number Publication Date
EP1071056A2 true EP1071056A2 (de) 2001-01-24
EP1071056A3 EP1071056A3 (de) 2001-04-25
EP1071056B1 EP1071056B1 (de) 2005-11-16

Family

ID=7914969

Family Applications (1)

Application Number Title Priority Date Filing Date
EP00112123A Expired - Lifetime EP1071056B1 (de) 1999-07-16 2000-06-06 Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssytem und einem fahrzeugexternen Zentralrechner

Country Status (4)

Country Link
US (1) US7243067B1 (de)
EP (1) EP1071056B1 (de)
JP (1) JP4845249B2 (de)
DE (2) DE19933318C1 (de)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1324313A2 (de) * 2001-12-21 2003-07-02 Nissan Motor Co., Ltd. Text-zu-Sprache Umsetzung

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070219786A1 (en) * 2006-03-15 2007-09-20 Isaac Emad S Method for providing external user automatic speech recognition dictation recording and playback
EP1879000A1 (de) * 2006-07-10 2008-01-16 Harman Becker Automotive Systems GmbH Uebertragung von textnachrichten durch navigationssystemen

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2573886A1 (fr) * 1984-11-29 1986-05-30 Constr Telephoniques Terminal portatif
JPS63272129A (ja) * 1987-04-30 1988-11-09 Nec Corp 発音記号変換式無線呼出システム
EP0655696A1 (de) * 1993-11-30 1995-05-31 Sony Corporation Informationszugriffssystem und Aufnahmemedium
DE19527187A1 (de) * 1995-07-26 1997-01-30 Philips Patentverwaltung RDS-TMC-Rundfunkempfänger

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03132797A (ja) * 1989-10-19 1991-06-06 Matsushita Electric Ind Co Ltd 音声認識装置
JPH07152787A (ja) * 1994-01-13 1995-06-16 Sony Corp 情報アクセスシステムおよび記録媒体
AU684872B2 (en) * 1994-03-10 1998-01-08 Cable And Wireless Plc Communication system
US5592585A (en) * 1995-01-26 1997-01-07 Lernout & Hauspie Speech Products N.C. Method for electronically generating a spoken message
US5884262A (en) * 1996-03-28 1999-03-16 Bell Atlantic Network Services, Inc. Computer network audio access and conversion system
US5732216A (en) * 1996-10-02 1998-03-24 Internet Angles, Inc. Audio message exchange system
US5911129A (en) * 1996-12-13 1999-06-08 Intel Corporation Audio font used for capture and rendering
US5933805A (en) * 1996-12-13 1999-08-03 Intel Corporation Retaining prosody during speech analysis for later playback
US6018710A (en) * 1996-12-13 2000-01-25 Siemens Corporate Research, Inc. Web-based interactive radio environment: WIRE
GB2323693B (en) * 1997-03-27 2001-09-26 Forum Technology Ltd Speech to text conversion
KR100280045B1 (ko) * 1997-05-02 2001-02-01 윤종용 외부전화를이용한메일독출방법및그장치
US6061718A (en) * 1997-07-23 2000-05-09 Ericsson Inc. Electronic mail delivery system in wired or wireless communications system
JP3287281B2 (ja) 1997-07-31 2002-06-04 トヨタ自動車株式会社 メッセージ処理装置
JPH1185196A (ja) * 1997-09-10 1999-03-30 Toyo Commun Equip Co Ltd 音声符号化/復号化方式
US7027568B1 (en) * 1997-10-10 2006-04-11 Verizon Services Corp. Personal message service with enhanced text to speech synthesis
US6246672B1 (en) * 1998-04-28 2001-06-12 International Business Machines Corp. Singlecast interactive radio system
US6081780A (en) * 1998-04-28 2000-06-27 International Business Machines Corporation TTS and prosody based authoring system
US6236968B1 (en) * 1998-05-14 2001-05-22 International Business Machines Corporation Sleep prevention dialog based car system
US6539080B1 (en) * 1998-07-14 2003-03-25 Ameritech Corporation Method and system for providing quick directions
US6246983B1 (en) * 1998-08-05 2001-06-12 Matsushita Electric Corporation Of America Text-to-speech e-mail reader with multi-modal reply processor
FI106823B (fi) * 1998-10-23 2001-04-12 Nokia Mobile Phones Ltd Tiedonhakujärjestelmä
US20020087655A1 (en) * 1999-01-27 2002-07-04 Thomas E. Bridgman Information system for mobile users
US6563770B1 (en) * 1999-12-17 2003-05-13 Juliette Kokhab Method and apparatus for the distribution of audio data

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2573886A1 (fr) * 1984-11-29 1986-05-30 Constr Telephoniques Terminal portatif
JPS63272129A (ja) * 1987-04-30 1988-11-09 Nec Corp 発音記号変換式無線呼出システム
EP0655696A1 (de) * 1993-11-30 1995-05-31 Sony Corporation Informationszugriffssystem und Aufnahmemedium
DE19527187A1 (de) * 1995-07-26 1997-01-30 Philips Patentverwaltung RDS-TMC-Rundfunkempfänger

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
PATENT ABSTRACTS OF JAPAN vol. 013, no. 097 (E-723), 7. März 1989 (1989-03-07) & JP 63 272129 A (NEC CORP), 9. November 1988 (1988-11-09) *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1324313A2 (de) * 2001-12-21 2003-07-02 Nissan Motor Co., Ltd. Text-zu-Sprache Umsetzung
EP1324313A3 (de) * 2001-12-21 2003-11-12 Nissan Motor Co., Ltd. Text-zu-Sprache Umsetzung

Also Published As

Publication number Publication date
EP1071056B1 (de) 2005-11-16
EP1071056A3 (de) 2001-04-25
JP2001069071A (ja) 2001-03-16
DE19933318C1 (de) 2001-02-01
JP4845249B2 (ja) 2011-12-28
DE50011607D1 (de) 2005-12-22
US7243067B1 (en) 2007-07-10

Similar Documents

Publication Publication Date Title
EP3095114B1 (de) Verfahren und system zur erzeugung eines steuerungsbefehls
DE10317244B4 (de) In einem Fahrzeug installierte Navigationsvorrichtung und Kommunikationsverfahren für diese
DE10062379A1 (de) Verfahren und System zum Umsetzen von Text in Sprache
EP1071056B1 (de) Verfahren zur drahtlosen Übertragung von Nachrichten zwischen einem fahrzeuginternen Kommunikationssytem und einem fahrzeugexternen Zentralrechner
EP0725382B1 (de) Verfahren und Einrichtung zur Ausgabe von digital kodierten Verkehrsmeldungen mittels synthetisch erzeugter Sprache
EP0984427B1 (de) Verfahren zum akustischen Ausgeben von Text
DE3731429C1 (de) Rundfunkempfangseinrichtung fuer Kraftfahrzeuge
DE102019202662A1 (de) Verfahren zur Überprüfung der Funktionsfähigkeit einer Notrufeinrichtung eines Kraftfahrzeugs sowie Kraftfahrzeug zur Durchführung des Verfahrens
WO2008064742A1 (de) Verfahren zur wiedergabe von textinformationen durch sprache in einem fahrzeug
DE4427444B4 (de) Einrichtung und Verfahren zur Sprachsteuerung eines Geräts
WO1998018228A2 (de) Verfahren zum empfang von nachrichten und elektrisches gerät, insbesondere autoradiogerät, zur durchführung des verfahrens
DE3734320A1 (de) Geraet, insbesondere fuer kraftfahrzeuge, zum abhoeren bereits ausgestrahlter ari- bzw. rdc-meldungen
EP3735688B1 (de) Verfahren, vorrichtung und computerlesbares speichermedium mit instruktionen zum verarbeiten einer spracheingabe, kraftfahrzeug und nutzerendgerät mit einer sprachverarbeitung
DE3300053A1 (de) Auf sprache ansprechende mobile statuseinheit
WO2018188907A1 (de) Verarbeitung einer spracheingabe
EP2127273B1 (de) Verfahren zum abspielen einer sounddatei auf einem empfänger-mobiltelefon mittels eines sender-mobiltelefons sowie computerprogrammprodukt
DE102019203533A1 (de) Verfahren zur Wiedergabe von Audioinhalten und Audiowiedergabesystem
DE10132871B4 (de) Verfahren und Einrichtung zur Versendung von zuvor gespeicherten Sprachnachrichten
EP2051242B1 (de) Verfahren zur Erzeugung von Sprachmustern für eine sprachgesteuerte Senderwahl
EP0927468B1 (de) Verfahren zur speicherung von nachrichten auf einer chipkarte und gerät zur durchführung des verfahrens
EP1028032A2 (de) Informationssystem für ein Fahrzeug
DE19806927A1 (de) Verfahren und Einrichtung zur Übertragung natürlicher Sprache
DE102022208762A1 (de) Textextraktion aus Audiodaten in einem Fahrzeug
DE10144688A1 (de) Vefahren und Einrichtung zum Versenden und zum Empfang von Informationen/Nachrichten
DE10305658A1 (de) Informationseinrichtung, insbesondere für Fahrzeuge, sowie Verfahren zur Steuerung der Sprachwiedergabe

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

AK Designated contracting states

Kind code of ref document: A2

Designated state(s): DE FR GB SE

AX Request for extension of the european patent

Free format text: AL;LT;LV;MK;RO;SI

PUAL Search report despatched

Free format text: ORIGINAL CODE: 0009013

AK Designated contracting states

Kind code of ref document: A3

Designated state(s): AT BE CH CY DE DK ES FI FR GB GR IE IT LI LU MC NL PT SE

AX Request for extension of the european patent

Free format text: AL;LT;LV;MK;RO;SI

17P Request for examination filed

Effective date: 20010518

AKX Designation fees paid

Free format text: DE FR GB SE

17Q First examination report despatched

Effective date: 20040518

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): DE FR GB SE

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

GBT Gb: translation of ep patent filed (gb section 77(6)(a)/1977)
REF Corresponds to:

Ref document number: 50011607

Country of ref document: DE

Date of ref document: 20051222

Kind code of ref document: P

REG Reference to a national code

Ref country code: SE

Ref legal event code: TRGR

ET Fr: translation filed
PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

26N No opposition filed

Effective date: 20060817

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: SE

Payment date: 20110613

Year of fee payment: 12

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20110630

Year of fee payment: 12

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: FR

Payment date: 20110720

Year of fee payment: 12

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: DE

Payment date: 20110727

Year of fee payment: 12

REG Reference to a national code

Ref country code: SE

Ref legal event code: EUG

GBPC Gb: european patent ceased through non-payment of renewal fee

Effective date: 20120606

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20120607

REG Reference to a national code

Ref country code: FR

Ref legal event code: ST

Effective date: 20130228

REG Reference to a national code

Ref country code: DE

Ref legal event code: R119

Ref document number: 50011607

Country of ref document: DE

Effective date: 20130101

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: DE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20130101

Ref country code: FR

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20120702

Ref country code: GB

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20120606