EP2744129A1 - Système de distribution et de sélection de flux audio et/ou video multiples vers des périphériques actifs à partir d'un équipement serveur domestique - Google Patents

Système de distribution et de sélection de flux audio et/ou video multiples vers des périphériques actifs à partir d'un équipement serveur domestique Download PDF

Info

Publication number
EP2744129A1
EP2744129A1 EP13193371.5A EP13193371A EP2744129A1 EP 2744129 A1 EP2744129 A1 EP 2744129A1 EP 13193371 A EP13193371 A EP 13193371A EP 2744129 A1 EP2744129 A1 EP 2744129A1
Authority
EP
European Patent Office
Prior art keywords
group
stream
audio
streams
active
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
EP13193371.5A
Other languages
German (de)
English (en)
Other versions
EP2744129B1 (fr
Inventor
Nicolas Pouillon
Romain Fliedel
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Freebox SAS
Original Assignee
Freebox SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Freebox SAS filed Critical Freebox SAS
Publication of EP2744129A1 publication Critical patent/EP2744129A1/fr
Application granted granted Critical
Publication of EP2744129B1 publication Critical patent/EP2744129B1/fr
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/76—Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet
    • H04H60/78—Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet characterised by source locations or destination locations
    • H04H60/80—Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet characterised by source locations or destination locations characterised by transmission among terminal devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/76—Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet
    • H04H60/81—Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet characterised by the transmission system itself
    • H04H60/82—Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet characterised by the transmission system itself the transmission system being the Internet

Definitions

  • the invention relates to the distribution of multiple audio and / or video streams in the same house, house or apartment.
  • audio and / or video stream or “AV stream”
  • AV stream we mean content that can be audio only (music, radio %), only video (slideshow %) or both audio and video (television , cinema ).
  • the streams can be received live (conventional TV multicast) or can be present as recordings stored on one of the equipment present in the home or remote.
  • the present invention is mainly exposed in the context of an audio stream broadcast, it will be understood that this application is not limiting and that the invention applies equally well to the broadcasting of video or audio and video streams.
  • the selection by a user of the stream that he wishes to receive in the room where he is located requires the application of selection commands of source. These commands can be applied directly to the server, but this requires a movement of the user between the listening location and the server, or indirectly by a remote control, which may be a specific object or a smartphone with a remote control application.
  • the US 2006/0248557 A1 describes a control interface for grouping multiple multimedia devices into separate sets that can be associated with particular playlists .
  • This interface uses conventional means with movement keys, navigation in menus, etc. which in practice prove to be rather inconvenient to use.
  • the EP 1 998 566 A1 describes another technique, adapted to the transmission of broadcast multicast multimedia data by a wireless telecommunications network, where the incorporation of a marker to a packet header makes it possible to restrict the broadcast to a restricted set of selected recipients .
  • the object of the invention is to propose a simplified interface, implementing neither display nor movement keys for modifying the "assignment" parameters of the groups, that is to say the parameters defining the distribution of peripherals between separate groups to reproduce different respective AV streams.
  • the object of the invention is to provide the user with a simplified ergonomic interface, essentially by means of a single key dedicated to the aforementioned function of managing the assignment parameters.
  • the invention will provide a system for tracking the movement and the wishes of the user in different rooms of the house, with a quick reconfiguration of active devices.
  • the invention makes it possible to control these different actions directly from the active device, without complex interface and without the use of any dedicated or programmed remote control in a smartphone.
  • the invention proposes a system of the general type disclosed by the US 2006/0248557 A1 above, that is to say comprising the elements set forth in the preamble of claim 1.
  • the present invention is remarkable in that it comprises, to achieve the purposes indicated above, the elements set forth in the characterizing part of claim 1.
  • the Figure 1 schematically represents the AV flow distribution system according to the invention, installed in the same house (house or apartment) and organized around a centralized equipment 10 forming domestic server.
  • the AV streams are audio streams (music, radio %), but as we explained in the introduction this example is not limiting and the description below can be transposed to the broadcast of stream both audio and video (television, cinema %), or purely video stream (slideshow ).
  • the server equipment 10 is a box-type equipment (box) connected to an Internet access provider by an ADSL wired link or by an FTTH-type fiber optic link.
  • An example of such a box is the equipment distributed by the operator Free, Paris, France under the name Freebox HD or Freebox V6.
  • It is a multifunctional interface box comprising an ADSL / FTTH modem and implementing telephony, IP network (wired Ethernet or Wi-Fi wireless network), television and mobile (for example at the same time). using a femtocell technology).
  • the IP network makes it possible to connect the housing 10 to a plurality of active peripherals here of the "active speaker" type 14 arranged in different rooms of the dwelling, each of these speakers being connected to the box 10 by a link 16 which can be a wired link, via an Ethernet network installed in the home, or a link via CPL boxes (in-line carrier lines) for exchanging digital data via the pre-existing power lines 230 V-50 Hz by passing the information between the server 10 and the active speakers 14 by modulation of one or more carriers (an example of such a CPL box is the combined power supply / module CPL module) called Freeplug manufactured by the Free Internet Service Provider , Paris, France, which is intended to supply the box- type equipment of this access provider).
  • Another possibility of data exchange between the server 10 and the active speakers is a wireless transmission type Wi-Fi, if the house does not have too many obstacles to radio transmission.
  • the active device 14 may be in a form other than an active speaker, for example a box-type equipment, intended to be connected to a TV but knowing as well as restoring only audio and on which would be added the necessary control keys, or equipment equipped with a processor and a "line" audio output but without speaker, intended to be connected to a Hi-Fi system.
  • the server 10 can also be connected to a television 18 via a multimedia box 20, for example the equipment distributed by the operator Free under the name Freebox HD or Freebox Player : such a box integrates video decoder, hard disk, digital video recorder, and software for graphical display on the television and reception and processing of commands sent by the user, in particular for setting up the multimedia box 20 and the server 10.
  • a multimedia box 20 for example the equipment distributed by the operator Free under the name Freebox HD or Freebox Player : such a box integrates video decoder, hard disk, digital video recorder, and software for graphical display on the television and reception and processing of commands sent by the user, in particular for setting up the multimedia box 20 and the server 10.
  • the Figure 2 illustrates more precisely, in the form of functional blocks, the various elements implemented by the server equipment 10.
  • This may in particular comprise an interface 22 with the remote access provider to which it is connected by the ADSL / FTTH link 12, enabling it in particular to receive audio streams from outside, intended to be broadcast to the various occupants of the dwelling.
  • it may be an interfacing with a server local source of audio stream, for example via a web browser configured appropriately.
  • the generally limited capabilities of the technologies used do not allow a simultaneous broadcast multicast of all audio streams to the different active speakers.
  • the links between the server 10 and the active speakers 14 are in fact point-to-point links, with a single audio stream broadcast to each device at a given time, but functionally each speaker can have access to any of the streams potentially accessible audio, by an appropriate stream selection command addressed to the server.
  • Audio streams collected, downloaded and / or stored in memory are processed by a microcontroller 26 which delivers in parallel a number of audio streams 28 simultaneously generated and multiplexed in 30 for broadcast to the various active speakers on the broadcast links 16 by the via a Wi-Fi 32 or Ethernet 34 interface.
  • the Figure 3 illustrates in the form of a functional block diagram the internal structure of an active loudspeaker 14.
  • This is an "amplified loudspeaker" type apparatus devoid of an own audio source (at least for the implementation of the invention ), which receives the audio streams broadcast by the server 10 via the link 16.
  • the active speaker 14 comprises Wi-Fi reception circuits 36 or Ethernet 38 for collecting the audio streams for application to a microcontroller 40.
  • This microcontroller selects one of the audio streams received from those that are broadcast by the server, and applies this flux to an amplifier 42 for driving a loudspeaker 44.
  • the active speaker is further provided with a control interface comprising, as illustrated in more detail Figure 4 , a set 46 of control keys, in themselves conventional (volume +/-, speaker cut, playback / pause, accelerated forward / backward or previous / next track).
  • each active speaker is further provided with a specific control interface 48 comprising a change of assignment key 52, the role and operation of which will be explained later, in particular with reference to FIGS. Figures 6 and 7 , this key 52 being coupled with a colored indicator 54 may take a plurality of different colors each corresponding to one of the audio stream broadcast by the central server.
  • control interface of the active speaker is in a very simplified form, and thus allows an extremely convenient and intuitive use by any user.
  • This interface is in particular devoid of graphical interface with display, drop-down menu, etc.
  • the Figures 5a to 5d illustrate an example of evolution of the audio streaming patterns over time in a dwelling.
  • the dwelling is an apartment including a living room (SEJ), a kitchen (CUI), a terrace (TER), three bedrooms (CH1, CH2, CH3) and a bathroom (SDB).
  • SEJ living room
  • CLI kitchen
  • TER terrace
  • CH1, CH2, CH3 three bedrooms
  • SDB bathroom
  • each of these rooms is installed an active speaker 14 coupled to a single server equipment disposed at any point of the dwelling and simultaneously broadcasting a plurality of audio streams that can be received by each of the active speakers 14, all the audio streams being from the same equipment, namely the central server, unique for housing.
  • the server was previously set to select the audio streams to be broadcast, by any conventional appropriate means: by the remote control of the television 18 via the multimedia box 20, by a computer coupled to the server 10, by a smartphone on which was loaded a remote control application, etc.
  • this broadcast table is to answer the question "Which speakers broadcast which stream?" , knowing that it is possible to define several groups each corresponding to a broadcast of a different audio stream, and that a speaker belongs to at most only one group (a speaker only broadcasts a single stream, or no flow).
  • This broadcasting table is an evolutive table, modifiable over time according to the different selections made by the users at each active speaker.
  • a sound environment can also exist virtually, that is to say be broadcast by the server but not reproduced by any active speaker, as in the case of the Figure 5a where the parental sound is not present on any of the active speakers.
  • Sound environment changes are controlled by the illustrated interface Figure 4 , thanks in particular to the change of assignment key 52 which makes it possible to join an existing group or to create a new one, the colored indicator light 54 providing a return as to the current choice of the group.
  • pressing the "play" button 56 triggers the listening of a new sound environment, which is still not reproduced by any of the active speakers of the house.
  • pressing the key 52 makes it possible to successively explore all the groups present, that is to say those that are broadcast on at least one active speaker of the dwelling (block 60), with control of the indicator colored 54 which has a multicolored LED, each color corresponding to a different group.
  • the Figure 7 illustrates the main steps to determine a group to create or join.
  • the speaker After pressing the key 52 (block 70), it is determined whether the speaker is the only one of the current group (block 72). If this is the case, the group is deleted (block 74), possibly with a delay. In any case, the next group is selected (block 76): if this group has already been presented to the user (block 78) a new group is created (block 80). Then the active speaker joins either this new group created or the current group selected (block 82), and waits for a command from the user (block 84), including a press of the play button 56.
  • persistent groups that is to say groups that will survive the last constituent element and therefore can not be deleted.
  • These groups can, for example, correspond to a favorite radio station, a personal playlist , etc., so that the corresponding sound environment can be reached by pressing the key 52 without any new setting of the server.
  • the formation of persistent groups makes it possible to provide users with a quick way of recovering their favorite sound environment, and a particular color can be assigned to these groups for the colored indicator 54, which will be used systematically to designate them, thus making it possible to do without GUI for current use.

Abstract

L'équipement serveur (10) est interfacé à un site distant de fournisseur d'accès Internet, pour recevoir ou charger depuis ce site distant une pluralité de flux audio et/ou video qu'il diffuse concurremment vers les périphériques actifs (14) d'une même habitation. Une table de diffusion mémorise une configuration d'un ou plusieurs groupes réunissant chacun au moins un périphérique actif, ces groupes étant définis de manière dynamique, modifiable à volonté au cours du temps. Chaque périphérique actif comporte une interface de contrôle permettant, par simple appui sur une touche spécifique de changement d'assignation, de commencer la diffusion du flux audio et/ou video du groupe auquel appartient le périphérique, rejoindre un groupe existant auquel n'appartient pas le périphérique, créer un nouveau groupe, ou supprimer le groupe auquel appartient le périphérique.

Description

  • L'invention concerne la distribution de flux audio et/ou video multiples dans une même habitation, maison ou appartement.
  • Par "flux audio et/ou video" ou "flux AV", on entendra des contenus qui peuvent être uniquement audio (musique, radio...), uniquement video (diaporama...) ou à la fois audio et video (télévision, cinéma...). Les flux peuvent être reçus en direct (multidiffusion télévisuelle classique) ou peuvent être présents sous forme d'enregistrements stockés sur un des équipements présents dans l'habitation ou distants. Bien que la présente invention soit exposée principalement dans le cadre d'une diffusion de flux audio, on comprendra que cette application n'est pas limitative et que l'invention s'applique aussi bien à la diffusion de flux video ou audio et video.
  • La multiplication des appareils de reproduction AV, notamment de reproduction sonore, dans une même habitation fait en sorte que pratiquement chaque pièce de cette habitation est pourvue d'un tel appareil.
  • Dans cette habitation vivent plusieurs personnes (parents, enfants...) qui souhaitent disposer d'un contexte audiovisuel différent : écoute d'une station radio favorite, musiques correspondant aux gouts de chacun, visionnage d'une série télévisée, etc.
  • Il existe des solutions permettant, à partir d'un serveur centralisé (par exemple ordinateur et routeur Wi-Fi), de diffuser des flux AV en différents points d'une habitation, les flux étant transmis de ce serveur à des périphériques actifs placés dans chaque pièce et pourvus de moyens de réception, d'amplification et de reproduction sonore. Les périphériques actifs concernés par l'invention sont les équipements audiovisuels non mobiles tels que des téléviseurs, chaines Hi-Fi, etc.
  • Dans cette configuration, il y a dissociation entre, d'une part, la production des flux, centralisée dans un serveur unique, commun à l'habitation - ci-après désigné "équipement serveur domestique" ou "serveur" - et, d'autre part, la reproduction de ces flux, décentralisée dans chaque pièce de l'habitation avec des appareils généralement dépourvus de source propre - ci-après dénommés "périphériques actifs" -, recevant et diffusant le flux AV reçu du serveur.
  • La sélection par un utilisateur du flux qu'il souhaite recevoir dans la pièce où il se trouve requiert l'application de commandes de sélection de source. Ces commandes peuvent être appliquées directement sur le serveur, mais ceci nécessite un déplacement de l'utilisateur entre le lieu d'écoute et le serveur, ou bien indirectement par une télécommande, qui peut être un objet spécifique ou bien un smartphone doté d'une application de télécommande.
  • L'une des difficultés tient au fait que les périphériques actifs sont par nature peu mobiles, mais que leurs utilisateurs, à l'opposé, vivent dans plusieurs pièces de l'habitation et s'y déplacent beaucoup (chambre, séjour, cuisine, terrasse...). Ils peuvent souhaiter que leur contexte audiovisuel les suive, en disposant dans la pièce où ils se trouvent à un instant donné d'un contexte audiovisuel qui leur est personnel.
  • Avec les solutions proposées jusqu'à présent, l'utilisateur doit reprogrammer la diffusion du flux par le serveur afin de prendre en compte ce déplacement, ce qui devient vite très fastidieux.
  • Le US 2006/0248557 A1 décrit une interface de contrôle permettant de regrouper plusieurs dispositifs multimedia en ensembles distincts auxquels peuvent être associées des playlists particulières. Cette interface met toutefois en oeuvre des moyens conventionnels avec touches de déplacement, navigation dans des menus, etc. qui se révèlent en pratique assez peu commodes à utiliser.
  • Le EP 1 998 566 A1 décrit une autre technique, adaptée à la transmission de données multimedia multidiffusées en broadcast par un réseau de télécommunications sans fil, où l'incorporation d'un marqueur à un en-tête de paquet permet de restreindre la diffusion à un ensemble restreint de destinataires sélectionnés.
  • Le but de l'invention est de proposer une interface simplifiée, ne mettant en oeuvre ni afficheur ni touches de déplacement pour modifier les paramètres d'"assignation" des groupes, c'est-à-dire les paramètres définissant la répartition des périphériques entre des groupes distincts destinés à reproduire des flux AV respectifs différents.
  • Plus spécifiquement, le but de l'invention est de mettre à disposition de l'utilisateur une interface à ergonomie simplifiée, essentiellement au moyen d'une touche unique dédiée à la fonction précitée de gestion des paramètres d'assignation.
  • De cette manière, l'invention permettra de disposer d'un système permettant de suivre le déplacement et les souhaits de l'utilisateur dans les différentes pièces de l'habitation, avec une reconfiguration rapide des périphériques actifs.
  • Plus précisément, le but de l'invention est de pouvoir commander les actions suivantes de façon très simple et intuitive depuis n'importe lequel des périphériques actifs :
    • commencer à écouter un flux qui n'est écouté nulle part ailleurs dans l'habitation ;
    • rejoindre un flux déjà diffusé par un autre appareil de l'habitation ;
    • quitter le système de sonorisation, pour cesser toute diffusion sonore là où se trouve l'utilisateur ; ou encore
    • reprendre l'écoute d'un flux préféré, qui n'était plus diffusé.
  • Comme on le verra, l'invention permet de commander ces différentes actions directement depuis le périphérique actif, sans interface complexe et sans utilisation d'aucune télécommande dédiée ou programmée dans un smartphone.
  • Plus précisément, l'invention propose un système du type général divulgué par le US 2006/0248557 A1 précité, c'est-à-dire comprenant les éléments énoncés dans le préambule de la revendication 1.
  • La présente invention est remarquable en ce qu'elle comprend, pour atteindre les buts indiqués plus haut, les éléments énoncés dans la partie caractérisante de la revendication 1.
  • Les sous-revendications visent diverses formes de mise en oeuvre particulières, avantageuses.
  • On va maintenant décrire un exemple de mise en oeuvre du dispositif de l'invention, en référence aux dessins annexés où les mêmes références numériques désignent d'une figure à l'autre des éléments identiques ou fonctionnellement semblables.
    • La Figure 1 illustre de façon schématique le système de diffusion de flux AV selon l'invention.
    • La Figure 2 est un schéma par blocs fonctionnels de l'équipement serveur domestique du système de la Figure 1.
    • La Figure 3 est un schéma par blocs fonctionnels d'un des périphériques actifs du système de la Figure 1.
    • La Figure 4 illustre plus en détail l'interface de contrôle d'un périphérique actif de la Figure 3.
    • Les Figures 5a à 5d illustrent un exemple d'évolution des configurations de diffusion des flux AV au cours du temps dans un appartement.
    • Les Figures 6 et 7 sont des organigrammes illustrant les principales étapes de mise en oeuvre du système de l'invention, détaillant les étapes d'exploration des différents groupes de contexte audiovisuels matérialisés par différents groupes d'ambiances sonores, ainsi que la sélection, la création, la suppression et la réassignation de ces groupes d'ambiances.
  • La Figure 1 représente de façon schématique le système de distribution de flux AV selon l'invention, installé dans une même habitation (maison ou appartement) et organisé autour d'un équipement centralisé 10 formant serveur domestique.
  • En l'espèce, les flux AV sont des flux audio (musique, radio...), mais comme on l'a précisé en introduction cet exemple n'est pas limitatif et la description ci-dessous peut être transposée à la diffusion de flux à la fois audio et video (télévision, cinéma...), ou de flux purement video (diaporama...).
  • L'équipement serveur 10 est un équipement de type box (boitier) relié à un fournisseur d'accès Internet par une liaison filaire ADSL ou par une liaison en fibre optique de type FTTH. Un exemple de tel boitier est l'équipement distribué par l'opérateur Free, Paris, France sous la dénomination Freebox HD ou Freebox V6. Il s'agit d'un boitier d'interfaçage multifonction comportant un modem ADSL/FTTH et mettant en oeuvre des fonctions de téléphonie, réseau IP (par réseau filaire Ethernet ou sans fil Wi-Fi), télévision et mobile (par exemple à l'aide d'une technologie de type femtocell).
  • En particulier, le réseau IP permet de connecter le boitier 10 à une pluralité de périphériques actifs ici de type "enceintes actives" 14 disposées dans différentes pièces de l'habitation, chacune de ces enceintes étant reliée au boitier 10 par une liaison 16 qui peut être une liaison filaire, via un réseau Ethernet installé dans l'habitation, ou une liaison par l'intermédiaire de boitiers CPL (courants porteurs en ligne) permettant d'échanger des données numériques via les lignes préexistantes d'alimentation secteur 230 V-50 Hz en faisant transiter les informations entre le serveur 10 et les enceintes actives 14 par modulation d'une ou plusieurs porteuses (un exemple d'un tel boitier CPL est le bloc combiné alimentation/module CPL dénommé Freeplug fabriqué par le fournisseur d'accès Internet Free, Paris, France, qui est destiné à alimenter les équipements de type box de ce fournisseur d'accès). Une autre possibilité encore d'échange de données entre le serveur 10 et les enceintes actives est une transmission sans fil de type Wi-Fi, si l'habitation ne comporte pas trop d'obstacles à la transmission radio.
  • On notera que le périphérique actif 14 peut se présenter sous une autre forme qu'une enceinte active, par exemple un équipement de type box, destiné à être connecté à un téléviseur mais sachant aussi bien restituer seulement de l'audio et sur lequel seraient ajoutées les touches de commande nécessaires, ou encore un équipement muni d'un processeur et d'une sortie audio "ligne" mais sans enceinte, destiné à être connecté à une chaine Hi-Fi.
  • Le serveur 10 peut par ailleurs être relié à un téléviseur 18 par l'intermédiaire d'un boitier multimedia 20, par exemple l'équipement distribué par l'opérateur Free sous la dénomination Freebox HD ou Freebox Player : un tel boitier intègre décodeur video, disque dur, magnétoscope numérique, et des logiciels d'affichage graphique sur le téléviseur et de réception et de traitement de commandes envoyées par l'utilisateur, notamment pour le paramétrage du boitier multimedia 20 et du serveur 10.
  • La Figure 2 illustre plus précisément, sous forme de blocs fonctionnels, les différents éléments mis en oeuvre par l'équipement serveur 10.
  • Celui-ci peut en particulier comprendre une interface 22 avec le fournisseur d'accès distant auquel il est relié par la liaison ADSL/FTTH 12, lui permettant notamment de recevoir des flux audio de provenance extérieure, destinés à être diffusés aux différents occupants de l'habitation. En variante ou en complément, il peut s'agir d'un interfaçage avec un serveur local formant source de flux audio, par exemple via un navigateur web configuré de façon appropriée.
  • Ces flux audio pourront comprendre :
    • des flux de streaming diffusés en continu, qu'il s'agisse de flux musicaux ou de stations radio Internet ;
    • des flux téléchargés, par exemple de type podcast, qui pourront être diffusés une fois qu'ils auront été complètement chargés et mémorisés ; ou encore
    • des fichiers audio conservés en mémoire, par exemple sur un disque dur 24 (intégré au serveur ou déporté dans le boitier multimedia 20), chaque utilisateur pouvant ainsi composer en fonction de ses gouts propres des playlists musicales répertoriant différents morceaux conservés en mémoire.
  • Concrètement, les capacités généralement limitées des technologies utilisées (Wi-Fi, etc.) ne permettent pas une multidiffusion simultanée en broadcast de tous les flux audio vers les différentes enceintes actives. Les liaisons entre le serveur 10 et les enceintes actives 14 sont en fait des liaisons point-à-point, avec un seul flux audio diffusé à chaque périphérique à un instant donné, mais fonctionnellement chaque enceinte peut avoir accès à n'importe lequel des flux audio potentiellement accessibles, par une commande appropriée de sélection de flux adressée au serveur.
  • Les flux audio recueillis, téléchargés et/ou conservés en mémoire sont traités par un microcontrôleur 26 qui délivre parallèlement un certain nombre de flux audio 28 générés simultanément et multiplexés en 30 pour diffusion vers les différentes enceintes actives sur les liaisons de diffusion 16 par l'intermédiaire d'une interface Wi-Fi 32 ou Ethernet 34.
  • La Figure 3 illustre sous forme de schéma par blocs fonctionnels la structure interne d'une enceinte active 14. Il s'agit d'un appareil de type "enceinte amplifiée" dépourvu de source audio propre (tout au moins pour la mise en oeuvre de l'invention), qui reçoit les flux audio diffusés par le serveur 10 via la liaison 16. L'enceinte active 14 comprend des circuits de réception Wi-Fi 36 ou Ethernet 38 permettant de recueillir les flux audio pour les appliquer à un microcontrôleur 40. Ce microcontrôleur sélectionne l'un des flux audio reçus parmi ceux qui sont diffusés par le serveur, et applique ce flux à un amplificateur 42 permettant piloter un haut-parleur 44.
  • L'enceinte active est par ailleurs pourvue d'une interface de contrôle comprenant, comme illustré plus en détail Figure 4, un ensemble 46 de touches de commande, en elles-mêmes conventionnelles (volume +/-, coupure du haut-parleur, lecture/mise en pause, lecture accélérée avant/arrière ou plage précédente/suivante).
  • De façon caractéristique de l'invention, chaque enceinte active est en outre pourvue d'une interface de contrôle spécifique 48 comprenant une touche 52 de changement d'assignation, dont on exposera plus loin le rôle et le fonctionnement, notamment en référence aux Figures 6 et 7, cette touche 52 étant doublée d'un indicateur coloré 54 susceptible de prendre une pluralité de couleurs différentes correspondant chacune à l'un des flux audio diffusés par le serveur central.
  • La touche 52, en combinaison avec la touche 56 de lecture/pause de l'interface conventionnelle 46, permet de commander diverses fonctions, à savoir :
    • début d'écoute d'un flux audio qui n'est écouté nulle part ailleurs dans l'habitation ;
    • début d'écoute d'un flux audio déjà diffusé par une autre enceinte active dans l'habitation ;
    • arrêt, pour cesser toute diffusion sonore et supprimer l'ambiance sonore correspondante ; ou encore
    • reprise de l'écoute d'un flux audio préféré, qui n'était plus diffusé.
  • On notera que l'interface de commande de l'enceinte active se présente sous une forme très simplifiée, et permet donc une utilisation extrêmement commode et intuitive par n'importe quel utilisateur. Cette interface est en particulier dépourvue d'interface graphique avec afficheur, menu déroulant, etc.
  • Les Figures 5a à 5d illustrent un exemple d'évolution des configurations de diffusion des flux audio au cours du temps dans une habitation.
  • Dans cet exemple, l'habitation est un appartement comprenant un séjour (SEJ), une cuisine (CUI), une terrasse (TER), trois chambres (CH1, CH2, CH3) et une salle de bains (SDB).
  • Dans chacune de ces pièces est installée une enceinte active 14 couplée à un unique équipement serveur disposé à un endroit quelconque de l'habitation et diffusant simultanément une pluralité de flux audio susceptibles d'être reçus par chacune des enceintes actives 14, tous les flux audio étant issus du même équipement, à savoir le serveur central, unique pour l'habitation.
  • Le serveur a été au préalable paramétré pour sélectionner les flux audio à diffuser, par tout moyen approprié conventionnel : par la télécommande du téléviseur 18 via le boitier multimedia 20, par un ordinateur couplé au serveur 10, par un smartphone sur lequel a été chargée une application de télécommande, etc.
  • Dans la configuration illustrée Figure 5a, correspondant par exemple à une situation en fin d'après-midi, l'appartement est seulement utilisé par les enfants, qui ont mis leur ambiance sonore préférée dans l'ensemble des pièces à vivre (SEJ, CUI) et dans leurs chambres (CH2, CH3).
  • Cette configuration est définie et mémorisée par le serveur dans une table de diffusion définissant, en l'espèce, un unique groupe de diffusion, à savoir un groupe A = {SEJ, CUI, CH2, CH3}.
  • La fonction de cette table de diffusion est de répondre à la question "Quelles enceintes diffusent quel flux ?", sachant qu'il est possible de définir plusieurs groupes correspondant chacun à une diffusion d'un flux audio différent, et qu'une enceinte n'appartient qu'à au plus un seul groupe (une enceinte ne diffuse qu'un seul flux, ou aucun flux).
  • Cette table de diffusion est une table évolutive, modifiable au cours du temps en fonction des différentes sélections opérées par les utilisateurs au niveau de chaque enceinte active.
  • Ainsi, par exemple en début de soirée la configuration se modifie (Figure 5b) avec le retour des parents qui prennent possession du séjour SEJ et de la cuisine CUI, les enfants restant dans leurs chambres CH2 et CH3, parents et enfants ayant chacun leur ambiance sonore.
  • De ce fait, le groupe de diffusion A se scinde en deux groupes B et C : B = {SEJ, CUI} et C = {CH2, CH3}.
  • Une autre modification (Figure 5c) peut intervenir pendant le diner, tout le monde se retrouvant sur la terrasse TER, où l'ambiance sonore parentale est préférée, la cuisine cessant d'être sonorisée mais l'ambiance sonore parentale s'étendant à la salle de bains SDB et à la chambre des parents CH1.
  • Dans cette nouvelle configuration, la liste précédente B se modifie pour devenir D = {SEJ, TER, CH1, SDB}, la liste C = {CH2, CH3} restant inchangée.
  • Pendant le reste de la soirée (Figure 5d) les enfants profitent de la terrasse TER, et les parents regardent la télévision dans le séjour, donc coupent l'ambiance sonore dans cette pièce. La liste précédente D devient E = {CH1, SDB} (ambiance sonore parentale réduite à la chambre des parents et à la salle de bains) et la liste C devient F = {CH2, CH3, TER} (ambiance sonore des enfants étendue à la terrasse).
  • On voit ainsi que les ambiances sonores, qui peuvent être multiples dans une même habitation, se déplacent au fil du temps : ainsi, dans l'exemple décrit l'ambiance sonore parentale commence dans le séjour et la cuisine pour finir dans la salle de bains et la chambre.
  • Une ambiance sonore peut également exister virtuellement, c'est-à-dire être diffusée par le serveur mais en n'étant reproduite par aucune enceinte active, comme dans le cas de la Figure 5a où l'ambiance sonore parentale n'est présente sur aucune des enceintes actives.
  • On va maintenant décrire plus en détail, en référence aux Figures 6 et 7, les principales étapes de mise en oeuvre de l'invention, avec l'exploration des différents groupes d'ambiance sonore ainsi que la sélection, la création, la suppression et la réassignation de ces groupes d'ambiance.
  • Les changements d'ambiance sonore sont contrôlés par l'interface illustrée Figure 4, grâce notamment à la touche 52 de changement d'assignation qui permet de rejoindre un groupe existant ou d'en créer un nouveau, le témoin lumineux coloré 54 fournissant un retour quant au choix actuel du groupe. À défaut d'un choix de groupe préalable, l'appui sur le bouton "lecture" 56 déclenche l'écoute d'une ambiance sonore nouvelle, qui n'est encore reproduite par aucune des enceintes actives de l'habitation. Comme illustré Figure 6, l'appui sur la touche 52 permet d'explorer successivement tous les groupes présents, c'est-à-dire ceux qui sont diffusés sur au moins une enceinte active de l'habitation (bloc 60), avec pilotage de l'indicateur coloré 54 qui comporte une LED multicolore, chaque couleur correspondant à un groupe différent.
  • Si l'utilisateur atteint le dernier groupe disponible (bloc 62), alors l'enceinte rejoint ce groupe (bloc 66). Dans le cas contraire, c'est un autre groupe qui est rejoint (bloc 64).
  • La Figure 7 illustre les principales étapes permettant de déterminer un groupe à créer ou à rejoindre.
  • Après un appui sur la touche 52 (bloc 70), on détermine si l'enceinte est la seule du groupe courant (bloc 72). Si tel est le cas, le groupe est supprimé (bloc 74), éventuellement avec une temporisation. Dans tous les cas, le groupe suivant est sélectionné (bloc 76) : si ce groupe a déjà été présenté à l'utilisateur (bloc 78) un nouveau groupe est créé (bloc 80). Ensuite l'enceinte active rejoint soit ce nouveau groupe créé, soit le groupe courant sélectionné (bloc 82), et se met en attente d'une commande de l'utilisateur (bloc 84), notamment d'un appui sur le bouton de lecture 56.
  • On notera que, lors du paramétrage initial du serveur, il est possible et même souvent souhaitable de créer des "groupes persistants", c'est-à-dire des groupes qui survivront au dernier élément constituant et qui ne peuvent donc pas être supprimés. Ces groupes peuvent par exemple correspondre à une station de radio préférée, une playlist personnelle, etc., de sorte que l'ambiance sonore correspondante puisse être rejointe par appui sur la touche 52 sans nouveau paramétrage du serveur. La constitution de groupes persistants permet de fournir aux utilisateurs un moyen rapide de retrouver leur ambiance sonore préférée, et une couleur particulière peut être affectée à ces groupes pour l'indicateur coloré 54, qui sera utilisé systématiquement pour les désigner, permettant ainsi de se passer d'interface graphique pour l'utilisation courante.
  • Le fait de pouvoir se passer d'interface de commande externe ou de reparamétrage est un aspect important de l'invention, dans la mesure où l'ambiance sonore d'une habitation n'est pas une finalité en soi, mais un simple confort. Il est donc primordial que l'utilisateur puisse obtenir la configuration qu'il attend en un temps très court et de la manière la plus simple, sans accessoire supplémentaire ni navigation dans une interface graphique.

Claims (6)

  1. Un système de distribution de flux audio et/ou video, AV, comprenant :
    - une pluralité de périphériques actifs (14), comprenant chacun :
    · des moyens (36, 38) de réception d'une pluralité de canaux de diffusion d'une pluralité correspondante de flux AV ;
    · des moyens de commande (40, 46, 48), comprenant des moyens de sélection de l'un des canaux de ladite pluralité de canaux ;
    · une interface (46, 48) de contrôle de la restitution du flux AV ; et
    · des moyens de restitution audio et/ou vidéo d'amplification (42, 44) du flux AV du canal sélectionné par les moyens de commande,
    - un équipement serveur domestique (10) comprenant :
    · des moyens (22, 24, 26) de réception et/ou de stockage d'une pluralité de flux AV ; et
    · des moyens (30, 32, 34) de diffusion vers les périphériques actifs desdits flux AV sur une pluralité de canaux respectifs,
    cet équipement serveur (10) mémorisant une table de diffusion définissant une configuration d'un ou plusieurs groupes réunissant chacun au moins un périphérique actif, un périphérique n'appartenant qu'à au plus un seul groupe, chaque groupe étant associé à un flux AV différent et les groupes étant définis de manière dynamique, modifiable à volonté au cours du temps,
    caractérisé en ce que les moyens de commande de chaque périphérique actif (14) comportent :
    · une interface de contrôle de la restitution du flux AV, comprenant une touche spécifique (52) de changement d'assignation ;
    · des moyens d'accès à la table de diffusion mémorisée par l'équipement serveur, de manière à explorer les groupes existants par sélection des canaux correspondant aux flux AV répertoriés dans la table de diffusion ; et
    · des moyens pour, sélectivement :
    a) commencer la diffusion du flux AV du groupe auquel appartient le périphérique,
    ou, par envoi à l'équipement serveur d'une commande correspondante de reconfiguration des groupes apte à effectuer une mise à jour de la table de diffusion, pour :
    b) rejoindre un groupe existant auquel n'appartient pas le périphérique, par un ou plusieurs appuis sur ladite touche spécifique (52) de changement d'assignation jusqu'à sélection du canal correspondant audit groupe existant ;
    c) créer un nouveau groupe, par un ou plusieurs appuis sur ladite touche spécifique (52) de changement d'assignation après que tous les canaux des groupes existants ont été successivement sélectionnés, ou
    d) supprimer le groupe auquel appartient le périphérique, par appui sur ladite touche spécifique (52) de changement d'assignation si le groupe auquel appartient le périphérique est un groupe ne contenant que ce seul périphérique.
  2. Le système de la revendication 1, dans lequel les moyens pour d) supprimer le groupe auquel appartient le périphérique sont des moyens activables par appui sur une touche de mise en pause (56) de l'interface de contrôle (46, 48), avec attente d'une temporisation suivant cet appui sans autre action extérieure d'un utilisateur sur l'interface de contrôle.
  3. Le système de la revendication 1, dans lequel les moyens pour a) commencer la diffusion du flux AV du groupe auquel appartient le périphérique sont des moyens activables par appui sur une touche de lecture (56) de l'interface de contrôle.
  4. Le système de la revendication 1, dans lequel chaque périphérique actif comprend des moyens de visualisation (54) du canal de diffusion sélectionné courant.
  5. Le système de la revendication 4, dans lequel les moyens de visualisation (54) comprennent un indicateur coloré apte à produire une couleur différente pour chaque canal de diffusion sélectionné différent.
  6. Le système de la revendication 1, dans lequel l'équipement serveur domestique comprend en outre des moyens (22) d'interfaçage à un serveur distant ou local d'accès à ladite pluralité de flux AV.
EP13193371.5A 2012-12-11 2013-11-18 Système de distribution et de sélection de flux audio et/ou video multiples vers des périphériques actifs à partir d'un équipement serveur domestique Active EP2744129B1 (fr)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
FR1261861A FR2999365B1 (fr) 2012-12-11 2012-12-11 Systeme de distribution et de selection de flux audio et/ou video multiples vers des peripheriques actifs a partir d'un equipement serveur domestique

Publications (2)

Publication Number Publication Date
EP2744129A1 true EP2744129A1 (fr) 2014-06-18
EP2744129B1 EP2744129B1 (fr) 2019-01-09

Family

ID=47754746

Family Applications (1)

Application Number Title Priority Date Filing Date
EP13193371.5A Active EP2744129B1 (fr) 2012-12-11 2013-11-18 Système de distribution et de sélection de flux audio et/ou video multiples vers des périphériques actifs à partir d'un équipement serveur domestique

Country Status (3)

Country Link
EP (1) EP2744129B1 (fr)
ES (1) ES2719695T3 (fr)
FR (1) FR2999365B1 (fr)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060248557A1 (en) 2005-04-01 2006-11-02 Vulcan Inc. Interface for controlling device groups
US20070206590A1 (en) * 2006-02-10 2007-09-06 Samsung Electronics Co., Ltd. Apparatus and method for transmitting broadcast data in digital broadcasting service system
EP1998566A1 (fr) 2006-09-13 2008-12-03 KDDI Corporation Dispositif et procédé de transmission de contenus de radiodiffusion

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060248557A1 (en) 2005-04-01 2006-11-02 Vulcan Inc. Interface for controlling device groups
US20070206590A1 (en) * 2006-02-10 2007-09-06 Samsung Electronics Co., Ltd. Apparatus and method for transmitting broadcast data in digital broadcasting service system
EP1998566A1 (fr) 2006-09-13 2008-12-03 KDDI Corporation Dispositif et procédé de transmission de contenus de radiodiffusion

Also Published As

Publication number Publication date
EP2744129B1 (fr) 2019-01-09
FR2999365A1 (fr) 2014-06-13
FR2999365B1 (fr) 2018-04-27
ES2719695T3 (es) 2019-07-12

Similar Documents

Publication Publication Date Title
US11467799B2 (en) Guest access to a media playback system
US7925723B1 (en) Collaborative configuration of a media environment
CN104583998B (zh) 用于提供来宾访问的系统、方法、装置和制品
JP6214676B2 (ja) メディア視聴ソーシャルインタフェースのためのシステム及び方法
FR2898702A1 (fr) Dispositif, procede et programme d'entree de mot-cle de recherche
CN104584581B (zh) 提供红外线信号的方法和装置
WO2006068947A2 (fr) Systeme fournissant une reaction d'audience repartie a une emission
CN108235140A (zh) 音频内容试听
EP3826316B1 (fr) Équipement décodeur générant un ordre d'un profil audio à appliquer
WO2014089077A1 (fr) Accès à un contenu multimédia d'une source mobile
EP4059224A1 (fr) Files d'attente de lecture pour expériences partagées
EP2744129B1 (fr) Système de distribution et de sélection de flux audio et/ou video multiples vers des périphériques actifs à partir d'un équipement serveur domestique
US20220360868A1 (en) Content Playback Reminders
CA3176129C (fr) Protection de contenu multimedia
EP3889762B1 (fr) Procédé de gestion d'au moins un groupe d'equipement de restitution audio
EP4016938B1 (fr) Procédé de synchronisation et système mettant en oeuvre ledit procédé
US20210329323A1 (en) Counterpart Media Items
FR3114677A1 (fr) Procédé de restitution sonore
FR3109047A1 (fr) Procédé d’application de jeu de paramètres d’égalisation
EP3001412A1 (fr) Système de restitution sonore avec casques audio dotés de processeurs sonores, composants d'un tel système et procédé associé
FR3011427A1 (fr) Procede de transmission dynamique de donnees d'information relatives a un programme audio et/ou video
FR2938145A1 (fr) Traitement d'une requete destinee a un serveur interactif de guide des programmes, equipement de reception et serveur interactif associes
FR2936922A1 (fr) Selection d'un flux de donnees
FR2876239A1 (fr) Procede et systeme de constitution automatique d'un flux audiovisuel personnalise a partir de sources multiples

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20131118

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

R17P Request for examination filed (corrected)

Effective date: 20141216

RBV Designated contracting states (corrected)

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20170908

GRAP Despatch of communication of intention to grant a patent

Free format text: ORIGINAL CODE: EPIDOSNIGR1

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: GRANT OF PATENT IS INTENDED

INTG Intention to grant announced

Effective date: 20180719

GRAS Grant fee paid

Free format text: ORIGINAL CODE: EPIDOSNIGR3

GRAA (expected) grant

Free format text: ORIGINAL CODE: 0009210

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE PATENT HAS BEEN GRANTED

AK Designated contracting states

Kind code of ref document: B1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

REG Reference to a national code

Ref country code: GB

Ref legal event code: FG4D

Free format text: NOT ENGLISH

REG Reference to a national code

Ref country code: CH

Ref legal event code: EP

Ref country code: AT

Ref legal event code: REF

Ref document number: 1088643

Country of ref document: AT

Kind code of ref document: T

Effective date: 20190115

REG Reference to a national code

Ref country code: DE

Ref legal event code: R096

Ref document number: 602013049483

Country of ref document: DE

REG Reference to a national code

Ref country code: IE

Ref legal event code: FG4D

Free format text: LANGUAGE OF EP DOCUMENT: FRENCH

REG Reference to a national code

Ref country code: CH

Ref legal event code: NV

Representative=s name: VALIPAT S.A. C/O BOVARD SA NEUCHATEL, CH

REG Reference to a national code

Ref country code: NL

Ref legal event code: FP

REG Reference to a national code

Ref country code: LT

Ref legal event code: MG4D

REG Reference to a national code

Ref country code: ES

Ref legal event code: FG2A

Ref document number: 2719695

Country of ref document: ES

Kind code of ref document: T3

Effective date: 20190712

REG Reference to a national code

Ref country code: AT

Ref legal event code: MK05

Ref document number: 1088643

Country of ref document: AT

Kind code of ref document: T

Effective date: 20190109

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: PT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190509

Ref country code: FI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: PL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: LT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: SE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: NO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190409

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: HR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: GR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190410

Ref country code: LV

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: IS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190509

Ref country code: BG

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190409

Ref country code: RS

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

REG Reference to a national code

Ref country code: DE

Ref legal event code: R097

Ref document number: 602013049483

Country of ref document: DE

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CZ

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: EE

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: AT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: RO

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: DK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: AL

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: SK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

PLBE No opposition filed within time limit

Free format text: ORIGINAL CODE: 0009261

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: NO OPPOSITION FILED WITHIN TIME LIMIT

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SM

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

26N No opposition filed

Effective date: 20191010

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: SI

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: TR

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MC

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: LU

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20191118

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: IE

Free format text: LAPSE BECAUSE OF NON-PAYMENT OF DUE FEES

Effective date: 20191118

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: CY

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MT

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

Ref country code: HU

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT; INVALID AB INITIO

Effective date: 20131118

PG25 Lapsed in a contracting state [announced via postgrant information from national office to epo]

Ref country code: MK

Free format text: LAPSE BECAUSE OF FAILURE TO SUBMIT A TRANSLATION OF THE DESCRIPTION OR TO PAY THE FEE WITHIN THE PRESCRIBED TIME-LIMIT

Effective date: 20190109

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: BE

Payment date: 20221118

Year of fee payment: 10

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: NL

Payment date: 20231122

Year of fee payment: 11

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: GB

Payment date: 20231123

Year of fee payment: 11

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: ES

Payment date: 20231215

Year of fee payment: 11

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: IT

Payment date: 20231130

Year of fee payment: 11

Ref country code: FR

Payment date: 20231109

Year of fee payment: 11

Ref country code: DE

Payment date: 20231120

Year of fee payment: 11

Ref country code: CH

Payment date: 20231201

Year of fee payment: 11

PGFP Annual fee paid to national office [announced via postgrant information from national office to epo]

Ref country code: BE

Payment date: 20231121

Year of fee payment: 11