DE102009059868A1

DE102009059868A1 - Method for providing graphical user-interface for stereo-system in vehicle, involves changing partial quantity such that new displayed partial quantity lies within and/or hierarchically below hierarchical level of former partial quantity

Info

Publication number: DE102009059868A1
Application number: DE200910059868
Authority: DE
Inventors: Christoph Dr. 38102 Wäller; Michael 30167 Mischke
Original assignee: Volkswagen AG
Current assignee: Volkswagen AG
Priority date: 2009-12-21
Filing date: 2009-12-21
Publication date: 2011-06-22

Abstract

The method involves displaying a partial quantity (20a) of hierarchical structured entire information on a display surface (10), where the partial quantity lies in a hierarchical level. A receiving unit (12) is activated for receiving of speech inputs by an operating process, which defines an area (21) on the surface. The former partial quantity is changed such that a new displayed partial quantity (20b) lies within and/or hierarchically below the hierarchical level of the displayed former partial quantity, using the speech inputs. The process is implemented on a contact sensitive surface. An independent claim is also included for a device for providing the user-interface.

Description

Die vorliegende Erfindung betrifft ein Verfahren zum Bereitstellen einer Benutzerschnittstelle, bei dem eine in einer Hierarchieebene liegende Teilmenge einer hierarchisch strukturierten Gesamtinformation auf einer Anzeigefläche angezeigt wird und durch einen ersten Bedienvorgang, der zumindest einen Bereich auf der Anzeigefläche definiert und der sich auf die angezeigte Teilmenge der Gesamtinformation bezieht, die angezeigte Teilmenge der Gesamtinformation so verändert wird, dass eine neu angezeigte Teilmenge innerhalb und/oder hierarchisch unterhalb der Hierarchieebene der ursprünglich angezeigten Teilmenge liegt. Die Erfindung betrifft ferner eine dazugehörige Vorrichtung zum Bereitstellen einer solchen Benutzerschnittstelle.The present invention relates to a method for providing a user interface in which a subset of hierarchically structured overall information lying in a hierarchical level is displayed on a display area and is defined by a first operating procedure which defines at least one area on the display area and which relates to the displayed subset of Referring to total information, the displayed subset of the total information is changed so that a newly displayed subset within and / or hierarchically below the hierarchy level of the originally displayed subset. The invention further relates to an associated apparatus for providing such a user interface.

Die Vorrichtung zum Bereitstellen einer Benutzerschnittstelle ist insbesondere Teil eines Fahrzeugs. Sie kann jedoch auch in Verbindung mit anderen elektronischen Geräten, insbesondere Geräten der Unterhaltungselektronik oder Spielkonsolen, eingesetzt werden.The device for providing a user interface is in particular part of a vehicle. However, it can also be used in conjunction with other electronic devices, in particular consumer electronics or game consoles.

Aufgrund der Zunahme elektronischer Einrichtungen im Fahrzeug ist es nicht mehr möglich, für alle Einrichtungen separate mechanische Bedienelemente vorzusehen. Deshalb werden in Fahrzeugen vielfach Multifunktionsbediensysteme eingesetzt, um die Einrichtungen mittels weniger Bedienelemente zu steuern. Derartige Multifunktionsbediensysteme umfassen üblicherweise eine Multifunktionsanzeige sowie eine zentrale Eingabevorrichtung. Die zentrale Eingabevorrichtung kann beispielsweise einen Drehdrückschalter umfassen, mit welchem Schaltflächen, die mittels der Anzeigevorrichtung angezeigt werden, betätigt werden können.Due to the increase in electronic devices in the vehicle, it is no longer possible to provide separate mechanical controls for all devices. For this reason, multifunctional operating systems are often used in vehicles in order to control the devices by means of fewer operating elements. Such multifunction control systems typically include a multifunction display as well as a central input device. The central input device may, for example, comprise a rotary pushbutton with which buttons displayed by means of the display device can be actuated.

Alternativ oder zusätzlich kann die Anzeigevorrichtung selbst mit einer berührungsempfindlichen Oberfläche ausgestattet sein und auf diese Weise einen so genannten Touchscreen zur Verfügung zu stellen. Bei einem solchen Touchscreen erfolgt die Bedienung dadurch, dass der Nutzer mit einem Betätigungselement, wie beispielsweise einem Stift oder seiner Fingerspitze, den Touchscreen berührt. Die Position der Berührung wird erfasst, ausgewertet und einem Bedienvorgang zugeordnet.Alternatively or additionally, the display device itself can be equipped with a touch-sensitive surface and in this way provide a so-called touchscreen. In such a touch screen, the operation is performed by the user touching the touch screen with an actuator such as a pen or his fingertip. The position of the touch is detected, evaluated and assigned to an operating procedure.

Wenn ein Touchscreen als Eingabevorrichtung verwendet wird, ist es bekannt, auf der Anzeigefläche Schaltflächen anzuzeigen, die durch eine Berührung mit einem Betätigungselement betätigt werden können. Durch derartige Schaltflächen können mechanische Schalter ersetzt werden. Es ist des Weiteren bekannt, derartige Schaltflächen so auszugestalten, dass verschiedene Eingabesignale in Abhängigkeit davon erzeugt werden, wie lange die Schaltfläche berührt wird. Beispielsweise kann bei einem kurzen Antippen der Schaltfläche ein anderes Eingangssignal erzeugt werden als bei einer längeren Berührung der Schaltfläche (einem sogenannten Longpress).When a touch screen is used as the input device, it is known to display on the display surface buttons that can be actuated by contact with an actuator. Through such buttons mechanical switches can be replaced. It is further known to design such buttons to generate various input signals depending on how long the button is touched. For example, a different input signal can be generated with a short tap of the button than with a longer touch of the button (a so-called long press).

Neben der Differenzierung eines Eingabesignals durch die Berührdauer sind auch Verfahren bekannt, bei denen durch die Positionierung der Berührpunkte unterschiedliche Eingabesignale erzeugt werden können. In der DE 11 2007 000 278 T5 ist beispielsweise ein Gestensteuerungsverfahren für eine graphische Benutzerschnittstelle beschrieben, bei dem ein „Akkord” von ein oder mehreren Punkten innerhalb eines Abtastgebiets detektiert werden, wobei bestimmten Anordnungen der Punkte innerhalb des Abtastgebiets ein dafür spezifischer Steuerbefehl zugeordnet wird. Ein solcher „Akkord” wird z. B. durch das Muster oder eine Geste mehrerer Finger eines Nutzers erzeugt.In addition to the differentiation of an input signal by the contact duration, methods are also known in which different input signals can be generated by the positioning of the contact points. In the DE 11 2007 000 278 T5 For example, a gesture control method for a graphical user interface is described in which a "chord" of one or more points within a scan area is detected, with particular arrangements of the points within the scan area being assigned a control command specific thereto. Such a "chord" is z. B. generated by the pattern or a gesture of multiple fingers of a user.

In der WO 2008/083360 A1 ist ein Verfahren zur Gestensteuerung von Geräten mit einer berührungsempfindlichen Anzeigefläche beschrieben, das zum intuitiven Editieren von Dateien in einem Computersystem geeignet ist. Dabei werden insbesondere graphische Anzeigeinhalte durch Mehrfingergesten ausgewählt oder verschoben und beispielsweise durch eine Mehrfingerdrehung auf der Anzeigefläche eine Funktion zum freien Drehen eines Bildes oder durch Spreizen zweier Finger eine Zoom-Funktion bereitgestellt.In the WO 2008/083360 A1 For example, there is described a gesture control method of touch sensitive display devices suitable for intuitively editing files in a computer system. In particular, graphic display contents are selected or shifted by multi-finger gestures and, for example, a multi-finger rotation on the display surface provides a function for freely rotating an image or by spreading two fingers a zoom function.

Die DE 20 2008 000 261 U1 beschreibt ein Mehrfachberührungs-Datenfusionssystem, das mehrfache Berührungseingaben etwa zur selben Zeit erfassen und mit Daten von anderen Eingabevorrichtungen kombinieren kann. Dabei ist vorgesehen, durch gemeinsame Stimmeingaben und Mehrfachberührungen den Bedienkomfort zu verbessern, indem Stimmeingaben auf Aktionen angewandt werden, die durch manuelle Eingaben schlecht bedienbar sind und umgekehrt.The DE 20 2008 000 261 U1 describes a multi-touch data fusion system that can capture multiple touch inputs at about the same time and combine with data from other input devices. It is intended to improve the ease of use by common voice inputs and multiple touches by voice inputs are applied to actions that are difficult to operate by manual inputs and vice versa.

Für eine Benutzerschnittstelle und eine Bedienvorrichtung, die in einem Fahrzeug untergebracht sind, ergeben sich sehr spezielle Anforderungen. Die für die Bedienung erforderliche Informationsaufnahme erfolgt im Fahrzeug unter anderem durch den Fahrer. Die Information sollte somit im Fahrzeug so dargestellt werden, dass die Informationsaufnahme durch den Fahrer nicht zu einer Ablenkung während der Fahrt führt. Die dargestellten Informationen sollten daher intuitiv und schnell vom Fahrer erfassbar sein, so dass dieser für die Informationsaufnahme nur sehr kurzzeitig den Blick vom Fahrgeschehen abwenden muss. Des Weiteren sollte der durch den Nutzer ausgeführte Betätigungsvorgang so schnell wie möglich ausführbar sein.For a user interface and an operating device, which are housed in a vehicle, there are very special requirements. The information required for the operation of information takes place in the vehicle, inter alia, by the driver. The information should thus be displayed in the vehicle so that the information recording by the driver does not lead to a distraction while driving. The information presented should therefore be intuitively and quickly detectable by the driver, so that he only has to take his eyes off the driving experience for a very short time for the information recording. Furthermore, the operation performed by the user should be as fast as possible.

Die Darstellung von Information in einem Fahrzeug erfolgt vielfach dadurch, dass eine Teilmenge einer Gesamtinformation auf der Anzeigefläche in dem Fahrzeug angezeigt wird und der Nutzer die Teilmenge verändern kann. Die Gesamtinformation kann beispielsweise eine Liste mit einer Vielzahl von Listeneinträgen betreffen. Wegen der begrenzten Größe der Anzeigefläche im Fahrzeug kann von der Gesamtliste jedoch nur eine Teilmenge der Listeneinträge angezeigt werden. Durch einen Bedienvorgang kann der Nutzer einen Bildlauf (Scrollen) hervorrufen, um andere Listeneinträge zur Anzeige zu bringen. Bei dem Bedienvorgang kann der Nutzer beispielsweise eine Bedienbewegung einer bestimmten Länge ausführen. Ferner kann der Nutzer beispielsweise ein Bedienelement für eine bestimmte Bediendauer betätigen. Die Größe bzw. das Maß der Veränderung der angezeigten Information, d. h. in diesem Fall die Anzahl der Positionen, um die sich die Listeneinträge, die angezeigt werden, verändern, hängt in diesem Fall von der Länge der Bedienbewegung bzw. der Bediendauer ab. Ferner hängt die Größe dieser Veränderung von dem Vergrößerungsfaktor ab, mit welchem die Liste dargestellt wird. Werden nämlich in einem bestimmten Anzeigebereich z. B. vier Listeneinträge wiedergegeben, ist die Veränderung der angezeigten Information bei einer bestimmten Länge der Bedienbewegung bzw. einer bestimmten Bediendauer kleiner als bei dem Fall, bei dem für den Bedienvorgang sechs Listeneinträge in dem entsprechenden Anzeigebereich wiedergegeben werden. Insbesondere wenn die Länge einer Bedienbewegung bestimmt, wie groß die Veränderung der Liste ist, ist der Bedienvorgang für den Nutzer besonders intuitiv, da die dargestellte Liste durch die Bedienbewegung in eine bestimmte Richtung bewegt wird, wobei bei einem größeren Vergrößerungsfaktor sich die Position der angezeigten Listeneinträge weniger verändert als bei einem kleineren Vergrößerungsfaktor. The representation of information in a vehicle is in many cases in that a subset of a total information is displayed on the display area in the vehicle and the user can change the subset. The total information may, for example, relate to a list with a plurality of list entries. Because of the limited size of the display area in the vehicle, however, only a subset of the list entries of the overall list can be displayed. Through an operation, the user can scroll (scroll) to bring other list entries to display. In the operation, the user can, for example, perform a control movement of a certain length. Further, the user can operate, for example, a control for a certain period of operation. The amount of change of the displayed information, that is, in this case, the number of positions by which the list entries that are displayed change in this case depends on the length of the operation movement or the operation time. Furthermore, the magnitude of this change depends on the magnification factor with which the list is displayed. Namely, in a certain display area z. If, for example, four list entries are displayed, the change in the displayed information is smaller for a given length of the operating movement or a specific operating time than in the case in which six list entries are reproduced in the corresponding display area for the operating procedure. In particular, if the length of an operating movement determines how large the change in the list, the operation is particularly intuitive for the user, since the displayed list is moved by the operating movement in a certain direction, with a larger magnification, the position of the displayed list entries less changed than a smaller magnification factor.

Umfasst die Gesamtinformation eine sehr große Datenmenge wie z. B. eine sehr lange Liste mit vielen Listeneinträgen, ergibt sich das Problem, dass der Bedienvorgang für einen Bildlauf zu sehr entfernt liegenden Listeneinträgen ein hohes Maß an Zeit und Aufmerksamkeit vom Nutzer abverlangt. Dies ist jedoch, wie vorstehend erläutert, bei der Anwendung in einem Fahrzeug nachteilig.Does the total information a very large amount of data such. As a very long list with many list entries, there is the problem that the operation for scrolling to very distant list entries requires a great deal of time and attention from the user. However, as explained above, this is disadvantageous for use in a vehicle.

Der vorliegenden Erfindung liegt die Aufgabe zugrunde, ein Verfahren zum Bereitstellen einer Benutzerschnittstelle und eine Bedienvorrichtung der eingangs genannten Art bereitzustellen, mit denen Eingaben so einfach und intuitiv wie möglich getätigt werden können.The present invention has for its object to provide a method for providing a user interface and an operating device of the type mentioned, with which inputs can be made as simple and intuitive as possible.

Diese Aufgabe wird erfindungsgemäß durch ein Verfahren mit den Merkmalen des Anspruchs 1 und eine Bedienvorrichtung mit den Merkmalen des Anspruchs 8 gelöst. Vorteilhafte Aus- und Weiterbildungen ergeben sich aus den abhängigen Ansprüchen.This object is achieved by a method with the features of claim 1 and an operating device with the features of claim 8. Advantageous training and further developments emerge from the dependent claims.

Das erfindungsgemäße Verfahren ist dadurch gekennzeichnet, dass durch einen zweiten Bedienvorgang, der zumindest einen Bereich auf der Anzeigefläche definiert und der sich auf die angezeigte Teilmenge der Gesamtinformation bezieht, Mittel zum Empfangen von Spracheingaben aktiviert werden und mittels der Spracheingaben die angezeigte Teilmenge der Gesamtinformation so verändert wird, dass die neu angezeigte Teilmenge innerhalb und/oder hierarchisch unterhalb der Hierarchieebene der ursprünglich angezeigten Teilmenge liegt. Der zweite Bedienvorgang unterscheidet sich dabei vom ersten Bedienvorgang durch mindesten ein Bedienmerkmal, so dass daraus ein unterschiedliches Steuersignal abgeleitet werden kann.The inventive method is characterized in that by a second operation, which defines at least one area on the display surface and refers to the displayed subset of the total information, means for receiving voice input are activated and the displayed subset of the total information changed by the voice inputs is that the newly displayed subset is within and / or hierarchically below the hierarchy level of the originally displayed subset. The second operating procedure differs from the first operating procedure by at least one operating feature, so that a different control signal can be derived therefrom.

Typischerweise umfasst die in einer Hierarchiestufe liegende Teilmenge eine Vielzahl von Listeneinträgen einer Liste. Es kann sich dabei aber auch um Objekte, z. B. Ikone, handeln, die in einer hierarchischen Struktur, z. B. einer Baumstruktur, organisiert und abgespeichert sind. Insbesondere umfasst die Gesamtinformation eine Teilmenge, die auf der begrenzten Anzeigefläche angezeigt werden kann und eine dazugehörige Teilmenge, die nicht angezeigt, aber in anderer Form ausgegeben oder zur Anzeige gebracht werden kann. Es handelt sich beispielsweise um Audio-Dateien, z. B. Musikstücke, deren Titel und Kurzbeschreibung angezeigt und deren Musikinhalt akustisch wiedergegeben werden kann.Typically, the subset lying in a hierarchical level comprises a plurality of list entries of a list. It can also be objects, z. As an icon, acting in a hierarchical structure, eg. B. a tree structure, organized and stored. In particular, the total information includes a subset that may be displayed on the limited display area and an associated subset that may not be displayed but otherwise displayed or displayed. These are, for example, audio files, eg. B. songs, their titles and short description displayed and their music content can be reproduced acoustically.

Bei dem erfindungsgemäßen Verfahren dienen der erste und/oder der zweite Bedienvorgang dazu, Informationen anzuzeigen, die hierarchisch innerhalb oder unterhalb der Hierarchieebene der aktuell angezeigten Informationen liegen. Bei der Auswahl der neu anzuzeigenden Information wird somit insbesondere nicht in der Gesamtinformation gesucht, sondern nur innerhalb oder unterhalb der aktuellen Hierarchieebene.In the method according to the invention, the first and / or the second operating procedure serve to display information that is hierarchically within or below the hierarchical level of the information currently displayed. When selecting the information to be newly displayed, it is thus not searched in particular in the overall information, but only within or below the current hierarchical level.

Der Bereich auf der Anzeigefläche, der sich auf die angezeigte Teilmenge der Gesamtinformation bezieht und der durch den ersten und zweiten Bedienvorgang definiert ist, kann beispielsweise als Rollbalken (Scroll-Bar) oder als Schreibmarke (Cursor) am Rand der angezeigten Information ausgestaltet sein. Falls die komplette Anzeigefläche über eine berührungsempfindliche Oberfläche verfügt, kann der Bereich auf der Anzeigefläche auch eine der angezeigten Teilmenge der Gesamtinformation zugeordnete Schaltfläche sein. Handelt es sich bei er angezeigten Teilmenge von Informationen um Objekte oder Ikone, so können diese selber Schaltflächen sein. Durch einen ersten Bedienvorgang auf dieser Schaltfläche werden beispielsweise Objekte der unmittelbar darunterliegenden Hierarchieebene angezeigt und durch einen zweiten Bedienvorgang in demselben Bereich kann eine zu diesem Objekt kontextbezogene Sprachbedienung aktiviert werden.The area on the display area that relates to the displayed subset of the total information and that is defined by the first and second operating processes may be designed, for example, as a scroll bar or as a cursor on the edge of the displayed information. If the entire display area has a touch-sensitive surface, the area on the display area may also be a button associated with the displayed subset of the total information. If the subset of information displayed is objects or icons, these can themselves be buttons. For example, a first operation on this button will cause objects of the immediately below the hierarchy level displayed and a second operation in the same area, a context-related to this object language control can be activated.

Unter einer Schaltfläche wird im Sinne der Erfindung ein Steuerelement einer graphischen Benutzerschnittstelle verstanden. Eine Schaltfläche unterscheidet sich von Elementen und Flächen zur reinen Informationsanzeige, so genannten Anzeigeelementen bzw. Anzeigenflächen, darin, dass sie auswählbar sind. Bei einer Auswahl einer Schaltfläche wird eine ihr zugeordnete Funktion ausgeführt. Die Funktion kann zu einer Veränderung der Informationsanzeige führen.For the purposes of the invention, a button is understood to be a control element of a graphical user interface. A button differs from elements and surfaces for purely informational display, called display elements, in that they are selectable. Selecting a button performs a function assigned to it. The function may change the information display.

Ferner können über die Schaltflächen Einrichtungen gesteuert werden, deren Bedienung von der Informationsanzeige unterstützt wird. Die Schaltflächen können somit herkömmliche mechanische Schalter ersetzen. Die Schaltflächen können beliebig auf einer frei programmierbaren Anzeigefläche eines Displays erzeugt und angezeigt werden. Des Weiteren kann vorgesehen sein, dass eine Schaltfläche markiert werden kann. In diesem Fall wird die zugeordnete Funktion noch nicht ausgeführt. Die markierte Schaltfläche wird jedoch gegenüber anderen Schaltflächen hervorgehoben dargestellt. Die Markierung und/oder Auswahl einer Schaltfläche kann mittels einer Cursorsteuerung oder durch direkte Bedienung einer berührungsempfindlichen Oberfläche des Displays erfolgen.Furthermore, the buttons can control devices whose operation is supported by the information display. The buttons can thus replace conventional mechanical switches. The buttons can be freely generated and displayed on a freely programmable display area of a display. Furthermore, it can be provided that a button can be marked. In this case, the assigned function is not yet executed. However, the highlighted button will be highlighted over other buttons. The marking and / or selection of a button can be done by means of a cursor control or by direct operation of a touch-sensitive surface of the display.

Ein Benutzer kann mittels des erfindungsgemäßen Verfahrens einen Bedienvorgang, den er manuell begonnen hat, bequem auf Sprachsteuerung umstellen, ohne ein separates Bedienelement, z. B. eine sogenannte Push-To-Talk-Taste, bedienen zu müssen, da sich der zweite Bedienvorgang – wie der erste Bedienvorgang – auf einen Bereich der Anzeigefläche bezieht. Der Fahrer eines Fahrzeugs kann hierdurch vorteilhafterweise von manueller Bedienung auf Sprachbedienung umstellen, wenn die gegenwärtige Situation nur ein kurzzeitiges Abwenden des Blickes vom Straßenverkehr zulässt.By means of the method according to the invention, a user can conveniently switch over an operating procedure, which he has started manually, to voice control, without a separate operating element, eg a control device. As a so-called push-to-talk button to operate, since the second operation - as the first operation - refers to a range of the display area. The driver of a vehicle can thereby advantageously switch from manual operation to voice control, if the current situation only allows a brief averting of the view from the traffic.

In einer Ausgestaltung des erfindungsgemäßen Verfahrens wird der erste und/oder der zweite Bedienvorgang auf einer berührungsempfindlichen Fläche ausgeführt. Die berührungsempfindlichen Fläche ist insbesondere separat von der Anzeigefläche angeordnet. Eine solche Fläche wird im folgenden auch als Touchpad bezeichnet.In one embodiment of the method according to the invention, the first and / or the second operating operation is carried out on a touch-sensitive surface. The touch-sensitive surface is in particular arranged separately from the display surface. Such a surface is also referred to below as a touchpad.

Gemäß einer Weiterbildung wird eine Annäherung eines Betätigungselements an die berührungsempfindliche Fläche, d. h. insbesondere den Touchpad, z. B. mittels einer Annäherungserfassungseinrichtung erfasst. Die berührungsempfindliche Fläche wird dann für Bedienvorgänge aktiviert, wenn eine Annäherung eines Betätigungselements an die berührungsempfindliche Fläche erfasst worden ist. Die Aktivierung des Touchpads wird dann graphisch auf der Anzeigefläche z. B. durch ein Cursorsymbol dargestellt.According to a development, an approach of an actuating element to the touch-sensitive surface, d. H. especially the touchpad, z. B. detected by means of a proximity detection device. The touch-sensitive surface is then activated for operations when an approach of an actuator to the touch-sensitive surface has been detected. The activation of the touchpad is then graphically displayed on the display surface z. B. represented by a cursor symbol.

In einer Ausgestaltung des erfindungsgemäßen Verfahrens werden in der Spracheingabe Schlüsselwörter identifiziert und die Schlüsselwörter werden mit dem zu den Listeneinträgen assoziierten Informationsgehalt innerhalb und/oder hierarchisch unterhalb der Hierarchieebene der Listeneinträge auf Relevanz verglichen. Die neu angezeigte Teilmenge umfasst eine Trefferliste, die gemäß der ermittelten Relevanz aus Listeneinträgen dieser Hierarchieebenen gebildet wird. Beispielsweise sucht der Fahrer eines Fahrzeugs einen Musiktitel in einer langen Liste. Falls das Bedienen mit dem ersten Bedienvorgang, beispielsweise das manuelle Durchscrollen der Liste, nicht hinreichend schnell zum Ziel führt, kann der Fahrer durch Einleiten des zweiten Bedienvorgangs an derselben Position eine Sprachbedienung aktivieren und durch die gezielte Spracheingabe von Titel oder Interpret schnell eine gewünschte Auswahl in Form einer sortierten Trefferliste an Musiktiteln angezeigt bekommen. Die Trefferliste kann einen oder mehrere Einträge haben oder auch leer sein. Zweckmäßigerweise kann eine längere Liste mit typischerweise mehr als fünf Einträgen nach der Relevanz sortiert werden, da alle Einträge nicht mehr auf einen Blick vom Benutzer visuell erfassbar wären. Wenn kein passender Eintrag gefunden wird, kann entweder als Ergebnis eine leere Liste ausgegeben werden oder eine Liste der nächstbesten, möglicherweise nicht relevanten Treffer. Auch kann ein sogenanntes Konfidenzmaß, beispielsweise in Prozent, angezeigt werden, das als Relevanzmaß der Einträge in der Trefferliste dient.In one embodiment of the method according to the invention, keywords are identified in the speech input and the keywords are compared with the information content associated with the list entries within and / or hierarchically below the hierarchical level of the list entries for relevance. The newly displayed subset comprises a hit list, which is formed according to the ascertained relevance from list entries of these hierarchy levels. For example, the driver of a vehicle searches for a song in a long list. If the operation with the first operation, for example the manual scrolling of the list, does not lead to the target with sufficient speed, the driver can activate a voice operation by initiating the second operation at the same position and quickly select a desired selection in the targeted voice input of the title or artist Form of a sorted list of hits on music titles displayed. The hit list can have one or more entries or be empty. Conveniently, a longer list of typically more than five entries may be sorted by relevance, as all entries would no longer be visually detectable by the user at a glance. If no matching entry is found, either an empty list can be output as a result or a list of the next best, possibly irrelevant, hits. It is also possible to display a so-called confidence measure, for example in percent, which serves as relevance measure of the entries in the hit list.

Vorteilhafterweise sind der erste und zweite Bedienvorgang durch Bedienmerkmale unterschiedlicher Gesten unterscheidbar, die auf oder vor einer Fläche, d. h. beispielsweise vor oder auf einem Touchpad oder einem Touchscreen, erfasst werden. Durch die Steuerung der Benutzerschnittstelle mittels Gesten wird dem Benutzer eine besonders einfache und intuitive Eingabemöglichkeit bereitgestellt. Eine Geste im Sinne der Erfindung ist insbesondere eine bestimmte Stellung der Hand eines Benutzers oder eine bestimmte Bewegung, die mit der Hand des Benutzers ausgeführt wird. Die Gesten können Ein- oder Mehrfingerberührungen auf der berührungsempfindlichen Fläche sein, die gleichzeitig oder auch sequenziell ausgeführt werden, erfasst werden. Auch kann durch nahes Vorbeiwischen an der berührungsempfindlichen Fläche berührungslos ein Bediensignal erzeugt werden, wobei die Erfassung mittels der Annäherungserfassungseinrichtung erfolgen kann.Advantageously, the first and second operating processes are distinguishable by operating features of different gestures which are on or in front of a surface, i. H. for example, before or on a touchpad or a touchscreen. The control of the user interface by means of gestures provides the user with a particularly simple and intuitive input option. A gesture within the meaning of the invention is, in particular, a specific position of a user's hand or a specific movement that is carried out with the hand of the user. The gestures may be single or multi-finger touches on the touch-sensitive surface that are performed simultaneously or sequentially. Also, an operating signal can be generated in a non-contact manner by close pre-wiping on the touch-sensitive surface, wherein the detection can take place by means of the proximity detection device.

Die Annäherungserfassungseinrichtung kann beispielsweise eine Reflektionslichtschranke umfassen, die mindestens ein Leuchtmittel zum Emittieren von elektromagnetischer Detektionsstrahlung in einen Detektionsbereich vor der Anzeigefläche oder dem Touchpad und ein Empfangselement zum Detektieren eines an einem Betätigungselement, z. B. einem oder mehrerer Finger eines Benutzers, gestreuten und/oder reflektierten Anteils der Detektionsstrahlung umfassen. Sie kann insbesondere so ausgebildet sein, ein Betätigungselement in dem Detektionsbereich anhand der Intensität der empfangenen Detektionsstrahlung zu erkennen. The proximity detection device may, for example, comprise a reflection light barrier, which comprises at least one light source for emitting electromagnetic detection radiation into a detection area in front of the display surface or the touchpad, and a reception element for detecting an activation element, e.g. B. one or more fingers of a user, scattered and / or reflected portion of the detection radiation. In particular, it can be designed to detect an actuating element in the detection area on the basis of the intensity of the received detection radiation.

Alternativ können der erste und zweite Bedienvorgang auch durch andere Bedienmerkmale unterschieden werden. Beispielsweise werden die Bedienvorgänge durch Bedienmittel, die mit mehreren Tasten oder einer Mehrfachklick-Funktion ausgestattet sind, durchgeführt. Beispielsweise kann das erfindungsgemäße Verfahren auch für Bediensysteme mit einer herkömmlichen Maus oder einem Joystick eingesetzt werden und eine Unterscheidung der Bedienvorgänge durch Einfach- und Doppelklick und/oder einer Klickfolge mehrerer Tasten, z. B. der rechten und linken Maustaste, erfolgen. Wie bereits ausgeführt könnten Bedienvorgänge insbesondere auch über einen von der Anzeigefläche räumlich abgesetzten Touchpad erfolgen, der über eine berührungsempfindliche Oberfläche verfügt und über den beispielsweise ein Cursor auf der Anzeigefläche gesteuert werden kann. Die Bedienvorgänge beziehen sich auch in diesen Fällen jedoch immer auf einen Bereich der Anzeigefläche.Alternatively, the first and second operating procedure can also be distinguished by other operating features. For example, the operations are performed by operation means equipped with a plurality of keys or a multi-click function. For example, the inventive method can also be used for control systems with a conventional mouse or a joystick and a distinction of operations by single and double-click and / or a click sequence of multiple buttons, eg. B. the right and left mouse button, done. As already explained, operating processes could in particular also take place via a touchpad spatially remote from the display surface, which has a touch-sensitive surface and via which, for example, a cursor can be controlled on the display surface. However, the operations always refer to an area of the display area even in these cases.

Gemäß einer Ausführungsform des erfindungsgemäßen Verfahrens wird zur Unterscheidung zwischen dem ersten und zweiten Bedienvorgang ein Bedienmerkmal aus der Berührdauer des zumindest einen Bereichs auf der Anzeigefläche oder dem Touchpad bestimmt. Vorteilhafterweise wird durch das Berühren für ein erstes Zeitintervall ein erstes Eingabesignal erzeugt und durch das Berühren für ein zweites Zeitintervall ein zweites Eingabesignal erzeugt, wobei das zweite Zeitintervall länger als das erste Zeitintervall ist. Zu Beginn des Berührens kann insbesondere eine Mitteilung dafür ausgegeben werden, dass in Abhängigkeit von der Dauer des Berührens unterschiedliche Bedienvorgänge erzeugt werden. Dadurch wird die Eingabe mittels der Benutzerschnittstelle vereinfacht und beschleunigt, da zum Erzeugen der beiden Eingabesignale nicht separate Bedienelemente oder Schaltflächen vorgesehen werden müssen. Typischerweise beginnt das erste als auch das zweite Zeitintervall zur selben Zeit. Das zweite Zeitintervall endet jedoch später als das erste Zeitintervall. Ferner liegt die Dauer des ersten Zeitintervalls in einem ersten Zeitbereich und die Dauer des zweiten Zeitintervalls in einem zweiten Zeitbereich, wobei sich die beiden Zeitbereiche nicht überschneiden. Die beiden Zeitbereiche schließen insbesondere aneinander an.In accordance with one embodiment of the method according to the invention, an operating feature is determined from the contact duration of the at least one area on the display area or the touchpad in order to distinguish between the first and second operating procedures. Advantageously, the touch generates a first input signal for a first time interval and generates a second input signal by touching for a second time interval, wherein the second time interval is longer than the first time interval. In particular, at the beginning of the touch, a message may be issued indicating that different operations are generated depending on the duration of the touch. As a result, the input is simplified and accelerated by means of the user interface, since separate control elements or buttons need not be provided for generating the two input signals. Typically, the first and second time intervals begin at the same time. However, the second time interval ends later than the first time interval. Furthermore, the duration of the first time interval is in a first time range and the duration of the second time interval is in a second time range, wherein the two time ranges do not overlap. The two time periods in particular connect to each other.

Alternativ oder zusätzlich kann zur weiteren Unterscheidung zwischen dem ersten und zweiten Bedienvorgang ein Bedienmerkmal aus dem Berühren der Anzeigefläche oder des Touchpads mit einer Anzahl an abgegrenzten Berührpunkten, die zumindest teilweise in dem zumindest einen Bereich auf der Anzeigefläche oder dem Touchpad liegen, bestimmt sein. Insbesondere können die abgegrenzten Berührpunkte durch das Antippen oder das Auflegen eines oder mehrerer Finger auf der Anzeigefläche oder des Touchpads erzeugt werden.Alternatively or additionally, to further differentiate between the first and second operating processes, an operating feature may be determined by touching the display surface or the touchpad with a number of delimited contact points that are at least partially located in the at least one region on the display surface or the touchpad. In particular, the delimited points of contact can be generated by tapping or placing one or more fingers on the display surface or the touchpad.

In einer Ausgestaltung des erfindungsgemäßen Verfahrens hängt die Anzahl der Listeneinträge der angezeigten Teilmenge von einem Vergrößerungsfaktor ab, der durch ein Bedienmerkmal des ersten Bedienvorgangs bestimmt ist. Der Vergrößerungsfaktor bezieht sich auf einen beliebig wählbaren Grunddarstellungsmaßstab. Der Vergrößerungsfaktor kann größer als, kleiner als oder gleich eins sein, so dass er auch Verkleinerungen relativ zu dem Grundmaßstab umfasst.In one embodiment of the method according to the invention, the number of list entries of the displayed subset depends on a magnification factor that is determined by an operating feature of the first operating procedure. The magnification factor refers to a freely selectable basic representation scale. The magnification factor may be greater than, less than, or equal to one, such that it also includes reductions relative to the basic scale.

Bei einem Durchlaufen einer langen Liste kann somit bei dem erfindungsgemäßen Verfahren die Listendarstellung in Abhängigkeit von einem Bedienmerkmal verkleinert werden, so dass auf einer bestimmten Anzeigefläche deutlich mehr Listeneinträge angezeigt werden. Die Bedienbewegung bzw. die Bediendauer des Bedienvorgangs führen somit dazu, dass die Liste schneller durchlaufen wird, bzw. die Größe der Veränderung der angezeigten Information pro Zeiteinheit stärker verändert wird.When running through a long list, the list display can thus be reduced in dependence on an operating feature in the method according to the invention, so that significantly more list entries are displayed on a certain display area. The operating movement or the operating time of the operating process thus lead to the list being traversed faster, or the size of the change in the displayed information per unit time is changed more strongly.

Wird somit bei dem Verfahren mittels des Bedienvorgangs ein Bildlauf durch die Listeneinträge erzeugt, wird bei einer Verkleinerung des Vergrößerungsfaktors während des von dem Bedienvorgang induzierten Bildlaufs eine größere Menge von Listeneinträgen angezeigt, so dass ein schnellerer Bildlauf erzeugt wird.Thus, when scrolling through the list entries in the method by means of the operation, a larger amount of list entries is displayed as the enlargement factor is reduced during scrolling induced by the operation, so that faster scrolling is generated.

Ferner können ein oder mehrere weitere Bedienvorgänge definiert werden, die sich von den anderen definierten Bedienvorgängen, also insbesondere dem ersten und zweiten Bedienvorgang, durch jeweils mindestens ein weiteres Bedienmerkmal unterscheiden. Ein dritter Bedienvorgang könnte z. B. die angezeigte Teilmenge der Gesamtinformation unverändert lassen, aber eine Anzeige in anderer Form bewirken. Beispielsweise könnte eine angezeigte Liste in einer anderen Sortierung dargestellt werden, indem durch einen dritten Bedienvorgang ein einzelner Listeneintrag an eine andere Position verschoben wird.Furthermore, one or more further operating processes can be defined which differ from the other defined operating processes, that is to say in particular the first and second operating processes, by at least one further operating feature. A third operation could z. B. leave the displayed subset of the total information unchanged, but cause a display in another form. For example, a displayed list could be displayed in a different sort by moving a single list entry to a different location by a third operation.

Die erfindungsgemäße Vorrichtung zum Bereitstellen einer Benutzerschnittstelle umfasst eine Anzeigefläche zum Darstellen einer Teilmenge einer hierarchisch strukturierten Gesamtinformation sowie Bedienerfassungsmittel zum Erfassen von mindestens zwei voneinander unterscheidbaren Bedienvorgängen, die Steuerbefehlen zuordenbar sind, in zumindest einem definierten Bereich auf der Anzeigefläche. Sie umfasst des Weiteren Mittel zum Empfangen von Spracheingaben und eine Steuervorrichtung zum Steuern der Darstellung auf der Anzeigefläche. Die Vorrichtung zum Bereitstellen einer Benutzerschnittstelle ist dadurch gekennzeichnet, dass die Steuervorrichtung die Anzeigefläche so steuert, dass mittels eines ersten Steuerbefehls, der einem ersten Bedienvorgang zugeordnet ist, die angezeigte Teilmenge der Gesamtinformation so veränderbar ist, dass die neu angezeigte Teilmenge innerhalb und/oder hierarchisch unterhalb der Hierarchieebene der ursprünglich angezeigten Teilmenge liegt. Außerdem sind mittels eines zweiten Steuerbefehls, der einem zweiten Bedienvorgang zugeordnet ist, die Mittel zum Empfangen von Spracheingaben aktivierbar, wobei mittels erfasster Spracheingaben die angezeigte Teilmenge der Gesamtinformation so veränderbar ist, dass die neu angezeigte Teilmenge innerhalb und/oder hierarchisch unterhalb der Hierarchieebene der ursprünglich angezeigten Teilmenge liegt. Die Vorrichtung ist insbesondere zur Durchführung des erfindungsgemäßen Verfahrens ausgestaltet. The device according to the invention for providing a user interface comprises a display area for displaying a subset of hierarchically structured overall information as well as operator detection means for detecting at least two mutually distinguishable operating operations that can be assigned to control commands in at least one defined area on the display area. It further comprises means for receiving voice inputs and a control device for controlling the display on the display surface. The device for providing a user interface is characterized in that the control device controls the display surface such that by means of a first control command associated with a first operation, the displayed subset of the total information is changeable such that the newly displayed subset within and / or hierarchically below the hierarchy level of the originally displayed subset. In addition, by means of a second control command, which is associated with a second operation, the means for receiving speech input activated, said means of detected speech input, the displayed subset of the total information is changeable such that the newly displayed subset within and / or hierarchically below the hierarchy level of the original subset displayed. The device is designed in particular for carrying out the method according to the invention.

Die Bedienerfassungsmittel der erfindungsgemäßen Vorrichtung umfassen insbesondere ein Touchpad, auf dem die Bedienvorgänge ausführbar sind. Mit dem Touchpad kann eine Annäherungserfassungseinrichtung gekoppelt sein, die das Touchpad aktiviert, wenn ein Betätigungselement in der Nähe des Touchpads erfasst worden ist. Eine Aktivierung des Touchpads kann mittels der Steuervorrichtung auf der Anzeigefläche durch ein Cursorsymbol angezeigt werden.The operator detection means of the device according to the invention comprise in particular a touchpad on which the operating procedures can be carried out. An approach detector may be coupled to the touchpad that activates the touchpad when an actuator near the touchpad has been detected. Activation of the touchpad can be indicated by means of the control device on the display surface by means of a cursor symbol.

Erfindungsgemäß ist ein Fahrzeug mit einer solchen Vorrichtung zum Bereitstellen einer Benutzerschnittstelle ausgestattet.According to the invention, a vehicle is equipped with such a device for providing a user interface.

Die Erfindung wird nun anhand von Ausführungsbeispielen mit Bezug zu den Figuren näher erläutert.The invention will now be explained in more detail by means of embodiments with reference to the figures.

1 zeigt schematisch den Aufbau eines Ausführungsbeispiels der erfindungsgemäßen Vorrichtung zum Bereitstellen einer Benutzerschnittstelle, 1 shows schematically the structure of an embodiment of the device according to the invention for providing a user interface,

2a–2h zeigen Anzeigen der Anzeigevorrichtung gemäß einem Ausführungsbeispiel des erfindungsgemäßen Verfahrens, 2a - 2h show displays of the display device according to an embodiment of the method according to the invention,

3a–3d zeigen Anzeigen der Anzeigevorrichtung sowie die Unterscheidung der Bedienvorgänge durch die Berührdauer der Anzeigefläche gemäß einem weiteren Ausführungsbeispiel des erfindungsgemäßen Verfahrens, 3a - 3d show display of the display device and the distinction of the operations by the contact duration of the display surface according to a further embodiment of the method according to the invention,

4a–4b zeigen Anzeigen der Anzeigevorrichtung gemäß einem weiteren Ausführungsbeispiel des erfindungsgemäßen Verfahrens und 4a - 4b show displays of the display device according to another embodiment of the method according to the invention and

5a–5c zeigen Anzeigen der Anzeigevorrichtung sowie die Unterscheidung der Bedienvorgänge durch abgegrenzte Berührpunkte auf der Anzeigefläche gemäß einem weiteren Ausführungsbeispiel des erfindungsgemäßen Verfahrens. 5a - 5c show displays of the display device and the distinction of the operations by delimited points of contact on the display surface according to a further embodiment of the method according to the invention.

In 1 ist schematisch ein Ausführungsbeispiel einer erfindungsgemäßen Vorrichtung zum Bereitstellen einer Benutzerschnittstelle dargestellt. Sie umfasst eine Anzeigefläche 10, die mit einer Steuervorrichtung 14 gekoppelt ist. Die Steuervorrichtung 14 erzeugt Grafikdaten, die auf der Anzeigevorrichtung 10 angezeigt werden können. Die Steuervorrichtung 14 kann einen Speicher zum Speichern von Daten umfassen oder aber über einen Datenbus 15 diese Daten von einem Anwendungssystem 16 abrufen. Bei dem Anwendungssystem 16 handelt es sich hier beispielsweise um eine Stereoanlage in einem Fahrzeug, wobei die Daten als Musikdateien entweder in einem Speicher der Stereoanlage oder auf einem von der Stereoanlage lesbaren Datenträger, z. B. einer CD, gespeichert sind. Die Daten können eine sogenannte Gesamtinformation umfassen, die einem bestimmten Informationsbereich zugeordnet sind. Von dieser Gesamtinformation ist auf der Anzeigefläche 10 nur eine Teilmenge 20a anzeigbar, wie es später erläutert wird. Der für einen Bedienvorgang vorgesehene Bereich 21 auf der Anzeigefläche 10 bezieht sich auf die angezeigte Teilmenge 20a.In 1 schematically an embodiment of a device according to the invention for providing a user interface is shown. It includes a display area 10 that with a control device 14 is coupled. The control device 14 generates graphics data displayed on the display device 10 can be displayed. The control device 14 may include memory for storing data or via a data bus 15 this data from an application system 16 recall. In the application system 16 This is, for example, a stereo in a vehicle, the data as music files either in a memory of the stereo or on a readable by the stereo disk, eg. As a CD are stored. The data may comprise so-called total information associated with a particular information area. From this total information is on the display area 10 only a subset 20a displayable, as will be explained later. The area intended for an operation 21 on the display surface 10 refers to the displayed subset 20a ,

Die Steuervorrichtung 14 ist ferner mit Bedienerfassungsmitteln 11 verbunden, über die ein Nutzer durch definierte Bedienvorgänge Steuerbefehle erzeugen kann, um die angezeigte Teilmenge 20a der Gesamtinformation zu verändern und eine neue Teilmenge 20b angezeigt zu bekommen. Im Ausführungsbeispiel umfassen die Bedienerfassungsmittel 11 ein Eingabe- und Steuergerät, beispielsweise in Form einer Tastatur, die direkt mit der Steuervorrichtung 14 verbunden ist. Solche Eingabe- und Steuergeräte können auch als Maus oder Joystick ausgestaltet sein. Dabei ist ein Cursor oder ein Mauspfeil mittels dieser Eingabe- und Steuergeräte insbesondere in den auf die angezeigte Teilmenge 20a bezogenen Bereich 21 steuerbar, um dort einen Bedienvorgang auszuführen, beispielsweise durch das Betätigen der Return-Taste oder einen Mausklick. Weitere Bedienerfassungsmittel 11 werden im gezeigten Beispiel durch eine berührungsempfindliche Oberfläche auf der Anzeigefläche 10 oder einen Touchpad gebildet, so dass ein Nutzer Bedienvorgänge direkt durch Berühren der Anzeigefläche 10 bzw. des Touchpads durchführen kann. In einem Bereich um die Anzeigefläche 10 bzw. das Touchpad könnte ferner eine Annäherungserfassungseinrichtung Bedienvorgänge vor der Anzeigefläche 10 als Gesten erfassen, bevor der Nutzer diese berührt.The control device 14 is also with operator detection means 11 connected by a user through defined operations can generate control commands to the displayed subset 20a to change the overall information and a new subset 20b to get displayed. In the exemplary embodiment, the operator detection means comprise 11 an input and control device, for example in the form of a keyboard, directly to the control device 14 connected is. Such input and control devices can also be designed as a mouse or joystick. In this case, a cursor or a mouse arrow by means of these input and control devices, in particular in the displayed subset 20a related area 21 controllable to perform an operation there, for example by pressing the return key or a mouse click. Other operator acquisition devices 11 be in the example shown by a touch-sensitive surface on the display surface 10 or one Touchpad formed, allowing a user operations directly by touching the display surface 10 or the touchpad. In an area around the display area 10 or the touchpad could further include proximity detection means operations in front of the display surface 10 capture as gestures before the user touches them.

Mit der Steuervorrichtung 14 sind ferner Mittel 12 zum Empfangen von Spracheingaben verbunden, die ein Mikrophon 13 zum Empfang akustischer Signale umfassen. Die Mittel 12 zum Empfangen von Spracheingaben können des Weiteren ein Softwaremodul zur Sprachaktivitätserkennung sowie einen adaptiven Filter zur Störgeräuschunterdrückung enthalten. Die Sprachaktivitätserkennung und der adaptive Filter können aber auch in anderer Hardware lokalisiert sein und beispielsweise über die Steuervorrichtung 14 und den Datenbus 15 mit den Mitteln 12 zum Empfangen von Spracheingaben in Verbindung stehen. Wird über die Steuervorrichtung 14, insbesondere durch einen oben beschriebenen Bedienvorgang, ein Steuerbefehl zur Aktivierung der Sprachbedienung empfangen, so werden die empfangenen Spracheingaben entsprechend ausgewertet und daraus ein weiterer Steuerbefehl generiert, um die angezeigte Teilmenge 20a der Gesamtinformation zu verändern und eine neue Teilmenge 20b anzuzeigen, wie es weiter unten noch im Detail ausgeführt wird.With the control device 14 are also means 12 connected to receive voice input that a microphone 13 for receiving acoustic signals. The means 12 for receiving voice input may further include a voice activity detection software module and an adaptive noise cancellation filter. However, the voice activity recognition and the adaptive filter can also be localized in other hardware and, for example, via the control device 14 and the data bus 15 with the means 12 to receive voice input. Is about the control device 14 , Received in particular by an above-described operation, a control command for activating the voice control, the received voice inputs are evaluated accordingly and from this a further control command generated to the displayed subset 20a to change the overall information and a new subset 20b as detailed below.

In den 2a–2h wird anhand eines Ausführungsbeispiels des erfindungsgemäßen Verfahrens erläutert, wie die angezeigte Teilmenge 20a der Gesamtinformation durch verschiedene Bedienvorgänge verändert wird. Es ist eine Anzeigefläche 10 dargestellt, auf der eine Teilmenge 20a der Gesamtinformation in Form einer Liste 22 mit Listeneinträgen 23 angezeigt wird. Der auf die Teilmenge bezogene Bereich 21 umfasst einen Rollbalken 21a sowie einzelne Listeneinträge 23. Bei den Listeneinträgen 23 handelt es sich im Ausführungsbeispiel um Musiktitel, es können aber auch typischerweise Telefonbucheinträge, Ziele eines Navigationsgeräts oder dergleichen sein. Die Gesamtinformation umfasst somit Strukturdaten zu den Musiktiteln, z. B. Titel, Interpret, Kurzbeschreibung oder Text eines Liedes, gegebenenfalls dazugehörige graphische Elemente wie Bilder eines Album-Covers und die eigentlichen Musikstücke in Form von Audiodateien. Letztere können nicht angezeigt, sondern akustisch beispielsweise über Lautsprecher oder Kopfhörer wiedergegeben werden.In the 2a - 2h will be explained with reference to an embodiment of the method according to the invention, as the displayed subset 20a the overall information is changed by various operations. It is a display area 10 shown on a subset 20a the total information in the form of a list 22 with list entries 23 is shown. The area related to the subset 21 includes a scroll bar 21a as well as individual list entries 23 , In the list entries 23 In the exemplary embodiment, these are music titles, but they can also typically be telephone book entries, destinations of a navigation device or the like. The total information thus includes structural data on the music titles, z. As title, artist, short description or text of a song, possibly associated graphics elements such as images of an album cover and the actual pieces of music in the form of audio files. The latter can not be displayed, but can be reproduced acoustically, for example via loudspeakers or headphones.

Der Nutzer sucht nun in der Liste 22 einen bestimmten Musiktitel. Jedes Listenelement 23 repräsentiert beispielsweise eine bestimmte CD oder ein Musikalbum. In 2a berührt er dazu mit seiner Fingerspitze 30 den ersten Listeneintrag 23, der mit dem Inhalt „A” gekennzeichnet ist, weil er beispielsweise weiß, dass sich der gesuchte Musiktitel dort befindet. Durch die Art der Berührung kann er zwei verschiedene Bedienvorgänge durchführen und damit verschiedene Steuersignale erzeugen.The user now searches in the list 22 a specific song. Each list item 23 for example, represents a particular CD or a music album. In 2a he touches it with his fingertip 30 the first list entry 23 , which is marked with the content "A" because he knows, for example, that the song you are looking for is there. Due to the nature of the touch, he can perform two different operations and thus generate different control signals.

Weiß der Nutzer, wo er den Musiktitel in dieser „A”-Liste findet, oder dass jener dort am Anfang steht, so kommt er mit einer manuellen Bedienung intuitiv schnell zum Ziel. Beispielsweise sucht er den Titel „A1”. Er führt eine kurze Berührung auf dem Listeneintrag aus, woraufhin ihm eine neue Teilmenge 20b, und zwar die hierarchisch untergeordneten Listenelemente angezeigt werden, die mit „A1” bis „A5” gekennzeichnet sind (2b). Mit einem zweiten manuellen Bedienvorgang kann der Nutzer nun den gewünschten Titel „A1” auswählen und damit den Bedienvorgang abschließen.If the user knows where to find the song in this "A" list, or if it's there at the beginning, he can quickly reach his goal intuitively with manual operation. For example, he is looking for the title "A1". He makes a short touch on the list entry, whereupon he receives a new subset 20b , namely the hierarchically subordinate list elements are displayed, which are marked with "A1" to "A5" ( 2 B ). With a second manual operation, the user can now select the desired title "A1" and thus conclude the operation.

Falls der Nutzer aber einen anderen Musiktitel sucht, der entweder weiter unten in der „A”-Liste steht oder von dem er nur den Interpreten, nicht aber den Titel oder die Position in der Liste kennt, so führt er die Berührung länger aus, woraufhin die Mittel 12 zum Empfangen von Spracheingaben aktiviert werden. Durch eine Spracheingabe gibt er nun beispielsweise den Namen des Interpreten und ein Schlagwort zu dem Musiktitel ein, woraufhin in der „A”-Liste alle hierzu relevanten Titel gesucht werden. Die besten Treffer werden ihm dann, wie in 2c gezeigt, auf der Anzeigefläche 10 dargestellt.However, if the user is looking for another song that is either further down in the "A" list or of which he knows only the artist but not the title or position in the list, then he makes the contact longer, whereupon the means 12 to receive voice input. For example, by entering a voice he enters the name of the artist and a keyword to the song, whereupon all relevant titles are searched in the "A" list. The best hits will be him then, as in 2c shown on the display area 10 shown.

Sucht der Nutzer einen Musiktitel ohne Beschränkung auf einen einzelnen Listeneintrag 23, so verfährt er in 2d analog zur 2a und 2c, nur dass er dabei nicht einen Listeneintrag 23, sondern den Roll-Balken 21a länger berührt, worauf wieder eine Sprachbedienung aktiviert wird. Die darauffolgende Suche nach in den empfangenen Spracheingaben enthaltenen Schlüsselwörtern beschränkt sich nun aber nicht mehr auf die „A”-Liste, sondern auf die gesamte Liste 22. Die Suche wird somit innerhalb derselben Hierarchieebene ausgeführt. Das Resultat in 2e zeigt eine neue Teilmenge 20b in Form einer sortierten Trefferliste gemäß der nach den identifizierten Schlüsselwörtern ermittelten Relevanz.Searches for a song without restriction to a single list entry 23 so he moves in 2d analogous to 2a and 2c , just that he does not make a list entry 23 but the roll bar 21a longer touched, whereupon a voice control is activated again. The subsequent search for keywords contained in the received voice input is no longer limited to the "A" list, but to the entire list 22 , The search is thus carried out within the same hierarchical level. The result in 2e shows a new subset 20b in the form of a sorted hit list according to the relevance determined by the identified keywords.

In den 2f bis 2h sind weitere Möglichkeiten gezeigt, wie die angezeigte Teilmenge 20a der Gesamtinformation durch verschiedene Bedienvorgänge, die sich durch jeweils mindestens ein Bedienmerkmal unterscheiden, nach dem erfindungsgemäßen Verfahren verändert werden kann. In 2f und 2g berührt der Nutzer die Listeneinträge 23 oder die entsprechenden Positionen eines Touchpads mit seinen zwei Fingerspitzen 30 und 31 und zieht diese nach unten. Dabei wird die angezeigte Teilmenge 20a aus 2a derart verändert, dass ein Durchlaufen der Listeneinträge 23 bewirkt und eine neue Teilmenge 20b dargestellt wird. Dabei kann beispielsweise durch das Bedienmerkmal der Ziehgeschwindigkeit die Geschwindigkeit des Bildlaufs bestimmt werden. Insbesondere kann durch das Bedienmerkmal des Abstands zwischen den Fingerspitzen 30 und 31 ein Vergrößerungs- oder Verkleinerungsfaktor festgelegt werden, wodurch die angezeigte Teilmenge 20b während des Bildlaufs bzw. nur für den Bildlauf weiter verändert wird.In the 2f to 2h Other options are shown, such as the displayed subset 20a the total information by various operations, which differ by at least one operating feature, can be changed by the method according to the invention. In 2f and 2g the user touches the list entries 23 or the corresponding positions of a touchpad with its two fingertips 30 and 31 and pull this down. The displayed subset becomes 20a out 2a changed so that a traversal of the list entries 23 causes and a new subset 20b is pictured. It can, for example, by the operating feature of Drag speed to determine the speed of scrolling. In particular, by the operating feature of the distance between the fingertips 30 and 31 set an enlargement or reduction factor, which reduces the displayed subset 20b while scrolling or only for scrolling is further changed.

In 2h ist dargestellt wie durch eine Dreifingergeste einzelne Objekte verschoben werden können. Berührt ein Nutzer einen Listeneintrag 23 mit den Fingerspitzen 30, 31 und 32, so kann er im gezeigten Beispiel diesen Listeneintrag 23 „mitnehmen” und innerhalb der Liste 22 nach unten verschieben, ohne dass sich die angezeigte Teilmenge 20a inhaltsmäßig verändert.In 2h is shown how a three-finger gesture individual objects can be moved. Touches a user a list entry 23 with your fingertips 30 . 31 and 32 , so he can in the example shown this list entry 23 "Take away" and within the list 22 Move down without affecting the displayed subset 20a changed in content.

Mit Bezug zu den 3a bis 3d werden weitere Anzeigen erläutert, die von dem Ausführungsbeispiel des erfindungsgemäßen Verfahrens erzeugt werden. Dabei wird ein Bedienmerkmal aus der Berührdauer der berührungsempfindlichen Anzeigefläche 10 bzw. des Touchpads bestimmt. Wie in 3a gezeigt, ist eine Schaltfläche 24 dargestellt, die von dem auf die angezeigte Teilmenge 20a bezogenen Bereich 21 auf der Anzeigefläche 10 umfasst wird. Unmittelbar nach der Berührung der Schaltfläche 24 wird innerhalb des Anzeigebereichs 24b ein Teil 24c hervorgehoben dargestellt. Beispielsweise wird Teil 24c in einer bestimmten Farbe oder mit einer bestimmten Helligkeit dargestellt. Der hervorgehoben dargestellte Teil 24c des Anzeigebereichs 24b vergrößert sich wie in 3b gezeigt sukzessive bis zum dem Zeitpunkt t1, an dem der hervorgehoben dargestellte Teil 24c des Anzeigebereichs 24b diesen vollständig einnimmt (3c). Dem Nutzer wird auf diese Weise vermittelt, dass bis zu diesem Zeitpunkt t1 das erste Eingabesignal erzeugt wird, wenn er die Berührung von der berührungsempfindlichen Oberfläche löst. Wenn der Nutzer die Berührung von der berührungsempfindlichen Oberfläche nach diesem Zeitpunkt löst, wird das zweite Eingabesignal erzeugt. Dies wird graphisch durch ein Hinweissymbol 25 innerhalb des inneren Anzeigebereichs 24a der Schaltfläche 24 dargestellt, welches für einen bestimmten Zeitbereich bis zu einem späteren Zeitpunkt t2 eingeblendet wird. Ferner kann der hervorgehoben dargestellte Teil 24c des Anzeigebereichs 24b beispielsweise die Farbe oder die Helligkeit wechseln, um auch auf diese Weise dem Nutzer zu vermitteln, dass bei der Beendigung des Betätigungsvorgangs ein anderes Eingabesignal erzeugt wird.Related to the 3a to 3d Further displays will be explained, which are generated by the embodiment of the method according to the invention. In this case, an operating feature of the Berührdauer the touch-sensitive display area 10 or the touchpad. As in 3a shown is a button 24 represented by the on the displayed subset 20a related area 21 on the display surface 10 is included. Immediately after touching the button 24 is within the display area 24b a part 24c highlighted. For example, part becomes 24c displayed in a specific color or with a certain brightness. The highlighted part 24c of the display area 24b increases as in 3b shown successively until the time t1, at which the highlighted part 24c of the display area 24b occupy it completely ( 3c ). The user is thus conveyed that until this time t1, the first input signal is generated when it releases the touch from the touch-sensitive surface. When the user releases the touch from the touch-sensitive surface after this time, the second input signal is generated. This is graphically indicated by a hint symbol 25 within the inner display area 24a the button 24 which is displayed for a specific time range until a later time t2. Furthermore, the highlighted part can be shown 24c of the display area 24b For example, change the color or the brightness, so as to convey to the user that at the completion of the actuation process, another input signal is generated.

Vom Zeitpunkt t1 bis zum Zeitpunkt t2 verkleinert sich der hervorgehoben dargestellte Teil 24c des Anzeigebereichs 24b wieder, bis zum Zeitpunkt t2 der hervorgehoben dargestellte Teil 24c verschwunden ist. Die Verringerung des hervorgehoben dargestellten Teils 24c erfolgt jedoch auf andere Weise als die Vergrößerung dieses Teils 24b. Bei der Vergrößerung wachsen – wie in 3b gezeigt – zwei Balken so lange, bis der Ring des Anzeigebereichs 24b geschlossen ist. Bei der Verkleinerung des hervorgehoben dargestellten Teils 24c verkleinert sich – wie in 3d gezeigt – ein hervorgehoben dargestellter Teilring sukzessive, bis er verschwunden ist.From time t1 to time t2, the highlighted part decreases 24c of the display area 24b again, until the time t2, the highlighted part shown 24c disappeared. The reduction of the highlighted part 24c However, this is done in a different way than the enlargement of this part 24b , Grow at magnification - as in 3b shown - two bars until the ring of the display area 24b closed is. When reducing the highlighted part 24c shrinks - as in 3d shown - a highlighted partial ring successively until it is gone.

Falls bei einem Lösen der Berührung der berührungsempfindlichen Oberfläche auch nach dem Zeitpunkt t2 das zweite Eingabesignal erzeugt wird, kann das Hinweissymbol 25 so lange angezeigt werden, bis die Berührung gelöst wird und der hervorgehoben dargestellte Teil 24c des Anzeigebereichs 24b dauerhaft angezeigt werden, da in diesem Fall kein Ablauf des zweiten Zeitbereichs visualisiert werden muss.If the second input signal is also generated after the time t2 when the contact of the touch-sensitive surface is released, the indication symbol 25 until the contact is released and the highlighted part is displayed 24c of the display area 24b be permanently displayed, since in this case, no expiration of the second time range must be visualized.

Alternativ oder gleichzeitig kann die Mitteilung auch mittels eines Lautsprechers akustisch ausgegeben werden. Beispielsweise kann ein akustisches Signal analog zu der vorstehend beschriebenen graphischen Mitteilung ausgegeben werden. Die akustische Kodierung kann dabei beispielsweise über die Veränderung der zeitlichen Struktur des Signals, über die Veränderung der Amplitude und/oder über die Veränderung der Frequenz des akustischen Signals erfolgen. Beispielsweise kann ein kurzes akustisches Signal in immer kürzer werdenden Intervallen wiederholt werden. Ebenso ist es möglich, ein leises akustisches Signal analog zur Vergrößerung des hervorgehoben dargestellten Teils 24c des Anzeigebereichs 24b lauter werden oder in der Tonhöhe ansteigen zu lassen.Alternatively or simultaneously, the message can also be output acoustically by means of a loudspeaker. For example, an acoustic signal can be output analogously to the graphic message described above. The acoustic coding can be done, for example, by changing the temporal structure of the signal, by changing the amplitude and / or by changing the frequency of the acoustic signal. For example, a short acoustic signal can be repeated at ever shorter intervals. It is also possible, a soft acoustic signal analogous to the enlargement of the highlighted part 24c of the display area 24b get louder or rise in pitch.

Im Folgenden wird mit Bezug zu den 4a und 4b die Änderung der angezeigten Teilmenge der Gesamtinformation anhand eines weiteren Ausführungsbeispiels des erfindungsgemäßen Verfahrens erläutert. Die Gesamtinformation ist hier eine Liste 22 mit einer Vielzahl von Listeneinträgen 23, von denen nur eine Teilmenge angezeigt wird. Die Anzahl der Listeneinträge 23 der angezeigten Teilmenge hängt von dem Vergrößerungsfaktor für die Anzeige der Liste 22 ab. Die 4a zeigt den Fall, bei dem der Vergrößerungsfaktor so gewählt ist, dass auf der Anzeigefläche 10 insgesamt sechs Listeneinträge 23 der Liste 22 angezeigt werden. Die angezeigte Teilmenge kann nun durch einen Bedienvorgang eines Nutzers verändert werden. Der Nutzer kann insbesondere einen Bildlauf bzw. ein Scrollen hervorrufen. Dabei werden aufeinander folgend Anzeigebilder auf der Anzeigefläche 10 wiedergegeben, bei denen nacheinander Listeneinträge 23 verschwinden und andere Listeneinträge 23 angezeigt werden. Erzeugt der Nutzer ausgehend von der Anzeige der 4a beispielsweise einen Bildlauf nach unten, verschwindet zunächst der erste Listeneintrag 23 und nach dem sechsten Listeneintrag 23 erscheint der siebte Listeneintrag. Danach verschwindet der zweite Listeneintrag 23 und nach dem siebten Listeneintrag erscheint der achte Listeneintrag usw.The following is related to the 4a and 4b the change of the displayed subset of the total information explained with reference to a further embodiment of the method according to the invention. The total information is here a list 22 with a variety of list entries 23 of which only a subset is displayed. The number of list entries 23 the displayed subset depends on the magnification factor for the display of the list 22 from. The 4a shows the case where the magnification factor is selected to be on the display surface 10 a total of six list entries 23 the list 22 are displayed. The displayed subset can now be changed by an operating procedure of a user. In particular, the user may cause scrolling. In this case, successive display images on the display surface 10 reproduced in which successive list entries 23 disappear and other list entries 23 are displayed. If the user creates the ad based on the ad 4a For example, scroll down, first disappears the first list entry 23 and after the sixth list entry 23 the seventh list entry appears. After that, the second disappears list entry 23 and after the seventh list entry, the eighth list entry appears, and so on.

Die Größe bzw. die Geschwindigkeit des Bildlaufs hängt dabei zum einen von einem Bedienvorgang – wie exemplarisch in 5a bis 5c beschrieben – ab und zum anderen von dem Vergrößerungsfaktor der angezeigten Information. Unter der Geschwindigkeit des Bildlaufs, d. h. der Veränderung der angezeigten Teilmenge, wird in diesem Fall verstanden, in welcher Zeiteinheit ein Listeneintrag verschwindet und dafür ein anderer Listeneintrag angezeigt wird. Dabei ist die Geschwindigkeit der Veränderung umso höher, je kleiner der Vergrößerungsfaktor ist, d. h. je kleiner die angezeigte Teilmenge der Gesamtinformation dargestellt wird, d. h. je mehr Listeneinträge 23 auf der Anzeigefläche 10 angezeigt werden.The size or the speed of the scrolling depends on the one hand on an operation - as exemplarily in 5a to 5c described - from and to the other of the magnification of the displayed information. In this case, the speed of scrolling, ie the change of the displayed subset, is understood in which time unit a list entry disappears and a different list entry is displayed for this purpose. In this case, the smaller the magnification factor, the higher the speed of the change, ie, the smaller the displayed subset of the total information is displayed, ie the more list entries 23 on the display surface 10 are displayed.

Der Vergrößerungsfaktor verändert sich in diesem Fall für den Bedienvorgang, d. h. im vorliegenden Fall für den Bildlauf, in Abhängigkeit von einem Bedienmerkmal. Wird aus dem Bedienmerkmal von der Steuervorrichtung 14 ermittelt, dass beispielsweise der Vergrößerungsfaktor für den Bildlauf verkleinert werden soll, werden von der Steuervorrichtung 14 entsprechende Grafikdaten erzeugt, die dazu führen, dass auf der Anzeigefläche 10 die angezeigte Teilmenge der Gesamtinformation mit einem kleineren Vergrößerungsfaktor angezeigt wird. Dies führt üblicherweise dazu, dass die Teilmenge mehr Information enthält. Im vorliegenden Beispiel werden bei der Verringerung des Vergrößerungsfaktors mehr Listeneinträge angezeigt. In 4b ist der Fall angezeigt, bei dem der Vergrößerungsfaktor für den Bildlauf so verkleinert wurde, dass zwölf Listeneinträge 23 angezeigt werden.The magnification factor changes in this case for the operation, ie in the present case for scrolling, depending on an operating feature. Is from the operating feature of the control device 14 determines that, for example, the magnification factor for scrolling is to be reduced, are by the control device 14 generates corresponding graphics data that cause the on the display area 10 the displayed subset of the total information is displayed with a smaller magnification factor. This usually results in the subset containing more information. In this example, increasing the magnification will result in more list entries. In 4b In the case where the enlargement factor for scrolling has been reduced so that twelve list entries 23 are displayed.

Da die Geschwindigkeit des Bildlaufs von dem Vergrößerungsfaktor abhängt, wird bei einem vorgegebenen Bedienvorgang nach der Verringerung des Vergrößerungsfaktors, wie er in 4b dargestellt ist, ein schnellerer Bildlauf durchgeführt, als dies bei der in 4a wiedergegebenen Darstellung der Fall wäre. In Abhängigkeit von einem Bedienmerkmal kann der Nutzer somit mit einem bestimmten Bedienvorgang einen schnelleren Bildlauf hervorrufen und somit schneller durch die Liste 22 scrollen.Since the speed of scrolling depends on the magnification factor, in a given operation, after the reduction of the magnification factor, as in 4b is shown, performed a faster scrolling than that in the 4a The representation would be the case. Depending on an operating feature, the user can thus cause a faster scrolling with a specific operation and thus faster through the list 22 scroll.

Nach Beendigung des Bedienvorgangs wird der Vergrößerungsfaktor wieder auf den ursprünglichen Wert zurückgesetzt, bei dem im vorliegenden Beispiel sechs Listeneinträge 23 von der Anzeigefläche 10 wiedergegeben werden. Um in der Darstellung mit dem verkleinerten Vergrößerungsfaktor, die in 4b wiedergegeben ist, deutlich zu machen, welche Listeneinträge nach dem Zurücksetzen des Vergrößerungsfaktors angezeigt werden, wird bei der Darstellung mit dem verkleinerten Vergrößerungsfaktor ein Rahmen 26 angezeigt, welcher die nach dem Zurücksetzen des Vergrößerungsfaktors angezeigten Listeneinträge 23 enthält. Gemäß dem erfindungsgemäßen Verfahren kann ein Nutzer nach Beendigung dieses ersten Bedienvorgangs mit einem zweiten Bedienvorgang in demselben Bereich die Mittel 12 zum Empfangen von Spracheingaben aktivieren.After completion of the operation, the magnification factor is reset to the original value, in the present example, six list entries 23 from the display area 10 be reproduced. To see in the representation with the reduced magnification, the in 4b is reproduced to make it clear which list entries are displayed after the resetting of the magnification factor, becomes a frame in the representation with the reduced magnification 26 which displays the list entries displayed after resetting the magnification factor 23 contains. According to the method of the invention, a user can, after completing this first operation with a second operation in the same area, the means 12 to receive voice input.

Exemplarisch wird ein Bedienvorgang mit variablen Bedienmerkmalen näher erläutert, wie er auch für den in den 4a und 4b beschriebenen Bildlauf benutzt werden kann. Wie in 5a gezeigt, wird eine Liste 22 zunächst mit einem Vergrößerungsfaktor wiedergegeben, bei dem fünf Listeneinträge 23 auf der Anzeigefläche 10 angezeigt werden. Der Nutzer kann durch den Bedienvorgang die angezeigte Teilmenge verändern, indem er beispielsweise mit seiner Fingerspitze 30 die Anzeigefläche 10 bei der Liste 22 berührt und die Fingerspitze 30 daraufhin in einer bestimmten Richtung, insbesondere nach rechts oder links auf der Anzeigefläche 10 bewegt. Beim Erzeugen dieses Bildlaufs bzw. dieses Scrollvorgangs mit nur einer Fingerspitze wird der Vergrößerungsfaktor der angezeigten Information nicht verändert.As an example, an operating procedure with variable operating features is explained in more detail, as he also for the in the 4a and 4b described scrolling can be used. As in 5a shown is a list 22 initially reproduced with a magnification factor, in which five list entries 23 on the display surface 10 are displayed. The user can change the displayed subset by the operation, for example, with his fingertip 30 the display area 10 at the list 22 touched and the fingertip 30 then in a certain direction, in particular to the right or left on the display area 10 emotional. When creating this scrolling or scrolling operation with only one fingertip, the magnification factor of the displayed information is not changed.

Wenn der Nutzer die berührungsempfindliche Oberfläche der Anzeigefläche 10 oder des Touchpads jedoch anstatt, wie in 5a gezeigt, mit nur einer Fingerspitze 30 berührt, sondern wie in 5b gezeigt, mit zwei Fingerspitzen 30 und 31 berührt, wird wie schon zuvor erwähnt der Vergrößerungsfaktor der angezeigten Information verändert. Bei diesem Ausführungsbeispiel hängt jedoch die Größe der Veränderung des Vergrößerungsfaktors von der Anzeige der abgrenzbaren Bereiche oder der Größe des Bereichs ab, bei denen bzw. bei dem die berührungsempfindliche Oberfläche gleichzeitig berührt wird. Wenn der Nutzer die berührungsempfindliche Oberfläche mit zwei Fingerspitzen 30 und 31 berührt, ergeben sich entweder zwei voneinander abgrenzbare Bereiche, bei denen die berührungsempfindliche Oberfläche berührt wird oder ein größerer Bereich, bei dem die Oberfläche berührt wird.When the user touch the surface of the display area 10 or the touchpad instead, as in 5a shown with just a fingertip 30 touched, but like in 5b shown with two fingertips 30 and 31 touches, as previously mentioned, the magnification of the displayed information is changed. However, in this embodiment, the amount of change of the magnification depends on the display of the demarcable areas or the size of the area where the touch-sensitive surface is touched simultaneously. If the user touch-sensitive surface with two fingertips 30 and 31 touched, arise either two separable areas in which the touch-sensitive surface is touched or a larger area in which the surface is touched.

Bei dem vorliegenden Ausführungsbeispiel wird der Vergrößerungsfaktor nicht verändert, wenn die berührungsempfindliche Oberfläche nur mit einer Fingerspitze 30 berührt wird, der Vergrößerungsfaktor wird verkleinert, z. B. halbiert, wenn die berührungsempfindliche Oberfläche mit zwei Fingerspitzen 30 und 31 berührt wird. Die Anzeige, die bei einem solchen Bedienvorgang, der durch zwei Fingerspitzen 30 und 31 ausgeführt wird, wiedergegeben wird, ist in 5b gezeigt.In the present embodiment, the magnification factor is not changed when the touch-sensitive surface is only fingertip 30 is touched, the magnification factor is reduced, z. B. halved when the touch-sensitive surface with two fingertips 30 and 31 is touched. The display, in such an operation, by two fingertips 30 and 31 is played, is in 5b shown.

Wird die berührungsempfindliche Oberfläche der Anzeigefläche 10 bzw. des Touchpads mit noch mehr Fingerspitzen berührt, z. B. mit drei Fingerspitzen 30, 31 und 32, wie in 5c gezeigt, wird der Vergrößerungsfaktor nochmals verkleinert, beispielsweise nochmals halbiert im Vergleich zu dem Vergrößerungsfaktor bei der Berührung mit zwei Fingerspitzen 30 und 31. Die Anzeige für diesen Bedienvorgang, der mit drei Fingerspitzen 30, 31 und 32 ausgeführt wird, ist in 5c gezeigt.Will the touch-sensitive surface of the display area 10 Touchpad touches with even more fingertips, z. B. with three fingertips 30 . 31 and 32 , as in 5c shown, the Magnification factor again reduced, for example, again halved compared to the magnification factor when touching two fingertips 30 and 31 , The display for this operation, with three fingertips 30 . 31 and 32 is executed is in 5c shown.

Gemäß dem erfindungsgemäßen Verfahren kann ein Nutzer nach Beendigung dieses ersten Bedienvorgangs mit einem zweiten Bedienvorgang in demselben Bereich die Mittel 12 zum Empfangen von Spracheingaben aktivieren, beispielsweise indem er mit allen 5 Fingerspitzen kurz die berührungsempfindliche Anzeigefläche 10 bzw. den Touchpad antippt, und einen Suchbegriff durch eine Spracheingabe eingeben, um sich eine kontextspezifische Trefferliste aus derselben oder einer untergeordneten Hierarchieebene der Liste 22 ausgeben zu lassen.According to the method of the invention, a user can, after completing this first operation with a second operation in the same area, the means 12 activate to receive voice input, for example by briefly touching the touch-sensitive display area with all five fingertips 10 or taps the touchpad, and enter a search term through a voice input to a context-specific hit list from the same or a subordinate hierarchical level of the list 22 to spend.

Auf diese Weise kann der Nutzer mit geringem motorischen und zeitlichen Aufwand eine schnelle und kontrollierte Bewegung von virtuellen Objekten, wie insbesondere Listen, auf einer Anzeigefläche ausführen, wenn beispielsweise die Anzeigefläche eine berührungsempfindliche Oberfläche aufweist oder die Bedienung über einen von der Anzeigefläche räumlich abgesetzten Touchpad erfolgt. Insbesondere können die beschriebenen Differenzierungen der Bedienmerkmale den Bedienvorgängen beliebig zugeordnet werden, wie es sich im konkreten Fall als praktisch herausstellt. Die Bedienmerkmale sind dabei nicht auf die bereits näher erläuterte Berührdauer oder Mehrfachberührungen einer berührungsempfindlichen Anzeigefläche beschränkt, sondern umfassen insbesondere auch Gesten, die berührungslos beispielsweise mit einer Annährungserfassungseinrichtung vor der Anzeigefläche erfasst werden. Durch diese diversen Bedienmerkmale können Bedienvorgänge bestimmt und voneinander unterschieden werden.In this way, the user can perform a fast and controlled movement of virtual objects, in particular lists, on a display surface with little motor and time effort, for example, if the display surface has a touch-sensitive surface or the operation takes place via a spatially remote from the display surface touchpad , In particular, the described differentiations of the operating characteristics can be assigned to the operating processes as desired, as it turns out in the specific case as practical. The operating features are not limited to the previously described contact duration or multiple touches of a touch-sensitive display area, but in particular include gestures that are detected without contact, for example, with an approach detection device in front of the display area. By means of these various operating features, operating processes can be determined and distinguished from one another.

Wenn es sich bei der berührungsempfindlichen Fläche um einen separat von der Anzeigefläche 10 angeordneten Touchpad handelt, wird eine Annäherung eines Betätigungselements an den Touchpad mittels der Annäherungserfassungseinrichtung erfasst. Der Touchpad wird dann für Bedienvorgänge aktiviert, wenn eine Annäherung eines. Betätigungselements an die berührungsempfindliche Fläche erfasst worden ist. Die Aktivierung des Touchpads wird dann graphisch auf der Anzeigefläche z. B. durch ein Cursorsymbol dargestellt.If the touch-sensitive surface is one separate from the display surface 10 arranged touchpad is detected, an approach of an actuating element to the touchpad by means of approach detection device. The touchpad is then activated for operations when an approach of a. Actuator has been detected on the touch-sensitive surface. The activation of the touchpad is then graphically displayed on the display surface z. B. represented by a cursor symbol.

Neben den genannten Bedienvorgängen zur Veränderung der angezeigten Teilmenge der Gesamtinformation mittels Bildlauf und Aktivierung einer kontextspezifischen Suche mittels Spracheingaben können weitere Bedienvorgänge, beispielsweise das Verschieben von Bildinhalten, in das erfindungsgemäße Verfahren integriert werden.In addition to the aforementioned operations for changing the displayed subset of the total information by means of scrolling and activation of a context-specific search by means of voice inputs, further operating processes, for example the shifting of image contents, can be integrated into the method according to the invention.

Insbesondere kann zur Manipulation digitaler Listen die Cursor-Auswahl über Ein-Finger-Gesten erfolgen. Die Bewegung eines Fingers in vertikaler Richtung auf einem Touchpad bewegt den Cursor z. B. innerhalb der dargestellten Listeneinträge, wobei der Aufsatzpunkt des Fingers auf dem Touchpad die initiale Cursor-Position in der Liste bestimmt und die relative Bewegung des Fingers den Cursor steuert. Die Auswahl eines Listeneintrags kann z. B. durch eine kurzes Antippen an beliebiger Position des Touchpads erfolgen, wenn sich der Cursor bei diesem Listeneintrag befindet. Wenn der Cursor auf einem Listeneintrag am Rand steht, erfolgt ein Umblättern, wenn die entsprechende Ein-Finger-Geste in diese Richtung erfasst wird. Dabei können beim Umblättern vorteilhafterweise der erste bzw. letzte Listeneintrag weiterhin angezeigt werden, damit die neu angezeigte Teilmenge der Gesamtinformation eine Schnittmenge mit der alten Teilmenge aufweist und so vom Nutzer leichter visuell erfassbar ist. Mit einer Bewegung des Fingers nach links kann beispielsweise die übergeordnete Menüebene aufgerufen werden und mit einem langen Drücken des Touchpads (Longpress) – wie zuvor bereits detaillierter beschrieben – die Sprachbedienung aktiviert werden.In particular, for the manipulation of digital lists, the cursor selection can be done via one-finger gestures. The movement of a finger in the vertical direction on a touchpad moves the cursor z. Within the displayed list entries, where the point of attachment of the finger on the touchpad determines the initial cursor position in the list and the relative movement of the finger controls the cursor. The selection of a list entry can, for. B. by a short tap on any position of the touchpad when the cursor is at this list entry. If the cursor is on a list entry at the edge, it will flip over when the corresponding one-finger gesture in that direction is detected. In this case, the first or last list entry can advantageously continue to be displayed when turning over, so that the newly displayed subset of the total information has an intersection with the old subset and is thus more easily visually detectable by the user. With a movement of the finger to the left, for example, the superordinate menu level can be called up and with a long press of the touchpad (Longpress) - as previously described in more detail - the voice control can be activated.

Bei Berührung des rechten Rands des Touchpads könnte ein Index-Alphabet am rechten Rand der Liste zur Anzeige gebracht werden und durch Halten einer vorgegebenen Zeit und anschließendes Ziehen des Fingers analog zur Fingerposition die jeweiligen Buchstaben vergrößert dargestellt werden. Beim Loslassen des Fingers springt die Liste in den entsprechenden Bereich der Liste. Nach einem Time-Out, z. B. 5 Sekunden, in dem keine Auswahl getroffen wurde, kann die Liste wieder an die Position des aktiven Elements springen.Touching the right edge of the touchpad would display an index alphabet at the right edge of the list and zoom in on each letter by holding it for a set amount of time and then dragging the finger in the same way as the finger position. When you release the finger, the list jumps to the corresponding area of the list. After a time-out, z. If no selection has been made for 5 seconds, the list can jump back to the position of the active element.

Durch Zwei-Finger-Gesten können vorteilhafterweise mit dem ersten Finger die zuvor beschriebenen Bedienvorgänge ausgeführt werden und beim Aufsetzen eines zweiten Fingers ein Rollbalken am rechten Rand eingeblendet werden. Durch vertikale Bewegung der Finger kann die Liste bewegt werden, wobei diese bei plötzlichem Loslassen der Finger mit simulierter Trägheit weiterlaufen kann, um bei einer erneuten Berührung mit einem oder zwei Fingern wieder angehalten zu werden.By means of two-finger gestures, the above-described operating processes can advantageously be carried out with the first finger and, when a second finger is touched, a scroll bar can be inserted on the right-hand edge. By vertical movement of the fingers, the list can be moved, which can continue to run when suddenly letting go of the fingers with simulated inertia, to be stopped again on one touch with one or two fingers.

BezugszeichenlisteLIST OF REFERENCE NUMBERS

1010: Anzeigeflächedisplay area
1111: BedienerfassungsmittelUser acquisition means
1212: Mittel zum Empfangen von SpracheingabenMeans for receiving voice input
1313: Mikrophonmicrophone
1414: Steuervorrichtungcontrol device
1515: Datenbus im FahrzeugData bus in the vehicle
1616: Anwendungssystemapplication system
20a20a: angezeigte Teilmenge an Informationdisplayed subset of information
20b 20b: neu angezeigte Teilmenge an Informationnewly displayed subset of information
2121: BereichArea
21a21a: Roll-BalkenRoll-bar
2222: Listelist
2323: Listeneintraglist entry
2424: Schaltflächebutton
24a24a: erster Anzeigebereich einer Schaltflächefirst display area of a button
24b24b: zweiter Anzeigebereich einer Schaltflächesecond display area of a button
24c24c: Teil des zweiten Anzeigebereichs einer SchaltflächePart of the second display area of a button
2525: HinweissymbolSentinel
2626: Rahmenframe
30–3230-32: Fingerspitzen des NutzersFingertips of the user

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

DE 112007000278 T5 [0006]
WO 2008/083360 A1 [0007]
DE 202008000261 U1 [0008]

Claims

Method for providing a user interface in which - a subset lying in a hierarchical level ( 20a ) of a hierarchically structured overall information on a display surface ( 10 ) is displayed and - by a first operation, the at least one area ( 21 ) on the display area ( 10 ) and which refers to the displayed subset ( 20a ) of the total information, the displayed subset ( 20a ) of the total information is changed so that a newly displayed subset ( 20b ) within and / or hierarchically below the hierarchical level of the originally displayed subset ( 20a ), characterized in that - by a second operation, the at least one area ( 21 ) on the display area ( 10 ) and which refers to the displayed subset ( 20a ) of the overall information, means ( 12 ) are activated to receive voice input and - by means of the voice inputs the displayed subset ( 20a ) of the total information is changed so that the newly displayed subset ( 20b ) within and / or hierarchically below the hierarchical level of the originally displayed subset ( 20a ) lies.

A method according to claim 1, characterized in that the first and / or second operation is carried out on a touch-sensitive surface, which is separate from the display surface ( 10 ) is arranged.

A method according to claim 2, characterized in that an approach of an actuating element to the touch-sensitive surface is detected and the touch-sensitive surface is activated for operations when an approach of an actuating element to the touch-sensitive surface has been detected.

Method according to one of the preceding claims, characterized in that the subset lying in a hierarchical level ( 20a ) a plurality of list entries ( 23 ) of a list ( 22 ).

A method according to claim 4, characterized in that - in the voice input keywords are identified, - the keywords with the list entries ( 23 ) associated information content within and / or hierarchically below the hierarchical level of the list entries ( 23 ) are compared to relevance and - the newly displayed subset ( 20b ) comprises a hit list which, according to the ascertained relevance, is made up of list entries ( 23 ) of these hierarchy levels is formed.

Method according to one of the preceding claims, characterized in that the first and second operating processes can be distinguished by operating features of different gestures which are located on or in front of a touch-sensitive surface ( 10 ) and in order to distinguish between the first and second operating processes, an operating characteristic is determined from the contact duration of the at least one area ( 21 ) on the surface ( 10 ) is determined.

Method according to claim 6, characterized in that By touching for a first time interval a first input signal is generated, By touching for a second time interval a second input signal is generated, the second time interval being longer than the first time interval, and - A message is issued at the beginning of the touch that different operations are generated depending on the duration of the touch.

Device for providing a user interface, comprising - a display area ( 10 ) to represent a subset ( 20a ) of a hierarchically structured overall information, 11 ) for detecting at least two mutually distinguishable operating processes, which can be assigned to control commands, in at least one defined area ( 21 ) on the display area ( 10 ), - Medium ( 12 ) for receiving voice input and - a control device ( 14 ) for controlling the display on the display surface ( 10 ), characterized in that - the control device ( 14 ) the display area ( 10 ) controls so that by means of a first control command, which is assigned to a first operating process, the displayed subset ( 20a ) of the total information is changeable such that the newly displayed subset ( 20b ) within and / or hierarchically below the hierarchy level of the originally displayed subset ( 20a ), and - by means of a second control command associated with a second operation, the means ( 12 ) are activated to receive voice input, wherein by means of detected voice inputs, the displayed subset ( 20a ) of the total information is changeable such that the newly displayed subset ( 20b ) within and / or hierarchically below the hierarchical level of the originally displayed subset ( 20a ) lies.

Apparatus according to claim 8, characterized in that the operator detection means ( 11 ) comprise a touchpad coupled to a proximity sensing device by means of which the touchpad is activatable.

Vehicle having a device for providing a user interface according to claim 8 or 9.