Forum

Wie funktioniert eigentlich die Steuerung eines Geräts durch Gesten? Ich habe in einem Bericht gesehen, dass eine Automarke, ich glaube "Jaguar", eine gestenbasierte Steuerung des Navigationssystems anbietet. Habe in Suchmaschinen aber nichts dazu gefunden, nur das hier:
http://www.ident-technology.com/dmdocuments/Elektronik_20006.pdf
Das war aber nicht das Richtige, ich würde gerne wissen, wie es funktioniert, dass man einfach mit Gesten in der Luft ein Gerät steuert. Braucht das Gerät dafür ein Kamera, oder kann man das auch mit Pyro-Bewegungssensoren erfassen, oder mit Reflexlichtschranken? Arbeitet hier vielleicht jemand in dieser Branche?

» Wie funktioniert eigentlich die Steuerung eines Geräts durch Gesten? Ich
» habe in einem Bericht gesehen, dass eine Automarke, ich glaube "Jaguar",
» eine gestenbasierte Steuerung des Navigationssystems anbietet. Habe in
» Suchmaschinen aber nichts dazu gefunden, nur das hier:
» http://www.ident-technology.com/dmdocuments/Elektronik_20006.pdf
» Das war aber nicht das Richtige, ich würde gerne wissen, wie es
» funktioniert, dass man einfach mit Gesten in der Luft ein Gerät steuert.
» Braucht das Gerät dafür ein Kamera, oder kann man das auch mit
» Pyro-Bewegungssensoren erfassen, oder mit Reflexlichtschranken? Arbeitet
» hier vielleicht jemand in dieser Branche?

--
Hallo Klaus,

Da kannst dir ein Vieo ansehen:
http://www.popularmechanics.com/technology/industry/4217348.html
Da wird Multitouch, eine Lösung von Microsoft, beschrieben.
Das mal eine Anwendung, ein Multimediatisch, Anzeigetafel.

Die Lösung:
http://www.popularmechanics.com/technology/industry/4217348.html?page=2

Diesen Lösungsansatz kannst dann für andere Anwedungen umsetzen.

Da ist der Link zu deinem Bild:
http: skinplex.de/index.php?option=com_content&task=blogcategory&id=24&Itemid=52&lang=de

http: skinplex.de/index.php?option=com_content&task=blogcategory&id=78&Itemid=131&lang=de
(nach http alles kopieren und ohne www öffnen)

Hier, das was dich brennend interessiert:
http://www.pt-it.pt-dlr.de/_media/01_rogalla.pdf

PS:
wennst im google oder bing "steuerung durch gesten" eintippst, wirst schnell fündig.

Viel Spass
Grüße
Gerald

--
...und täglich grüßt der PC:
"Drück' ENTER! Feigling!"

Hallo Gerald,

danke für die Links, der letzte war sehr interessant für mich. Ich interessiere mich dafür, wie man durch Gesten in der Luft Eingaben tätigen kann, der Microsoft Surface-Ansatz findet leider auf der Oberfläche statt, so ähnlich wie einige Browser jetzt auch "Mouse gestures" verstehen, also nur in 2 Dimensionen. Das ist auch das Problem mit den Suchmaschinen, fast alle Ergebnisse sind für Software auf dem PC.
Dein letzter Link kommt dann dem, was ich suche, sehr nah (Datenhandschuh ist nur ein Spezialfall). Allerdings ist ein Kamera-Bild auch ziemlich verarbeitungsaufwendig, wenn man das z.B. auf einem mobilen Gerät verarbeiten will. Gibt es statt Kameras auch andere Sensoren, die mir die Lageinformation einer Hand o.ä. liefern können?

Ich habe noch den Link
http://winfuture.de/news,43130.html
gefunden, da werden IR-Sensoren verwendet. Allerdings nur bis 10 cm Abstand. Also nicht "richtig" in der Luft.

Welcher Sensortyp außer einer Kamera würde sich noch dafür eignen?

» Welcher Sensortyp außer einer Kamera würde sich noch dafür eignen?

Kristallkugel, Kaffeesatz....

SCNR

» Hallo Gerald,
»
» danke für die Links, der letzte war sehr interessant für mich. Ich
» interessiere mich dafür, wie man durch Gesten in der Luft Eingaben tätigen
» kann, der Microsoft Surface-Ansatz findet leider auf der Oberfläche statt,

Nein, die Kamera ist unter der Oberfläche.

--
Gruß von Patrick

https://www.elektronik-kompendium.de/

» Hallo Gerald,
»
» danke für die Links, der letzte war sehr interessant für mich. Ich
» interessiere mich dafür, wie man durch Gesten in der Luft Eingaben tätigen
» kann, der Microsoft Surface-Ansatz findet leider auf der Oberfläche statt,
» so ähnlich wie einige Browser jetzt auch "Mouse gestures" verstehen, also
» nur in 2 Dimensionen. Das ist auch das Problem mit den Suchmaschinen, fast
» alle Ergebnisse sind für Software auf dem PC.
» Dein letzter Link kommt dann dem, was ich suche, sehr nah (Datenhandschuh
» ist nur ein Spezialfall). Allerdings ist ein Kamera-Bild auch ziemlich
» verarbeitungsaufwendig, wenn man das z.B. auf einem mobilen Gerät
» verarbeiten will. Gibt es statt Kameras auch andere Sensoren, die mir die
» Lageinformation einer Hand o.ä. liefern können?
»
» Ich habe noch den Link
» http://winfuture.de/news,43130.html
» gefunden, da werden IR-Sensoren verwendet. Allerdings nur bis 10 cm
» Abstand. Also nicht "richtig" in der Luft.
»
» Welcher Sensortyp außer einer Kamera würde sich noch dafür eignen?

---
Hallo Klaus,

ok, super - da sind wir schon zu zweit, die sich für dieses Thema interessieren.

Das mit MS war als Ansatz gedacht. Es ist keinesfalls nur 2D, sondern,
wennst das weiter überlegst sehr wohl 3D.
--> Es ist hier lediglich eine Mattscheibe davor.
Damit die wunderschönen Bilder nicht "durch den Raum fliegen".
Das erscheint halt in 2D.
Hast du auch den inneren Aufbau im Tisch kurz angesehen?

Es sind Kameras montiert.
Naja, was kann man alles mit einer Kamera als Sensor anstellen?
Ehm, auch der letzte Link, also der Roboter im pdf;
wie macht der das? hm denk denk, klar eben, auch nichts anderes.

Kamera oder sonst was?? Das ist tatsächlich die Frage.
Die Ausführung, die Akteure ist eine andere Geschichte und sicher leichter zu lösen.

Wenn ich ich nun so mal schnell meine Ideenlampe einschalte und quertüftle:

Die Skinplex verwendet die Menschen als Mitstreiter zum Sensor
- dann bliebe nur mehr kapazitiv übrig, in Kombination mit den anderen
Sensortypen, wie optisch oder induktiv.
Dann weiter - dann müßte der ganze Raum ein großer Kondi werden.
Und genau das denke ich, würde gemacht werden müssen.

An den Wänden Resonatoren montieren, die eine, mehrere wandernde Wellen losschicken,
daneben den Empfänger, der das reflektierte Signal auffängt.
Ein großer 3D Touchscreen! hehe, net schlecht!!

Rechen, ratter rechen, wird der sich im Raum befindliche bewegte Körper registriert.
Wenn es nun der Mensch ist, dann kennt das System hoffentlich auch dessen Arm und Fußbewegungen.

Ja, ok, auch das Lächeln an die Wand
(hier eben nicht in die Kamera ) sollte schon mit registriert werden.

Ist mal so ein Ansatz.

Grüße
Gerald

--
...und täglich grüßt der PC:
"Drück' ENTER! Feigling!"

» » Welcher Sensortyp außer einer Kamera würde sich noch dafür eignen?
»
» Kristallkugel, Kaffeesatz....
»
» SCNR

---
Da bekommst welche:
http://glaskugel.com/de/index.html


Grüße
Gerald

--
...und täglich grüßt der PC:
"Drück' ENTER! Feigling!"

» Hallo Gerald,
»
» danke für die Links, der letzte war sehr interessant für mich. Ich
» interessiere mich dafür, wie man durch Gesten in der Luft Eingaben tätigen
» kann, der Microsoft Surface-Ansatz findet leider auf der Oberfläche statt,
» so ähnlich wie einige Browser jetzt auch "Mouse gestures" verstehen, also
» nur in 2 Dimensionen. Das ist auch das Problem mit den Suchmaschinen, fast
» alle Ergebnisse sind für Software auf dem PC.
» Dein letzter Link kommt dann dem, was ich suche, sehr nah (Datenhandschuh
» ist nur ein Spezialfall). Allerdings ist ein Kamera-Bild auch ziemlich
» verarbeitungsaufwendig, wenn man das z.B. auf einem mobilen Gerät
» verarbeiten will. Gibt es statt Kameras auch andere Sensoren, die mir die
» Lageinformation einer Hand o.ä. liefern können?
»
» Ich habe noch den Link
» http://winfuture.de/news,43130.html
» gefunden, da werden IR-Sensoren verwendet. Allerdings nur bis 10 cm
» Abstand. Also nicht "richtig" in der Luft.
»
» Welcher Sensortyp außer einer Kamera würde sich noch dafür eignen?

---
Hi Klaus,

weil der Roboter angesprochen wurde:

http://www.motoman.eu/Global/Documents-de/MOTOMAN-News/2003/Moto_0302.pdf
Da im pdf ist ein Arbeitskumpel.
Hört auf den Namen HRP2.

Aus den Daten auf Seite 7 kannst entnehmen, was er so zum räumlichen "Sehen" benutzt.

Google mal nach HRP2.

Grüße
Gerald

--
...und täglich grüßt der PC:
"Drück' ENTER! Feigling!"

Hallo Gerald, hallo Forum,

ich war eine Woche im Urlaub, deswegen kommt meine Antwort auch jetzt erst...

OK, wenn der Roboter 3 CCD-Stereokameras benutzt, finde ich den etwas "übermotorisiert", laut http://www.techfak.uni-bielefeld.de/~rhaschke/lehre/WS04/humanoids/ausarbeitung/HRP-2.pdf
ist eine Pentium-III CPU alleine damit beschäftigt, die Objekte zu erkennen, und das auch nicht in Echtzeit.

Das Steuerungssystem soll auch nur ein einfaches Interface zur Bedienung einer Maschine bieten, es muss also z.B. nicht die hochgehaltenen Finger zählen können.

Als einfachstes Modell würde ich sagen, dass die Hand eine Fläche im Raum ist. Eine Fläche wird von 3 Vektoren aufgespannt (dabei müssen diese linear unabhängig sein), man kann natürlich auch mehr als 3 nehmen.
Eine Kamera als Sensor liefert mehr als einen Vektor. Zur Vereinfachung würde ich dann den Raum, in dem die Hand Befehle geben kann, einschränken, zum Beispiel ist das dann ein pyramidenförmiger Raum (je nach Sensor ist vielleicht auch ein kegelförmiger besser) vor dem Gerät. Die Kamera kann dann die x- und y-Koordinaten der Hand liefern, ein Radar, ein Echolot oder ein Laserentferungsmesser könnten die Entfernung der Hand von dem Gerät bestimmen.

Anderes Gedankenspiel: Durch geschickte Anordnung von 3 Entfernungsmessern bekommt man die 3 Vektoren. Dabei wäre das Ziel, dass die Entfernungsmesser in das Gerät integriert werden, also nicht vom Benutzer im Raum verteilt werden müssen.

Sicherlich ist die Vereinfachung der Hand als Fläche im Raum etwas gewagt, aber andererseits soll der Benutzer ja nur eine einfache Möglichkeit zur Steuerung bekommen. Bei einem einfachen Gerät kann man sich mit [Hand nach oben] und [Hand nach unten] durch Menüpunkte schlängeln, mit [Hand nach links] und [Hand nach rechts] durch Menükategorien, und mit [Hand nach vorne] = OK und [Hand nach hinten]=Abbruch.
Will man ein Fahrzeug steuern, kann [Hand nach vorne] dann "Gas geben" bedeuten.
Wichtig ist, dass dem Benutzer die Bedienung erleichtert wird, die herkömmliche Bedienung über Taster kann beibehalten werden, im Zweifelsfalle soll lieber ein Kommando nicht erkannt werden, als ein falsches Kommando ausgeführt werden.