Page Comparison

Leap Motion ist eine Firma, welche Devices für das Finger- und Hand-Tracking entwickelt und vertreibt. Der nun vorgestellte Leap Motion Controller ist ein USB Gerät, welches mittels Infrarot in der Lage ist, die Position von Fingern und der Hand in einem eingeschränkten Bereich sehr genau zu erfassen. Für Processing gab es schon recht früh ein Release eine Library, welche von onformative bereit gestellt wird. Die Library kann unter folgendem Link geladen werden. Sie erlaubt den Zugriff auf die Informationen der Kamera.

Struktur

Die Struktur ist grundsätzlich die gleiche wie bei jeder anderen Library auch.1.Library importieren

Zuerst gilt es die Library zu importieren:

import com.onformative.leap.LeapMotionP5;

...

import com.leapmotion.leap.Finger;

...

Dann kann ein Leap Objekt angelegt werden:

LeapMotionP5 leap;

3.LeapMotion initialisierenWelches dann später in der setup() Method initialisiert wird:

leap = new LeapMotionP5(this);

4.Die Position der Finger oder Hand erkennender Hand kann dann abgefragt werden:

for (Finger finger : leap.getFingerList())

...

 {

...

  PVector fingerPos = leap.getTip(finger);
}

...

Finger Tracking 2D

4.Finger oder Hand erkennenFinger Tracking 2D

Für das erste Beispiel “LM01_1_Aktive_Finger_2D” benutzen wir nur das einfache Finger Tracking und zeichnen für jeden Finger eine Ellipse
for (Finger finger : leap.getFingerList())
{
PVector fingerPos = leap.getTip(finger);
ellipse(fingerPos.x, fingerPos.y, 10, 10);
}
Mit diesem Beispiel lässt sich gut die Genauigkeit und die Limits (Finger eng zusammen) der Library erkennen.

Finger Tracking 3D

Das nächste Beispiel “LM01_2_Aktive_Finger_3D” zeigt, wie sich auch die 3D Koordinaten der Finger auslesen lassen. Dazu rufen wir ein translate() auf und zeichnen eine Sphäre an der neuen Position
translate(fingerPos.x, fingerPos.y, fingerPos.z);
So lässt sich erkennen, dass der Nullpunkt der z-Achse sich direkt über dem LeapMotion Controller befindet.

Hand Tracking 3D

Im letzten Beispiel “LM01_3_Aktive_Hand_3D” verwenden wir die Lage der Hand um eine virtuelle Box zu steuern. Auch hier lässt sich zum einen direkt die Position der Hand als PVector auslesen
PVector handPosition = leap.getPosition(hand);
Den Roll, Pitch und Yaw der Hand bekommen wir durch
float pitch = leap.getPitch(hand);
float roll = leap.getRoll(hand);
float yaw = leap.getYaw(hand);
Diese Werte können wir dann verwenden um die virtuelle Box um die gleichen Werte zu rotieren
rotateX(radians(map(pitch, -30, 30, 45, -45)));
rotateZ(radians(map(roll, -40, 40, 45, -45)));

Aufgaben

...

• Schaut euch die Gesture-Regocnition Beispiele der Library an

...

• Kreiert eine eigene Geste, welche durch den LeapMotion Controller erkannt werden kann

Weiteres

...

• LeapMotionP5 – Library von onformative