10 - Deformable Face Models

Question 1

Was ist der Schwachpunkt des Eigenfaces-Ansatzes?

Answer 1

Vektorkomponenten beschreiben nicht immer den gleichen Punkt, daher Ghosting Artifacts in Eigenfaces

Question 2

Was reduziert das Problem der Ghosting Artifacts in Eigenfaces etwas?

Answer 2

Die Verschiebung und Skalierung

Question 3

Was ist das Korrespondenzproblem?

Answer 3

Identifiziere korrespondierende Punkte (Augenwinkel, Mundwinkel, Nase) und repräsentiere diese immer durch die gleiche Variable

Question 4

Wie funktionieren Snakes des Active Contour Models?

Answer 4

• Verfolgung von Linien in Bildsequenzen
• Manuell initialisiert
• Energieminimierung der Spline

Question 5

Welche Eigenschaften hat die Spline bei den Snakes des Active Contour Models?

Answer 5

• Steifigkeit
• Viskoelastizität
• Äußeres Potential

Question 6

Wofür werden Snakes verwendet?

Answer 6

Zum Tracking von Features zur Gesichtsanimation

Question 7

Was sind die Aufgaben von Konturmodellen?

Answer 7

• Vermeide unplausible Verläufe

- Interpoliere über Bildbereiche mit fehlendem Kontursignal zur Konturvervollständigung

Question 8

Was passiert in der Lernphase von Active Shape Models?

Answer 8

• Labeling
• Alignment
• PCA der xy-Koordinaten

Question 9

Was passiert beim Labeling in der Lernphase von Active Shape Models?

Answer 9

Manuelle Markierung der Merkmalspunkte auf der Trainingsmenge

Question 10

Was sind Active Shape Models?

Answer 10

Active Shape Models sind ein erlerntes Modell der möglichen (erlaubten) Formen

Question 11

Was passiert beim Alignment in der Lernphase von Active Shape Models?

Answer 11

Verschiebung, Skalierung und Rotation der Bildkoordinaten der Merkmale, bis minimaler least-squared Error korrespondierender Punkte untereinander

Question 12

Wie erfolgt die Anwendung von Active Shape Models?

Answer 12

• Platziere Mittelwert-Form im Bild

- Iterative Anpassung mit Gradientenabstiegsverfahren

Question 13

Wie erfolgt die iterative Anpassung bei der Anwendung von Active Shape Models?

Answer 13

1. Möglichst geringe Deformation gemäß PCA

2. Anpassung an Grauwerte im Bild

Question 14

Was sind die Vorteile von ASM?

Answer 14

• Lernbasiert

- Plausibilität der Form ist entscheidendes Kriterium

Question 15

Was sind die Nachteile von ASM?

Answer 15

• Modell repräsentiert nur Geometrie, keine Grauwerte

- Nur einzelne Merkmalspunkte, nicht flächig

Question 16

Wie lautet die Idee von 2D morphable models?

Answer 16

Bilde alle Gesichter per warp auf ein Referenzmodell ab

Question 17

Was ist ein Active Appearance Model AAM?

Answer 17

Korrespondenz nicht mit
optischem Fluss, sondern
manuell (Merkmalspunkte)

Question 18

Wie funktionieren AAMs?

Answer 18

• Bei der Anpassung besteht immer ein Unterschied zwischen Eingabebild und der aktuellen Rekonstruktion durch das AAM
• Dieser Bildfehler ist ein Differenzbild
• Lerne die Abbildung Differenzbild -> Koeffizienten-update