Sensor Fusion von mobilen Endgeräten zur menschlichen Poseschätzung
Studienarbeit
Im Rahmen des Projekts Motion Capture with Video and IMUs

Description

Moderne Smartphones sind heutzutage im täglichen Leben allgegenwärtig. Sie verfügen mittlerweile über vielfältige Sensorik wie beispielsweise Kameras, inertiale Messeinheiten (IMUs) zu Beschleunigungs-, Orientierungs- und Drehratenmessung sowie auch GPS und Tiefensensoren.

Durch ihre flexible Verfügbarkeit ermöglichen sie einen niederschwelligen Einsatz effizienter Hardware in vielen Szenarien. So können sie beispielsweise auch zur Erfassung menschlicher Bewegungen im Bereich der Orthopädietechnik oder Sportwissenschaften Anwendung finden.

Es sollen verschiedene Sensoren von mobilen Endgeräten ausgelesen und fusioniert werden mit dem Ziel, eine videobasierte Poseschätzung zu verbessern. So soll beispielsweise der Beschleunigungssensor einer Smartwatch genutzt werden, um im Fall von Verdeckungen die Uneindeutigkeit der geschätzten Handgelenksposition zu minimieren. Durch die Fusionierung verschiedener Sensoren kann auch die physikalische Plausibilität der beobachteten Bewegungen erhöht werden.

Requirements

  • Interesse bzw. Vorerfahrung mit iOS/Swift wünschenswert
  • IMUs/Filter sollten nicht unbekannt sein

Contact person: Felix Winkler