- Abteilung Elektrotechnik
- Studiengänge
- Einstieg ins Studium
- Bachelor Elektrotechnik
- Master Elektrotechnik
- Master Energiesystemtechnik
- Quicklinks
- Informationen
- Interessierte
- Studierende
- Gremien/Funktionen
- Service
- Die Abteilung
- Kontakt
- Lehrbereiche
- Elektrische Maschinen & Leistungselektronik
- Elektrische Maschinen / Leistungselektronik
- Aktivitäten
- Laboratorium
- Ausstattung
- Arbeitsschutz
- Forschungsgebiete
- Lehrveranstaltungen
- Mathematik
- Solartechnik / regenerative Energien
- Hochfrequenztechnik
- Hochfrequenztechnik
- Abteilung Physikalische Technik
- Studiengänge
- Service
- Einstieg ins Studium
- Die Abteilung
- Kontakt
- Lehrbereiche
- Angewandte Kommunikationstechnik
- Lehre und Forschung
- Informations- und Kommunikationstechnik (Ba.)
- Signale und Systeme
- Drahtlose Kommunikationstechnik (MSc.)
- Entwurf Digitaler Systeme
- Labor IC-Design
- Projekte
- Künstliche Intelligenz
- Amateurfunkstation
- Morse- De- und Encoder
- Veröffentlichungen
- Abschlussarbeiten
- Angewandte Medizintechnik
- Lehre
- Anatomie / Physiologie
- Patho.-physiologie
- Angew. Medizintechnik Bachelor
- Angew. Medizintechnik Master
- Labore
- Elektronische Bauelemente und Schaltungen
- Lehre
- Analogtechnik
- Digitaltechnik
- Mikrocomputer
- Eingebettete Systeme
- Wahlmodule
- Angew. Analog- und Digitaltechnik
- Angewandte Mikrocomputertechnik (AMIK)
- Forschung und Entwicklung
- Projekte
- Sonstiges
- Literatursammlung
- Elektrotechnik, Regelungs- und Prozesstechnik
- Lehre
- Elektrotechnik I
- Elektrotechnik II
- Regelungstechnik BMM
- Technische Mechanik
- Robotertechnik
- C für Mikrocontroller
- Labor
- Aktivitäten
- Veröffentlichungen
- Feinwerktechnik und CAD
- Lehre
- Festigkeitslehre und Fertigungstechnik
- Technisches Zeichnen und Konstruktionstechnik
- CAD-Labor
- Aufgabenstellungen vergangener Jahre
- Geräte und Systeme der Gesundheitstechnik
- Lehre
- Veranstaltungen
- Research & Development
- Mess- und Systemtechnik
- Lehre
- Mess- und Feinwerktechnik 1
- Praktikum
- Mess- und Feinwerktechnik 2
- Praktikum
- Mess- und Systemtechnik
- Praktikum
- Mathematik und Informatik
- Informatik
- Softwareentwicklung
- Labore
- Zugangcode PCPool 2
- Mikrosystemtechnik
- Sensortechnik und Aktorik
- Lehre und Forschung
- Veröffentlichungen
- Abstract_sensors_2021_pt
- Videos
- Physik und Medizintechnik
- PME Laboratory Profile
- Teaching & Resources
- Awards & Honors
- Study abroad
Abstract: People with severe motor impairments like tetraplegia are restricted in activities of daily living (ADL) and are dependent on continuous human assistance. Assistive robots perform physical tasks in the context of ADLs to support people in need of assistance. In this work a sensor fusion algorithm and a robot control algorithm for localizing the user’s mouth and autonomously navigating a robot arm are proposed for the assistive drinking task. The sensor fusion algorithm is implemented in a visual tracking system which consists of a 2-D camera and a single point time-of-flight distance sensor. The sensor fusion algorithm utilizes computer vision to combine camera images and distance measurements to achieve reliable localization of the user’s mouth. The robot control algorithm uses visual servoing to navigate a robot-handled drinking cup to the mouth and establish physical contact with the lips. This system features an abort command that is triggered by turning the head and unambiguous tracking of multiple faces which enable safe human robot interaction. A study with nine able-bodied test subjects shows that the proposed system reliably localizes the mouth and is able to autonomously navigate the cup to establish physical contact with the mouth.
Keywords: human robot interaction; assistive robotics; sensor fusion; localization; computer vision; visual servoing; autonomous robotic system