Erkennung zusammengesetzter Zeichen zur Interaktion auf einem handelsüblichen Whiteboard

Organisatorisches

• Art der Arbeit: Diplomarbeit
• Status: abgeschlossen
• Interne Betreuer:
  • Peter Decker
  • Dietrich Paulus
• Student:
  • Christian Latsch
• Beginn: 15.11.2008
• Ende: 15.05.2009

Beschreibung

Ziel:
Es soll ein interaktives Whiteboardsystem realisiert werden, welches aus einem handelsüblichen Whiteboard, einer Kamera, einem Beamer und Computer besteht. Dieses System soll handgezeichnete Symbole des Benutzers auf dem Whiteboard erkennen und diese als Eingabe für ein Programm nutzen, bzw. durch den Beamer geeignete Ergänzende Graphiken hinzufügen.

Dazu müssen verschiedener primitive Objekte ( Kreise, Rechtecke usw.) sowie deren Lage und Größe auf dem Whiteboard automatisch erkannt, interpretiert und in einer Anwendung verarbeitet werden.

Methode: Zuerst müssen Kamera und Beamer kalibriert werden. Dazu wird der Beamer manuell auf das Whiteboard ausgerichtet, durch Projektion bekannter Punkte automatisch eine Homographie berechnet und das Kamerabild mit der Hilfe dieser Homographie entzerrt.

Diese entzerrten Kamerabilder werden segmentiert. Anschließend müssen in den Segmenierungsergebnissen primitive Objekte erkannt werden. Daraufhin wird die Lage der Objekte zueinander ermittelt und als topolischer Graph in der Form "Rechteck enthält Kreis" usw. in geeigneter Form gespeichert. Modelle von möglichen Objekten werden aus einer Wissensbasis gehalten. Zur Objekterkennung werden die aus dem Kamerabild erzeugten Graphen mit denen aus der Wissensbasis verglichen.