ACL05 (26.6.) Invited Talk: "Why you have a body and what it is used for"

Sie beschrieb dabei die Rolle von Gestik, sowohl mit den Haenden, den Augen als auch mit dem ganzen Koerper, Gesten haben mehrere Funktionen in Dialogen. Zum einen dienen sie der inhaltlichen Unterstuetzung des Gesagten, koennen aber auch Zusatzinformationen transportieren, die nicht in der gesprochen Sprache enthalten sind. Ein Beispiel: eine kreisrunde Bewegung zu den Worten "eine Treppe" gibt eine Wendeltreppe.

Zum anderen dienen Gesten aber auch dazu, den Ablauf des Diskurses zu strukturieren, dazu dienen Veraenderungen der Koerperhaltung zwischen Diskursabschnitten.
Ausserdem gibt es Gesten, die Informationen ueber Grounding vermitteln. Grounding bedeutet: Haben sich die Dialogpartner verstanden? Gibt es eine gemeinsame Ebene, auf der sie sich verstaendigen?
Nicken bedeutet z.B. dass der Hoerer folgen kann, Aufschauen zum Sprecher ist ein Zeichen, dass der Hoerer mehr Informationen braucht. Diese Informationen koennten Dialog- und Informationssysteme mit virtuellen Avataren erkennen und nutzen, um den Dialog natuerlicher und fuer den Benutzer zufriedenstellender zu gestalten. Justine Casell zeigte hierzu einige beeindruckende Demos von entsprechenden Prototypen, die sie mit ihrer Gruppe am MIT Media Lab entwickelt hatte.

Ausserdem ging Cassell noch auf die Rolle von Smalltalk ein. Smalltalk dient dazu, das Vertrauen der Kommunikationspartner ineinander zu erhoehen, und die Kommunikation insgesamt angenehmer zu machen. Hierbei sind Gesten besonders wichtig, wie ein Vergleich von einem Dialogsystem mit Smalltalk-Simulation einmal Face-to-Face und einmal am Telefon zeigte. Das System wurde bei der direkten Gegenueberstellung als langweilend eingeschaetzt. Cassell vermutet, dass das daran liegt, dass dieses System keinerlei Gestik implementiert hatte, ein anderer Teilnehmer wandte bei der folgenden Fragerunde aber ein, dass es Studien gebe, die besagten, dass Menschen einander am Telefon grundsaetzlich mehr moegen wuerden. Trotz fehlender Gestik war auch diese Demonstration sehr beindruckend, in der virtuelle Agent sich z.B. fuer die schlechte Qualitaet seiner Sprachausgabe entschuldigt, und die Benutzer fast automatisch mit "ach, das macht doch nichts" antworteten.