Author Archive

Die aktuelle Ausgabe des Wii Magazin 06/2008 berichtet über den 28-jährigen Johnny Chung Lee, Doktorand am Human-Computer Interaction Institute an der Carnegie Mellon University in Pittsburgh. Er stellte Anfang 2008 eine eigens entwickelte Wii-Steuerung vor, indem er die Wii-Steuerung einfach umkehrte! (wir berichteten)

Die Idee die ihn berühmt machte: Johnny Lee nutze die integrierte Infrarotkamera in der Wiimote einfach andersrum:
Anstatt die Wiimote in die Hand zu nehmen, platzierte er diese vor den Fernseher und bewegte stattdessen die Sensorleiste, die widerrum mit 2 Infrarotlichtern ausgerüstet ist. Wenn man nun die Sensorleiste bewegt, registriert die Wiimote die Position der Leiste relativ zum Bildschirm. Den entstehenden Effekt demonstrierte Lee mit einer eigens entwickelten Software mit 2D-Objekten. Durch die Umkehr der Eingabegeräte entstand der Eindruck, eines Pseudo-3Ds. (Das Video dazu gibts in dem schon besagten Eintrag)

Das ganze wurde dann von vielen als Inspirationsquelle genutzt und ein Head-Tracking ohne Wii und nur mittels einer Webcam entwickelt. Hier mal ein Beispiel, das dieses System auf einem kleinen MacBook demonstiert:

In einem weiteren Experiment versorgte Johnny Lee die WiiMote mit einem stärkeren Sensor und klebte sich Reflektoren an die Finger: herausgekommen war dann das hier:



Das wirklich tolle an der Sache sind die Selbstbauanleitungen dazu, die man auf Lee´s Website findet…Hier schonmal DIE IDEE für die nächste Generation der Spielkonsolen: Man stattet einen Raum mit mehreren Sendern aus, sodass die Spielkonsole die eigene Postion im Raum registrieren kann. Da sag ich doch einfach: Wozu WiiMotionPlus, wenn man seinen Gegner im Streetfighter direkt mit einem gezielten Tritt in die Knie zwingen kann!

Kritisch betrachtet wäre selbst bei einer 360° Lösung das wirkliche Feedback ein Problem, denn wenn unsere Faust im Spiel auf den gegnerischen Kopf prallt, dann sollte nicht nur die Spielfaust aufprallen, sondern auch unsere eigene, da sonst weiterhin Synchronisationsprobleme entstehen.

Es gibt zwar schon ein paar Ansätze, ein haptisches Feeback zu bieten (also nicht direkt für die Wii, sondern allgemein), allerdings beruhen die immer darauf, dass die Finger immer irgendwo eingespannt sind. Wie zum Beispiel bei dieser Lösung

Wir berichteten auch schon einmal ausführlicher darüber hier.

Aber wie man schon sieht, nichts für den “Hausgebrauch” und wirklich mehr was für den wissenschaftlichen, industriellen Einsatz. Beispielsweise zu Steuerung eines Robotors in lebensfeindlichen Umgebungen.

Ein Lösung, die wir da eher für denkbar halten ist eine “losgelöste” Erweiterung der Controller. Ein ersten Schritt in diese Richtung hat dazu Wissenschaftler des Japan’s National Institute of Advanced Industrial Science and Technology (AIST) unternommen. Der von ihnen entwickelte “GyroCubeSensuous” enthält Motoren und Gewichte, die entsprechen der virtuellen Umgebung verlagert werden. So das, bezogen auf ein Wii-Box-Spiel, gegen meine zuschlagende Faust eine Kraft dagegen hält. Hier mal eine völlig gewaltlose Präsentation des Systems:

Weitere Infos dazu auf der (leider nur englischen) Seite: http://techon.nikkeibp.co.jp/english/NEWS_EN/20050413/103707/?ST=english

… und wenn wir uns trauen noch einen Schritt weiter zu denken, dann wäre auch ein direktes physisches Feedback auf die Muskeln möglich. Basis dafür könnte die Electrostimulation sein, die die meisten wohl aus dem Nachtprogramm kennen:

Diese Technologie könnte es schaffen, das ich (um beim Beispiel Boxspiel zu bleiben) wenn ich auf etwas draufhaue auch gestoppt werde und den Wiederstand spüre. … Allerdings würden wir dieses Konzept gerne noch mal von einen Physiotherapeuten beurteilen lassen

Alles was danach kommt, um mich die Virtualität wirklich spüren zu lassen, würde dann wohl in die Richtung direkt Gehirnstimulation gehen, über die wir ja auch schon berichtet haben.

Es bleibt also spannend bei diesem Thema / Fragestellung, die nicht nur die Spieleindustrie in den nächsten Jahren maßgeblich beschäftigen wird …

Tags: 3D, animation, augmented reality, bedienung, design, desktop, display, E3, echtzeit, einfach, eingabesystem, eye-tracking, fernbedienung, head-tracking, interaktion, interface, Live, Nintendo, software, TV, virtuell, wii

In einer Pressemitteilung der Audi MediaServices wurde bekannt gegeben, dass Ende diesen Jahres eine neue Generation des MMI – Multi Media Interface auf den Markt kommt (leider zunächst nur im A8). Schon die Vorgänger sind wegen der intuitiven Bedienbarkeit, der großzügigen Bedienfelder und durch den zentralen Bedienknopf ihrer Konkurrenz im Vorraus, wenn es darum geht Musik, Film, Telefon, Navigation und Information zu bedienen. Auffällig hier ist die bewusst logische (gleiche) Anordnung der Bedienelemente der Mittelkonsole und der Anzeige auf dem Display.

Hier ein Bild des aktuellen Systems:

Das neue System will mit einer noch besseren Performance in der Bedienung, schnelleren Prozessoren, 40GB Speicher, einem kontrastreichen 7” TFT-Display (800×480 px), einer verbesserten Sprachsteuerung (die jetzt ganze Wörter versteht – das B U C H S T A B I E R E N des Navigationsziels fällt damit weg), einem integrierten DVD-Laufwerk mit Dolby Digital 5.1 und einer nahtlosen Integration von iPod u. Co punkten.

Das Nutzungsszenario wird durch einen Joystick erweitert, der auf dem zentralen Bedienknopf sitzt und in 8 Richtungen bewegt werden kann. Einstellungen, die z.B. an der Klimaautomatik vorgenommen werden, erscheinen eine kurze Zeit als kleine Popups, sodass nicht der gesamte Bildschirminhalt verdeckt wird.

Das Interessanteste für mich ist die neue zusätzliche, dreidimensionale Kartendarstellung in der Navigation (per Nvidia 3D-Chip), mit viel Liebe zum Detail à la Google Earth mit unterschiedlich eingefärbten Höhenniveaus und 3D-Gebäuden aus der Vogelperspektive. Besonders nützlich finde ich die Mini-Map, die bei Kreuzungen angezeigt wird und sogar Spurwechsel verdeutlicht. Außerdem interessant finde ich die Anzeige der “Point of Interests”, wie z.B. Sehenswürdigkeiten, nächste Autobahn-Abfahrten oder Rastplätze.

Mehr Infos (englisch) findet ihr unter: www.autoblog.com

und hier die komplette Pressemitteilung auf deutsch: www.lifepr.de

Tags: 3D, animation, Assistenzsystem, auflösung, auto, bluetotth, design, display, DVD, echtzeit, eingabesystem, google, interface, ipod, MMI, mobiltelefon, nvidia, software, spracherkennung, suche, TV, visualisierung, VW

… dann könnte da vielleicht ein “All-In-One-Device” rauskommen, welches kürzlich der japanische Designer Mac Funamizu in seinem Blog “petitinvention” vorgestellt hat. Das dargestellte Zukunftsszenario beschreibt ein Gerät, welches mittels Touchscreen, Built-In Camera, Scanner und Zugriff auf diverse Datenbank der perfekte Dr. Know für unterwegs sein könnte.

Wie auf seiner Seite zu sehen ist …

… wird die Umgebung analysiert und “augmented”. So zum Beispiel als “Innen-Geo-Informationssystem”, welches Möglichkeiten bietet, sich z.B.: in öffentlichen Gebäuden wie Flughafen, Bahnhof oder Krankenhaus durch Echtzeit-Anzeige zurechtzufinden. Sehr sinnvoll beispielsweise bei Notfallsituationen, um den kürzesten Weg hinaus zu finden.

Auch auf der Seite …

… die Möglichkeiten die sich für den Einsatz eines solchen Interfaces bieten, wie hier z.B.: das simultanes Übersetzen von fremdsprachigen Texten. Mit einem eingebauten Scanner können ebenso einzelne Wörter in ihrer Bedeutung nachgeschlagen werden.

Sehr naheliegend ist natürlich auch der Einsatz als Realbild-Navigationssystem, wie in einem unserer früheren Beiträge oder hier schön zu sehen ist.

Ich könnte jetzt noch unzählige Möglichkeiten aufzählen, um nur ein paar davon zu nennen: das Nachschlagen von Automarken, Tierarten- und gattungen, exotischen Früchten, Kalorienangaben, Sternenkonstellationen; das Vorhersagen des Wetters an einem spezifischen Ort und und und … (das die Forschung bei derartigen System schon ziemlich weit ist, haben wir ja vor kurzem auch hier gezeigt)

Die Realisierbarkeit einer solchen Mensch-Maschine-Daten-Schnittstelle wäre natürlich phantastisch. Machbar wäre heute auch schon vieles. Die Knackpunkte liegen aber eindeutig in den Standards. Wie könnte ein universelle Schnittstelle zum Datenaustausch eines jeden Hauses aussehen (für die Anzeige von Rauminformationen etc.)?
Weiterer “Stolperstein”: für eine derartige Darstellung müsste fortwährend exakt die Postion der Augen gemessen werden und darauf hin die Anzeige angepasst werden.

Insofern müssen wir wohl noch “ein wenig” Geduld haben …

Weitere Infos und noch viel mehr Bildmaterial findet ihr unter:
flickr.com/photos/mac_fun/

Tags: applikation, Assistenzsystem, augmented reality, bedienung, bedienungsanleitung, desktop, display, echtzeit, einfach, eingabesystem, Handy, interaction design, interaktion, interface, lesen, Live, mobiltelefon, touchscreen, Usability, visualisierung

Was zunächst aussieht wie ein weiterer “augmentierter” Funktionsprototyp mit 3D-Interface unter vielen anderen, ist in Wirklichkeit das Ergebnis eines einzelnen Hobbybastlers (Kyle McDonald). Die Materialliste für sein 3D-Tic Tac Toe ist erstaunlich kurz: Aluminiumfolie, sechs Widerstände, Kabel, ein Pappkarton und ein Arduino Prozessor. Umgesetzt wurde das Konzept mit Processing, einer Open-Source Umgebung zum programmieren von Bildern, Animation und Interaktion. Besonders Studenten, Künstler, Designer und natürlich Hobbybastler nutzen diese Programmiersprache um ihren Prototypen “Leben einzuhauchen”, siehe:www.processing.org

DIY 3D Interface: Tic Tac Toe from Kyle McDonald on Vimeo.

Der Arduino spuckt dabei Roh-Koordinaten aus, die alle 10 mal pro Sekunden aktualisiert werden. In dem Videobeitrag hat man teilweise das Gefühl, dass das Video die Hand führt anstatt andersherum. Die Ursache dafür ist wahrscheinlich, dass die 2 Videoquellen ( Webcam / Processing-Umgebung ) nicht optimal miteinander synchronisiert sind.
Abschließend denke ich, (abgesehen davon, dass dreidimensionales Tic Tac Toe ein wirklich unfaires Spiel ist), dass Arduino; eine kompatible Programmierumgebung; und ein paar “Haushaltsartikel” doch gute (und günstige) Möglichkeit bieten, um die eigene Kreativität in funktionierende 3D-Interfaces umzusetzen.

Mehr (englische) Informationen dazu bekommt ihr unter: www.gizmodo.com

Tags: 3D, analyse, arduino, augmented reality, bedienung, design, display, echtzeit, eingabesystem, interface, Live, software, touchscreen, virtuell, visualisierung

Ein Entwickler aus China trotzt der Überzeugung Steve Jobs, der im Januar 2007 das iPhone mit den Worten: „Nobody needs a stylus.“ präsentierte.
In Bezug auf das Thema Schreiben ohne Stift hat der chinesische Entwickler kürzlich seinen Protest in die Tat umgesetzt und eine Add-On Software für das iPhone namens HWPen auf den Markt gebracht, die es ermöglicht Text durch Erkennung der Handschrift zu verfassen.

Die aktuelle Beta-Version der Mini-Software unterstützt chinesische & lateinische Schriftzeichen sowie Ziffern, zeigt aber auch Lücken:
Sie schafft es nicht, sämtliche Funktionen der virtuellen Tastatur zu ersetzen, z.B. unterstützt sie nicht die Drehung auf die Seite und im Mailprogramm taucht sie gar nicht auf. Und wie im Video eindeutig zu erkennen, funktioniert die Schrifterkennung eher suboptimal. Die Meinungen über das Tool gehen weit auseinander, die meisten Besitzer eines iPhone sind jedoch überzeugt, dass sie mit der vorgegebenen Tastatur eindeutig schneller sind.

Bei den ganzen Streitigkeiten bleibe ich bei der Meinung, dass es doch am besten wäre, wenn der Nutzer selber entscheiden könnte, wie er seine Texte eingeben möchte. Eine gute Lösung bietet z.B. das Nokia N800 Internet Tablet an, das sowohl virtuelle Tastatur mit oder ohne Eingabestift anbietet, als auch Handschrifterkennung unterstützt.

PS: Das kleine Add-On kann auch nur installiert werden, wenn man ein sogenanntes “Jailbreak-iPhone” besitzt, d.h. es funktioniert ausschließlich bei gehackten Mobiltelefonen.

Mehr Infos dazu findet ihr unter: www.macnews.de/news/107815.html

Tags: apple, applikation, Assistenzsystem, bedienung, bedienungsanleitung, desktop, display, echtzeit, einfach, eingabesystem, Handy, interaction design, interaktion, interface, iphone, lesen, Live, Microsoft, mobiltelefon, nokia, schreiben, software, steve-jobs, touchscreen, Usability, visualisierung

Ein erst kürzlich von Apple angemeldetes Patent mit dem schönen Namen „Gesture Learning“ macht Vorfreude auf kommende Entwicklungen im Bereich Multi-Touch-Displays. In seinem Patent hat Apple eine eigene auf Gesten basierende Zeichensprache entwickelt, die in iPhone oder Macbook Air noch in seinen Kinderschuhen steckt.

Das Verrückte an der Sache ist, dass eine Hand dabei insgesamt 325 verschiedene Befehle ausführen kann. Die Befehle entstehen zunächst aus über 25 Finger-Kombinationen, sogenannten „chords“, die dann in 13 verschiedenen Bewegungen (Rotation, Translation, Skalieren etc.) eingesetzt werden können. Beim Lesen hat es mich dann auch nicht mehr gewundert, dass Apple zum Erlernen der Gesten sogar ein eigenes Spiel entwickelt hat.

Klingt zunächst nach einer Menge Lernstoff, aber ich bin überzeugt, dass Apples neue Zeichensprache mindestens genauso schnell erlernbar ist, wie man mit vierfach belegten Tasten eine SMS schreiben gelernt hat. Denn wie sagte Gerhart Hauptmann so schön:
„Sobald man in einer Sache Meister geworden ist, soll man in einer neuen Schüler werden.“

Ich bin auf alle Fälle schon sehr gespannt, welche elektronischen Geräte uns demnächst auffordern werden, mit den Fingern darüber zu streichen…

Weitere Infos gibt es unter:
www.unwiredview.com/2008/07/03/apple-wants-to-teach-us-multi-touch-gesture-language

Tags: animation, apple, barrierefreiheit, design, display, echtzeit, einfach, eingabesystem, forschung, GUI, interface, jeff_han, PDA, schreiben, steve-jobs, UID, virtuell, visualisierung

Bald ist Schluss mit langweiliger Werbung im Außenbereich…
Laut Technology Review will Reactrix Systems gestengesteuerte Displays einsetzen, mit denen der Betrachter interagieren kann. Dabei werden die Menüs ganz nach Manier bereits populärer Entertainment-Produkte wie der Wii von Nintendo und des iPhone von Apple durch Handbewegungen bedient, interagiert werden kann sowohl mit Händen als auch mit Füßen.

Durch dreidimensional arbeitende Kameras mit Stereoskoptechnik erkennt der Bildschirm bereits aus 4,5 m Entfernung seine Betrachter und lädt sie zum Spielen ein. Hervorheben will sich Reactrix dabei von seiner Konkurrenz durch eine ausgefeilte Nutzerschnittstelle, welche der (verjährten) Touchscreen-Technologie endgültig den Rücken kehren will, und für mich persönlich besonders spannend ist:
selbst die Interaktion mit “virtuellen Knöpfen” soll über Gestensteuerung realisiert werden.

Besonders sogenannte Out-of-Home-Medien in Einkaufszentren, Kinos oder der Einsatz bei Veranstaltungen sind dabei für Reactrix interessant. In den USA werden Shopping Malls bereits mit im Boden installierten interaktiven Bildschirmen ausgestattet, wo z.B.: Soccer gespielt werden kann.

Fazit: Meiner Meinung steckt in dem “Bildschirm mit Augen” noch viel mehr Potential als nur der Anwendungsbereich Werbung oder Spiele, da der Nutzer neben dem Spaßfaktor die Aufforderung zur Interaktion unmissverständlich begreift. Ich könnte mir eine Anwendung auch sehr gut als Lernhilfe für geistig behinderte Menschen vorstellen.
Beispielsweise entwickelt Zachary Lieberman z.Z. eine Software für behinderte Studenten, die auf deren Bewegungen audiovisuell reagiert und ihnen somit helfen kann, sich selbst zu verwirklichen.

Noch mehr Informationen dazu findet ihr unter:
www.reactrix.com
http://www.heise.de/tr/Bildschirm-mit-Augen–/artikel/110207

Tags: , 3D, animation, apple, barrierefreiheit, display, einfach, eingabesystem, forschung, interface, Nintendo, playstation, software, touchscreen, virtuell, visualisierung, wii

Als „die Neue“ bei SCHROEDER + WENDT nun mein erster Blogeintrag. Ich freue mich auf eure Kritik und Anregungen …

Und ich starte auch gleich mit einer Sache, die ich persönlich eher kritisch betrachte:

Bei dem Eingabegerät „Clove 2“ handelt es sich um einen Bluetooth gesteuerten Handschuh, der als Ersatz für die Tastatur dienen soll. Das von der Projektgruppe Cemetech, genauer gesagt von Christopher Mitchell, entwickelte Produkt ist für Situationen gedacht, in denen eine gewöhnliche Computertastatur nur schwer zu bedienen wäre, wie z.B.: in medizinischen Berufen, wenn eine Hand ständig frei für andere Tätigkeiten genutzt werden muss.

Die Bedienung erfolgt dabei über 31 Finger-Kombinationen und drei verschiedene Modi. Das Interface ist dem einer regulären Tastatur nachempfunden worden, welches sich in steuernde Tasten (ALT, SHIFT, STRG) und normale Tasten gliedert. Jede einzelne Taste und damit auch jegliche Tastenkombination kann „wie gewohnt“ angewendet werden, wobei die meist benutzten Tasten mit einem Klick zu erreichen sind, und die weniger häufigen über eine zwei- oder dreifache Tastenkombination angewählt werden. Der Nutzer erhält hierbei über Sounds ein auditives Feedback zu seinen Eingaben.

Jedoch sind aufgrund der begrenzten Anzahl Finger viele Tasten des Handschuhs hierbei mit sechsfacher Funktion belegt. Außerdem ist sehr viel Feingefühl in den Fingerspitzen gefragt: Gerade um Funktionen wie „CAPS LOCK“ zu aktivieren (und zu deaktivieren), wäre eine zusätzliche Anzeige hilfreich.

Das beispielhafte Nutzungsszenario des Mediziners kann ich mir eher schwer vorstellen, da ich mich zum Bedienen des Handschuhs einerseits auf die Fingerkombinationen konzentriere und zweitens den Blick auf den Bildschirm richten muß, um meine Eingaben zu kontrollieren.
Somit können andere Dinge „so nebenbei“ eher schlecht als recht ausgeführt werden.

Ich hingegen könnte mir vorstellen, dass der “Clove 2″ für PDA & Co eher geeignet wäre, um auch mobile Eingaben zu ermöglichen.

Mehr Infos gibt es auf der Projektseite:
www.cemetech.net/projects/item.php?id=16

Tags: Assistenzsystem, Bluetooth, design, display, einfach, eingabesystem, fernbedienung, forschung, interface, schreiben, software