SlideShare uma empresa Scribd logo
1 de 39
Multitouch
Interaktionen
Stefan Dinter




Dinter | Multitouch Interaktionen | Überblick
Überblick
 • Einführung

 • Multitouch Interface & Experiment (DIY)

 • Multitouch Display (optisch)

 • Grenzen

 • Ausblick



Dinter | Multitouch Interaktionen | Überblick
Einführung
 •   First Touch: Light pen (Lincoln Laboratory (MIT), 1949)
     Erste CAD-Anwendung Sketchpad, 1963

 •   Computermäuse (Engelbart & English, 1963/64)
     brauchten gebrauchstaugliche Interfaces: Xerox Star
     und PERQ, 1982

 •   Touch Displays wurden bereits
     Mitte der 60er Jahre entwickelt
     Erstes gebrauchstaugliches Gerät:
     IBM PLATO IV, 1972
Dinter | Multitouch Interaktionen | Überblick
Abgrenzung
     •   Resistive Systeme

     •   Kapazitive Systeme

     •   Induktive Systeme

     •   SAW (Surface Acoustic Wave –
         Schallwellengesteuerte Systeme)

     •   Dispersive-Signal-Technology-Systeme


Dinter | Multitouch Interaktionen | Überblick
Einführung
 •   Jeff Han at TED 2006

     •   High Resolution

     •   Geringe Kosten

     •   Einfach zu implementieren




Dinter | Multitouch Interaktionen | Überblick
Multitouch Interface (DIY)
 •   Erkennen von Lichtspitzen, sogenannten „Blobs“
     mittels Kamera

 •   Zuordnen der „Blobs“ in ein Koordinatensystem (2D)

 •   Universelles Protokoll für Datenversand (MIDI/OSC/
     TUIO)

 •   Interaktionsapplikation empfängt und verarbeitet
     diese Daten

Dinter | Multitouch Interaktionen | Überblick
Dinter | Multitouch Interaktionen | Überblick
Pre-Processing




  Image
(QuartzCor
    e)
   Capture Image




   Dinter | Multitouch Interaktionen | Überblick
Pre-Processing                 Blob Tracking




  Image                      Framework
(QuartzCor                   (Touchlib)
    e)
   Capture Image                    Point Detection



                                    Blob Tracking



                                Gesture Recordination



                                Send Pack (e.g. TUIO)




   Dinter | Multitouch Interaktionen | Überblick
Pre-Processing                 Blob Tracking              Interaction




  Image                      Framework                  Processing
(QuartzCor                   (Touchlib)                 (Processing
    e)                                                       )
   Capture Image                    Point Detection        Recive Pack Protocol



                                    Blob Tracking            Process Events



                                Gesture Recordination



                                Send Pack (e.g. TUIO)




   Dinter | Multitouch Interaktionen | Überblick
Pre-Processing                 Blob Tracking              Interaction              Result




  Image                      Framework                  Processing                Output
(QuartzCor                   (Touchlib)                 (Processing
    e)                                                       )                    Video/
   Capture Image                    Point Detection        Recive Pack Protocol
                                                                                  Audio

                                    Blob Tracking            Process Events



                                Gesture Recordination



                                Send Pack (e.g. TUIO)




   Dinter | Multitouch Interaktionen | Überblick
Funktion Blob Tracking




Dinter | Multitouch Interaktionen | Überblick
Funktion Blob Tracking




Dinter | Multitouch Interaktionen | Überblick
Funktion Blob Tracking




Dinter | Multitouch Interaktionen | Überblick
Beispiel Interaktion




Dinter | Multitouch Interaktionen | Überblick
Beispiel Interaktion
 •   Beispiel für die Verarbeitung mit
     Processing und dem Framework MSA Fluid




Dinter | Multitouch Interaktionen | Überblick
Beispiel Interaktion
 •   Beispiel für die Verarbeitung mit
     Processing und dem Framework MSA Fluid




Dinter | Multitouch Interaktionen | Überblick
Kosten & Aufwand
 •   Schnell                                    Gegenstand    EUR
 •   Einfach                                    Webcam       13.95 €
 •   Günstig                                    Karton       0.00 €
                                                Glasscheibe 5.00 €
                                                             0.02 €
                                                Butterbrotp.
                                                 Gesamt      18.97 €

Dinter | Multitouch Interaktionen | Überblick
Multitouch Display
(optisch)
 •   Bilderkennung, wie bei Experiment, besondere
     Lichtverhältnisse

 •   Direktes Arbeiten (Eingabegerät = Ausgabegerät)

 •   ohne Hilfsmittel auf dem Screen

 •   Vielzahl an Frameworks und Scripts




Dinter | Multitouch Interaktionen | Überblick
Optischer Trick
 •   CCDs erkennen ein
     größeres Lichtspektrum




Dinter | Multitouch Interaktionen | Überblick
Aufbau




Dinter | Multitouch Interaktionen | Überblick
Aufbau
                      0.01nm   1nm   100nm      1mm   1cm   1m     1km




                      400nm                                      700nm




Dinter | Multitouch Interaktionen | Überblick
Aufbau
                      0.01nm     1nm   100nm        1mm   1cm   1m     1km




                      400nm                                          700nm




                               Sichtbares Licht: Mensch entspricht




Dinter | Multitouch Interaktionen | Überblick
Aufbau
                      0.01nm     1nm   100nm        1mm   1cm   1m     1km




                      400nm                                          700nm




                               Sichtbares Licht: Mensch entspricht           IR-Quelle




Dinter | Multitouch Interaktionen | Überblick
Aufbau
                      0.01nm     1nm   100nm          1mm   1cm   1m     1km




                      400nm                                            700nm




                               Sichtbares Licht: Mensch entspricht             IR-Quelle



                                               Sichtbares Licht: Webcam



Dinter | Multitouch Interaktionen | Überblick
Aufbau
                      0.01nm     1nm   100nm          1mm   1cm   1m     1km




                      400nm                                            700nm




                               Sichtbares Licht: Mensch entspricht              IR-Quelle



                                               Sichtbares Licht: Webcam        Schwarz-Filter



Dinter | Multitouch Interaktionen | Überblick
Aufbau
                      0.01nm     1nm   100nm           1mm   1cm   1m     1km




                      400nm
                                               Anzeigen                 700nm    Erkennen




                               Sichtbares Licht: Mensch entspricht               IR-Quelle



                                                Sichtbares Licht: Webcam        Schwarz-Filter



Dinter | Multitouch Interaktionen | Überblick
Aufbau                                                                  850 nm

                                                                                +




                      0.01nm     1nm   100nm           1mm   1cm   1m     1km




                      400nm
                                               Anzeigen                 700nm        Erkennen




                               Sichtbares Licht: Mensch entspricht                   IR-Quelle



                                                Sichtbares Licht: Webcam            Schwarz-Filter



Dinter | Multitouch Interaktionen | Überblick
Optische Bauformen
 •   Frustrated Total Internal Reflection (FTIR)
     Totalreflektion

 •   Diffused Illumination (DI)

 •   Diffused Surface Illumination (DSI)

 •   Laser Light Plane (LLP)

 •   LED Light Plane (LED-LP)


Dinter | Multitouch Interaktionen | Überblick
Schema




Dinter | Multitouch Interaktionen | Überblick
Acrylglas
Multitouch-Tisch|FTIR
Quelle: Tim Roth



                                                   LEDs
LEDs


                                                Projektor



Computer




Spiegel
                                                 Kamera

Dinter | Multitouch Interaktionen | Überblick
Multitouch-Tisch|DI
Quelle: Tim Roth                                Acrylglass




     PC
                                                               LED Strahler


                                                                 Projektor
    Spiegel
                                                             Kamera


                                                         LED Strahler



Dinter | Multitouch Interaktionen | Überblick
Reactable
www.reactable.com




Dinter | Multitouch Interaktionen | Überblick
Surface
www.microsoft.com/surface
Dinter | Multitouch Interaktionen | Überblick
Multitouch-Tisch|DI
Quelle: Stefan Dinter
Dinter | Multitouch Interaktionen | Überblick
Grenzen
 • Sehr wenige Informationen über Multitouch-
   Interaktionen, obwohl bereits seit über 25 Jahren
   Geräte zur Verfügung stehen

 • Rechenintensive Erkennung der Gesten oder Fiducials

 • Keine standarisierten Gesten

 • Zum Teil Abhängig vom Umgebungslicht



Dinter | Multitouch Interaktionen | Überblick
Ausblick
 • Überwindung der herkömmlichen
   Interaktionsschnittstelle Screen

 • In Systemen integriert oder leicht nachzuinstallieren

 • Nicht für jeden Bereich ist Multitouch optimal –
   Maus/Tastatur werden auch in Zukunft bleiben

 • Weitere Devices für Multitouch:
   mehrere Displays kombinieren, SmartPhone,
   SmartPad, TrackPad
Dinter | Multitouch Interaktionen | Überblick
Quellen
•   Theorie
    http://www.billbuxton.com/multitouchOverview.html
•   Bilderkennung (Frameworks)
    reacTIVision > http://reactivision.sourceforge.net
    Touché > http://gkaindl.com/software/touche
•   Protokoll/Experiment (Sourcecode/Binary)
    TUIO > http://www.tuio.org
    XTUIO > http://www.xtuio.com
•    Entwicklungsumgebung (IDE)
     Processing > http://processing.org
Dinter | Multitouch Interaktionen | Überblick
Danke für‘s Zuhören.
Stefan Dinter
Diplom-Designer
Lehrauftrag «Interaktive Medien» am Lehrstuhl Kunstpädagogik, 
Friedrich-Alexander-Universität Erlangen-Nürnberg

Adobe Certified Expert (ACE) Adobe Acrobat Professional

Mitgliedschaften:
Deutsche Gesellschaft für Designtheorie 
und -forschung e.V. (DGTF), 
Alliance of German Designers e.V. (AGD),
Usability Professionals‘ Association (G|UPA), 
Interaction Design Association (IxDA)

Dinter | Multitouch Interaktionen | Überblick

Mais conteúdo relacionado

Destaque

How Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental HealthHow Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental HealthThinkNow
 
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdfAI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdfmarketingartwork
 
PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024Neil Kimberley
 
Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)contently
 
How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024Albert Qian
 
Social Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie InsightsSocial Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie InsightsKurio // The Social Media Age(ncy)
 
Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024Search Engine Journal
 
5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summarySpeakerHub
 
ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd Clark Boyd
 
Getting into the tech field. what next
Getting into the tech field. what next Getting into the tech field. what next
Getting into the tech field. what next Tessa Mero
 
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search IntentGoogle's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search IntentLily Ray
 
Time Management & Productivity - Best Practices
Time Management & Productivity -  Best PracticesTime Management & Productivity -  Best Practices
Time Management & Productivity - Best PracticesVit Horky
 
The six step guide to practical project management
The six step guide to practical project managementThe six step guide to practical project management
The six step guide to practical project managementMindGenius
 
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...RachelPearson36
 
Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...
Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...
Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...Applitools
 
12 Ways to Increase Your Influence at Work
12 Ways to Increase Your Influence at Work12 Ways to Increase Your Influence at Work
12 Ways to Increase Your Influence at WorkGetSmarter
 

Destaque (20)

How Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental HealthHow Race, Age and Gender Shape Attitudes Towards Mental Health
How Race, Age and Gender Shape Attitudes Towards Mental Health
 
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdfAI Trends in Creative Operations 2024 by Artwork Flow.pdf
AI Trends in Creative Operations 2024 by Artwork Flow.pdf
 
Skeleton Culture Code
Skeleton Culture CodeSkeleton Culture Code
Skeleton Culture Code
 
PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024PEPSICO Presentation to CAGNY Conference Feb 2024
PEPSICO Presentation to CAGNY Conference Feb 2024
 
Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)Content Methodology: A Best Practices Report (Webinar)
Content Methodology: A Best Practices Report (Webinar)
 
How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024How to Prepare For a Successful Job Search for 2024
How to Prepare For a Successful Job Search for 2024
 
Social Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie InsightsSocial Media Marketing Trends 2024 // The Global Indie Insights
Social Media Marketing Trends 2024 // The Global Indie Insights
 
Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024Trends In Paid Search: Navigating The Digital Landscape In 2024
Trends In Paid Search: Navigating The Digital Landscape In 2024
 
5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary5 Public speaking tips from TED - Visualized summary
5 Public speaking tips from TED - Visualized summary
 
ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd ChatGPT and the Future of Work - Clark Boyd
ChatGPT and the Future of Work - Clark Boyd
 
Getting into the tech field. what next
Getting into the tech field. what next Getting into the tech field. what next
Getting into the tech field. what next
 
Google's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search IntentGoogle's Just Not That Into You: Understanding Core Updates & Search Intent
Google's Just Not That Into You: Understanding Core Updates & Search Intent
 
How to have difficult conversations
How to have difficult conversations How to have difficult conversations
How to have difficult conversations
 
Introduction to Data Science
Introduction to Data ScienceIntroduction to Data Science
Introduction to Data Science
 
Time Management & Productivity - Best Practices
Time Management & Productivity -  Best PracticesTime Management & Productivity -  Best Practices
Time Management & Productivity - Best Practices
 
The six step guide to practical project management
The six step guide to practical project managementThe six step guide to practical project management
The six step guide to practical project management
 
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
Beginners Guide to TikTok for Search - Rachel Pearson - We are Tilt __ Bright...
 
Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...
Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...
Unlocking the Power of ChatGPT and AI in Testing - A Real-World Look, present...
 
12 Ways to Increase Your Influence at Work
12 Ways to Increase Your Influence at Work12 Ways to Increase Your Influence at Work
12 Ways to Increase Your Influence at Work
 
ChatGPT webinar slides
ChatGPT webinar slidesChatGPT webinar slides
ChatGPT webinar slides
 

UX Stammtische Franken

  • 1. Multitouch Interaktionen Stefan Dinter Dinter | Multitouch Interaktionen | Überblick
  • 2. Überblick • Einführung • Multitouch Interface & Experiment (DIY) • Multitouch Display (optisch) • Grenzen • Ausblick Dinter | Multitouch Interaktionen | Überblick
  • 3. Einführung • First Touch: Light pen (Lincoln Laboratory (MIT), 1949) Erste CAD-Anwendung Sketchpad, 1963 • Computermäuse (Engelbart & English, 1963/64) brauchten gebrauchstaugliche Interfaces: Xerox Star und PERQ, 1982 • Touch Displays wurden bereits Mitte der 60er Jahre entwickelt Erstes gebrauchstaugliches Gerät: IBM PLATO IV, 1972 Dinter | Multitouch Interaktionen | Überblick
  • 4. Abgrenzung • Resistive Systeme • Kapazitive Systeme • Induktive Systeme • SAW (Surface Acoustic Wave – Schallwellengesteuerte Systeme) • Dispersive-Signal-Technology-Systeme Dinter | Multitouch Interaktionen | Überblick
  • 5. Einführung • Jeff Han at TED 2006 • High Resolution • Geringe Kosten • Einfach zu implementieren Dinter | Multitouch Interaktionen | Überblick
  • 6. Multitouch Interface (DIY) • Erkennen von Lichtspitzen, sogenannten „Blobs“ mittels Kamera • Zuordnen der „Blobs“ in ein Koordinatensystem (2D) • Universelles Protokoll für Datenversand (MIDI/OSC/ TUIO) • Interaktionsapplikation empfängt und verarbeitet diese Daten Dinter | Multitouch Interaktionen | Überblick
  • 7. Dinter | Multitouch Interaktionen | Überblick
  • 8. Pre-Processing Image (QuartzCor e) Capture Image Dinter | Multitouch Interaktionen | Überblick
  • 9. Pre-Processing Blob Tracking Image Framework (QuartzCor (Touchlib) e) Capture Image Point Detection Blob Tracking Gesture Recordination Send Pack (e.g. TUIO) Dinter | Multitouch Interaktionen | Überblick
  • 10. Pre-Processing Blob Tracking Interaction Image Framework Processing (QuartzCor (Touchlib) (Processing e) ) Capture Image Point Detection Recive Pack Protocol Blob Tracking Process Events Gesture Recordination Send Pack (e.g. TUIO) Dinter | Multitouch Interaktionen | Überblick
  • 11. Pre-Processing Blob Tracking Interaction Result Image Framework Processing Output (QuartzCor (Touchlib) (Processing e) ) Video/ Capture Image Point Detection Recive Pack Protocol Audio Blob Tracking Process Events Gesture Recordination Send Pack (e.g. TUIO) Dinter | Multitouch Interaktionen | Überblick
  • 12. Funktion Blob Tracking Dinter | Multitouch Interaktionen | Überblick
  • 13. Funktion Blob Tracking Dinter | Multitouch Interaktionen | Überblick
  • 14. Funktion Blob Tracking Dinter | Multitouch Interaktionen | Überblick
  • 15. Beispiel Interaktion Dinter | Multitouch Interaktionen | Überblick
  • 16. Beispiel Interaktion • Beispiel für die Verarbeitung mit Processing und dem Framework MSA Fluid Dinter | Multitouch Interaktionen | Überblick
  • 17. Beispiel Interaktion • Beispiel für die Verarbeitung mit Processing und dem Framework MSA Fluid Dinter | Multitouch Interaktionen | Überblick
  • 18. Kosten & Aufwand • Schnell Gegenstand EUR • Einfach Webcam 13.95 € • Günstig Karton 0.00 € Glasscheibe 5.00 € 0.02 € Butterbrotp. Gesamt 18.97 € Dinter | Multitouch Interaktionen | Überblick
  • 19. Multitouch Display (optisch) • Bilderkennung, wie bei Experiment, besondere Lichtverhältnisse • Direktes Arbeiten (Eingabegerät = Ausgabegerät) • ohne Hilfsmittel auf dem Screen • Vielzahl an Frameworks und Scripts Dinter | Multitouch Interaktionen | Überblick
  • 20. Optischer Trick • CCDs erkennen ein größeres Lichtspektrum Dinter | Multitouch Interaktionen | Überblick
  • 21. Aufbau Dinter | Multitouch Interaktionen | Überblick
  • 22. Aufbau 0.01nm 1nm 100nm 1mm 1cm 1m 1km 400nm 700nm Dinter | Multitouch Interaktionen | Überblick
  • 23. Aufbau 0.01nm 1nm 100nm 1mm 1cm 1m 1km 400nm 700nm Sichtbares Licht: Mensch entspricht Dinter | Multitouch Interaktionen | Überblick
  • 24. Aufbau 0.01nm 1nm 100nm 1mm 1cm 1m 1km 400nm 700nm Sichtbares Licht: Mensch entspricht IR-Quelle Dinter | Multitouch Interaktionen | Überblick
  • 25. Aufbau 0.01nm 1nm 100nm 1mm 1cm 1m 1km 400nm 700nm Sichtbares Licht: Mensch entspricht IR-Quelle Sichtbares Licht: Webcam Dinter | Multitouch Interaktionen | Überblick
  • 26. Aufbau 0.01nm 1nm 100nm 1mm 1cm 1m 1km 400nm 700nm Sichtbares Licht: Mensch entspricht IR-Quelle Sichtbares Licht: Webcam Schwarz-Filter Dinter | Multitouch Interaktionen | Überblick
  • 27. Aufbau 0.01nm 1nm 100nm 1mm 1cm 1m 1km 400nm Anzeigen 700nm Erkennen Sichtbares Licht: Mensch entspricht IR-Quelle Sichtbares Licht: Webcam Schwarz-Filter Dinter | Multitouch Interaktionen | Überblick
  • 28. Aufbau 850 nm + 0.01nm 1nm 100nm 1mm 1cm 1m 1km 400nm Anzeigen 700nm Erkennen Sichtbares Licht: Mensch entspricht IR-Quelle Sichtbares Licht: Webcam Schwarz-Filter Dinter | Multitouch Interaktionen | Überblick
  • 29. Optische Bauformen • Frustrated Total Internal Reflection (FTIR) Totalreflektion • Diffused Illumination (DI) • Diffused Surface Illumination (DSI) • Laser Light Plane (LLP) • LED Light Plane (LED-LP) Dinter | Multitouch Interaktionen | Überblick
  • 30. Schema Dinter | Multitouch Interaktionen | Überblick
  • 31. Acrylglas Multitouch-Tisch|FTIR Quelle: Tim Roth LEDs LEDs Projektor Computer Spiegel Kamera Dinter | Multitouch Interaktionen | Überblick
  • 32. Multitouch-Tisch|DI Quelle: Tim Roth Acrylglass PC LED Strahler Projektor Spiegel Kamera LED Strahler Dinter | Multitouch Interaktionen | Überblick
  • 35. Multitouch-Tisch|DI Quelle: Stefan Dinter Dinter | Multitouch Interaktionen | Überblick
  • 36. Grenzen • Sehr wenige Informationen über Multitouch- Interaktionen, obwohl bereits seit über 25 Jahren Geräte zur Verfügung stehen • Rechenintensive Erkennung der Gesten oder Fiducials • Keine standarisierten Gesten • Zum Teil Abhängig vom Umgebungslicht Dinter | Multitouch Interaktionen | Überblick
  • 37. Ausblick • Überwindung der herkömmlichen Interaktionsschnittstelle Screen • In Systemen integriert oder leicht nachzuinstallieren • Nicht für jeden Bereich ist Multitouch optimal – Maus/Tastatur werden auch in Zukunft bleiben • Weitere Devices für Multitouch: mehrere Displays kombinieren, SmartPhone, SmartPad, TrackPad Dinter | Multitouch Interaktionen | Überblick
  • 38. Quellen • Theorie http://www.billbuxton.com/multitouchOverview.html • Bilderkennung (Frameworks) reacTIVision > http://reactivision.sourceforge.net Touché > http://gkaindl.com/software/touche • Protokoll/Experiment (Sourcecode/Binary) TUIO > http://www.tuio.org XTUIO > http://www.xtuio.com • Entwicklungsumgebung (IDE) Processing > http://processing.org Dinter | Multitouch Interaktionen | Überblick
  • 39. Danke für‘s Zuhören. Stefan Dinter Diplom-Designer Lehrauftrag «Interaktive Medien» am Lehrstuhl Kunstpädagogik,  Friedrich-Alexander-Universität Erlangen-Nürnberg Adobe Certified Expert (ACE) Adobe Acrobat Professional Mitgliedschaften: Deutsche Gesellschaft für Designtheorie  und -forschung e.V. (DGTF),  Alliance of German Designers e.V. (AGD), Usability Professionals‘ Association (G|UPA),  Interaction Design Association (IxDA) Dinter | Multitouch Interaktionen | Überblick

Notas do Editor

  1. Eadweard Muybridge, 1887: Animal Locomotion\n
  2. \n
  3. Light pen: Luftüberwachung, 1987 für C64 nachgebaut\n30 Jahre zwischen Vorstellung der Maus bis zur universellen Verfügbarkeit\nHeute gibt es für Multitouch unzählige Anwendungen: Kunst im öffentlichen Raum, Diskotheken (VJ) Weitere: interaktives Whiteboard, \n
  4. Als nächstes kommt verry Lowcost\n\n
  5. \n
  6. \n
  7. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  8. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  9. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  10. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  11. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  12. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  13. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  14. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  15. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  16. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  17. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  18. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  19. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  20. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  21. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  22. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  23. Keine Grenzen bei der Interaktion: Processing, Falsh, PureData, Quartz, V4...\nDas Resultat kann manigfaltig sein: Video, Audio, Robotik ....\n
  24. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  25. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  26. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  27. Experiment bauen (Karton auf den Tisch,...\n
  28. Experiment bauen (Karton auf den Tisch,...\n
  29. Experiment bauen (Karton auf den Tisch,...\n
  30. Materialeinsatz: unter 20 EUR\n.... Webcam anschließen, Touché starten und zeigen....\n
  31. \n
  32. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  33. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  34. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  35. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  36. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  37. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  38. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  39. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  40. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  41. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  42. Experiment mit Arduino Board zeigen\nWer kann die LED mit seiner Kamera sehen?\nZusätzlich zu dem Experiment wird eine Beamer, eine IR-Lichtquelle und ein Schwarz-FIlter benötigt\n
  43. \n
  44. \n
  45. \n
  46. \n
  47. Fertige Produkte: Reactable\n
  48. Microsoft Surface\n
  49. Beim Bau kein Kit oder exakte Anleitungen im Netz --> Check www.idwerk.de\nFehler: Keine Mattscheibe, Reflexionen, Ungenügende (IR)-Lichtausbeute\n
  50. \n
  51. Bildschirme sind ein sehr kleines „Fenster“ in die Welt des Rechners (kein direktes arbeiten möglich)\nWIN 7 integriert, Frameworks nutzen\nJe nach Anforderung, POS, Museen, Kollaboratives Arbeiten\n
  52. \n
  53. Bau des Multitouch zeigen (Diashow)\n