RoCHI2011: http://rochi2011.utcluj.ro/

1. Patient Eye Tracking Interface
Alexandru-Lucian Gînscă, Emanuela Boroș, Adriana Florea, Alexandru Metzak
Universitatea “Al. I. Cuza”, Facultatea de Informatică, Iași, România
{lucian.ginsca, emanuela.boros, adriana.florea, alexandru.metzak}@infoiasi.ro

2. Problema
● numărul mare de pacienţi cu cu abilități motorii și verbale limitate
● necesitatea personalului medical de a avea o comunicare facilă cu astfel de
pacienți
● dorința persoanelor apropiate de a purta o conversație cu pacienții
● nevoia unui om imobilizat de a comunica cu mediul exterior, dar și de a
interacționa cu mediul online

3. Soluția
● un dispozitiv mobil şi o metodă de interacțiune care se bazează exclusiv pe
mișcarea ochiului
● facilitarea comunicării între personalul medical şi pacient
● dezvoltarea unui limbaj specific

4. Limbaj
● două metode de scriere:
● frecvența caracterelor
● alfabet
● metoda aleasă, implementarea limbajului și detecția poziției ochiului

5. Metodă de scriere bazată pe frecvența caracterelor
● două poziții ale ochiului: ochi închis și ochi deschis
● un număr de 40 de simboluri grupate în rânduri de câte 8
● rândurile sunt selectate secvențial, iar după fiecare selectare se citește
poziția ochiului utilizatorului -> dacă litera dorită se găsește pe rândul
selectat, pacientul va închide ochiul, iar în caz contrar se va trece pe rândul
următor
● procesul de selecție continuă până se ajunge la un singur simbol.

6. Metodă de scriere bazată pe frecvența caracterelor

7. Metodă de scriere bazată pe alfabet
● șase poziții ale ochiului: ochi deschis, ochi închis, ochi privind spre stanga,
ochi privind spre dreapta, ochi privind în sus, ochi privind în jos
● un simbol poate fi exprimat printr-o pereche de câte două poziții ale ochiului
● total de 36 de simboluri

9. Comparare metode de scriere
Metoda Nr. poziții ochi Nr. simboluri Timp mediu (s)
Frecvență 2 40 7.6
Alfabet 6 36 2

10. Implementare
● platforma Android
● algoritm detecție
● captură șablon a pozițiilor ochilor pentru o mai bună acuratețe a detecției
● extragerea trăsăturilor și a punctelor cheie din imagini
● metodă de comparare a imaginilor bazată pe o distanță euclidiană
ponderată
● interacțiune prin ecran tactil pentru secțiunea de setări
● folosirea exclusivă a ochiului pentru funcțonalitățile oferite pacientului

12. Concluzii
● potențialul unei aplicații care se adresează unui anumit tip de public și care
îmbunătățește viața cotidiană a unui utilizator cu diverse dizabilități
● continuarea dezvoltării unor noi funcționalități bazate pe acest tip de
interacțiune

13. Mulțumim