Dveloppement dune application Android sur le suivi oculaire

Développement d’une application Android sur le suivi oculaire Charles Annic/ François Meunier

Sommaire Mise en situation Enjeux du projet Réalisation des tâches Conclusion 2

Mise en situation Les réflexes oculaires Le nystagmus Les réflexes pupillaires 3

Mise en situation Intérêt de développer un outil détectant ces troubles Standardisation Qualité des résultats obtenus 4

Enjeux du projet Problématique Objectif Tâches Avancement 5

Réalisation des tâches 1. Création du projet et début avec Open. CV 2. Interaction avec la tablette 3. Réalisation du test de suivi d’objet (nystagmus horizontal) 4. Réalisation du test de contraction de la pupille 6

Réalisation des tâches 1. Création du projet et début avec Open. CV 7

Réalisation des tâches 1. Création du projet et début avec Open. CV 8

Réalisation des tâches 1. Création du projet et début avec Open. CV 9

Réalisation des tâches 1. Création du projet et début avec Open. CV 10

Réalisation des tâches 1. Création du projet et début avec Open. CV 11

Réalisation des tâches 1. Création du projet et début avec Open. CV 12

Réalisation des tâches 2. Interaction avec la tablette Affichage de la caméra frontale Utilisation des capteurs Variation de la luminosité 13

Réalisation des tâches 2. Interaction avec la tablette Affichage de la caméra frontale 14

Réalisation des tâches 2. Interaction avec la tablette Utilisation des capteurs (accéléromètre et bousolle) 15

Réalisation des tâches 2. Interaction avec la tablette Utilisation des capteurs (accéléromètre et bousolle) 16

Réalisation des tâches 2. Interaction avec la tablette Utilisation des capteurs (accéléromètre et bousolle) 17

Réalisation des tâches 2. Interaction avec la tablette Utilisation des capteurs (accéléromètre et bousolle) 18

Réalisation des tâches 2. Interaction avec la tablette Utilisation des capteurs (écran: changement d’illumination) 19

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Détection des yeux Etapes de vérification Déplacement de l’objet (Stimulus visuel) Sauvegarde des images Calcul de l’angle du regard Sauvegardes angles obtenus Affichage des résultats 20

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Détection des yeux (caractéristiques pseudo-Haar, cascade de Haar) 21

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Détection des yeux (caractéristiques pseudo-Haar, cascade de Haar) 22

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Étapes de vérification 23

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Étapes de vérification 24

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Étapes de vérification 25

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Étapes de vérification (Étape 3 suite …) 26

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Déplacement de l’objet (stimulus visuel) 27

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Sauvegarde des images 28

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Sauvegarde des images 29

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Calcul de la (l’angle) direction du regard 30

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Calcul de la (l’angle) direction du regard (segmentation d’image par seuillage, détection de contour, approximation elliptique) 31

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Calcul de la (l’angle) direction du regard (segmentation d’image par seuillage, détection de contour, détection des bordures de l’oeil) 32

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Calcul de la (l’angle) direction du regard 33

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Calcul de la (l’angle) direction du regard (Résultats œil gauche) 34

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Sauvegarde des angles 35

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Sauvegarde des angles 36

Réalisation des tâches 3. Réalisation du test de suivi d’objet (HGN) Affichage des résultats 37

Réalisation des tâches 4. Réalisation du test de contraction de la pupille Détection des yeux Etapes de vérification Calcul de la taille de la pupille Stockage des données Affichage des résultats 38

Réalisation des tâches 4. Réalisation du test de contraction de la pupille Calcul de la taille de la pupille (changement d’illumination) 39

Réalisation des tâches 4. Réalisation du test de contraction de la pupille Calcul de la taille de la pupille (changement d’illumination) 40

Réalisation des tâches 4. Réalisation du test de contraction de la pupille Calcul de la taille de la pupille real. Pupil. Size 41

Réalisation des tâches 4. Réalisation du test de contraction de la pupille Calcul de la taille de la pupille 42

CONCLUSION (DIFFICULTÉS) Manque de documentation Calcul de la distance de l’œil par rapport à la tablette Précision des résultats 43