Reconnaissance faciale des émotions
description
Transcript of Reconnaissance faciale des émotions
![Page 1: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/1.jpg)
Reconnaissance faciale Reconnaissance faciale des émotionsdes émotions
David Frenay
Promoteur : Benoît Macq
Lecteurs : Xavier Marichal (Alterface) Christian Van Brussel
![Page 2: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/2.jpg)
La technologie La technologie se rapproche du réelse rapproche du réel
La voix : reconnaissance et production
![Page 3: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/3.jpg)
La technologie La technologie se rapproche du réelse rapproche du réel
Reconnaissance faciale
![Page 4: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/4.jpg)
La technologie La technologie se rapproche du réelse rapproche du réel
3D : cinéma et
avatars virtuels
![Page 5: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/5.jpg)
Avenir :Avenir :la reconnaissance d’émotionsla reconnaissance d’émotions
Large panel d’applications
![Page 6: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/6.jpg)
Objectifs de cette Objectifs de cette présentationprésentation
![Page 7: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/7.jpg)
ContraintesContraintesde mon logicielde mon logiciel
![Page 8: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/8.jpg)
Expressions faciales et émotions
![Page 9: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/9.jpg)
Classification des émotions
![Page 10: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/10.jpg)
Actions Units (AU)Actions Units (AU)
![Page 11: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/11.jpg)
Six émotions universellesSix émotions universelles
![Page 12: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/12.jpg)
Méthodes et algorithmes
![Page 13: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/13.jpg)
Algorithme généralAlgorithme général
![Page 14: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/14.jpg)
Algorithme généralAlgorithme général
![Page 15: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/15.jpg)
Algorithme généralAlgorithme général
![Page 16: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/16.jpg)
Algorithme généralAlgorithme général
![Page 17: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/17.jpg)
Algorithme généralAlgorithme général
![Page 18: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/18.jpg)
Correction des ombresCorrection des ombres
![Page 19: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/19.jpg)
Correction de l’orientationCorrection de l’orientation
Détection des yeux : solution inefficace
![Page 20: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/20.jpg)
LocallyLocally binarybinary patterns patterns(LBP)(LBP)
34 27 20
15 18 19
3 12 18
10100110 10101101 10101111
00100101 11110001 10101111
11010101 10001000 11111100
![Page 21: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/21.jpg)
LocallyLocally binarybinary patterns patterns(LBP)(LBP)
34 27 20
15 18 19
3 12 18
1 1 1
0 1
0 0 1
11110001
34 27 20
15 18 19
3 12 18
Rayon : 1Points : 8
![Page 22: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/22.jpg)
LBP et textureLBP et texture
Coin Arrête Zone pleine
11111001 00001110 11100001 11111111
![Page 23: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/23.jpg)
LBP : nombres uniformesLBP : nombres uniformes
valeursn2 valeursn2~
Nombre Uniforme
1010000 Non
1001011 Non
1110000 Oui
1110011 Oui
1111111 Oui
3 blocs de chiffres ou moins = nombre uniforme
![Page 24: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/24.jpg)
Image
LBP : histogrammesLBP : histogrammes
Matrice binaire
Sous-matrice binaire
![Page 25: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/25.jpg)
LBP : histogrammesLBP : histogrammes
Sous-matrice binaire
Nombre binaire
Combien de répétitions
000000 10
000001 3
000010 0
… ..
111111 5
Non-uniformes : 142
![Page 26: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/26.jpg)
LBPLBP
)_( PixelsNb 2100~ n
Réduction du nombre de données :
Image
…
![Page 27: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/27.jpg)
LBP dynamiques : LBP-TOPLBP dynamiques : LBP-TOP
Image 5
![Page 28: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/28.jpg)
XY
YT
XT
LBP dynamiques : LBP-TOPLBP dynamiques : LBP-TOP
texture + dynamique
![Page 29: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/29.jpg)
ApprentissageApprentissageet bases de donnéeset bases de données
![Page 30: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/30.jpg)
ApprentissageApprentissageet bases de donnéeset bases de données
![Page 31: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/31.jpg)
ApprentissageApprentissageet bases de donnéeset bases de données
![Page 32: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/32.jpg)
Résultats
![Page 33: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/33.jpg)
Résultats théoriques Résultats théoriques de mon logicielde mon logiciel
Neutre Joie Tristesse Surprise Colère Peur Dégoût
Neutre 93 1.6 1 1.7 0.3 0.7 1.6
Joie 6.2 93.6 0 0.1 0 0.1 0
Tristesse 11 1.6 82.8 1.2 0 0.5 3
Surprise 9.5 1.1 0.2 88.1 0.9 0 0.1
Colère 3.8 0 0 0 93.9 0 2.4
Peur 15 0.3 2.3 0.2 0 82.2 0
Dégoût 9.8 0 3.3 1.6 0.29 0.14 84.8
![Page 34: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/34.jpg)
Résultats pratiques :Résultats pratiques :Expérience de la webcamExpérience de la webcam
Joie Tristesse Surprise Colère Peur Dégoût
Taux : 100% 100% 70% 30% 70% 0%
![Page 35: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/35.jpg)
Résultats pratiques :Résultats pratiques :Expérience de la webcamExpérience de la webcam
![Page 36: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/36.jpg)
Résultats pratiques :Résultats pratiques :Expérience de la webcamExpérience de la webcam
![Page 37: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/37.jpg)
![Page 38: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/38.jpg)
Résultats pratiques :Résultats pratiques :Expérience de la webcamExpérience de la webcam
![Page 39: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/39.jpg)
Conclusions et perspectivesConclusions et perspectives
Efficace
Réaliste
Applicable facilement
Multimodalité
Eventail plus large d’émotions
Orientations variables
![Page 40: Reconnaissance faciale des émotions](https://reader033.fdocument.pub/reader033/viewer/2022061508/5681455d550346895db22f3e/html5/thumbnails/40.jpg)