Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo,...
Transcript of Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo,...
![Page 1: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/1.jpg)
Captura de expressões faciais para identificação da emoção de alegria em
humanos
São Leopoldo, dezembro de 2007
Eduardo de OliveiraEduardo de Oliveira
Patrícia A. Jaques (orientadora)Patrícia A. Jaques (orientadora)
UNISINOSUNISINOS
![Page 2: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/2.jpg)
Plano da apresentaçãoPlano da apresentação
Introdução Referencial teórico Objetivos Metodologia Métodos Etapas do trabalho proposto Conclusões
2
![Page 3: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/3.jpg)
IntroduçãoIntrodução
Motivação Evolução computacional; Melhor interface; Estados afetivos.
3
![Page 4: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/4.jpg)
Plano da apresentaçãoPlano da apresentação
Introdução Referencial teórico Objetivos Metodologia Métodos Etapas do trabalho proposto Conclusões
4
![Page 5: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/5.jpg)
Referencial TeóricoReferencial Teórico
Visão Computacional Detecção de Faces; Detecção de Características.
Computação Afetiva x Psicologia Emoções x Estados Afetivos; Classificação de expressões
faciais; Inferência da emoção. 5
![Page 6: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/6.jpg)
Plano da apresentaçãoPlano da apresentação
Introdução Referencial teórico Objetivos Metodologia Métodos Etapas do trabalho proposto Conclusões
6
![Page 7: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/7.jpg)
ObjetivosObjetivos
Objetivo principal Detectar da face do usuário a
manifestação da emoção alegria: através de uma webcam se baseando nas imagens estáticas
7
![Page 8: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/8.jpg)
ObjetivosObjetivos
Objetivos específicos Aprofundar e agregar
conhecimento dos referenciais teóricos;
Encontrar métodos para detecção de face, características faciais, classificação de expressões faciais e inferência de emoções;
Implementar e avaliar aplicativo que execute os objetivos;
Propor evoluções.
8
![Page 9: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/9.jpg)
Plano da apresentaçãoPlano da apresentação
Introdução Referencial teórico Objetivos Metodologia Métodos Etapas do trabalho proposto Conclusões
9
![Page 10: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/10.jpg)
MetodologiaMetodologia
10
![Page 11: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/11.jpg)
MetodologiaMetodologia
11
Webcam
Detecção da faceDetecção da face
![Page 12: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/12.jpg)
MetodologiaMetodologia
12
Webcam
Detecção da faceDetecção da face
![Page 13: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/13.jpg)
MetodologiaMetodologia
13
Webcam
Detecção da faceDetecção da face
Detecção de características faciais
Detecção de características faciais
![Page 14: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/14.jpg)
MetodologiaMetodologia
14
Webcam
Detecção da faceDetecção da face
Detecção de características faciais
Detecção de características faciais
![Page 15: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/15.jpg)
MetodologiaMetodologia
15
Webcam
Detecção da faceDetecção da face
Detecção de características faciais
Detecção de características faciais
Classificação da Expressão facialClassificação da Expressão facial
![Page 16: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/16.jpg)
MetodologiaMetodologia
16
Webcam
AU 12+6 (Sorriso)
Detecção da faceDetecção da face
Detecção de características faciais
Detecção de características faciais
Classificação da Expressão facialClassificação da Expressão facial
![Page 17: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/17.jpg)
MetodologiaMetodologia
17
Webcam
AU 12+6 (Sorriso)
Detecção da faceDetecção da face
Detecção de características faciais
Detecção de características faciais
Classificação da Expressão facialClassificação da Expressão facial
Inferência da EmoçãoInferência da Emoção
![Page 18: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/18.jpg)
MetodologiaMetodologia
18
Webcam
AU 12+6 (Sorriso)
Detecção da faceDetecção da face
Detecção de características faciais
Detecção de características faciais
Classificação da Expressão facialClassificação da Expressão facial
Inferência da EmoçãoInferência da Emoção Alegria
![Page 19: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/19.jpg)
MetodologiaMetodologia
19
Webcam
AU 12+6 (Sorriso)
Detecção da faceDetecção da face
Detecção de características faciais
Detecção de características faciais
Classificação da Expressão facialClassificação da Expressão facial
Inferência da EmoçãoInferência da Emoção Alegria
Visão Computacional
![Page 20: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/20.jpg)
MetodologiaMetodologia
20
Webcam
AU 12+6 (Sorriso)
Detecção da faceDetecção da face
Detecção de características faciais
Detecção de características faciais
Classificação da Expressão facialClassificação da Expressão facial
Inferência da EmoçãoInferência da Emoção Alegria
Visão Computacional
Computação Afetiva
![Page 21: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/21.jpg)
MetodologiaMetodologia
21
Webcam
AU 12+6 (Sorriso)
Detecção da faceDetecção da face
Detecção de características faciais
Detecção de características faciais
Classificação da Expressão facialClassificação da Expressão facial
Inferência da EmoçãoInferência da Emoção Alegria
Visão Computacional
Computação Afetiva
Interação Humano-Computador
![Page 22: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/22.jpg)
Plano da apresentaçãoPlano da apresentação
Introdução Referencial teórico Objetivos Metodologia Métodos Etapas do trabalho proposto Conclusões
22
![Page 23: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/23.jpg)
MétodosMétodos
Detecção da faceDetecção da face
Detecção de características
faciais
Detecção de características
faciais
Classificação da Expressão facialClassificação da Expressão facial
Inferência da Emoção
Inferência da Emoção
- Métodos baseados em aparência- Haar-like features (OpenCV)
- Métodos baseados em aparência- Haar-like features (OpenCV)
- Métodos de aprendizado de máquina- Métodos heurísticos
- Interpretação- Mapeamento
23
![Page 24: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/24.jpg)
Plano da apresentaçãoPlano da apresentação
Introdução Referencial teórico Objetivos Metodologia Métodos Etapas do trabalho proposto Conclusões
24
![Page 25: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/25.jpg)
Etapas do trabalho Etapas do trabalho propostoproposto
1. Revisão bibliográfica Interação Humano-Computador; Visão Computacional; Computação Afetiva.
2. Detecção de face e suas características Detecção de face; Detecção de características.
25
![Page 26: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/26.jpg)
Etapas do trabalho Etapas do trabalho propostoproposto
3. Classificação das expressões faciais e inferência da emoção Sistemas de codificação.
4. Desenvolvimento da aplicação Planejamento e implementação.
5. Testes da aplicação Teste sobre bases de faces.
26
![Page 27: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/27.jpg)
Etapas do trabalho Etapas do trabalho propostoproposto
6. Finalização Ajustes na aplicação; Avaliações sobre o trabalho; Sugestões futuras.
27
![Page 28: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/28.jpg)
Plano da apresentaçãoPlano da apresentação
Introdução Referencial teórico Objetivos Metodologia Métodos Etapas do trabalho proposto Conclusões
28
![Page 29: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/29.jpg)
ConclusõesConclusões
Realizações Revisão bibliográfica; OpenCV; Bancos de faces e expressões.
Dificuldades encontradas Revisão bibliográfica; Detecção de características; Bancos de faces.
29
![Page 30: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/30.jpg)
ConclusõesConclusões
Desafios Classificação de expressões
faciais; Inferência da emoção; Implementação de aplicativo.
30
![Page 31: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/31.jpg)
Captura de expressões faciais para identificação da emoção de
alegria em humanos
Eduardo de Oliveira Eduardo de Oliveira
Patrícia A. Jaques (orientadora)Patrícia A. Jaques (orientadora)
UNISINOSUNISINOS
![Page 32: Captura de expressões faciais para identificação da emoção de alegria em humanos São Leopoldo, dezembro de 2007 Eduardo de Oliveira Patrícia A. Jaques.](https://reader036.fdocument.pub/reader036/viewer/2022062512/552fc180497959413d8f1a5f/html5/thumbnails/32.jpg)
CronogramaCronograma
dddd
32