Pose Machines: Articulated Pose Estimation via Inference Machines
CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE...
Transcript of CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE...
![Page 1: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/1.jpg)
CLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES
EN TEMPS REALEN TEMPS REALMiguel Reyes EstanyMiguel Reyes Estany
Dirigit per Xavier Baró, Sergio Escalera i Petia Radeva
1
![Page 2: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/2.jpg)
ÍndexÍndex
• Estat de l’art
• Sistemes de visióSistemes de visió
• Planificació dels prototipus
• Anàlisi i desenvolupament dels prototipus
• Resultats conclusions i demostracionsResultats, conclusions i demostracions
2
![Page 3: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/3.jpg)
Present de la Visió per ComputadorPresent de la Visió per Computador
Existència d’aplicacions de detecció biomètrica• Existència d aplicacions de detecció biomètrica robustes i fiables
Exemples quotidians:Exemples quotidians:
Identificació de matrícules en garatges públics i privats
Identificació empremtes digitalsdigitals
3
![Page 4: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/4.jpg)
Present i línies d’investigacióPresent i línies d investigació
Avenços en la tècnica + tecnologia
Aplicacions fiables en sistemes de detecció i identificació
Ens fa plantejar‐nos:
Aplicacions fiables en sistemes d’anàlisi del comportament
Classificació de la pose per seguiment de característiques
4
![Page 5: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/5.jpg)
Elements fonamentals d’un sistema de visió
Preprocessament Descripció Interpretació
Extracció Segmentació Reconeixement
‐Extracció: traslladar la informació visual des del medi físic a un suport digital suficientment tractable
+ OpenCv =
5
![Page 6: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/6.jpg)
Elements fonamentals d’un sistema de visió
Preprocessament Descripció Interpretació
Extracció Segmentació Reconeixement
‐ Preprocessament: normalització gràfica uniforme independentment del seu contingutindependentment del seu contingut
6
![Page 7: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/7.jpg)
Elements fonamentals d’un sistema de visió
Preprocessament Descripció Interpretació
Extracció Segmentació Reconeixement
‐Segmentació: utilització de les diferents tècniques pròpies de visió de computador amb la intenció d’extreure regions d’interès.
7
![Page 8: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/8.jpg)
Elements fonamentals d’un sistema de visió
Preprocessament Descripció Interpretació
Extracció Segmentació Reconeixement
‐Descripció: representació de les dades elaborant un anàlisi discriminant i identificatiu d’aquestes.
8
![Page 9: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/9.jpg)
Elements fonamentals d’un sistema de visió
Preprocessament Descripció Interpretació
Extracció Segmentació Reconeixement
‐Reconeixement: classificació suficientment diferenciada dels diferentssuficientment diferenciada dels diferents grups, o classes, formats a partir dels seus elements caracteritzants.
9
![Page 10: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/10.jpg)
Elements fonamentals d’un sistema de visió
Preprocessament Descripció Interpretació
Extracció Segmentació Reconeixement
‐ Interpretació: concebre, ordenar i expressar els resultats obtinguts donat el context i la natura de l’aplicació desenvolupada
10
![Page 11: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/11.jpg)
Creació del sistema classificador de pose
Objectiu:Dissenyar i implementar un sistemaDissenyar i implementar un sistema classificador de pose, a partir de l’elaboració d’un anàlisi exhaustiu dels elements que qconformen el sistema.
Especificacions del sistema:Especificacions del sistema:
• Aplicació per a un sol individuE ió i d è ti i ibl• Execució en equips domèstics i accessibles
• Lògica espacio-temporal per part del subjecte• Funcionament robust en temps real
11
p• Sortida discreta de la posició del cap
![Page 12: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/12.jpg)
PlanificacióPlanificacióDurant un any i mig s’han dutDurant un any i mig s han dut a terme les següents tasques:
• Anàlisi de les diferents tècniques de detecció i i t d t í ti f i lseguiment de característiques facials.
• Implementacions i tests experimentals.
• Observació i reflexió dels resultats.
D l d l i• Desenvolupament dels prototipus.
12
![Page 13: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/13.jpg)
DESENVOLUPAMENT DEL SISTEMA CLASSIFICADOR DE POSE EN TEMPS REAL
PROTOTIPUS I: Classificació discreta de la pose fortament basada en conjunts d’aprenentatge.
PROTOTIPUS II: Classificació discreta de la b d l fl ibl d’ ipose amb models flexibles d’aparença i
forma.
13
![Page 14: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/14.jpg)
PROTOTIPUS IPROTOTIPUS IIdea principal: Creació de diferents conjunts d’aprenentatge dif i t l d d idi d t tdiferenciats per la pose per poder decidir davant un rostre nou.
14
![Page 15: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/15.jpg)
DESCRIPCIÓ DEL SISTEMA PER AL PROTOTIPUS I
Preprocessament Descripció Interpretació
Segmentació ReconeixementExtracció
Extracció:
•Hardware: webcam d’1.3 megapíxels•Software: Visual C++ i llibreria OpenCv
15
![Page 16: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/16.jpg)
DESCRIPCIÓ DEL SISTEMA PER AL PROTOTIPUS I
Preprocessament Descripció Interpretació
Segmentació ReconeixementExtracció
Preprocessament:
•Normalització de color: imatges en escala•Normalització de color: imatges en escala de grisos•Normalització de mides: Imatges a
l ió 320 240 i lresolució 320x240 pixels•Eliminació de soroll: filtres gaussians•Alineació de característiques facials
16
![Page 17: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/17.jpg)
DESCRIPCIÓ DEL SISTEMA PER AL PROTOTIPUS I
Preprocessament Descripció Interpretació
Segmentació ReconeixementExtracció
-Segmentació:
SSelecció de regions d’interès i seguiment de característiques amb Viola-Jones combinat amb Optical Flow.combinat amb Optical Flow.
17
![Page 18: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/18.jpg)
DESCRIPCIÓ DEL SISTEMA PER AL PROTOTIPUS I
Preprocessament Descripció Interpretació
Segmentació ReconeixementExtracció
-Descripció:
Reducció de la dimensionalitat de laReducció de la dimensionalitat de la informació mantenint la seva expressivitat a través de l’algorisme PCA. La imatge g gqueda representada per 120 valors.
Regió 70x50 = 3500 valors PCA 120 valors
18
g
![Page 19: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/19.jpg)
DESCRIPCIÓ DEL SISTEMA PER AL PROTOTIPUS I
Preprocessament Descripció Interpretació
Segmentació ReconeixementExtracció
-Reconeixement:
Classificació en classes a través deClassificació en classes a través de Support Vector Machine. Basat en els conjunts d’aprenentatge.j g
19
![Page 20: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/20.jpg)
Procés de cerca de models paussibles
Nova imatge Frontal Dreta Esquerra Superior Inferior
Frontal
D F lDreta Frontal
Esquerra Frontal Esquerra
Superior Frontal Superior SuperiorSuperior Frontal Superior Superior
Inferior Frontal Inferior Inferior Inferior
Estat guanyador: FRONTAL
Vi lit ió l
Estat guanyador: FRONTAL
Visualització exemple Frontal VS Inferior:
20
![Page 21: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/21.jpg)
DESCRIPCIÓ DEL SISTEMA PER AL PROTOTIPUS I
Preprocessament Descripció Interpretació
Segmentació ReconeixementExtracció
-Interpretació:
Estimació de la pose a través de lesEstimació de la pose a través de les sortides del classificador supervisat pel seguiment de característiques facials.g
21
![Page 22: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/22.jpg)
Seguiment de característiques facials
Permeten correcció d’estatscorrecció d estats impossibles, respectant la lògica espacio-temporal
Si el seguiment és b t drobust poden
expressar la pose de forma contínua
22
![Page 23: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/23.jpg)
Resultats del prototipus IResultats del prototipus ITest I :• 2641 imatges2641 imatges• Background uniforme• 77% d’encert de característiques facials• 67 % d’encert en la pose.
Test II :• 2485 imatges• Background no uniforme• 77% d’encert de característiques facials• 77% d encert de característiques facials• 68% d’encert en la pose
Test III :5826 i t• 5826 imatges
• Background no uniforme• 84% d’encert de característiques facials• 86% d’encert en la pose
Supervisió dels resultats
23
pmitjançant etiquetatge manual
![Page 24: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/24.jpg)
Conclusions i treball futur del prototipus I
Classificació de la pose fortament depenent del conjunt d’aprenentatge i de la normalitzacióp g
Funcionament vàlid per a rostres que segueixin la tendència del conjunt d’aprenentatge.j p g
Possible solució creació de diferents subconjuntsdiferents subconjunts d’aprenentatge per a una millor adaptació del nou rostre, elaborant una fase d’inicialitzacióelaborant una fase d inicialització.
24
![Page 25: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/25.jpg)
PROTOTIPUS IIPROTOTIPUS II
Id i i l Utilit ió d d l fl ibl b tIdea principal: Utilització de models flexibles basats en aparença i forma, amb un alt grau d’adaptació al rostre facial. Es crearan diferents models flexibles, el grau d'òptima adaptabilitat per part del rostre decidirà la pose facial.
Frontal Esquerra
Canvi de model
25
![Page 26: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/26.jpg)
DESCRIPCIÓ DEL SISTEMA PER AL PROTOTIPUS I
Preprocessament Descripció Interpretació
Segmentació ReconeixementExtracció
-Segmentació:
Utilització de models flexibles i adaptatiusUtilització de models flexibles i adaptatius (Active Appereance Models)
26
![Page 27: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/27.jpg)
DESCRIPCIÓ DEL SISTEMA PER AL PROTOTIPUS I
Preprocessament Descripció Interpretació
Segmentació ReconeixementExtracció
-Descripció:
La representació del rostre ve precedida perLa representació del rostre ve precedida per la forma del model adaptatiu en combinació amb la textura de la regió d’interès (imatge facial)facial)
27
![Page 28: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/28.jpg)
Observació de la forma conjunt d’aprenentage del sistemad aprenentage del sistema
P à t d f Paràmetres de forma representació en 3D del 98% de la informació
28
![Page 29: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/29.jpg)
Observació dels paràmetres de textura i convergència d’un model
Paràmetres de texturarepresentació en 3D del 86% de la informació
29
![Page 30: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/30.jpg)
DESCRIPCIÓ DEL SISTEMA PER AL PROTOTIPUS I
Preprocessament Descripció Interpretació
Segmentació ReconeixementExtracció
-Reconeixement:
La classificació a una determinada classe veLa classificació a una determinada classe ve precedida per l’apropament als nuclis, de les projeccions dels conjunts d’aprenentatge.
30
![Page 31: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/31.jpg)
DESCRIPCIÓ DEL SISTEMA PER AL PROTOTIPUS I
Preprocessament Descripció Interpretació
Segmentació ReconeixementExtracció
-Interpretació:
La classificació final ve precedida per lesLa classificació final ve precedida per les sortides del classificador, restringida a les limitacions de la lògica espacio-temporal i veïnatgeveïnatge.
31
![Page 32: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/32.jpg)
Procés de convergència a la cerca d’un model plausible
ConvergirConvergir al model frontal
Convergir al model
dret
El procés de convergència al
model frontal dóna més bons resultats
32
![Page 33: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/33.jpg)
Resultats prototipus IIResultats prototipus IILa localització facial es molt robusta, més encara en situacions de continuïtat espacio- temporal
• Percentatge d’encert de classificació 92-94% (vídeos de 3000 imatges).
33
![Page 34: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/34.jpg)
Conclusions del prototipus IIConclusions del prototipus II
Cl ifi d fi bl di t t
• Capaç de treballar amb petites oclusions locals.
• Classificador fiable per diverses textures.
• Robust davant transformacions de gir, translació i escalat.
• Alt rendiment en temps real.
• Fàcilment ampliable a més estats descriptius de
• Feble davant descripcions facials molt
• Fàcilment ampliable a més estats descriptius de pose.
pespecífiques (en temps real).
34
![Page 35: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/35.jpg)
Present i treball futur prototipus IIPresent i treball futur prototipus II
P t d l f l ió d l t ti h t t bli t l èPart de la formulació del prototipus ha estat publicat al congrès de CVPR 2010 San Francisco , seleccionat com a oral al workshop de “Analysis and Modelling Faces and Gestures”. Co-autor amb Antonio Hernàndez Sergio Escalera i Petia Radevaautor amb Antonio Hernàndez, Sergio Escalera i Petia Radeva
Article publicat a la revista Machine Vision and Aplication (Springer), co-autor amb Antonio Hernàndez, Sergio Escalera i Petia Radeva
El sistema pot ser ampliat amb nous estats, comportant aplicacions d’estudi del comportament humà (psicologia delsaplicacions d’estudi del comportament humà (psicologia dels gestos).
35
![Page 36: CLASSIFICACIÓ DE POSE PER SEGUIMENT DE ...sergio/linked/migueluab2010pwt.pdfCLASSIFICACIÓ DE POSE PER SEGUIMENT DE CARACTERÍSTIQUES EN TEMPS REAL Miguel Reyes Estany Dirigit per](https://reader036.fdocuments.us/reader036/viewer/2022070713/5ed2ac5ecb786474f941e319/html5/thumbnails/36.jpg)
DEMO EN TEMPS REALDEMO EN TEMPS REAL
MOLTES GRÀCIES
36