A real-time face analysis system for head poses classification (2024)
- Authors:
- Autor USP: REINOSO, LOUBRYS LÁZARO ROJAS - EP
- Unidade: EP
- Sigla do Departamento: PCS
- Subjects: FACE; APRENDIZADO COMPUTACIONAL; PROCESSAMENTO DE IMAGENS
- Agências de fomento:
- Language: Inglês
- Abstract: A estimativa de pose da cabeça é uma área de pesquisa ativa com uma ampla gama de aplicações, incluindo reconhecimento facial, detecção de vivacidade, animação facial e muito mais. As pesquisas mostram que sistemas relacionados a rostos geralmente funcionam bem em cenários controlados, obtendo excelentes resultados com rostos completos e quase frontais. No entanto, desafios surgem ao lidar com perfis. Propomos um sistema de análise facial multitarefa, sem treinamento, projetado para classificar poses de rosto. Após receber uma imagem, o sistema pode ser capaz de detectar rostos e seus pontos de referência, estimar a pose do rosto através do grau de liberdade da cabeça humana, calculando os ângulos resolvendo o problema de Perspective-n-Point (PnP), uma sólida alternativa para aqueles que buscam um equilíbrio entre robustez e velocidade. Alguns dos métodos mais robustos geralmente dependem de soluções de aprendizado profundo, mas geralmente são inadequados para aplicações em tempo real ou exigem computadores de alto desempenho. Após estimar os ângulos, um modelo de ML supervisionado foi treinado para determinar rostos como frontais ou não frontais. O sistema fornecerá feedback em tempo real para os usuários corrigirem a pose da cabeça. O Erro Absoluto Médio (MAE) obtido foi de 4,24, garantindo velocidade de execução em tempo real em hardware de baixa potência. Para avaliar o modelo de aprendizado de máquina treinado, foram implementados três protocolos, com o Protocolo 2 apresentando os melhores resultados, com zeros falsos positivos, tornando-o uma excelente escolha para aplicações no mundo real. Além disso, testamos a proposta em um protótipo de conceito para abertura e verificação de contas. O sistema funcionou como pré-processamento de imagens, permitindo apenas imagens queatendem a requisitos específicos - rostos frontais. Medimos o impacto da proposta em outros sistemas de análise facial; o desempenho dos sistemas de reconhecimento facial e detecção de vivacidade melhorou significativamente, aumentando de 90% para 96% e de 62% para 87%, respectivamente.
- Imprenta:
- Data da defesa: 15.01.2024
-
ABNT
ROJAS REINOSO, Loubrys Lázaro. A real-time face analysis system for head poses classification. 2024. Dissertação (Mestrado) – Universidade de São Paulo, São Paulo, 2024. Disponível em: https://www.teses.usp.br/teses/disponiveis/3/3141/tde-26032024-112307/pt-br.php. Acesso em: 28 abr. 2024. -
APA
Rojas Reinoso, L. L. (2024). A real-time face analysis system for head poses classification (Dissertação (Mestrado). Universidade de São Paulo, São Paulo. Recuperado de https://www.teses.usp.br/teses/disponiveis/3/3141/tde-26032024-112307/pt-br.php -
NLM
Rojas Reinoso LL. A real-time face analysis system for head poses classification [Internet]. 2024 ;[citado 2024 abr. 28 ] Available from: https://www.teses.usp.br/teses/disponiveis/3/3141/tde-26032024-112307/pt-br.php -
Vancouver
Rojas Reinoso LL. A real-time face analysis system for head poses classification [Internet]. 2024 ;[citado 2024 abr. 28 ] Available from: https://www.teses.usp.br/teses/disponiveis/3/3141/tde-26032024-112307/pt-br.php
How to cite
A citação é gerada automaticamente e pode não estar totalmente de acordo com as normas
