SISTEMA E MÉTODO PARA CONTROLAR UMA POSIÇÃO DE UMA CÂMERA VIRTUAL COM SEIS GRAUS DE LIBERDADE USANDO RASTREAMENTO DE FACE DE UM USUÁRIO, E, MEIO LEGÍVEL POR COMPUTADOR NÃO TRANSITÓRIO

Classificação IPC

Resumo técnico

SISTEMA E MÉTODO PARA CONTROLAR UMA POSIÇÃO DE UMA CÂMERA VIRTUAL COM SEIS GRAUS DE LIBERDADE USANDO RASTREAMENTO DE FACE DE UM USUÁRIO, E, MEIO LEGÍVEL POR COMPUTADOR NÃO TRANSITÓRIO. A presente invenção se refere a um método e sistema de controle de movimentos em seis graus de liberdade (6DoF) para alterar o ponto de vista do usuário de realidade virtual, alterando a pose da câmera virtual de uma cena com base no movimento da cabeça do usuário capturado pela câmera de vídeo RGB do dispositivo posicionada na frente do usuário, por exemplo, a webcam do notebook. A técnica atinge esse resultado usando aprendizado profundo para: detectar o corpo do usuário no campo de visão da câmera, detectar a pose facial desse usuário, mapear pontos do mesmo e usar essa referência para controlar a pose da câmera virtual em 6DoF representando o ponto de vista do usuário e atualizar o conteúdo da tela.