Hand Pose Estimation in the Task of Egocentric Actions

Abstract

Článek se zabývá problémem odhadu pozice ruky z egocentrického pohledu, když ruka interaguje s různými objekty. Problém s sebou nese častý překryv částí ruky předmětem nebo rukou. Pro určení počáteční hypotézy umístění kloubů ruky je použita metoda Voxel-to-Voxel, kombinace hypotéz a několik strategií zpracování výstupů poskytuje celkové zlepšení výsledků. Model pózy ruky ve formě singulárního rozkladu (SVD) a časového kontextu dále upřesňuje umístění kloubů. Ablační studie metod ukazuje vliv jednotlivých rysů následného zpracování. Metoda poskytuje state-of-the-art výsledky v soutěži "HANDS19: Task 2-Depth-Based 3D Hand Pose Estimation while Interacting with Objects" s přesností na testovacích datech 33,09 mm.