| Title: | Hand Pose Estimation in the Task of Egocentric Actions |
| Other Titles: | Odhad pózy ruky vykonávající egocentrické akce |
| Authors: | Hrúz, Marek Kanis, Jakub Krňoul, Zdeněk |
| Citation: | HRÚZ, M. KANIS, J. KRŇOUL, Z. Hand Pose Estimation in the Task of Egocentric Actions. IEEE Access, 2021, roč. 9, č. 11.1.2021, s. 10533-10547. ISSN: 2169-3536 |
| Issue Date: | 2021 |
| Publisher: | IEEE |
| Document type: | článek article |
| URI: | 2-s2.0-85099554685 http://hdl.handle.net/11025/45629 |
| ISSN: | 2169-3536 |
| Keywords: | Třídimenzionální displej;Odhad pózy;Dvoudimenzionální displej;Analýza úkonů,Trojrozměrné modelování;Predikční algoritmy;Stav o poloze;3D konvoluční neuronové sítě;Póza z egocentrického pohledu;TruncatedSVD;Volumetrická data |
| Keywords in different language: | Three-dimensional displays;Pose estimation;Task analysis;Two dimensional displays;Solid modeling;Prediction algorithms;Location awareness;3D convolutional neural network;egocentric hand pose;TruncatedSVD;volumetric data |
| Abstract: | Článek se zabývá problémem odhadu pozice ruky z egocentrického pohledu, když ruka interaguje s různými objekty. Problém s sebou nese častý překryv částí ruky předmětem nebo rukou. Pro určení počáteční hypotézy umístění kloubů ruky je použita metoda Voxel-to-Voxel, kombinace hypotéz a několik strategií zpracování výstupů poskytuje celkové zlepšení výsledků. Model pózy ruky ve formě singulárního rozkladu (SVD) a časového kontextu dále upřesňuje umístění kloubů. Ablační studie metod ukazuje vliv jednotlivých rysů následného zpracování. Metoda poskytuje state-of-the-art výsledky v soutěži "HANDS19: Task 2-Depth-Based 3D Hand Pose Estimation while Interacting with Objects" s přesností na testovacích datech 33,09 mm. |
| Abstract in different language: | In this article we tackle the problem of hand pose estimation when the hand is interacting with various objects from egocentric viewpoint. This entails a frequent occlusion of parts of the hand by the object and also self-occlusions of the hand. We use a Voxel-to-Voxel approach to obtain hypotheses of the hand joint locations, ensemble the hypotheses and use several post-processing strategies to improve on the results. We utilize models of prior hand pose in the form of Truncated Singular Value Decomposition (SVD) and the temporal context to produce refined hand joint locations. We present an ablation study of the methods to show the influence of individual features of the post-processing. With our method we were able to constitute state-of-the-art results on the HANDS19 Challenge: Task 2 - Depth-Based 3D Hand Pose Estimation while Interacting with Objects, with precision on unseen test data of 33.09 mm. |
| Rights: | © Creative Commons Attribution 4.0 International |
| Appears in Collections: | Články / Articles (KKY) OBD |
Files in This Item:
| File | Size | Format | |
|---|---|---|---|
| Hruz_Kanis_Krnoul_Hand_Pose_Estimation_in_the_Task_of_Egocentric_Actions.pdf | 2,07 MB | Adobe PDF | View/Open |
Please use this identifier to cite or link to this item:
http://hdl.handle.net/11025/45629Items in DSpace are protected by copyright, with all rights reserved, unless otherwise indicated.