
Indexat a
Llicència i ús
Anàlisi d'autories institucional
Luna-Jiménez CAutor (correspondència)Gil-Martin MAutor (correspondència)Kleinlein R.Autor o coautorKleinlein RAutor o coautorSan-Segundo RAutor o coautorFernández-Martinez FAutor o coautorInterpreting Sign Language Recognition using Transformers and MediaPipe Landmarks
Publicat a:Acm International Conference Proceeding Series. 373-377 - 2023-01-01 (), DOI: 10.1145/3577190.3614143
Autors: Luna-Jimenez, Cristina; Gil-Martin, Manuel; Kleinlein, Ricardo; San-Segundo, Ruben; Fernandez-Martinez, Fernando
Afiliacions
Resum
Sign Language Recognition (SLR) is a challenging task that aims to bridge the communication gap between the deaf and hearing communities. In recent years, deep learning-based approaches have shown promising results in SLR. However, the lack of interpretability remains a significant challenge. In this paper, we seek to understand which hand and pose MediaPipe Landmarks are deemed the most important for prediction as estimated by a Transformer model. We propose to embed a learnable array of parameters into the model that performs an element-wise multiplication of the inputs. This learned array highlights the most informative input features that contributed to solve the recognition task. Resulting in a human-interpretable vector that lets us interpret the model predictions. We evaluate our approach on public datasets called WLASL100 (SRL) and IPNHand (gesture recognition). We believe that the insights gained in this way could be exploited for the development of more efficient SLR pipelines.
Paraules clau
Indicis de qualitat
Impacte bibliomètric. Anàlisi de la contribució i canal de difusió
Des d'una perspectiva relativa, i atenent a l'indicador de impacte normalitzat calculat a partir del Field Citation Ratio (FCR) de la font Dimensions, proporciona un valor de: 4.45, el que indica que, comparat amb treballs en la mateixa disciplina i en el mateix any de publicació, el situa com un treball citat per sobre de la mitjana. (font consultada: Dimensions Jul 2025)
Concretament, i atenent a les diferents agències d'indexació, aquest treball ha acumulat, fins a la data 2025-07-09, el següent nombre de cites:
- WoS: 4
- Scopus: 6
- Google Scholar: 6
Impacte i visibilitat social
Anàlisi del lideratge dels autors institucionals
Hi ha un lideratge significatiu, ja que alguns dels autors pertanyents a la institució apareixen com a primer o últim signant, es pot apreciar en el detall: Primer Autor (LUNA JIMENEZ, CRISTINA) i Últim Autor (FERNANDEZ MARTINEZ, FERNANDO).
els autors responsables d'establir les tasques de correspondència han estat LUNA JIMENEZ, CRISTINA i GIL MARTIN, MANUEL.