Jove
Visualize
联系我们
JoVE
x logofacebook logolinkedin logoyoutube logo
关于 JoVE
概览领导团队博客JoVE 帮助中心
作者
出版流程编辑委员会范围与政策同行评审常见问题投稿
图书馆员
用户评价订阅访问资源图书馆顾问委员会常见问题
研究
JoVE JournalMethods CollectionsJoVE Encyclopedia of Experiments存档
教育
JoVE CoreJoVE BusinessJoVE Science EducationJoVE Lab Manual教师资源中心教师网站
使用条款与条件
隐私政策
政策

相关实验视频

Updated: Jan 18, 2026

Author Spotlight: Addressing Technical and Subjective Challenges in Measuring Classroom Attention
06:37

Author Spotlight: Addressing Technical and Subjective Challenges in Measuring Classroom Attention

Published on: December 15, 2023

5.3K

SSTA-ResT:软时空注意力ResNet转换器用于阿根廷手语识别

Xianru Liu1, Zeru Zhou1, E Xia1

  • 1School of Automation, Central South University, Changsha 410083, China.

Sensors (Basel, Switzerland)
|September 13, 2025
PubMed
概括

本研究介绍了SSTA-ResT,这是一个用于标语识别的新框架,有效地捕获动态和时间信息. 这种先进的模型显著提高了聋人和听觉人士的准确性和包容性.

相关概念视频

您也可能阅读

相关文章

通过共同作者、期刊和引用图与本文相关的文章。

排序
Same author

In Silico and In Vivo Pharmacokinetic Evaluation of 84-B10, a Novel Drug Candidate against Acute Kidney Injury and Chronic Kidney Disease.

Molecules (Basel, Switzerland)·2024
Same author

Cancer-associated fibroblast expression of glutamine fructose-6-phosphate aminotransferase 2 (GFPT2) is a prognostic marker in gastric cancer.

The journal of pathology. Clinical research·2023
Same author

Association between Vitamin A and E Forms and Prostate Cancer Risk in the Singapore Prostate Cancer Study.

Nutrients·2023
Same author

Prognostic analysis of patients with breast cancer based on tumor mutational burden and DNA damage repair genes.

Frontiers in oncology·2023
Same author

Chromosome-level genome assembly of Murraya paniculata sheds light on biosynthesis of floral volatiles.

BMC biology·2023
Same author

Exposure to cooking fumes is associated with perturbations in nasal microbiota composition: A pilot study.

Environmental research·2023

科学领域:

  • 计算机视觉 计算机视觉
  • 人工智能的人工智能
  • 人与计算机的交互

背景情况:

  • 标语识别技术对于弥合沟通差距和促进社会包容性至关重要.
  • 使用静态图像的传统方法无法捕捉手语的动态性质,限制了现实世界的应用.
  • 开发强大的手语识别系统对于提高聋人社区的可访问性至关重要.

研究的目的:

  • 提出一个有效的手语识别框架,解决传统方法的局限性.
  • 增强对动态和时间信息的捕获,这对于准确的手语解释至关重要.
  • 通过促进聋人和听力人士之间更好的沟通来改善社会包容性.

主要方法:

  • SSTA-ResT框架集成ResNet用于空间特征提取.
  • 一个软时空注意 (SSTA) 模块增强了双路径表示和时空关联.
  • 变压器编码器用于在手语视频中捕捉远程时间依赖.

主要成果:

  • 在LSA64阿根廷手语数据集上,SSTA-ResT框架实现了96.25%的准确性,97.18%的精度,F1得分为0.9671.
  • 在所有评估的指标中,绩效指标超过了现有方法.
  • 该模型保持较低的参数数量 (11.66 M),表示效率.
关键词:
阿根廷手语的识别 阿根廷手语的识别这就是ResNet ResNet.变压器变压器变压器时间空间注意力.

相关实验视频

Last Updated: Jan 18, 2026

Author Spotlight: Addressing Technical and Subjective Challenges in Measuring Classroom Attention
06:37

Author Spotlight: Addressing Technical and Subjective Challenges in Measuring Classroom Attention

Published on: December 15, 2023

5.3K

结论:

  • SSTA-ResT框架证明了手语视频识别的卓越有效性和实用性.
  • 集成ResNet,SSTA和变压器编码器为捕捉复杂的手语动态提供了强大的解决方案.
  • 这一进步具有显著的潜力,可以改善聋人沟通的可访问性和社会包容性.