跳到主要内容
Octopus Research Institute
状态: 探索中

Auslan 与多模态 AI

将 Auslan(澳大利亚手语)的摄像头识别作为对手部、身体、面部与时序的多模态表征来探索——而非手势分类。以社区参与为前提,处于早期阶段。

范围

对基于摄像头的 Auslan 识别、姿态/关键点系统、多模态融合与本地推理的早期、社区参与式探索,并对准确率局限进行诚实评估。手语被视为具有语法、时序与语境的完整语言——而非孤立手势。

本方向的研究项目

  • 状态: 探索中
    Auslan 与多模态无障碍

    对基于摄像头的 Auslan 识别进行早期、社区参与式探索,将其视为多模态表征——而非手势分类,也不替代手语翻译员。

全部研究方向