公开(公告)号：CN113627312A

公开(公告)日：2021-11-09

申请号：CN202110893020.6

申请日：2021-08-04

Applicant: 东南大学

Inventor： 陈祥雨 ,  肖明慧 ,  陈美华

IPC: G06K9/00 ,  G06F3/01 ,  G06F40/166 ,  G06F40/242 ,  G10L13/08 ,  G10L15/22 ,  G10L15/25

Abstract: 一种通过眼动追踪来辅助瘫痪失语者语言输出的系统，系统学习分析用户视线注视过的物品、外部环境中语言类和非语言类声音和此刻用户输出的语言文本，并存储到系统的词典模型中。用户再以某种顺序注视一系列物品时，或收集到外部环境声音时，系统会通过显示装置，将物品和外部环境音对应的用户词典模型中的候选文本显示出来，供用户选择并转换成声音通过扬声器发出。系统还提供紧急情况下可使用的预置紧急文本。本发明通过学习用户本身周围的环境物品和环境声音输入，和用户个体本身的语言历史习惯，使用户可以更有效率的将周围环境转换为更贴近自己习惯的语言输出，可以为瘫痪失语者等用户得以和外部进行基本且重要的语言交流。

公开(公告)号：CN113627312B

公开(公告)日：2025-01-10

申请号：CN202110893020.6

申请日：2021-08-04

Applicant: 东南大学

Inventor： 陈祥雨 ,  肖明慧 ,  陈美华

IPC: G06V20/52 ,  G06F3/01 ,  G06F40/166 ,  G06F40/242 ,  G10L13/08 ,  G10L15/22 ,  G10L15/25 ,  G06V20/40

Abstract: 一种通过眼动追踪来辅助瘫痪失语者语言输出的系统，系统学习分析用户视线注视过的物品、外部环境中语言类和非语言类声音和此刻用户输出的语言文本，并存储到系统的词典模型中。用户再以某种顺序注视一系列物品时，或收集到外部环境声音时，系统会通过显示装置，将物品和外部环境音对应的用户词典模型中的候选文本显示出来，供用户选择并转换成声音通过扬声器发出。系统还提供紧急情况下可使用的预置紧急文本。本发明通过学习用户本身周围的环境物品和环境声音输入，和用户个体本身的语言历史习惯，使用户可以更有效率的将周围环境转换为更贴近自己习惯的语言输出，可以为瘫痪失语者等用户得以和外部进行基本且重要的语言交流。