说话脑机接口技巧与人工智能和具身智能技巧融合。

中科院上海微体系与信息技巧研究所供图

中科院上海微体系与信息技巧研究所供图

这一流程，实现了从“脑电—音节—汉字—语句”的闭环。

近日，中国科学院上海微体系与信息技巧研究所结合相干团队，在说话脑机接口范畴取得冲破性进展。

研究人员开辟出植入式高通量柔性脑机接口体系和汉说话及时神经收集解码算法，并在国际上初次实现脑机接话柄时汉语解码和语句合成。这项研究不仅让中文掉语患者有望从新“开口措辞”，也为脑机接口在多说话、多场景下的应用打开了新空间。

实现解码随便率性汉字和语句

说话是人与人之间沟通交换的重要情势。然而，脑卒中、渐冻症、脑外伤等重大年夜脑疾病，常让患者掉去说话表达才能，陷入意识清醒却无法开口的困境。

周志涛说，团队此次研究的核心冲破重要有两点，“初次实现了汉语及时解码，以及实现了覆盖汉语几乎全部音节的全谱解码”。

比拟于英语，汉语具有其独特点。具体而言，英语是以多音节为主的非声调说话，汉语则是以单音节为主的声调说话。同时，英语词汇量较大年夜，常用英语单词约为2万个，而汉语经由过程约400个汉语音节加4个声调，可构建出覆盖日常需求的3500多个常用汉字。

汉语的独特点蕴含优势。研究团队从这些汉语音节和声调入手，将其作为稳定的中心解码单位，实现从脑电到文字的“翻译”。英语难以直接解码海量单词，而汉语则可以经由过程解码这些汉语音节和声调，实现覆盖全部发音组合，进而实现解码随便率性汉字和语句。

“音节+声调”解码策略

环绕汉语特点，研究团队提出了以“音节+声调”为核心的中心解码单位。

据科研人员介绍，与音素比拟，音节是更完全、更充分的发音单位，持续时光更长、神经表征更稳定，更有利于从脑电旌旗灯号中提取区分特点。同时，经由过程直接解码音节，可以省去声母、韵母再组合的复杂中心步调，大年夜幅晋升解码效力。

在具体实现上，研究团队经由过程构建多级及时解码数据流，以50毫秒滑动窗口提取70Hz至170Hz的High-γ频段脑电旌旗灯号，并对齐脑电旌旗灯号与发音肇端点，驱动双流解码器同步生成音节与声调的概率分布，进而融合说话模型进行最合适的句子组合选择，实现及时汉语语句输出。

研究显示，受试者经由9天的说话解码义务后，394个汉语音节(解码未覆盖音节为冷僻音节且受试者不熟悉)纯神经解码平均精确率达到71.2%，单音节解码延时65ms，及时汉语语句解码速度达到49.6字/分钟。

在此基本上，团队进一步将说话脑机接口与人工智能、具身智能技巧相融合，基于自立研发的通用型脑机操作体系，实现了多种全新交互方法。

例如受试者可以经由过程脑电解码，驱动数字分身进行表达;可以直接与人工智能大年夜模型对话;也可以将解码出的说话转化为控制指令，及时操控灵活手完成抓握等动作。

拓展“措辞”的界线

“说话解码在AI时代，已经不局限于纯真实现‘措辞’。”周志涛认为，说话解码还可以增能人本身的才能，让人变成“超人”，并极大年夜地拓展控制和交互的想象力和可能性。“说话脑机接口可以作为一个控制中枢和信息枢纽，经由过程上述及将来各类新型交互方法的实现，赞助人控制各类先辈软硬件并与其高效协作。”

汉语语句及时解码。

“中国有近800万因各类脑疾病掉去说话才能的患者，汉语解码对他们有着很大年夜的意义和应用价值。”中国科学院上海微体系与信息技巧研究所研究员周志涛说，近年来，国际上的多个顶尖科研团队在脑机接口英语解码上取得了多项冲破性进展，包含英语和西班牙语双语解码，然则应用人数最多、与英语差别很大年夜的汉语解码研究因为起步较晚而进展相对慢。

面向临床应用，说话脑机接口依旧面对一些挑衅。例如若何经久稳定植入，以及在更长时光内保持高质量脑旌旗灯号采集，降低组织反响。此外，汉语神经编码机制本身也需进一步摸索。

研究团队表示，下一步他们将优先推敲应用团队最新的全无线全植入全功能脑机接口设备，开展经久植入实验，实现及时静默解码，进一步进步及时解码速度和精确性。

Tags： 脑机接口新突破—— 中文失语患者有望重获“新声”