sounex lab

应用场景

为什么是声音?声音能做什么?

转写只是“说了什么”,我们不该满足于此。语气、环境、长期变化,当前的机器仍然无法理解。但它们非常有价值。

完整的声音信息已完成 1 / 5

  1. 语音转写
  2. 语气与韵律
  3. 说话人与轮次
  4. 环境声与方位
  5. 长期变化追踪

场景示例

适合:智能音箱、陪伴机器人、养老服务

「昨晚睡得还行。」

每天早上,音箱都会问林阿姨睡得怎么样。今天她的回答和往常一样。

识别信息

“昨晚睡得还行。”每天的文字相同。

触发行动

音箱回一句“那就好”,继续播报天气。

识别信息

开口前停了 1.9 秒,平时不到 1 秒。

语速也更慢,变化已连续 5 天。

触发行动

音箱今天少问问题,先聊周六的合唱。

给女儿的周报:“妈妈这周说话比平时慢,有空多打个电话。”

适合:AI 玩具、故事机、学习机

「然后小猫……飞到了……」

孩子在给玩具讲自己编的故事,讲到一半,停下来想词。

识别信息

孩子说到“飞到了”,停了 1.2 秒,被当作说完了。

触发行动

玩具立刻接话、换故事,打断接下来的“月亮上!”

识别信息

“到了”拖长,句尾音调没有落下。

算法保留“还没说完”的判断。

触发行动

玩具等孩子补完“月亮上!”,再问:“它在月亮上看见了什么?”

适合:家庭机器人、移动机器人、智能终端

「小伴,来这边一下。」

机器人小伴正在客厅待命。左侧的门铃响了,主人从右侧厨房叫它过去。

识别信息

“小伴,来这边一下。”没有门铃和方向信息。

触发行动

机器人追问“这边是哪边?”,也没发现门口的动静。

识别信息

左侧:门铃响了两次。

右侧:厨房传来呼叫。

触发行动

机器人转向右侧,同时提醒:“门口有人按铃。”

适合:客服中心、售后回访、智能外呼

「行吧,那就这样吧。」

一通售后电话快结束时,客服问还有没有别的问题,客户这样回答。

识别信息

“行吧,那就这样吧。”被按同意处理。

触发行动

客服系统将工单标为“已解决”,自动关闭。

识别信息

停了 2 秒,句尾下沉,随后叹气。

算法标记为“需要确认”。

触发行动

客服系统保留工单,安排次日回访。

将这句话前后 30 秒标给主管回听。

已在实践社区筛查、电话随访

「我昨天去了……那个……菜市场。」

老人通过电话或社区平板,和 AI 聊几分钟家常。说话需要记忆、注意与语言组织,是观察认知变化的自然窗口。

识别信息

“我昨天去了菜市场。”整理后的文字省略了停顿和“那个”。

触发行动

系统未提示找词停顿,工作人员只收到整理后的文字。

识别信息

“菜市场”前停了 2.4 秒,出现两次“那个”。

整通电话共有 6 处找词停顿。

触发行动

系统标出相关片段,工作人员回听复核,再决定是否复测或随访。

勿忘我了解认知筛查 ↗

能力与场景

转写已经普及,其余四项还空着

这些场景都已经有产品在做,但大多停在转写这一步。空着的方框,是它们需要、现在还做不到的部分,也是 Sounex 在做的事。

  • 已经做到
  • 需要,还没做到
  • Sounex 可以补上
  • 用不到
场景语音转写语气与韵律说话人与轮次环境声与方位长期变化追踪
长期监测现在每天问候、提醒,只看回答的文字已经做到需要,还没做到Sounex 可以补上这个场景用不到这个场景用不到需要,还没做到Sounex 可以补上
陪伴互动现在停顿够长,就当孩子说完了已经做到需要,还没做到Sounex 可以补上需要,还没做到Sounex 可以补上这个场景用不到这个场景用不到
空间感知现在能定位叫它的人,门铃这类声音常被忽略已经做到这个场景用不到这个场景用不到需要,还没做到Sounex 可以补上这个场景用不到
客服电话现在转写和质检已普及,情绪多从文字判断已经做到需要,还没做到Sounex 可以补上需要,还没做到Sounex 可以补上这个场景用不到这个场景用不到
认知筛查已在实践现在靠量表评估,语音筛查还在研究已经做到需要,还没做到Sounex 可以补上这个场景用不到这个场景用不到需要,还没做到Sounex 可以补上
还在探索能力适用,产品还在验证
情绪健康现在以问卷为主,语音标志物还在研究已经做到需要,还没做到Sounex 可以补上这个场景用不到这个场景用不到需要,还没做到Sounex 可以补上
工业设备现在异常声音检测多停留在研究这个场景用不到这个场景用不到这个场景用不到需要,还没做到Sounex 可以补上需要,还没做到Sounex 可以补上
通话安全现在多按号码和关键词提醒已经做到需要,还没做到Sounex 可以补上需要,还没做到Sounex 可以补上这个场景用不到这个场景用不到