0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

关于云知声开源全栈语音交互方案概念详解

云知声 ? 来源:djl ? 作者:云知声 ? 2019-08-08 16:40 ? 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

其实现在外面好多合作伙伴都说我们特别‘独’,不过等你们的东西做出来,大家就不会这么说啦。”云知声联合创始人、芯片负责人李霄寒经常用这句话作为开头来鼓励自己的芯片团队尽快完成 Turnkey 整体音箱方案。因为在 5 月份云知声首款面向物联网AI 芯片—— UniOne 的发布会上,在 UniOne 上实现 Turnkey 音箱方案并将其整体开源,已经作为一个重大举措发布了。

谈起之前和合作伙伴的合作,李霄寒还是比较感慨的,云知声之所以能成为国内唯一实现 IVM (智能硬件模组)在白电领域大规模出货的 AI 公司,其中最关键的一条就是云知声提供了软硬件云+端一体化解决方案,为客户提供了一站式解决方案。但是这种模式,让很多希望和云知声展开合作的技术方案公司感觉云知声不太愿意和大家一起玩,所以有人半开玩笑半认真地说云知声比较“独”。

但是另一方面,李霄寒认为前两年的“独”,恰恰是对合作伙伴的负责。因为面向智能家居实现 AI 落地,牵涉到非常多的环节,比如需要积累可以量产化的结构经验;比如需要通过引擎、硬件平台选型以及系统优化,满足家电厂商整体的功耗要求;再比如适配云知声引擎,并在价格和性能方面达到最佳配置的通用芯片选型。这些都需要经过团队之间日常的紧密的合作,有时候甚至需要针对某些硬件特点做相应的引擎代码级别修改,才能真正实现最佳效果。

“如果仅仅提供一个引擎给自己的合作伙伴,再提供一些 SDK 层面的适配和支持,其实对自己的合作伙伴,包括对自己的团队,都是不负责任的。因为大家资源都是有限而宝贵的,引擎原厂没有足够的硬件、系统和产品经验,是无法高效支撑合作伙伴,最终大家做了很多合作,可能只是一场热闹,而无法做到量产出货。”这是李霄寒的结论。

正是在这种思想的指导下,云知声一面提供着 IVM 的整体解决方案,一面把自己在 IVM 实际落地场景下积累的经验和参数,落实到自有 AI 芯片 UniOne 的设计中,期望通过芯片最大可能地把家居场景下的关键部分进行固化,再将该芯片之上的全栈语音交互进行开源,大大降低技术门槛、缩短上市时间,从而确保合作伙伴与云知声的合作都有收获。

“不过这么做压力很大”,作为资深金庸迷,李霄寒有时候在内部开玩笑,说基于 UniOne 整体开源交互方案出来之前,自己经常想起《倚天屠龙记》里面赵敏说的那两句话“周公恐惧流言日,王莽礼谦下士时”,不过这也更加促进了自己领导的芯片团队加班加点。

碎片化IoT市场 VS基于UniOne的统一战线

兵无常势,水无常形, UniOne 出来后,云知声也进入到自己的“芯时代”,远讲降噪的 2Mic、4Mic 算法的各个参数,离线唤醒达到最佳唤醒率/误唤醒率的阈值,离线识别命令的模型大小和反应速度,都已经调到了最佳状态并且固化在 UniOne 中。在这种情况下,和合作伙伴一起做,就在一个非常稳固并且高起点地基础上了。面向很多潜在地客户,云知声均有一套经过验证过的参数,可以保证最终产品的性能,如果后续云知声算法有升级,也可以通过刷新 UniOne 中的固件来确保效果。

与此同时, UniOne 上目前实现的音箱整体交互方案也将开源。大家可以先感受一下当前的效果。

“ Turnkey 方案的开源,必将大大促进整体智能硬件产品的开发”,谈及这点,李霄寒信心满满。原因主要来源于以下三个方面:

一、 智能硬件的产品经理非常稀缺,尤其是懂语音交互设计的产品经理。语音交互(VUI)与之前屏幕为主要展示的图形界面交互(GUI)差别非常大,前者是扁平结构,一句话直达系统任何一个图形界面,可以做任何一个操作。而后者是树形结构,需要一步步点击。这两种交互各有优势,而VUI 目前市面上人才不多,又由于其扁平结构的特性,在设计的时候,需要从系统整体层面来考虑,而不是简简单单一个 App 层面。如此总总,都大大增加了 VUI 设计难度。

“产品交互设计如果都不好,最终开发的产品效果就可想而知了。”而作为云知声创始团队的李霄寒,在十多年前就在 Motorola 中国研究中心从事人机交互相关的研究工作,从 Motorola 手机上的语音交互到云知声车载到格力空调、斐讯音箱,李霄寒带领云知声团队积累了丰富的 VUI 设计和开发经验,而这些经验凝结而成的整体语音交互方案,将随着 UniOne 一起作为 Turnkey 方案整体开源,这一切将大大降低行业门槛。

二、 语音交互方案开源将大大缩短开发周期。作为一个系统级的功能,语音交互方案将处理音频驱动,处理与系统其他应用的交互,处理各个案件和唤醒事件,而且必须足够健壮稳定,这些都随着云知声开源方案得到解决。合作伙伴可以只做浅层次的定制化改造,比如唤醒词修改;也可以做深层次开发,比如基于云知声架构框架增加自己的对话 Session ;也可以在看懂整体方案情况下,完全重写。

三、 云知声经过考验的实施团队,提及云知声的竞争优势,很多客户都对云知声的服务表示认可,这与云知声有一支经验丰富并且善于和客户配合的实施团队密不可分。而在“芯时代”,这支团队将为愿意采用云知声 UniOne 的合作伙伴提供整体开源方案的技术支持,包括代码培训、工具开发等,尽一切可能降低合作伙伴熟悉整体开源方案的学习曲线陡峭度。

正如在 UniOne 芯片发布会上李霄寒所强调的,IoT 是一个碎片化的市场,面对这个碎片化的市场,如何以一个高效的方式应对,是云知声,也是云知声的合作伙伴需要认真面对并深度思考的。现在云知声给出了自己的回答,通过凝结自己场景落地经验的 UniOne 芯片,将其上的全栈语音交互方案进行开源,结成统一战线。各个合作伙伴可以在开源方案上将精力更多地放在自己熟悉的细分市场定制化方向,更快更好更多的出货。而云知声聚焦在自己性能改进和芯片迭代,更高性能更低成本。

“9月份,大家一起来”,李霄寒非常高兴自己终于可以在9月份的 UniOne Turnkey 方案开源研讨会上甩掉戴在自己和云知声头上两年多的“独”的帽子了。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 芯片
    +关注

    关注

    460

    文章

    52737

    浏览量

    444206
  • 语音交互
    +关注

    关注

    3

    文章

    311

    浏览量

    28685
  • 云知声
    +关注

    关注

    0

    文章

    241

    浏览量

    8838
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    与瓦努阿图政府签署谅解备忘录

    近期,与瓦努阿图共和国政府(经其驻华大使馆代表)(「瓦努阿图政府」)正式签署关于人工智能海外实施合作和访问邀请的谅解备忘录(「备忘录」),并将依据备忘录开启紧密战略合作,展开具体
    的头像 发表于 07-18 17:28 ?623次阅读

    在港交所成功上市

    近日,智能科技股份有限公司(以下简称“”)于香港联合交易所主板挂牌上市,股份代号:0
    的头像 发表于 07-03 17:41 ?634次阅读

    AGI龙头企业港股上市,市值达147亿港元

    为147.44亿港元。 ? 图:创始人董事长CEO黄伟博士在现场致辞表示:从今天起,我们将以香港为支点,将中国AGI产品带向全世界——用更敏捷的创新、更好的商业化和更开放的心胸,让人类智慧与机器智能共振全球! ?
    的头像 发表于 06-30 11:44 ?1806次阅读
    AGI龙头企业<b class='flag-5'>云</b><b class='flag-5'>知</b><b class='flag-5'>声</b>港股上市,市值达147亿港元

    与商汤科技达成战略合作

    近日,智能科技股份有限公司(以下简称“”)与上海商汤智能科技有限公司(以下简称“商汤
    的头像 发表于 06-20 14:52 ?575次阅读

    携手南宁轨道打造智慧生活新范本

    报事报修系统基于兽牙智能体平台,定制开发了专属智能体。系统全面覆盖公共报修、家政服务、知识问答、投诉建议四大应用场景,真正实现了“语音下单—自动派单—实时反馈”的
    的头像 发表于 06-09 14:48 ?577次阅读

    大象机器人携手进迭时空推出 RISC-V 开源六轴机械臂产品

    识别联调。 进迭时空致力于为智能机器人提供完整优化的RISC-V AI软硬件解决方案,第一代RISC-V AI CPU芯片K1已完成AI视觉感知、AI语音处理、自动避障、路径规划
    发表于 04-25 17:59

    兽牙AI Agent功能上新

    在企业数字化转型的浪潮中,传统AI被动执行指令的模式已难以满足高效协作的需求。当AI开始像人类一样思考、规划并主动解决问题,一场关于智能体的革新正悄然发生。近日,兽牙AI企业级智
    的头像 发表于 04-03 17:51 ?1236次阅读

    入选工信部2024年未来产业创新发展优秀典型案例

    近日,工业和信息化部高新技术司发布《2024年未来产业创新发展优秀典型案例公示》,"基于大模型和语音交互技术的医疗文书自动生成系统"成
    的头像 发表于 03-31 16:48 ?586次阅读

    开源——ESP32语音交互系统(AI小智)开发教程

    人机交互功能 二、扩展板设计1. 硬件清单主控单元:零ESP32(双核处理器,支持Wi-Fi/BLE,丰富外设接口) 语音输入:INMP441数字麦克风(I2S接口,高信噪比) 音频输出
    发表于 03-29 16:30

    Atlas超算平台的核心亮点

    在大数据与人工智能领域日新月异的今天,高效、可靠的分布式文件系统及其计算加速方案已成为众多企业和科研机构关注的焦点。的Atlas超算平台以其“基于Fluid + Alluxio的
    的头像 发表于 01-07 16:08 ?651次阅读

    与TCL引领新风空调语音交互新时代

    近日,收到一份特别的新年礼物——一封来自TCL的感谢信,再次温暖了团队的心。信中特别
    的头像 发表于 01-02 10:14 ?876次阅读

    曙光开启智能时代

    近日,“可信 云中生智”曙光战略发布会召开。曙光从首创“城市”进化到实现“
    的头像 发表于 12-19 15:11 ?709次阅读

    与上海仪电物联签署战略合作协议

    近日,(上海)智能科技有限公司(以下简称“”)与上海仪电物联技术股份有限公司(以下简
    的头像 发表于 11-29 18:02 ?1007次阅读

    与国信领英签署战略合作协议

    智能科技股份有限公司(以下简称“”)与苏州国信领英教育科技有限公司(以下简称“国信领
    的头像 发表于 10-12 14:16 ?805次阅读

    推出山海多模态大模型

    在人工智能技术的浩瀚星海中,多模态交互技术正成为引领未来的新航标。继OpenAI的GPT-4o掀起滔天巨浪后,以创新之姿,推出了其匠心独运的山海多模态大模型,正式宣告“Her时代
    的头像 发表于 08-27 15:20 ?680次阅读