瑞萨电子与Syntiant共同开发结合先进视觉与语音技术的 语音控制多模态AI解决方案
时间:2021-07-28 17:44来源:
摘要:全新方案在物联网和边缘应用中实现对嵌入式视觉AI系统的低功耗语音控制操作
全新方案在物联网和边缘应用中实现对嵌入式视觉AI系统的低功耗语音控制操作
2021 年 7 月 28 日,日本东京和美国加州尔湾讯 - 全球半导体解决方案供应商瑞萨电子集团(TSE:6723),和致力在边缘设备领域推动低功耗智能语音及传感器处理技术的深度学习芯片技术供应商Syntiant今日宣布,共同开发出一款语音控制的多模态AI解决方案,在基于视觉AI的物联网和边缘系统(如自助收银机、安全摄像头和视频会议系统)以及智能家电(如扫地机器人等)中实现低功耗、非接触式的图像处理。
全新解决方案结合了瑞萨RZ/V系列视觉AI微处理器(MPU)和低功耗多模态、多功能Syntiant NDP120 Neural Decision Processor™,以提供先进的语音和图像处理功能。该解决方案具备常开功能,可从待机模式快速通过语音激活,以执行物体识别、面部识别等视觉任务,以及其它安防摄像机等系统的关键功能。如当用户定义的语音提示激活并运行系统时,视觉AI将识别跟踪操作员的行为,并控制操作或在检测到可疑行为时发出警告。
多模态架构使得为基于视觉AI的系统创建非接触式用户体验变得更加容易。由于可以独立于视觉AI功能进行软件开发,因此利用专用的高能效芯片进行语音识别可降低待机功耗,并加速系统开发。
瑞萨电子高级副总裁、物联网及基础设施事业本部SoC事业部部长新田启人表示:“我们预计,作为提高易用性和安全性的一种有效途径,对采用多输入信息流(包括图像和语音)的多模态系统需求将会增加。拥有先进低功耗图像AI技术的瑞萨与语音AI技术优秀供应商Syntiant紧密合作,将加速低功耗、超小型智能语音AI技术在嵌入式系统中的应用,并为全球客户带来新的综合解决方案。”
Syntiant CEO Kurt Busch表示:“基于语音的用户界面让客户获得全新用户体验,将下一代创新理念从概念变为现实。我们的深度学习NDP全球出货量已超过1500万片,为各类消费和工业物联网应用实现了常开语音功能。我们同瑞萨的合作打造了强大、低功耗的语音及图像解决方案,相信它将会加速推动全球客户在丰富设备和案例中的应用。”
用于视觉AI的瑞萨RZ/V系列MPU集成了瑞萨独有的DRP-AI(动态可配置处理器-AI)加速器,并将高精度AI推理与业界领先能效充分结合。卓越能效可消除对散热片或冷却风扇等散热措施的需求,从而降低材料清单(BOM)成本,使视觉AI集成至广泛的嵌入式应用成为可能。
Syntiant NDP120芯片集成了复杂的AI功能,可用于众多高精度免提语音应用,包括演讲人识别、关键词检测、多唤醒词和本地命令识别等。NDP120与Syntiant Core 2™神经网络推理引擎封装,还可同时运行多个应用程序,并将功耗降至1mW电池功率。
全新语音控制多模态AI解决方案作为瑞萨电子“成功产品组合”的一部分,从瑞萨更广泛的产品组合中选取多个相互兼容的器件,为客户构建更高阶的原型设计平台,以加速上市并降低风险。瑞萨“成功产品组合”包含卓越的模拟、电源和嵌入式处理产品组合,可帮助客户加速设计并缩短上市时间。
供货信息
全新多模态AI解决方案的参考设计现已推出,其中包括电路图和BOM清单。更多信息,请访问:多模态AI解决方案
免责声明:本文若是转载新闻稿,转载此文目的是在于传递更多的信息,版权归原作者所有。文章所用文字、图片、视频等素材如涉及作品版权问题,请联系本网编辑予以删除。
我要投稿
近期活动
- 安森美汽车&能源基础设施白皮书下载活动时间:2024年04月01日 - 2024年10月31日[立即参与]
- 2023年安森美(onsemi)在线答题活动时间:2023年09月01日 - 2023年09月30日[查看回顾]
- 2023年安森美(onsemi)在线答题活动时间:2023年08月01日 - 2023年08月31日[查看回顾]
- 【在线答题活动】PI 智能家居热门产品,带您领略科技智慧家庭时间:2023年06月15日 - 2023年07月15日[查看回顾]
- 2023年安森美(onsemi)在线答题活动时间:2023年06月01日 - 2023年06月30日[查看回顾]
分类排行榜
- 汽车电子电源行业可靠性要求,你了解多少?
- 内置可编程模拟功能的新型 Renesas Synergy™ 低功耗 S1JA 微控制器
- Vishay 推出高集成度且符合 IrDA® 标准的红外收发器模块
- ROHM 发布全新车载升降压电源芯片组
- 艾迈斯半导体推出行业超薄的接近/颜色传感器模块,助力实现无边框智能手机设计
- 艾迈斯半导体与 Qualcomm Technologies 集中工程优势开发适用于手机 3D 应用的主动式立体视觉解决方案
- 维谛技术(Vertiv)同时亮相南北两大高端峰会,精彩亮点不容错过
- 缤特力推出全新商务系列耳机 助力解决开放式办公的噪音难题
- CISSOID 和泰科天润(GPT)达成战略合作协议,携手推动碳化硅功率器件的广泛应用
- 瑞萨电子推出 R-Car E3 SoC,为汽车大显示屏仪表盘带来高端3D 图形处理性能
编辑推荐
小型化和稳定性如何兼得?ROHM 推出超小型高输出线性 LED 驱动器 IC,为插座型 LED 驱动 IC 装上一颗强有力的 “心脏”
众所周知,LED的驱动IC担负着在输入电压不稳定的情况下,为LED提供恒定的电流,并控制恒定(可调)亮度的作用。无论是室内照明,还是车载应用,都肩负着极为重要的使命。
- 关于反激电源效率的一个疑问
时间:2022-07-12 浏览量:10196
- 面对热拔插阐述的瞬间大电流怎么解决
时间:2022-07-11 浏览量:8949
- PFC电路对N线进行电压采样的目的是什么
时间:2022-07-08 浏览量:9592
- RCD中的C对反激稳定性有何影响
时间:2022-07-07 浏览量:7204
- 36W单反激 传导7~10M 热机5分钟后超标 不知道哪里出了问题
时间:2022-07-07 浏览量:5978
- PFC电感计算
时间:2022-07-06 浏览量:4188
- 多相同步BUCK
时间:2010-10-03 浏览量:37869
- 大家来讨论 系列之二:开机浪涌电流究竟多大?
时间:2016-01-12 浏览量:43165
- 目前世界超NB的65W适配器
时间:2016-09-28 浏览量:60029
- 精讲双管正激电源
时间:2016-11-25 浏览量:128131
- 利用ANSYS Maxwell深入探究软磁体之----电感变压器
时间:2016-09-20 浏览量:107562
- 【文原创】认真的写了一篇基于SG3525的推挽,附有详细..
时间:2015-08-27 浏览量:100301