瑞萨电子集团与Syntiant近期联合宣布，推出一种新型的多模态AI语音控制解决方案，旨在为基于视觉AI的物联网、边缘系统及智能家电提供低功耗、非接触式的图像处理能力。
这一创新方案将瑞萨的RZ/V系列视觉AI微处理器（MPU）与Syntiant NDP120神经决策处理器相结合，提供卓越的语音与图像处理功能。该方案支持常开模式，使其能够从待机状态迅速通过语音激活，执行物体识别、面部识别等视觉任务，并实现安防摄像机等系统的关键功能。
多模态架构的设计，简化了基于视觉AI的系统中非接触式用户体验的创建。软件开发可以独立于视觉AI功能进行，利用高效能的专用芯片进行语音识别，不仅降低了待机功耗，还加速了系统开发的进程。
瑞萨电子的高级副总裁、物联网及基础设施事业部SoC事业部部长表示，随着多输入信息流的多模态系统在提高易用性和安全性方面的有效性，市场对其需求将不断增长。瑞萨与Syntiant的紧密合作，将推动低功耗、超小型智能语音AI技术在嵌入式系统中的广泛应用，为全球客户提供新的综合解决方案。
Syntiant的CEO指出，基于语音的用户界面为客户带来了全新的体验，使下一代创新理念得以实现。我们的深度学习NDP全球出货量超过1500万片，已在多种消费和工业物联网应用中实现常开语音功能。与瑞萨的合作将打造出强大而低功耗的语音及图像解决方案，预计将加速全球客户在多样化设备及案例中的应用。
瑞萨的RZ/V系列MPU配备了独特的DRP-AI（动态可配置处理器-AI）加速器，结合高精度AI推理与业内领先的能效。其卓越的能效消除了对散热片或冷却风扇的需求，从而降低了材料成本，使视觉AI能广泛融入嵌入式应用中。
Syntiant NDP120芯片整合了复杂的AI功能，适用于多种高精度免提语音应用，包括说话人识别、关键字检测、多唤醒词及本地命令识别等。NDP120与Syntiant CoRe 2神经网络推理引擎配合，能够同时运行多个应用程序，并将功耗控制在1MW电池功率范围内。
这一新推出的语音控制多模态AI解决方案，作为瑞萨电子产品系列的一部分，选取了多个兼容器件，为客户构建更高阶的原型设计平台，以加速市场上市并降低风险。瑞萨的卓越模拟、电源及嵌入式处理产品组合，能够帮助客户加速设计进程并缩短上市时间。
供货信息
全新的多模态AI解决方案的参考设计现已推出，包括电路图和BOM清单。
