EchoEar(喵伴)
随着生成式人工智能技术的快速发展,大语言模型 (LLM) 正逐步成为推动智能设备升级的核心力量。乐鑫科技携手火山引擎扣子大模型团队,共同推出智能 AI 开发套件 —— EchoEar(喵伴)。该套件以端到端开发为核心理念,构建起从硬件接入、智能体构建到生态联动的一站式开发流程,为开发者提供了一条高效、开放、具备可复制性的落地路径。
作为 EchoEar 的一大技术亮点,设备搭载的 ESP-Brookesia 框架不仅承担了整体 UI 的构建与渲染,还深度融合了火山引擎扣子平台的智能语音对话服务和乐鑫全新音视频框架 ESP-GMF,集成了多项面向端侧优化的智能功能,借助该框架,EchoEar 可实现全双工语音交互、多模态识别与智能体控制,构建更具沉浸感的人机交互体验。
智能对讲与情绪识别能力可主动识别用户的意图与情绪变化,并通过动态表情互动进行响应,增强设备的人格化表现;长记忆能力支持对用户对话内容的持续记录,实现更具陪伴感的个性化体验。离线语音唤醒与声源定位结合电机控制,可实现 180° 范围内的方向跟踪,使设备交互更自然、更具沉浸感;此外,EchoEar 还支持 MCP 协议与 Function Call 能力,可用于远程控制家庭设备,作为智能家居系统的本地中枢。
乐鑫科技 × 火山引擎扣子
EchoEar 基于火山引擎扣子平台,具备组件丰富、模板灵活的特性。开发者无需从零开始,即可快速构建面向语音交互、教育辅助、情感陪伴等多类场景的智能产品。该平台通过“模板复用 + 插件组装”的方式,显著缩短 AI 产品的原型验证与量产周期,有效降低开发门槛与集成成本。
EchoEar 主控采用乐鑫 ESP32-S3-WROOM-1-N32R8 模组,支持 2.4 GHz Wi-Fi 和 Bluetooth 5 (LE) 无线连接。存储方面,整机具备 8 MB PSRAM、32 MB Flash 的存储空间,同时还配备了一个可支持高达 32 GB 的 microSD 卡插槽,满足语音交互和多媒体处理需求。配备 1.85 英寸圆形触摸屏(360 × 360 分辨率)与 ESP32-S3 原生触摸传感器,提供直观丰富的交互体验。
音频方面,EchoEar 内置 2W 扬声器和双麦克风阵列,支持本地语音唤醒和声源定位。电源系统兼容 5V DC 和 3.7V 700mAh 锂电池供电。此外,还集成一个 USB-C 接口支持供电与编程下载,同时预留 Pogopin 接口方便功能拓展。
AI 大模型将是未来五年产业发展的重要方向,而推动其从云端走向终端,深入到实际设备应用中,正是这一趋势的关键。作为此次联合平台的核心构建者之一,乐鑫将继续发挥其在无线 SoC 与开发生态方面的优势,助力 AI 能力在更多智能终端中落地,推动 AIoT 产业迈向更广阔的发展空间。
EchoEar(喵伴)智能 AI 开发套件现已开源。如果您对该产品感兴趣,欢迎联系我们的客户支持团队,获取更多产品信息。
文章来自微信公众号 “ 乐鑫朋友圈 ”,作者 乐鑫新闻官