乐鑫让连接型设备成为承载 LLM 体验的自然交互入口，无需在设备端直接运行大语言模型。从多模态输入采集、本地动作执行，到固件、云服务与 App 集成，乐鑫提供完整的技术栈，帮助客户更快构建私有化 LLM 智能体方案。
端到端多模态解决方案
围绕语音、文本、视觉与传感器输入，构建更自然、低延时、安全的智能设备交互体验
多模态输入
语音
- 语音唤醒
- 拾音降噪
- 回声消除
文本
- 文本交互
- 内容理解
- 整理分析
视觉
- 图像增强
- 旋转切割
- 抽帧响应
传感器
- 环境检测
- 状态感知
- 定位
- 测距
智能体
-
OpenAI
-
DeepSeek
-
Gemini
-
豆包大模型
-
通义千问
-
文心一言
-
OpenAI
-
DeepSeek
-
Gemini
-
豆包大模型
-
通义千问
-
文心一言
-
OpenAI
-
DeepSeek
-
Gemini
-
豆包大模型
-
通义千问
-
文心一言
多元场景，多模态赋能
从家庭陪伴到工业协作，以多系列芯片承接不同场景的交互需求
- 家庭 / 宠物看护
- 智能语音音箱
- 陪伴与教育
- 医疗可穿戴设备
- 智慧农业灌溉
- 工业机械臂
家庭 / 宠物看护
结合视觉采集、语音交互与无线连接，为 LLM 提供家庭场景输入，支持看护识别、异常提醒与自然交互。
ESP32-S31 >
智能语音音箱
通过拾音、唤醒与音频处理能力，让 LLM 更自然地理解语音输入，支持问答、控制与陪伴式交互。
陪伴与教育
面向儿童陪伴场景，融合视觉、语音与触控能力，支持更自然的互动陪伴与启发式学习。
医疗可穿戴设备
依托低功耗感知与蓝牙连接，将血压、血氧、心率等数据接入 LLM，支持健康解读、提醒与个性化交互。
智慧农业灌溉
将光照、土壤湿度、温湿度、酸碱度及天气等信息接入 LLM，支持环境分析与更智能的灌溉决策。
工业机械臂
结合视觉采集、状态感知与连接能力，为 LLM 提供现场输入，支持识别判断、任务辅助与协同控制。
从传输到处理，加快多模态设备交互落地
流畅的音视频传输协议
乐鑫基于 WebRTC 流媒体协议，为 AI 音视频交互提供稳定支撑；结合芯片射频性能，帮助设备在多种场景下实现更顺畅的交互体验。
强大的端侧辅助算法
乐鑫的单芯片解决方案集成本地离线语音唤醒及前端 3A 算法，包括回声消除、噪声抑制与自动增益控制；同时提供图像增强、旋转切割等端侧处理能力，帮助设备获得更自然、更稳定的交互体验。
智能体便捷接入
乐鑫私有化智能平台提供可由企业自主部署和管理的智能体运行环境。该方案面向多模态智能体设计，支持语音交互产品、语音控制的连接设备以及应用内客户服务，并内置工具连接能力、知识库支持和丰富的 LLM 选择。
软件设计参考 >
硬件设计参考 >
