
乐鑫信息科技 (688018.SH) 正式推出 ESP-Mosaico,一款为 Coding Agent(代码智能体)设计的模块化开发板,支持多机拼接。面对不断变化的应用需求,创作者无需受限于固定的硬件形态,可以按需组合不同的硬件能力,并借助 Agent 持续开发和完善,让硬件形态与应用能力能够随产品需求不断扩展。
ESP-Mosaico 提供两种创作方式:Chat Coding 从自然语言需求出发,无需搭建开发环境,即可快速生成并运行硬件原型;Vibe Coding 则将 Agent 进一步接入开发、部署和真机验证,持续迭代应用,从原型走向完整产品。两种方式既可以独立使用,也可以根据开发阶段灵活选择,让创作者从一句需求开始,逐步完成原型开发、功能迭代,并最终将应用运行在真实设备上。
为什么推出 ESP-Mosaico?
AI 让软件可以根据需求快速生成和迭代,但硬件的能力和形态往往仍由固定的板卡与接口决定。每增加一种能力或改变一次产品形态,创作者都需要重新进行硬件选型、连接和驱动适配。当软件可以持续变化,硬件开发也需要具备更灵活的扩展方式,才能跟上应用需求的变化。
ESP-Mosaico 为创作者提供了一种更灵活的开发方式:功能模块可以按需接入,多台设备可以自由拼合,Coding Agent 也可以根据当前的硬件组合参与应用开发。创作者无需在开发初期就确定设备的最终形态,而可以随着应用需求的变化,持续增加硬件能力、组合模块并调整设备形态,让硬件与应用同步迭代。
这也是 ESP-Mosaico 名字的由来:Mosaico 意为“镶嵌画”,无数小块彼此拼合,最终组成一幅完整的作品。在 ESP-Mosaico 上,不同硬件模块与设备也可以自由组合,让能力随着应用需求不断扩展。
让硬件能力自由扩展
Connect a module. Unlock a capability.
独立运行主机,承载完整应用
ESP-Mosaico 主机采用轻薄机身和高屏占比设计,搭载 480 × 480 OLED 触控屏,支持触摸反馈,并内置电池,可独立运行。OLED 像素自发光,能够呈现清晰细腻的画面,在深色界面下有助于降低显示功耗。主机配备 USB Type-C 双向供电接口,并提供双排 2.54 mm IO 引出接口,方便连接和扩展外部硬件。
主机以 ESP32-S31 为主控。这颗 RISC-V 架构芯片主频最高 320 MHz,内置 512 KB SRAM,并支持最高 32 MB 高速 DDR PSRAM,为图像处理、状态判断和实时交互等任务提供端侧计算能力。
硬件 JPEG 编解码和 DVP 摄像头接口,为取景、拍照和相册等图像应用提供专门通路;60 个可编程 GPIO,则为功能模块的持续扩展留出了空间。
同时,ESP32-S31 在芯片层集成 Wi-Fi 6、双模 Bluetooth 5.4 和 802.15.4,并支持 1 Gbps 以太网与 USB 2.0 高速 OTG 接口。经过板级设计、功能模块和系统软件,这些底层能力进一步转化为联网、设备配对、外设通信、电脑连接以及部署调试等产品能力。

功能模块,拓展感知反馈能力
ESP-Mosaico 将摄像头、传感器、按键、灯光、电机等能力封装为可组合的功能模块。接入受支持的模块后,系统可以自动识别并完成基础适配,开发者无需反复处理接线和底层驱动,即可根据应用需求自由组合。
从感知、输入到显示、执行,不同模块可以组合成完整的交互链路。例如,摄像头与按键可以组合成可编程相机,也可以根据不同需求扩展更多硬件能力。

部分功能模块的接入、识别与使用展示
多机拼接,拓展应用边界
ESP-Mosaico 的组合能力还可以从单台设备延伸到多台设备。多台主机可以识别彼此的相邻关系和姿态,并通过无线连接同步应用状态,让设备的拼合、分开和重新排列成为应用的一部分。
在跨屏游戏 Demo 中,不同设备可以分别呈现角色、地图和道具;同样的能力也可以用于信息面板等多屏交互场景。从一块屏幕到多块屏幕,设备的组合方式也成为创作的一部分。

多台 ESP-Mosaico 的相邻关系识别与跨屏交互
让 AI Agent 参与真实开发
The Agent doesn't just write code.
Chat Coding:
从一句需求开始完成硬件原型
Chat Coding 主要面向初次接触编程或 AI 编程的创作者。
ESP-Claw 是 ESP-Mosaico 内置的 Coding Agent,也是对话式创作的入口:创作者可以在主机屏幕上直接对话,也可以通过微信、QQ、飞书等社交软件与它交流。
创作者无需安装本地开发软件或配置工具链,只要描述出想实现的功能,ESP-Claw 就会结合当前设备和已接模块的能力生成应用,并部署到主机上运行;应用的生成与构建通过所连接的服务在云端完成;应用部署后,不依赖在线能力的界面、逻辑和外设控制都在主机本地运行。
例如,创作者可以告诉 ESP-Claw:“帮我写一个俄罗斯方块小游戏。”ESP-Claw 会自行在设备上编写并运行一个可以通过按键控制的俄罗斯方块小游戏。在第一个版本成功运行后,创作者可以继续提出修改,如调整方块下落速度、增加计分功能,或优化游戏界面等。通过不断迭代,创作者可以完成一个可运行、可交互的硬件原型,也在这个过程中了解如何表达需求、观察结果和调整方案。

通过 Chat Coding 生成俄罗斯方块小游戏
除了直接描述需求,创作者还可以选择在 Skills Lab 中使用已经封装好的 Skill。Skill 是可直接运行和分享的设备应用包,可以封装 Lua 脚本、静态资源和外设依赖,让成熟的应用能够直接安装到 ESP-Mosaico 上。
同时,创作者也可以将自己通过 ESP-Claw 完成的应用打包为 Skill,上传到 Skills Lab 与更多用户分享;对于支持二次创作的 Skill,还可以在原有应用基础上继续修改和扩展。

Skills Lab 与跨屏游戏 Skill 演示
Vibe Coding:
从原型出发,持续开发迭代
ESP-Mosaico 针对 Vibe Coding 开发流程中 ID 设计、资源搜集、仿真、烧录调试的全流程进行优化,让创作者和 Agent 可以直接在真实设备上持续开发和验证。
- 规范驱动的 UI 设计:ESP-Mosaico 将 UI 设计规范、组件规则、资源约束等沉淀为文档、参考设计和 Skill,为 Agent 提供明确的设计边界。开发者可以定义产品定位、交互和视觉规范,Agent 则在统一的屏幕尺寸、字体、布局和组件规则下生成界面,减少随机组合代码带来的不确定性。
- 面向 AI 的高性能 UI 框架:ESP-Mosaico 基于预编译 UI 框架 ESP-GSP,Agent 可以通过结构化 JSON 描述界面,工具链在构建阶段检查控件错误和资源缺失,并提供明确反馈。UI 采用树状结构描述,便于 Agent 理解页面结构和开发者进行细节调整;同一套资源还可以先在 PC 端仿真,再部署到 ESP32 真机验证,减少反复烧录和调试的成本。
- 多模态调试闭环工作流:ESP-Mosaico 通过 Wi-Fi / USB High-Speed 数据链路和统一接口,向开发者和 Agent 开放烧录、输入、设备控制和状态观测能力。设备可以将 UI、音频、触摸输入、性能指标和故障信息整理为结构化数据,Agent 据此执行自动化操作、分析运行结果并进入下一轮修复;配合可选 Test Dock,即使应用失去响应,也可以重新建立设备控制,继续完成真机验证。
- 统一开发资源入口:ESP-Mosaico 提供初始代码仓库、BSP、软硬件原理图、通用 SDK、Agent References 和参考工程,为 Agent 提供开发所需的硬件上下文、接口信息和最佳实践。开发者使用常见的 AI 编程工具即可基于这些资源快速进入 ESP-Mosaico 开发流程。
在这些开发能力的支持下,Agent 可以持续围绕“修改代码—构建部署—运行测试—读取反馈—继续调整”的闭环持续迭代,开发者只需定义目标、安全边界和验收条件。

Agent 读取真机反馈持续自主调试平衡车
开放的 ESP 开发生态
AI needs a real engineering foundation.
AI 可以生成代码,但要让代码真正运行在硬件上,还需要芯片、驱动、协议栈、组件、构建工具和真实设备等完整的工程基础。
乐鑫已经建立了完整的 ESP 开发生态,包括 ESP-IDF、驱动和组件、技术文档、构建与调试工具、ESP Component Registry 以及丰富的社区项目。GitHub 上围绕 ESP32 和 ESP8266 的项目已超过 20 万个,相关书籍超过 300 本、以 10 余种语言出版。这些内容都可以通过检索、项目上下文和工具接口,成为 Agent 的工程依据。
从开放的工程资源,到真实设备的反馈,ESP-Mosaico 让 AI 硬件开发拥有了一套可以参考、调用和验证的基础。

第一次接触硬件编程的创作者,可以从 Chat Coding 开始;有明确产品目标的开发者,则可以通过 Vibe Coding,让 Agent 参与开发、测试与迭代。让软件里的想法连接硬件,让代码最终变成可以运行、验证和迭代的真实设备。
ESP-Mosaico 拥有丰富的开发资源。开发者可以访问 ESP-Mosaico 官方网站了解产品详情及相关开发资源,也可以将完成的应用通过 Skills Lab 分享给更多用户。
ESP-Mosaico 开发套件现已开放购买!如需了解更多产品信息,也欢迎联系乐鑫客户支持团队。
从 Chat Coding 到 Vibe Coding,从模块组合到 Agent 迭代,ESP-Mosaico 让创造的想象力不止停留在屏幕里。
购买地址:https://item.taobao.com/item.htm?id=1075501920711&spm=a213gs.v2success.0.0.3dc248310IIBid
文章来自于微信公众号 “乐鑫朋友圈”,作者 “乐鑫朋友圈”