当前位置:首页 > 技术分享 > 正文内容

乐鑫重磅开源 ESP-Claw:把 Agent 塞进了 ESP32


能联网却不能思考?能执行却不能决策?乐鑫把 Agent 塞进了 ESP32。

01 物联网的痛点

传统 IoT 设备有几个老毛病:

  • • 能联网,却不能思考
  • • 能执行,却不能决策
  • • 能记录,却不能学习
  • • 高度依赖云端,断网就变砖
  • • 控制方式要么是 App,要么是面板——多一个设备多装一个 App

一句话总结:设备是"傻"的,只会按预设规则执行,不会根据实际情况做判断。

最近,乐鑫正式开源了一个叫 ESP-Claw 的框架,把这个痛点解决了。

项目地址:https://github.com/espressif/esp-claw


02 ESP-Claw 是什么

ESP-Claw 是一个运行在 ESP32 芯片上的 AI 智能体框架,核心理念是 Chat Coding(聊天造物)

简单说:你在 IM 里跟设备聊几句天,它就能自己学会怎么干活。

不用写代码,不用装 App,不用接云端平台。

设备在本地就能完成感知 → 推理 → 决策 → 执行的完整闭环。


03 四大核心能力

1. 对话定义设备行为(Chat Coding)

传统 IoT 开发流程:

选芯片 → 装 SDK → 写 C 代码 → 编译 → 刷固件 → 配网 → 装 App → 控制设备

ESP-Claw 的流程:

刷固件 → 连 Wi-Fi → 打开微信/飞书/Telegram → 跟设备聊天 → 搞定

比如你对设备说:

"每天早上 8 点,如果温度超过 28 度就打开风扇,同时给我发条消息。"

设备会自己理解你的意图,生成对应的逻辑并执行。


2. 设备端智能闭环

AI 不一定要跑在云端。

ESP-Claw 把 Agent Runtime 直接下沉到边缘芯片(ESP32),设备在本地就能:

  • 感知:读取传感器数据(温度、光线、PIR 人体检测等)
  • 推理:分析当前状态,判断该不该采取行动
  • 决策:调用 LLM 做分析判断,或匹配本地 Lua 规则
  • 执行:控制执行器(风扇、继电器、屏幕、摄像头等)

当任务超出本地算力范围时,设备会自动把数据上传给云端大模型处理,再把结果返回——云边协同


3. LLM 动态决策 + Lua 确定性规则

纯靠 LLM 有个问题:不可控

你说"温度高了开风扇",但 LLM 可能今天判断开、明天判断不开,这在关键场景(比如报警联动)是不可接受的。

ESP-Claw 的解法很聪明:

三层事件处理架构

层级机制响应速度适用场景
第一层Lua 确定性规则毫秒级报警联动、安全控制
第二层LLM 动态决策秒级场景分析、用户意图理解
第三层云端大模型十秒级复杂推理、图像识别
  • • 有匹配规则 → Lua 直接执行(断网也能跑)
  • • 没匹配规则 → LLM 分析判断
  • • 超出本地能力 → 交给云端大模型

灵活性和稳定性兼顾。


4. 本地记忆,隐私不上云

设备是有记忆的,而且记忆都在本地:

  • 用户偏好:"记住我喜欢 26 度"
  • 行为习惯:作息时间、常用操作
  • 关键事件:报警记录、异常状态
  • 自动学习:从历史事件中发现规律,主动建议自动化方案

为了适配 MCU 的资源限制,ESP-Claw 引入了"摘要标签"机制

平时只加载轻量级标签目录(如"饮食偏好""设备状态"),需要时再通过标签精确召回对应记忆。

记忆还会自动归并、淘汰与压缩,持续优化存储结构。

设备越用越聪明,而且你的隐私数据不用上传云端。


04 MCP 协议:让设备成为 AI 原生对象

这是 ESP-Claw 最让我兴奋的部分。

设备具备 MCP Server + MCP Client 双重身份

作为 MCP Server(被调用方)

  • • 把传感器读取、执行器控制封装为标准 MCP Tool
  • • 任何支持 MCP 的 Agent(OpenClaw、Claude、Codex)都能直接调用
  • • 比如:Claude Code 调用开发板摄像头拍照识别硬件

作为 MCP Client(调用方)

  • • 主动调用网络上任何 MCP Server 暴露的服务
  • • 比如:调用高德地图查路况、调用飞书发会议提醒
  • 设备从被动的"执行端"变成了主动的"智能节点"

这意味着什么?

设备之间可以直接对话,不需要经过云端中转。


05 和传统 IoT 方案的对比

对比维度传统 IoTESP-Claw(边缘 AI)
核心场景设备连接 + 远程控制物理世界感知 + 决策 + 控制
处理逻辑静态规则(IFTTT)LLM 动态决策 + Lua 确定性规则
执行引擎规则引擎LLM + Lua + Router 三层架构
控制中心云服务器边缘节点(ESP 芯片)
设备协议MQTT/Matter/私有 SDKMCP 统一语言 + 多协议桥接
设备间通信依赖云端中转本地直连 + MCP 抽象
记忆管理云端数据存储本地结构化记忆(JSONL + 标签)
交互方式App / 控制面板IM 聊天(微信/飞书/Telegram)
扩展性封闭生态,开发门槛高即插即用 MCP Tools
智能程度预设自动化LLM + 本地规则形成物理闭环

06 实际能干什么

举几个场景:

场景 1:智能安防

  • • PIR 传感器检测到人 → 摄像头拍照 → 上传云端模型识别
  • • 判定为人员入侵 → IM 即时通知用户 + 附抓拍照片
  • • 判定为动物 → 静默记录,事后汇总:"过去 3 小时过滤了 4 次动物事件"

场景 2:智能温控

  • • 用户说:"我喜欢 26 度" → 记住偏好
  • • 温度超过 28 度 → 自动开风扇
  • • 发现用户每天下午 3 点手动调低温度 → 主动建议:"要不要我下午 2 点自动调低?"

场景 3:硬件开发辅助

  • • Claude Code 调用开发板摄像头 → 拍照识别 PCB 元件
  • • 代码编译进度 → 实时显示在设备小屏幕上
  • • 编译报错 → IM 推送错误信息 + 建议修复方案

场景 4:办公自动化

  • • 设备检测到会议室有人但无人说话 → 自动关空调
  • • 调用飞书 API 发送会议提醒
  • • 调用高德地图查询通勤路况,提前提醒用户出门

07 快速上手

支持的芯片

  • • ✅ ESP32-S3
  • • ✅ ESP32-C5
  • • ✅ ESP32-P4

一块入门级 DevKitC 开发板即可开始体验。

方式 1:浏览器一键刷固件

  1. 1. 打开乐鑫网页刷写工具
  2. 2. 选择芯片型号
  3. 3. 点击刷入
  4. 4. 无需编程、无需安装额外开发工具

方式 2:源码编译

git clone https://github.com/espressif/esp-claw.git
cd esp-claw
# 使用 ESP-IDF 编译
idf.py build
idf.py flash

配置控制

  • • 连接 Wi-Fi 后,设备会提供一个 Web 配置页面
  • • 在 IM 里跟设备聊天即可控制
  • • 支持自由切换模型供应商(不依赖任何封闭生态)

08 项目架构

esp-claw/
├── application/
│ └── basic_demo/ # 示例应用
│ └── main/
│ ├── main.c # 固件入口
│ ├── app_claw.c # 应用引导
│ ├── basic_demo_wifi.c # Wi-Fi 连接
│ ├── config_http_server.c # Web 配置服务
│ └── web/ # 前端配置页面
├── components/
│ ├── claw_modules/ # 运行时核心层
│ │ ├── claw_core/ # 核心上下文
│ │ ├── claw_cap/ # 能力注册
│ │ ├── claw_event/ # 事件路由
│ │ ├── claw_memory/ # 记忆管理
│ │ └── claw_skill/ # 技能管理
│ ├── claw_capabilities/ # 能力层
│ │ ├── IM 通信、MCP Client/Server
│ │ ├── Lua 运行时、调度
│ │ └── 文件、时间、网页搜索等
│ └── lua_modules/ # 设备扩展层
│ └── 显示屏、摄像头、音频、GPIO 等

四层架构:

  1. 1. 应用组装层 — 启动入口、网络配置、Web 配置页
  2. 2. 能力层 — IM 通信、MCP、Lua 运行时、调度等
  3. 3. 运行时核心层 — 核心上下文、能力注册、事件路由、记忆管理
  4. 4. 设备扩展层 — 显示屏、摄像头、音频、GPIO 等外设暴露给 Lua 和 Agent

写在最后

OpenClaw 是跑在 PC 和服务器上的 AI 智能体网关——通过 IM 聊天连接用户、调度大模型、管理工具与记忆。

ESP-Claw 要解决的是同一个问题:如何把这套能力从 PC 环境延伸到实体物理世界?

乐鑫给出的答案很直接——把 Agent 塞进 ESP32,让设备自己能看、能想、能干。

这不是又一个"语音控制开关"的玩具,而是一个真正让 IoT 设备具备自主决策能力的基础设施

当聊天就能开发智能设备成为现实,IoT 开发门槛会被拉到多低?

GitHub:https://github.com/espressif/esp-claw

扫描二维码推送至手机访问。

版权声明:本文由点度点度金讯时代-BLOG发布,如需转载请注明出处。

本文链接:https://lmwmm.com/post/4194.html

分享给朋友:

“乐鑫重磅开源 ESP-Claw:把 Agent 塞进了 ESP32” 的相关文章

安卓用户又遭殃?被知名APP偷删手机照片

安卓用户又遭殃?被知名APP偷删手机照片

近日,网友发布视频称,使用小红书 APP 时发现,后台删除自己手机里的相册照片,被手机系统拦截。该网友称:恰好拍到了,下拉菜单栏的时候发现有这个通知。提醒大家要多多注意隐私。该消息在网上引发热议。针对“后台删照片”一事,小红书官方认证的账号…

下一代Switch的策略:迭代升级还是开启CQ9电子新时代?

下一代Switch的策略:迭代升级还是开启CQ9电子新时代?

业界预计任天堂下一代Switch将在2024年发布。知名游戏分析CQ9 Gaming猜测该主机不会有大的革新,而是更像是性能的增强,整体上与现有Switch相似。他认为,任天堂依然坚持掌机游戏模式,其中最主要的原因是宝可梦系列对掌机市场的重…

革新CQ9再现:苹果下一代iPad Pro迎来电子升级,但价位让人咋舌!

革新CQ9再现:苹果下一代iPad Pro迎来电子升级,但价位让人咋舌!

苹果突破了其12年来的常规做法,去年并未发布任何新款iPad产品。据悉,今年苹果计划对整个iPad产品线进行重大调整。其中最引CQ9游戏玩家注目的变化之一是,iPad Pro系列首次将采用OLED显示屏,并搭载更新更强大的M3芯片畅玩CQ9…

穿越香港岛的BBIN游戏之旅!《无限试驾:太阳王冠》即将登陆PS5

穿越香港岛的BBIN游戏之旅!《无限试驾:太阳王冠》即将登陆PS5

3goo正式发布了以香港岛为背景的《无限试驾:太阳王冠(Test Drive Unlimited Solar Crown)》开放世界赛车电子游戏的预告片。该游戏将首次登陆PS5平台,并计划于2024年内正式上市。这款最新作品延续了《无限试驾…

驶入巴塞罗那的PG游戏奇境:《出租车生活:城市驾驶模拟器》即将上线

驶入巴塞罗那的PG游戏奇境:《出租车生活:城市驾驶模拟器》即将上线

Nacon近日宣布,由Simteract负责开发的新款游戏《出租车生活:城市驾驶模拟器(Taxi Life: A City Driving Simulator)》将于3月7日正式登陆PC(包括Steam和Epic Games Store)、…

《神之浩劫2》宣告登场,经典MOBA游戏进化CQ9新跳高高度!

《神之浩劫2》宣告登场,经典MOBA游戏进化CQ9新跳高高度!

Hi-Rez Studios近日宣布了一个引人注目的发展——计划在PC(包括Steam和Epic Games Store)、PS5、Xbox Series X|S和CQ9 Gaming电子游戏等多个平台推出由Titan Forge Game…