一个视频搞懂OpenClaw!
By 林亦LYi
Summary
Topics Covered
- AI智能体自学语音转文字
- 聊天软件桥接编程智能体
- 80%应用将被AI取代
- Skills生态即插即用能力
- 上下文限制成智能体天花板
Full Transcript
Meta 的 AI 安全 高管 眼睁睁 看着 AI 删光 了 自己 的 所有 邮件 却 毫无办法 而 这个 赛博汉匪 是 一个 诞生
仅仅 60 天 的 开源 项目 Open Cloud 仅仅 60 天它 在 Github 上 的 热度 直接 碾碎 了 Linux 和
Tens orFlow 这些 老字力 超过 10 年 的 积累 有人 把 它 当 全自动 印钞机 一周 躺 赚 11 万美金 另外 有人
一不小心 就 被 拔光 了 底库 账号密码 甚至 是 完整 的 聊天记录 全 被 漏 了 出去 大 朋友 们 请 坐 好看 的 小 小弟 小 小妹
们 请 坐 我 是 林逸 年初 爆火 的 Open Cloud 它 到底 是 AI 智能 体 的 未来 还是 一个 史无前例 的 超级 大坑 呢
说 起来 有点 难以置信 Open Cloud 最 开始 只是 奥地利 程序员 Peter 花一 小时 功夫 搭 的 小 玩具 他 本来
只是 想 把 电脑 上 24 小时 给 他 干活 的 Cloud Code 接近 聊天 软件 方便 他 出了门 也 能 使唤 家里 的
AI 可 这个 Twit ter 的 项目 很快 就 给 这 老哥 惊 出来 一身 冷汗 有 一天 他 顺手 给 AI 发了 点 语音
发完 他 再 想 起来 自己 其实 没给 AI 加过 理解 语音 的 功能 结果 突然 手机 一震 AI
居然 回 消息 了 这 怎么 可能 呢 Peter 赶紧 去查 程序 后台 结果 吓了一跳 AI 发现自己 听不懂 语音 居然
自己 给 自己 写 了 个 语音 转 文字 的 功能 把 消息 听 明白 了 还 回 了 一条 这 就是 智能 体 其实 智能 体 这种 神奇 的
效果 在 技术圈 内 并 不算 新鲜 但是 Peter 开发 的 Open Cloud 把 它 一下子 捅 到 了 大众 视野 下像
Cloud Code 这种 用 命令行 上 交互 看起来 专业 又 复杂 的 AI 智能 体 本来 都 是 程序员 在 玩 的 在 绝大多数
人 的 认知 里 AI 还是 像 拆 的 GPT 这样 只能 说说话 的 聊天 机器人 但是 Open Cloud 干 了 一件 很
取巧 但 也 很 伟大 的 事情 造 了 一座 桥 它 把 Cloud Code 这样 的 编程 智能 体 和 大家 最 常用 的 聊天 软件
连接 了 起来 让 普通人 也 能 像 和 Chat GPT 聊天 一样 指挥 他 做 各种 事情 分析员 代码 可以 看到
Open Cloud 对 What sApp 、 iMes sage 、 Disc ord 这些 将近 20 个 聊天 平台 都
做 了 适配 在 Mac 电脑 、 安卓 手机 等等 各种 设备 上 都 能 用 手机 让 发条 消息 就 能 让 AI 拿 着 你
的 电脑 开始 自己 干活 我 也 实战 了 几把 我 让 Open Cloud 干 的 第一件 事是 让 他 试试 能 不能 把 我 的 浏览
记录 删 明白 今年过年 我 白天 出去 玩电脑 没锁亲 亲家 小孩 顺藤 摸摸 就 进入 了 大人 的 世界 我 还 没收 学飞 的
反倒 爱顿曼 所以 我 首先 就试 了 说 Open Cloud 能 不能 把 这事 处理 好 结果 还 真不错 删 记录 的 方式 不是 去
浏览器 里 一个 一个点 而是 直接 找到 Chrome 放 历史记录 的 本地 文件 釜底抽薪 几行 指令 下去 连 我 没
要求 的 Cookie 和 缓存 也 全给 清 了 120 分 完成 任务 我 还 试 了 一些 常规 的 活 比如 帮 我 整理 桌面 各种
乱七八糟 的 文件 没 多一会儿 就 分门别 累 干干净净 了 我 又 让 他 整理 我 的 邮箱 Open Cloud 自己 把
60 多本 邮件 挨个 读完 整理 成 目录 让 我 确认 这 家伙 真 可以 微信 办公 了 让 Open Cloud 干活 不
需要 关心 具体 过程 直接 看 结果 就行了 这 和 以往 的 软件 逻辑 完全 不 一样 以前 大家 拼 的 是
谁家 服务态度 好 界面 更 优雅 功能 更 丰富 以前 耕铁 大家伙 看 的 是 哪家 的 材质 更 高端 挥 起来 更 顺手 现在
AI 智能 体是 直接 把 下 地 这步 都 给 跳 过 了 你 就 跟 他 说 把 地 耕 了 剩下 的 就 来 验收 就 完事
了 所以 Open Cloud 的 作者 就 说 他 觉得 80% 的 应用软件 接下来 要么 被 淘汰 要么 就 变成 给 AI 智能
体用 的 接口 人类 以后 都 是 直接 给 智能 体 布置任务 了 但 问题 是 这么 做 靠 谱 以前 的 软件 虽然 只 提供
服务 但 我 干 的 每 一步 都 心里有数 现在 我 只是 在 聊天 床里发 了 句 话 Open Cloud 就 下 地 光光 猛干 我
也 不 知道 它 是 去 离 地 了 还是 往 我 地里 扔 了 个 核弹 我 找 了 套 讲 机器 学习 的 精品网 课让 Open
Cloud 帮 我 把 课程 全 下载 到 桌面 的 学习 文件夹 我 仔细 盯 着 程序 后台 看 它 是 怎么 干 的 首先 Open Cloud
直接 用 关键词 搜索 结果 被 网站 拒绝 访问 了 然后 它试 了 一个 用来 下载 视频 的 指令 YTDLP 结果 下
下来 的 是 值得 夸讲 句子 的 是 他 还 真 知道 自己 下错 了 把 罪证 清理 干净 之后 又 开始
琢磨 结果 他 发现 我 之前 下过 这套 课程 居然 跑过来 问 我 那 到底 是 谁 给 谁 干活 我 让 他 自己
接着 研究 结果 Open Cloud 还 真 把 视频 链接 给 搞 到 了 下 到 了 文件夹 里 从 后台 可以 看到
除了 少数几次 向 人类 求助 绝大多数 时候 Open Cloud 都 是 重复 着 先 调用 工具 在 自己 检查 结果 的 循环
工具 挑 的 对 不 对 对 执行 结果 判断 的 准 不准 就要 看 基础 模型 的 实力 了 这里 我们 权衡 性能 和 成本
之后 介入 的 是 mini max M2.5 不过 光有 大 模型 还 不够 Open Cloud 的 各种 神奇 能力 还 需要
工具 来 展现 它 最 核心 的 工具 叫 AXIC 权限 很 高 可以 直接 执行 各种各样 的 终端 命令 算是 Cloud Code
的 精神 的 延续 除此之外 还有 read 可以 读取 各种各样 的 文件 Proc ess 可以 获取 任务 进度 Sess
ions Hist ory 可以 调取 绘画 历史 而 在 这些 基础 工具 之上 还有 一个 叫 Skills 的 生态 Skills
说白了 就是 一份 份 提前 写 好 的 提示 词教 AI 每件 具体 的 事该 怎么 做 就 拿 天气 这个 Skills
来说 它 详细 介绍 的 智能 体 应该 在 什么 情况 下用 它 怎么 查 不同 地方 的 天气 等到 实际 干活 的 时候
智能 体就会 先 看 自己 有 哪些 Skills 可以 用 然后 再 照着 说明书 一步步 往下 干 为啥 说 这个 Skills 是 个
生态 呢 它 可以 让 全世界 AI 爱好者 集思广益 群色 群历 把 各种 稀奇古怪 的 网络 指令 提示 词 迹象 全 变成
一个个 可以 共享 的 Skills 文档 甚至 连 智能 体 自己 都 能 创建 Skills 比如 前面 我 让 Open Cloud 清空
浏览器 记录 它 就是 自己 给 自己 写 了 个 Skills 说明书 这 就 很 有 自我 计划 的 感觉 了 GitHub 上 有 个 叫
Awes ome Open Cloud Skills 的 项目 里面 整理 了 包括 金融 营销 游戏 健康 在内 的 总共 2800
多个 Skills 还有 个 专门 分享 Skills 的 平台 叫 Clou dHub 有 将近 6000 个 Skills 黑客帝国 里 有
一段 是 直接 往 主角 尼奥 脑子里 传输 具他 就 学会 了 各种 格斗 有生之年 的 今天 这事 在 智能 体 身上 已经
实现 了 但是 威胁 也 就 潜伏 在 这 一片 欣欣向荣 之中 自己 鼓捣 了 半天 之后 我 把 Open Cloud 接到
非洲 里 让 公司 同事 们 一起 体验 结果 大家伙 一顿 追问 API 密码 网关 凭证 这些 敏感 信息 就
全 被套 了 什么 把 基础 模型 换成 更强 的 Cloud Sony 4.6 Open Cloud 照样 分 分钟 老实 交代 这 你
受得了 吗 一个 控制 你 电脑 各种 权限 掌握 了 所有 文件 的 智能 体 随随便便 就 能 让 别人 带 着 走 如果 有 谁
在 传给 智能 体 的 Skills 里 不怀好意 留下 让 智能 体 自动 发送 隐私 信息 的 质量 和 代码 所有 配置 了
Open Cloud 的 电脑 都 可能 变成 随时 被 引爆 的 定时炸弹 实际上 就 在 最近 有 1184 个 恶意 Skills 被 检测 到 上传
了 Cloud Hub 而 现有 的 Skills 中有 36.8% 都 存在 安全漏洞 这是 一场 专门 针对 Open Cloud
的 攻击 除了 安全 问题 智能 体 还有 个 突破 不了 的 能力 天花板 就是 上下文 灾难 我 给 Open Cloud
布置 了 一个 复杂 任务 从 网上 找 50 张 不同 做法 的 小龙虾 图片 存 到 桌面 的 小龙虾 菜品 文件夹 做成
表格 发给 我 确认 最后 再 把 我 选中 确认 的 几张 图 挑出来 打包 发到 飞书 群里 这 整个 过程 缓缓
相扣 每错 一步 都 会 让 整个 任务 彻底 失败 Open Cloud 干 了 整整 8 个 多 小时 这 里面 卡 的 最久
的 一步 是 把 小龙虾 图片 做成 表格 发送 Open Cloud 固执 的 一直 只 发送 表格 的 文件 路径 磨 了 半天
才 把 表格 文件 成功 发过来 我 打开 一看 表格 里存 的 也 不是 图片 同样 只是 图片 的 文件 路径
所以 又 回去 反攻 等 最后 Open Cloud 终于 把 图片 打包 发了 过来 我 发现 文件夹 一堆 菜 只有 一张 是
小龙虾 不 知道 在 中间 的 哪 一步 Open Cloud 就 已经 彻底 忘记 自己 要 找 的 是 小龙虾 了 最后 找 的
是 不同 的 菜 今天 智能 体绕 不开 的 一个 困境 就是 大 模型 能 记住 的 上下文 大小 是 有限 的 Open Cloud
每次 对话 都 要 给 大 模型 费 大量 的 信息 像 智能 体 的 人设 可以 选用 的 工具 的 列表 用户 花香 记忆 这
里面 我 的 指令 占 的 偏幅 来 也 就 5% 所以 在 这么 多 信息 里 智能 体 可能 漏掉 我 的 需求 漏掉 列表 里 最合适
的 工具 像 我 展示 的 这个 步骤 特别 多 还 反反复复 纠错 的 活 智能 体 执行 到 一半 忘 了 前面 就 并 不 奇怪 了
开头 咱们 说 Meta 高管 被 Open Cloud 删光 邮件 其实 也 是因为 任务 太长 让 AI 把 一 开始 的 指令 给 忘
了 目前 智能 体 针对 这个 上下文 限制 的 解法 就是 对 信息 做出 取舍 比如 直选 工具 列表 当中 的
一部分 把 记忆 压缩成 小小 一段 这 就 导致 了 如今 的 智能 体在 很多 任务 上 的 表现 并 不 稳定 比如 同样
一个 解读 网页 文章 的 指令 因为 模型 上下文 提供 的 工具 不同 结果 就 截然不同 在 上下文 记忆
问题 没有 搞定 之前 现在 的 智能 体 还是 个 走 一步 算 一步 的 心病 蛋子 你 要 他 给 你 买杯 奶茶 他 可能
先下个 滴滴 打车 去 奶茶 店到 第一 方 发现 没法 支付 还要 再 按个 支付 软件 最后 就算 奶茶
勉勉强强 买回来 了 也 感觉 傻里傻气 的 所以 现在 适合 Open Cloud 的 任务 还是 简单 重复 挑战 不大 的
日常 杂活 作为 一个 24 小时 待命 兢兢业业 的 私人 AI 管家 Open Cloud 绝对 是 称职 的 但 你
指望 他 自己 完成 什么 惊天动地 的 大 工程 那 还是 差点 意思 回看 Open Cloud 爆火 的 整个 过程 它
的 成功 在于 恰好 在 最合适 的 时间 点以 最合适 的 形式 出现 了 Cloud Code 不是 他 做 的 Skills 也 不是 他 提出
的 但是 AI 的 浪潮 走到 了 这个 节点 所有 的 条件 都 为 Open Cloud 这样 的 软件 准备 好 了 他 一出场
就 展示 了 很多 人 心中 最具 科幻 感 的 一个 场景 拿 着 手机 发 一条 消息 千里 之外 就 有 一个 AI 帮 你 全自动
做好 任何 事情 就 像 Peter 本人 说 的 Open Cloud 不是 魔法 把 它 拆开来 每个 步骤 都 不过如此
但 有时候 把 现有 的 东西 排列组合 再 加点 新 点子 神奇 的 事情 就 发生 了 无论如何 Open Cloud 都 算 得 上 是 一个
里程碑式 的 开始 在 这个 极客 时代 技术 不再 是 大 公司 的 特选 只要 愿意 开始 每个 人 都 可以 拥有 属于
自己 的 假 维斯 虽然 还有 很多 坑 没填 完 但 欢迎 来到 智能 体 的 时代 行 今天 的 视频 就 到 这 了 我 是 林 一
咱们 还是 下个 视频 见
Loading video analysis...