相机捕获(智能体)
OpenClaw 支持智能体工作流中的相机捕获:- iOS 节点(通过 Gateway网关配对):通过
node.invoke捕获照片(jpg)或短视频片段(mp4,可选音频)。 - Android 节点(通过 Gateway网关配对):通过
node.invoke捕获照片(jpg)或短视频片段(mp4,可选音频)。 - macOS 应用(通过 Gateway网关的节点):通过
node.invoke捕获照片(jpg)或短视频片段(mp4,可选音频)。
iOS 节点
用户设置(默认开启)
- iOS 设置标签页 → 相机 → 允许相机(
camera.enabled)- 默认:开启(缺少该键时视为已启用)。
- 关闭时:
camera.*命令返回CAMERA_DISABLED。
命令(通过 Gateway网关 node.invoke)
-
camera.list- 响应载荷:
devices:{ id, name, position, deviceType }数组
- 响应载荷:
-
camera.snap- 参数:
facing:front|back(默认:front)maxWidth:数字(可选;iOS 节点默认1600)quality:0..1(可选;默认0.9)format:当前为jpgdelayMs:数字(可选;默认0)deviceId:字符串(可选;来自camera.list)
- 响应载荷:
format: "jpg"base64: "<...>"width、height
- 载荷保护:照片会被重新压缩,以将 base64 载荷控制在 5 MB 以内。
- 参数:
-
camera.clip- 参数:
facing:front|back(默认:front)durationMs:数字(默认3000,上限为60000)includeAudio:布尔值(默认true)format:当前为mp4deviceId:字符串(可选;来自camera.list)
- 响应载荷:
format: "mp4"base64: "<...>"durationMshasAudio
- 参数:
前台要求
与canvas.* 类似,iOS 节点仅在前台允许 camera.* 命令。后台调用返回 NODE_BACKGROUND_UNAVAILABLE。
CLI 辅助工具(临时文件 + MEDIA)
获取附件最简单的方式是使用 CLI 辅助工具,它会将解码后的媒体写入临时文件并输出MEDIA:<path>。
示例:
nodes camera snap默认拍摄两个朝向,以便为智能体提供两个视角。- 输出文件是临时的(位于操作系统临时目录中),除非你自行构建包装器。
Android 节点
用户设置(默认开启)
- Android 设置面板 → 相机 → 允许相机(
camera.enabled)- 默认:开启(缺少该键时视为已启用)。
- 关闭时:
camera.*命令返回CAMERA_DISABLED。
权限
- Android 需要运行时权限:
CAMERA:用于camera.snap和camera.clip。RECORD_AUDIO:用于includeAudio=true时的camera.clip。
camera.* 请求将以 *_PERMISSION_REQUIRED 错误失败。
前台要求
与canvas.* 类似,Android 节点仅在前台允许 camera.* 命令。后台调用返回 NODE_BACKGROUND_UNAVAILABLE。
载荷保护
照片会被重新压缩,以将 base64 载荷控制在 5 MB 以内。macOS 应用
用户设置(默认关闭)
macOS 伴侣应用提供一个复选框:- 设置 → 通用 → 允许相机(
openclaw.cameraEnabled)- 默认:关闭
- 关闭时:相机请求返回”Camera disabled by user”。
CLI 辅助工具(节点调用)
使用主openclaw CLI 在 macOS 节点上调用相机命令。
示例:
openclaw nodes camera snap默认maxWidth=1600,除非被覆盖。- 在 macOS 上,
camera.snap在预热/曝光稳定后等待delayMs(默认 2000ms)再进行捕获。 - 照片载荷会被重新压缩,以将 base64 控制在 5 MB 以内。
安全性 + 实际限制
- 相机和麦克风访问会触发常规的操作系统权限提示(且需要在 Info.plist 中添加用途说明字符串)。
- 视频片段有长度上限(当前
<= 60s),以避免过大的节点载荷(base64 开销 + 消息大小限制)。
macOS 屏幕录制(操作系统级别)
如需屏幕录制(非相机),请使用 macOS 伴侣应用:- 需要 macOS 屏幕录制权限(TCC)。