平台概览

iOS 应用

可用性:内部预览。iOS 应用尚未公开分发。

它的作用

  • 通过 WebSocket(局域网或 tailnet)连接到 Gateway 网关。
  • 暴露节点能力:Canvas、Screen snapshot、Camera capture、Location、Talk 模式、Voice wake。
  • 接收 node.invoke 命令并报告节点 Status 事件。

要求

  • 另一台设备上正在运行的 Gateway 网关(macOS、Linux,或通过 WSL2 运行的 Windows)。
  • 网络路径:
    • 通过 Bonjour 使用同一局域网,
    • 通过单播 DNS-SD 使用 tailnet(示例域名:openclaw.internal.),
    • 手动主机/端口(后备)。

快速开始(配对 + 连接)

  1. 启动 Gateway 网关:
openclaw gateway --port 18789
  1. 在 iOS 应用中,打开设置并选择一个已发现的 Gateway 网关(或启用 Manual Host 并输入主机/端口)。

  2. 在 Gateway 网关主机上批准配对请求:

openclaw devices list
openclaw devices approve <requestId>

如果应用使用已更改的认证详情(角色/作用域/公钥)重试配对, 先前的待处理请求会被取代,并创建新的 requestId。 批准前再次运行 openclaw devices list

可选:如果 iOS 节点始终从严格受控的子网连接,你 可以通过显式 CIDR 或精确 IP 选择启用首次节点自动批准:

{
  gateway: {
    nodes: {
      pairing: {
        autoApproveCidrs: ["192.168.1.0/24"],
      },
    },
  },
}

默认禁用此功能。它仅适用于新的 role: node 配对且 未请求任何作用域。操作者/浏览器配对,以及任何角色、作用域、元数据或 公钥变更仍需要手动批准。

  1. 验证连接:
openclaw nodes status
openclaw gateway call node.list --params "{}"

官方构建的中继推送

官方分发的 iOS 构建使用外部推送中继,而不是将原始 APNs 令牌发布到 Gateway 网关。

Gateway 网关侧要求:

{
  gateway: {
    push: {
      apns: {
        relay: {
          baseUrl: "https://relay.example.com",
        },
      },
    },
  },
}

流程的工作方式:

  • iOS 应用使用 App Attest 和 StoreKit 应用交易 JWS 向中继注册。
  • 中继返回一个不透明的中继句柄以及注册作用域的发送授权。
  • iOS 应用获取已配对的 Gateway 网关身份,并将其包含在中继注册中,因此该中继支持的注册会委托给该特定 Gateway 网关。
  • 应用通过 push.apns.register 将该中继支持的注册转发给已配对的 Gateway 网关。
  • Gateway 网关使用存储的中继句柄执行 push.test、后台唤醒和唤醒轻推。
  • Gateway 网关中继基础 URL 必须与官方/TestFlight iOS 构建内置的中继 URL 匹配。
  • 如果应用之后连接到不同 Gateway 网关,或连接到带有不同中继基础 URL 的构建,它会刷新中继注册,而不是复用旧绑定。

此路径下 Gateway 网关需要:

  • 不需要部署范围的中继令牌。
  • 官方/TestFlight 中继支持发送不需要直接 APNs 密钥。

预期操作者流程:

  1. 安装官方/TestFlight iOS 构建。
  2. 在 Gateway 网关上设置 gateway.push.apns.relay.baseUrl
  3. 将应用与 Gateway 网关配对,并让它完成连接。
  4. 应用在拥有 APNs 令牌、操作者会话已连接且中继注册成功后,会自动发布 push.apns.register
  5. 之后,push.test、重连唤醒和唤醒轻推都可以使用存储的中继支持注册。

后台存活信标

当 iOS 因静默推送、后台刷新或重要位置事件唤醒应用时,应用 会尝试短暂重连节点,然后使用 event: "node.presence.alive" 调用 node.event。 只有在认证后的节点设备身份已知后,Gateway 网关才会把它作为 lastSeenAtMs/lastSeenReason 记录到已配对节点/设备元数据上。

只有当 Gateway 网关响应包含 handled: true 时,应用才会将后台唤醒视为已成功记录。 较旧的 Gateway 网关可能会用 { "ok": true } 确认 node.event;该响应 兼容,但不算作持久的最后在线时间更新。

兼容性说明:

  • OPENCLAW_APNS_RELAY_BASE_URL 仍可作为 Gateway 网关的临时环境覆盖使用。

认证和信任流程

中继的存在是为了强制执行两个直接在 Gateway 网关上使用 APNs 无法为 官方 iOS 构建提供的约束:

  • 只有通过 Apple 分发的真实 OpenClaw iOS 构建才能使用托管中继。
  • Gateway 网关只能为与该特定 Gateway 网关配对的 iOS 设备发送中继支持的推送。

逐跳说明:

  1. iOS app -> gateway

    • 应用首先通过正常的 Gateway 网关认证流程与 Gateway 网关配对。
    • 这会给应用一个经过认证的节点会话,以及一个经过认证的操作者会话。
    • 操作者会话用于调用 gateway.identity.get
  2. iOS app -> relay

    • 应用通过 HTTPS 调用中继注册端点。
    • 注册包含 App Attest 证明以及 StoreKit 应用交易 JWS。
    • 中继验证 bundle ID、App Attest 证明和 Apple 分发证明,并要求 官方/生产分发路径。
    • 这就是阻止本地 Xcode/开发构建使用托管中继的机制。本地构建可以被 签名,但它不满足中继所期望的官方 Apple 分发证明。
  3. gateway identity delegation

    • 在中继注册之前,应用从 gateway.identity.get 获取已配对 Gateway 网关的身份。
    • 应用将该 Gateway 网关身份包含在中继注册载荷中。
    • 中继返回一个中继句柄和一个注册作用域的发送授权,二者委托给 该 Gateway 网关身份。
  4. gateway -> relay

    • Gateway 网关存储来自 push.apns.register 的中继句柄和发送授权。
    • push.test、重连唤醒和唤醒轻推时,Gateway 网关使用自己的 设备身份签名发送请求。
    • 中继根据注册时委托的 Gateway 网关身份,验证存储的发送授权和 Gateway 网关签名。
    • 即使另一个 Gateway 网关以某种方式获得了该句柄,也不能复用该存储注册。
  5. relay -> APNs

    • 中继拥有生产 APNs 凭据以及官方构建的原始 APNs 令牌。
    • 对于中继支持的官方构建,Gateway 网关永不存储原始 APNs 令牌。
    • 中继代表已配对的 Gateway 网关向 APNs 发送最终推送。

创建此设计的原因:

  • 让生产 APNs 凭据不进入用户的 Gateway 网关。
  • 避免在 Gateway 网关上存储官方构建的原始 APNs 令牌。
  • 只允许官方/TestFlight OpenClaw 构建使用托管中继。
  • 防止一个 Gateway 网关向归属于另一个 Gateway 网关的 iOS 设备发送唤醒推送。

本地/手动构建仍使用直接 APNs。如果你在不使用中继的情况下测试这些构建, Gateway 网关仍需要直接 APNs 凭据:

export OPENCLAW_APNS_TEAM_ID="TEAMID"
export OPENCLAW_APNS_KEY_ID="KEYID"
export OPENCLAW_APNS_PRIVATE_KEY_P8="$(cat /path/to/AuthKey_KEYID.p8)"

这些是 Gateway 网关主机运行时环境变量,不是 Fastlane 设置。apps/ios/fastlane/.env 只存储 App Store Connect / TestFlight 认证,例如 ASC_KEY_IDASC_ISSUER_ID;它不配置 本地 iOS 构建的直接 APNs 投递。

推荐的 Gateway 网关主机存储方式:

mkdir -p ~/.openclaw/credentials/apns
chmod 700 ~/.openclaw/credentials/apns
mv /path/to/AuthKey_KEYID.p8 ~/.openclaw/credentials/apns/AuthKey_KEYID.p8
chmod 600 ~/.openclaw/credentials/apns/AuthKey_KEYID.p8
export OPENCLAW_APNS_PRIVATE_KEY_PATH="$HOME/.openclaw/credentials/apns/AuthKey_KEYID.p8"

不要提交 .p8 文件,也不要将它放在仓库检出目录下。

设备发现路径

Bonjour(局域网)

iOS 应用在 local. 上浏览 _openclaw-gw._tcp,并在配置后浏览同一个 广域 DNS-SD 发现域。同一局域网的 Gateway 网关会自动从 local. 出现; 跨网络发现可以使用配置的广域域名,而无需更改信标类型。

Tailnet(跨网络)

如果 mDNS 被阻止,请使用单播 DNS-SD 区域(选择一个域名;示例: openclaw.internal.)和 Tailscale 分割 DNS。 有关 CoreDNS 示例,请参阅 Bonjour

手动主机/端口

在设置中,启用 Manual Host 并输入 Gateway 网关主机 + 端口(默认 18789)。

Canvas + A2UI

iOS 节点渲染 WKWebView canvas。使用 node.invoke 驱动它:

openclaw nodes invoke --node "iOS Node" --command canvas.navigate --params '{"url":"http://<gateway-host>:18789/__openclaw__/canvas/"}'

说明:

  • Gateway 网关 canvas 主机提供 /__openclaw__/canvas//__openclaw__/a2ui/
  • 它由 Gateway 网关 HTTP 服务器提供服务(与 gateway.port 相同的端口,默认 18789)。
  • 当已通告 canvas 主机 URL 时,iOS 节点会在连接时自动导航到 A2UI。
  • 使用 canvas.navigate{"url":""} 返回内置脚手架。

与 Computer Use 的关系

iOS 应用是移动节点界面,不是 Codex Computer Use 后端。Codex Computer Use 和 cua-driver mcp 通过 MCP 工具控制本地 macOS 桌面;iOS 应用通过 OpenClaw 节点命令 暴露 iPhone 能力,例如 canvas.*camera.*screen.*location.*talk.*

智能体仍可通过调用节点 命令,借助 OpenClaw 操作 iOS 应用,但这些调用会经过 Gateway 网关节点协议,并遵循 iOS 前台/后台限制。使用 Codex Computer Use 进行本地桌面控制;使用本页了解 iOS 节点能力。

Canvas eval / snapshot

openclaw nodes invoke --node "iOS Node" --command canvas.eval --params '{"javaScript":"(() => { const {ctx} = window.__openclaw; ctx.clearRect(0,0,innerWidth,innerHeight); ctx.lineWidth=6; ctx.strokeStyle=\"#ff2d55\"; ctx.beginPath(); ctx.moveTo(40,40); ctx.lineTo(innerWidth-40, innerHeight-40); ctx.stroke(); return \"ok\"; })()"}'
openclaw nodes invoke --node "iOS Node" --command canvas.snapshot --params '{"maxWidth":900,"format":"jpeg"}'

Voice wake + Talk 模式

  • Voice wake 和 Talk 模式可在设置中使用。
  • 支持 Talk 的 iOS 节点会通告 talk 能力,并可以声明 talk.ptt.starttalk.ptt.stoptalk.ptt.canceltalk.ptt.once; Gateway 网关默认允许受信任且支持 Talk 的节点使用这些按住说话命令。
  • iOS 可能会挂起后台音频;当应用未处于活跃状态时,请将语音功能视为尽力而为。

常见错误

  • NODE_BACKGROUND_UNAVAILABLE:将 iOS 应用带到前台(canvas/camera/screen 命令需要它)。
  • A2UI_HOST_NOT_CONFIGURED:Gateway 网关没有通告 Canvas 插件界面 URL;检查 Gateway 网关配置 中的 plugins.entries.canvas.config.host
  • 配对提示从未出现:运行 openclaw devices list 并手动批准。
  • 重新安装后重连失败:Keychain 配对令牌已被清除;重新配对节点。

相关文档