我也做了一个可以操控手机的硬件 Agent

codeface 2026-07-29 15:27 1

看到 https://www.v2ex.com/t/1230118 中 @fzuccq 分享了他的手机 Agent 硬件方案,我也来介绍一下最近做的同类型项目。


我的方案是利用手机的 C 口转 HDMI 投屏获取屏幕、USB HID 模拟鼠标键盘进行操作。


目前项目代码也是完全开源的状态: https://github.com/AidenAI-IO/aiden-firmware


自组硬件的成本大约在 400 元左右,核心组件如下:



  • Type C HUB 转 HDMI 、USB

  • Pico Zero RV1106G3 (核心处理单元)

  • HDMI 转 CSI 模块

  • 8 欧 2W 扬声器

  • 2.4g WiFi FPC 天线

  • HDMI 公对公转换头(用于连接 HUB 和 HDMI 转 CSI 模块)

  • CSI 连接软排线

  • ASPPRO 2.0 模块(可选,用作关键词唤醒)

  • 按键开关(可选,唤醒的另一种方式)


最新回复 (10)
  • codeface 楼主 07-29 15:39
    1
    演示视频: https://x.com/AidenAI_IO/status/2082073593974792224
  • KeinHong 07-29 15:42
    2
    这个支持 iPhone 手机么
  • codeface 楼主 07-29 15:45
    3
    @KeinHong 支持,需要开启 Assistant Touch 。
    关于 HDMI 获取屏幕的部分,这套硬件在 iPhone 上的兼容性反而还强于安卓,苹果可以稳定获取 1080p 分辨率的画面,一些安卓只能到 720p 。
  • KeinHong 07-29 15:56
    4
    @codeface #3 👍不错啊
  • zhouyg 07-29 23:37
    5
    这个硬件是完全独立运行的吗,其内部的操控逻辑怎么设置到硬件里的?
  • codeface 楼主 07-30 07:40
    6
    @zhouyg 是的,可以完全独立运行:设备本身运行完整的 Linux 固件,内置封装好的 C++ 硬件服务( frame_service 、audio_service 、hid_server )和 Go Agent daemon ,Agent 通过大模型进行推理并直接驱动 USB HID 操控外部设备,不需要额外的主控电脑常驻运行。
  • v1 07-30 08:00
    7
    @zhouyg 群控小型化……想体验差不多效果但是懒得整硬件的话。闲鱼 1 毛钱买个群控软件+小主机😀
  • shuang 07-30 09:00
    8
    模拟鼠标键盘,安全性咋样,会不会容易被检测出来
  • withrock 07-30 10:33
    9
    @codeface 大模型的推理是通过 RV1106 内置的算力推理的吗,还是需要联网对接外部 api?
  • imqiyue 07-30 10:52
    10
    楼主能力好强,支持一下
* 帖子来源V2EX
返回