본문으로 건너뛰기
AI NEWS JOURNAL
腾讯新闻 · AI频道AI NEWS / JOURNAL

25小时Star破千!最易上手的AI操控手机项目开源,小米华为都适配

智猩猩AI整理 编辑:没方 前天,开发者DIYgod在X上官宣了自己的项目Pinky,让任何AI Agent都能用上你的iPhone和Android手机,且Mac、Windows....

번역 서비스가 일시 중지되어 원문을 표시합니다.

智猩猩AI整理

编辑:没方

前天,开发者DIYgod在X上官宣了自己的项目Pinky,让任何AI Agent都能用上你的iPhone和Android手机,且Mac、Windows、Linux全平台支持,开源免费。

这条推文迅速引来大量关注,浏览量达到22万,仅25个小时GitHub Star便突破1000。

项目走红后,DIYgod也一直活跃在X评论区和Discord社区,回答大家提出的问题、收集使用反馈。仅一天的时间,项目就连续发布了30个版本。

此前,我们也介绍过类似的手机操控方案iPhone Use《前豆包产品经理开源!Codex、WorkBuddy都能操作iPhone干活了》,但这类工具通常需要通过数据线将iPhone连接到电脑,再由电脑控制手机。

Pinky的一大亮点是支持Wi-Fi连接手机,不必始终插着数据线,设备配对完成后就能通过无线方式接入,使用起来更方便。

01

上手实测:让AI替你

发快手、刷视频赚金币

Pinky的使用主要分为三个环节:安装桌面端、连接手机、接入AI Agent。

先在GitHub项目主页的Releases页面下载对应操作系统的安装包。

接下来连接手机。以Android为例,首次使用需要在手机设置中开启开发者选项和USB调试,通过数据线完成初次连接。手机弹出USB调试授权提示后,点击允许,Pinky便能识别设备。

如果使用Android 11及以上版本,还可以通过无线调试进行Wi-Fi配对。配对成功后,手机就不必一直插着数据线,电脑和手机处于可连接的网络环境中即可。

连接完成后,Pinky还会提示安装一个名为Pinky Companion的辅助应用。这个组件能够帮助Agent更快地读取手机界面、识别页面元素和输入文字。

最后,进入Pinky,点击对应智能体旁边的接入,就能自动完成MCP配置。

如果使用Android 13及以上版本,Pinky利用Android的后台显示能力,能够为Agent创建独立的操作屏幕。

这样一来,AI可以在后台打开App、读取页面、点击按钮,而手机自己的屏幕仍然可以保持关闭和锁定,用户也可以照常使用手机。

iOS上没有第二块屏幕,Agent用的就是iPhone的主屏幕。

实测一:让AI从相册选图,自动发布一个快手作品。

我直接给Agent下达了一条指令:

请用Pinky帮我在快手极速版上发一个作品,图片用我相册里的第一张图,文案是:这个杯子真好用。

收到指令后,Agent便开始通过Pinky操作手机。

如下图所示,Pinky会将手机当前画面同步到电脑端,Agent每一步操作都能在桌面窗口中看到。

作品正常完成发布,整个流程接近4分钟。

实测二:让AI在快手极速版刷一次视频,领取金币。

我换了一个更贴近日常使用的任务:

帮我用Pinky在快手极速版刷视频赚一次金币就行。

这是我的钱包初始界面,金币数量为0。

Agent这次需要完成的操作更多了一些。

它首先打开快手极速版,进入视频推荐页面,开始浏览视频内容。随后,根据页面中的金币任务和奖励提示,继续完成相应的观看操作,再进入金币收益页面查看任务进度和奖励情况。

相比单纯打开一个App,这项任务更能体现Agent的连续操作能力:它需要在不同页面之间切换,识别视频内容和任务入口,根据页面反馈决定下一步操作,而不是简单地执行一串固定坐标点击。

整个流程接近7分钟,赚了1222个金币。

需要提醒的是,部分App能够检测辅助功能服务和自动化操作,实际使用时应遵守应用平台规则,不建议将其用于批量刷取奖励或规避平台限制。

02

不只是手机遥控器,

Pinky还有这些功能

Pinky没有内置大模型,主要作为AI Agent与手机之间的连接层。

它通过MCP提供手机操作能力,除了Claude Code、Codex、Cursor等工具,也支持其他兼容MCP协议的Agent。用户可以根据自己的习惯更换模型和智能体,不必绑定某一个AI产品。

在安全方面,Pinky设置了一套独立于AI Agent的审批机制。

默认情况下,付款、交易和转账等操作需要用户手动确认。

用户还可以设置发送消息、删除内容、拨打电话、安装应用等操作必须经过审批。

银行、钱包和密码管理器应用默认对Agent隐藏,密码和一次性验证码输入框也不允许Agent填写。

此外,Pinky还支持全程操作记录。

从上边的实测一可以看出,Agent执行的每一步都会留下文字描述、截图和屏幕录制,任务结束后可以导出HTML报告,方便用户回溯操作过程。

用户也能随时点击手机镜像接管设备,Agent会暂停执行。

对于开发者来说,Pinky还有一个值得关注的用途:让Coding Agent直接测试自己开发的手机应用。

Agent可以安装自己编译的APK,启动应用、读取运行日志和崩溃报告,检查问题后再修改代码、重新安装测试。

除此之外,Pinky还支持通过Tailscale远程连接Android手机,即使手机和电脑不在同一个局域网,也能建立连接。

자료 출처

원문 읽기 ↗

관련 주제

← 전체 소식 이어 읽기