V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
shineonme

Codex 这个申请权限的交互好有意思

  •  
  •   shineonme · 1 天前 · 3081 次点击

    > https://x.com/trpfsu/status/2044882275100250444

    ------

    而且这个 Computer Use 和用户操作是可以同时进行的,会冒出来一个像是幽灵鼠标一样的玩意儿,好奇这种是因为系统层面的支持所以可以实现吗?

    第 1 条附言  ·  1 天前
    这个效果已经有开源逆向实现了:
    https://x.com/dotey/status/2044986392862662957
    26 条回复    2026-04-19 01:33:02 +08:00
    TonyMontana
        1
    TonyMontana  
       1 天前
    cool
    hugsky
        2
    hugsky  
       1 天前
    好炫酷
    sddyzm
        3
    sddyzm  
    PRO
       1 天前
    确实在改变世界
    loading
        4
    loading  
       1 天前
    好丝滑
    390547784
        5
    390547784  
       1 天前
    第一次看见这种交互,太有意思了
    andforce
        6
    andforce  
       1 天前
    “像是幽灵鼠标一样的玩意儿”
    印象中在 github 看过一个开源的类似东西,可以指引你操作电脑、软件
    zeyangstudies
        7
    zeyangstudies  
       1 天前
    这是更新了吗?为啥我的还没有这个功能
    qppq54s
        8
    qppq54s  
       1 天前
    好炫酷
    Mar5
        9
    Mar5  
       1 天前
    @zeyangstudies 更新一下 codex app ,在设置中开启
    cadl
        10
    cadl  
       1 天前
    这个交互真好。太聪明了
    Danswerme
        11
    Danswerme  
       1 天前
    确实酷炫啊
    Danswerme
        12
    Danswerme  
       1 天前
    好奇这个是怎么做到的,捕获窗口然后计算坐标? 那个拖动软件至列表中赋予权限的功能是 macOS 自带的吗?
    shineonme
        13
    shineonme  
    OP
       1 天前
    @andforce 而且这个幽灵鼠标可以在其他未聚焦的窗口后台运行,跟操作了多年电脑,基本必须在聚焦窗口点击鼠标的认知相悖了,有点惊喜
    andforce
        14
    andforce  
       1 天前 via iPhone   ❤️ 1
    shineonme
        15
    shineonme  
    OP
       1 天前
    @andforce 哇,这个项目也好有意思,而且感觉应用前景很好
    suibianwanwan
        16
    suibianwanwan  
       1 天前
    @Mar5 codex 还有 app 吗, 是我 out 了, 我以为只有 client
    nicaiwss
        17
    nicaiwss  
       1 天前 via iPhone
    这个直接问 codex 让它实现就行了
    IsaacYoung
        18
    IsaacYoung  
       1 天前
    不错不错
    shineonme
        19
    shineonme  
    OP
       1 天前   ❤️ 1
    @Danswerme 「拖动软件至列表中赋予权限的功能」是系统自带的,就是一个 fileURL ;定位猜测就是捕捉窗口计算坐标的,这个系统设置窗口的宽度是固定的,会有一定的优势,高度坐标不太确定是如何实现的
    teaguexiao
        20
    teaguexiao  
       1 天前
    这种干预式的权限申请设计真的屌,比直接弹系统对话框敢多了。就等其他 coding agent 也跟上吧。
    sddyzm
        21
    sddyzm  
    PRO
       1 天前 via iPhone
    逆向设计这么快就出来了,不知道效果能复原百分之几,甚至是做得更好?!更好奇的是这次逆向复原使用的辅助代码模型是什么
    pill
        22
    pill  
       1 天前
    好奇为什么不把它做到 chatgpt desktop 里 因为目前 chatgpt desktop 是 native 而 codex desktop 是 electron
    zhaoxixiangban
        23
    zhaoxixiangban  
       1 天前
    今天也看到了 ,比较细节。赞
    zz177060
        24
    zz177060  
       23 小时 37 分钟前 via iPhone
    反重力一直可以。不过是测试浏览器这样,他后台运行,我鼠标操作我的。
    Mikukko
        25
    Mikukko  
       22 小时 50 分钟前 via iPhone
    确实不错
    jackqian
        26
    jackqian  
       6 小时 56 分钟前
    还有 computer use 操作电脑时,程序不必在前台,就很奇怪。
    我让他帮我发条微博,他打开浏览器操作,截图 之类的,我浏览器不是当前屏幕前台上,他也能操作
    关于   ·   帮助文档   ·   自助推广系统   ·   博客   ·   API   ·   FAQ   ·   Solana   ·   2222 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 114ms · UTC 00:29 · PVG 08:29 · LAX 17:29 · JFK 20:29
    ♥ Do have faith in what you're doing.