V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
PinLG
V2EX  ›  分享发现

苹果即将发布的通过眼球追踪轨迹控制苹果设备屏幕,是否会第三方开发?眼球控制跑酷游戏?

  •  
  •   PinLG · 215 天前 · 666 次点击
    这是一个创建于 215 天前的主题,其中的信息可能已经有所发展或是发生改变。
    iOS 18 即将亮相,苹果加入了新的辅助功能,其中就包括眼动追踪功能( Eye Tracking )。

    iOS 18 的眼动追踪功能( Eye Tracking )靠 AI 支持的,专为身体残疾的人设计,眼动追踪功能让用户通过眼睛观察和控制他们的设备,而潜质摄像头能够在数秒内完成设置和校准,这种感觉类似于 Vision Pro 。

    不懂就问:

    这样的功能苹果是否会开发给第三方开发者,如果开放,是否可以通过这个眼球追踪功能应用到很多领域。例如通过眼球控制跑酷游戏。

    射击类游戏?看一眼直接秒杀?哈哈。是不是我异想天开了?欢迎讨论指导,扩展扩展知识面!

    苹果最新的眼动追踪演示视频,感兴趣可以去看。当然你也可以自己去网上搜索找一下。

    https://topstip.com/ios-18-will-introduce-eye-tracking-capabilities/
    2 条回复    2024-05-18 16:03:31 +08:00
    okakuyang
        1
    okakuyang  
       215 天前 via iPhone
    应该会开放 ,但是可能不是以你所想的方式。这个功能看上去揉了三大块技术,一 ,基于点阵投影仪的面部识别(眼周围肌肉变化)二,基于机器学习的 UI 标注和理解(苹果做这个有两三年了) 三,基于眼动反应预测注释点(像是 apple vison pro 的副产物),可以预计的是 app 无法获取注释点坐标,此模式下 app 无法获取 UI 控件被高亮状态,此模式开启时状态栏可能会出现录像提示的绿点,此模式能够被添加到控制中心,此模式下不再能够使用鼠标,最后可能开发者需要在新版 app 中添加一个标识来注明 app 不支持此功能。
    以上均为本人预测。
    SkywalkerJi
        2
    SkywalkerJi  
       214 天前 via Android
    眼动仪不是什么新技术,用来打 fps 我七年前就想过了,完全不行。主要还是设计给残疾人用的。
    现在有些 fps 主播就有用眼动仪直播的,视线方向和瞄准方向大部分时候是不一样的,用眼动仪瞄准和 fps 底层逻辑不合适。
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3230 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 19ms · UTC 12:21 · PVG 20:21 · LAX 04:21 · JFK 07:21
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.