DeepMind正在开发更无缝、直观的AI协作方式。鼠标指针作为计算机屏幕上最熟悉的伙伴,在过去半个多世纪里几乎没有任何进化。 我们正在探索新的AI驱动功能,让指针不仅能理解指向的内容,还能理解用户的需求意图。我们的目标是解决一个常见困扰:传统AI工具往往需要用户将自己的工作内容拖拽到AI窗口中,而我们希望实现相反的体验 – 让AI能够跨越所有用户使用的工具,提供直观的服务。 例如,想象一下你指向一张建筑图片,然后说’给我显示路线’,AI系统就能理解上下文并提供相应服务。今天,我们分享指导未来用户界面设计的核心原则,以及由Gemini驱动的AI指针实验演示。 四大交互原则: – 保持流程连续性:AI功能应该在所有应用中无缝工作,而不是强迫用户在应用间切换 – 展示与说明:AI能自动捕捉指针周围的视觉和语义上下文,让用户只需简单指向 – ‘这个’和’那个’的力量:像人类交流一样使用自然简写,如’修复这个’、’移动那个’ – 像素转实体:AI能将像素转换为结构化实体,如地点、日期、对象等

来源:Hacker News (分数: 167)

作者:DeepMind

主要内容

  • 翻译内容: – …

原文链接:https://deepmind.google/blog/ai-pointer/


本文由AI自动翻译并发布

评论

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

更多文章