코인정보

AI时代的转变:无缝集成AI技术的扩展

白緖现 기자 2026-10-13 10:16
AI能够识别屏幕点击位置并直接修改文档,融入工作环境 BigArrow引导用户完成需要人工操作的步骤,微软也加强了与Copilot和Office的整合
10日GitHub开源平台上发布的BigArrow开源工具[照片=官网截图]
10日GitHub开源平台上发布的BigArrow开源工具[照片=官网截图]
生成型人工智能(AI)服务正在逐步融入各种应用程序和对话窗口,而不再依赖于单独的窗口或应用程序。无缝AI集成的概念正在逐步实现,超越了简单的问答功能,开始有机地融入现有的工作环境。

10月13日,微软(MS)介绍了在Word、Excel和PowerPoint中将Copilot对话窗口与文档编辑功能相结合的功能。用户可以在对话窗口旁边修改文档,并根据文档中的评论进行必要的调整。该功能将逐步应用于前沿项目的客户。

谷歌也在全面连接其工作服务与AI。谷歌于上个月9日发布了利用AI模型Gemini在Google Workspace中执行跨多个应用程序的功能。用户在使用Gmail、Google Drive、文档或演示文稿等应用时,可以在当前屏幕上进行请求,而无需切换到其他应用即可撰写文档或整理资料。

以往,用户需要切换到特定应用程序以执行文档撰写或数据分析的AI功能,但通过增强应用程序之间的连接,减少了工作流程中断的问题。

个人开发者也开始关注这一应用潜力。10月12日,开发者Franz在GitHub上发布了开源工具“BigArrow”。该工具与Claude代码和Codex等AI编码工具相结合,能够在屏幕上用箭头标示出用户需要操作的按钮或菜单,并引导下一步操作。即使是不熟悉文档工作的用户,也能通过该工具获得文档编辑的步骤指导。

例如,在演示程序中添加幻灯片效果或更改系统设置时,该工具会依次指示所需的菜单和按钮。GitHub上发布的演示图像中显示了“妈妈,点击PDF,然后选择另存为PDF(Mom, click PDF, then Save as PDF)”的文字,并指向相应按钮的箭头。这帮助不熟悉文档工作或程序使用的用户按照屏幕提示执行所需功能。

BigArrow不同于替代点击或键盘输入的自动化工具。开发者表示,该工具设计为指向屏幕上的特定位置,而不是直接点击或输入。当AI代理在执行任务时达到需要人工判断或操作的阶段时,会提供具体的操作指导。指导标识在用户完成操作或经过一定时间后会消失。

尽管在服务实现方式和应用范围上存在差异,但它们的共同点在于能够在不切换到其他服务的情况下保持工作流程的连续性。

业内人士表示:“无缝AI并不是一个全新的概念,而是对现有AI工具功能的扩展,使其能够在没有额外操作流程的情况下使用。随着用户不再需要打开单独的窗口来获取AI的回答,AI的应用与实际工作之间的界限也在逐渐缩小。”
 
10日GitHub上发布的开源工具BigArrow。箭头上标示了用户需要执行的操作顺序。[照片=官网截图]
10日GitHub上发布的开源工具BigArrow。箭头上标示了用户需要执行的操作顺序。[照片=官网截图]




※ 本报道经人工智能(AI)系统翻译与编辑。

《 亚洲日报 》 所有作品受版权保护,未经授权,禁止转载。