AI最前线 篇四十三：AI助手：深入解析Dynamics 365 Guides中的Copilot技术

微软在Ignite 2023大会上宣布了Dynamics 365 Guides中的Copilot，这是一项结合生成式人工智能与混合现实的技术，旨在帮助一线工作人员更快地完成复杂任务并解决问题，同时减少对工作流程的干扰。

Copilot in Dynamics 365 Guides的核心功能和优势如下：

1. 工业环境中的协助：Copilot针对需要处理复杂设备和工艺的工业环境而设计。新技术人员可以在学习如何操作和维护设备的同时快速提升能力。当设备停止工作时，工作人员需要快速诊断问题，实施修复措施，并记录他们的工作。Copilot允许工作人员使用自然语言和人类手势（如看和指）询问相关信息，利用生成式AI从技术文档、服务记录、培训内容和客户管理的任何其他数据源中搜索信息，然后通过在操作或维护中的设备上叠加的内容和全息图提供交互式指导。

2. 点和询问引导：Copilot在Dynamics 365 Guides中建立在自然互动的基础上，帮助工人更好地理解周围的世界。工人可以指向资产上的组件并向Copilot提问，如“这些螺栓的扭矩限制是多少？”新员工可以询问一般性问题，如“这个组件的功能是什么？”Copilot能够识别用户所指的内容，并提供答案。3D模型和空间地图为技术提供了基础，帮助识别工人正在看的对象，然后投影全息图显示操作说明。

3. 空间内容生成：Copilot在Dynamics 365 Guides中显著减少了创建空间内容所需的前期投资，加速了混合现实的开箱即用价值。Copilot使用客户定义的数据源简化混合现实内容的创建、管理和交付，使公司能够更快地采用混合现实。

4. 逐步协助：由Microsoft Azure OpenAI Service支持的大型语言模型使得Copilot在Dynamics 365 Guides中能够做的远不止回答一次性问题。工人可以进行渐进式的对话，例如“告诉我拆卸这个过滤装置的步骤”或“我断开了马达，下一步怎么办？”Copilot利用客户的策划知识库跟随过程和对话，用语音、文本或3D全息图表达答案，消除歧义，减少返工需求。

5. 按需信息：通过连接到物联网(IoT)传感器、操作数据和服务记录，Copilot in Dynamics 365 Guides可以回答各种问题，例如“当前的湿度等级是多少？”或“上次检查是什么时候，当时有什么问题吗？”HoloLens 2允许Copilot精确定位特定资产，识别它们，并实时访问相关信息源。一线工作人员可以在人工智能的帮助下访问丰富的信息，进行故障排除或修复。

6. 专家知识整合：通常只有经验丰富的工人才具备完成复杂任务或修理重要设备所需的知识。Copilot in Dynamics 365 Guides可以利用以前专家活动的笔记或通话记录指导新员工完成相同的过程，使员工更容易、更快速地相互学习，并实现知识转移的自动化，从而提高劳动力生产率和业务敏捷性。

7. 流线型文档：工作人员将能够使用Copilot in Dynamics 365 Field Service mobile加速完成和记录工作的过程。工人们无需填写书面文件，只需用声音向Copilot描述他们的进度。Copilot将提供建议，有效地检查服务任务，添加注释，更新产品数量和状态，加速数据输入。

8. 技术的转型作用：Copilot in Dynamics 365 Guides将现实世界转变为人工智能的提示和锚定。保持人类主体性作为产品的核心，这个工具从根本上改变了计算技术如何帮助一线工人在现实世界中采取行动。对于寻求更高效率和有效性的企业来说，Copilot in Dynamics 365 Guides提供了巨大的潜力。

目前，Copilot in Dynamics 365 Guides已经推出私人预览版，并提供了一组有限的功能。公开预览版即将推出，首先将在HoloLens 2上提供，并计划随后在移动设备上推出。

微软强调了对数据安全和隐私的承诺，Copilot in Dynamics 365 Guides的开发符合负责任的人工智能标准，确保人工智能系统和解决方案是可信赖和安全的。

作者声明本文无利益相关，欢迎值友理性交流，和谐讨论～