微软在2023年11月16日的ignite大会上宣布，将ai助手copilot引入dynamics 365 guides，以融合生成式人工智能和混合现实技术的力量，帮助一线工作人员更高效地完成复杂任务并解决问题，同时减少对工作流程的干扰
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜
新加入技术人员需要在学习如何操作和维护设备的同时快速提升。当设备停止工作时，工作人员必须迅速采取行动诊断问题，实施修复措施，然后记录他们的工作。
Copilot in Dynamics 365 Guides可以协助工人在工业环境处理复杂的设备和工艺。利用这个工具，工作人员不需要搜索大量的数字文档或纸质手册，工作人员可以使用自然语言和人类手势询问相关信息。Copilot使用生成式人工智能从技术文档、服务记录、培训内容和客户管理的任何其他数据源中搜索信息，随后则将信息汇总，并通过叠加在HoloLens的全息图提供交互式指导。
微软表示，混合现实与人工智能的结合可以呈现出以人为本的界面，并有望改变现实世界的运作方式。现在，Copilot可以通过语音和全息图实时帮助一线工人。
微软计划在Dynamics 365 Guides中解锁Copilot的功能，具体如下所示：
点击并提问
人类总是以亲身体验的方式从环境中学习并与之交互，在工作中也需要向他人提问。而Dynamics 365 Guides中的Copilot则以自然交互为基础，旨在帮助员工更好地理解周围的环境。工人可以通过指着设备的特定元件并向Copilot提问的方式，获得所需信息，例如：“这种螺栓的扭矩限制是多少？”
另外，新员工可以直接向Copilot询问一般性的问题，例如“这个组件的功能是什么？”Copilot能够理解用户的意图，并提供相应答案。通过3D模型和空间地图的支持，该技术可以识别工人所注视的物体，并投影全息图来显示操作说明。员工也可以询问更复杂的问题，例如“告诉我传感器模块在这台机器的位置”，Copilot会显示相应的全息图，并显示其所处位置
重新生成内容的目标是增加空间的价值和吸引力
Copilot in Dynamics 365 Guides可以显著减少创建空间内容所需的前期投资，从而加速混合现实的开箱即用价值。Copilot使用客户定义的数据源来简化混合现实内容的创建、管理和交付，使得公司能够更快地采用混合现实。
需要进行重写的内容是：步骤式帮助
由微软大型语言模型Microsoft Azure OpenAI Service支持的Copilot in Dynamics 365 Guides不单单提供一次性的回答。工人可以进行渐进式的谈话，比如“告诉我拆卸这个过滤装置的步骤”，或者“我把马达断开了，下一步怎么办?”这时候，Copilot可以使用精心规划的知识库跟踪流程和对话，并以语音、文本或3D全息图表达答案，同时消除歧义并减少返工需求。
按需信息
微软HoloLens可以在工人周围显示需要参考的相关数据。通过连接物联网传感器，操作数据和服务记录，Dynamics 365 Guides中的Copilot可以回答一系列问题，比如“当前湿度等级是多少？”或“上次检查是什么时候，当时有发现什么问题吗？”
HoloLens 2 允许 Copilot 精确定位特定资产，识别它们，并实时访问相关信息源。一线工作人员可以访问丰富的信息，并在人工智能的帮助下进行故障排除或修复。 HoloLens 2 的功能允许 Copilot 对特定的资产进行精确定位、识别，并实时访问相关的信息来源。一线工作人员可以通过这些丰富的信息，在人工智能的协助下进行故障排查或修复工作
专家知识整合
一般只有经验丰富的工人才拥有完成复杂任务或修理重要设备所需的知识。然而，当这些工人不在或退休时，相关的知识就会丢失。Dynamics 365 Guides中的Copilot可以利用以前专家活动的笔记或通话记录来指导新员工完成相同的过程，从而使员工之间的学习更加容易和快速，并实现知识转移的自动化，从而提高劳动力生产率和业务敏捷性
流线型的文档
工作人员可以利用Copilot在Dynamics 365 Field Service移动端应用中加快任务完成和记录过程。工人们无需填写纸质文件，只需通过语音向Copilot描述任务进展情况，Copilot会提供相关建议，有效地检查服务任务，添加注释，更新产品数量和状态，并加快数据输入速度
Dynamics 365 Guides中的Copilot将现实世界转化为人工智能的提示和锚定。这个工具以人为中心，从根本上改变了计算技术如何帮助一线工人在现实世界中采取行动。Copilot in Dynamics 365 Guides为寻求更高效率和有效性的企业提供了巨大的潜力
现已推出私人预览版，公开预览版即将推出
Dynamics 365 Guides的副驾驶目前已经推出私人预览版，提供了一些有限的功能。即将推出的公开预览版将首先在HoloLens 2上提供，并随后登陆移动设备
微软最后强调了隐私保护，他们表示Dynamics 365 Guides中的Copilot是按照负责任的人工智能标准开发的，并且符合公司对数据安全和隐私的长期承诺
