AI赋能MR，微软发布Copilot in Dynamics 365 Guides

（XR导航网 2023年11月16日）Ignite微软 2023年会议宣布将把AI助手Copilot带到Dynamics 365 Guides，结合生成式人工智能和混合现实的力量，帮助一线员工更快地完成复杂的任务，解决问题，减少对工作流程的干扰。

新技术人员需要在学习如何操作和维护设备的同时快速改进。当设备停止工作时，工作人员必须迅速采取行动诊断问题，实施维修措施，然后记录工作。

Copilot in Dynamics 365 Guides可以帮助工人在工业环境中处理复杂的设备和工艺。使用这个工具，员工不需要搜索大量的数字文档或纸质手册，员工可以使用自然语言和人类手势来询问相关信息。Copilot利用生成式人工智能从技术文档、服务记录、培训内容和客户管理的任何其他数据源中搜索信息，然后汇总信息，并通过叠加在Hololens的全息图提供交互式指导。

微软表示，混合现实与人工智能的结合可以呈现以人为本的界面，预计将改变现实世界的运作模式。现在，Copilot可以通过语音和全息图实时帮助一线工人。

以下是Dynamicss的微软计划 365 在Guides中解锁Copilot的功能：

点击并提问

人类总是以手动的方式从环境中学习和互动，并在工作中向他人提问。Copilot in Dynamics 365 Guides以自然交互为基础，专注于帮助员工更好地了解周围的世界。工人可以指着设备的特定部件，问Copilot问题，比如“这个螺栓的扭矩限制是多少？”

另外，新员工可以直接问一般问题，比如“这个组件的功能是什么？”。Copilot可以识别用户所指的内容并提供答案。3D模型和空间地图为该技术提供了基础，帮助识别工人正在观看的对象，然后投影全息图来显示操作说明。员工可以问更复杂的问题，比如“告诉我传感器模块在这台机器的位置”，然后Copilot会显示全息图和位置。

生成空间内容

Copilot in Dynamics 365 Guides可以显著减少创建空间内容所需的早期投资，从而加速混合现实的开箱即用价值。Copilot利用客户定义的数据源简化混合现实内容的创建、管理和交付，使公司能够更快地利用混合现实。

步骤式帮助

微软大型语言模型Microsoft Azure OpenAI Copilott支持Service in Dynamics 365 Guides不仅提供一次性答案。工人们可以进行渐进的对话，比如“告诉我拆卸过滤器的步骤”，或者“我断开电机，下一步该怎么办？“此时，Copilot可以使用精心策划的知识库跟踪过程和对话，用语音、文本或3D全息图表达答案，消除歧义，减少返工需求。

按需信息

微软Hololens可以显示工人周围需要参考的相关数据。接收物联网传感器、操作数据和服务记录，Copilot in Dynamics 365 Guides可以回答一系列问题，比如“目前的湿度等级是多少？”或者“上次检查是什么时候，当时发现了什么问题？”

HoloLens 2允许Copilot准确定位特定资产，识别它们，并实时访问相关信息源。一线工作人员可以访问丰富的信息，并在人工智能的帮助下排除或修复故障。

整合专家知识

通常只有有经验丰富的工人才有完成复杂任务或修理重要设备所需的知识。但当这些工人不在或退休时，相关知识就会丢失。Copilot in Dynamics 365 Guides可以使用之前专家活动的笔记或电话记录来指导新员工完成相同的过程。这使得员工更容易、更快地相互学习，实现知识转移的自动化，从而提高劳动力生产率和业务敏捷性。

流线型文档

工作人员将能够使用Copilot in Dynamics 365 Field Service 为了加快完成和记录工作的过程，mobile服务。工人不需要填写书面文件，只需要用声音描述Copilot的进度，然后Copilot会提供相关建议，有效检查服务任务，添加注释，更新产品数量和状态，加快数据输入。

Copilot in Dynamics 365 Guides将现实世界转化为人工智能的提示和锚定。该工具将人作为产品的核心，从根本上改变了计算技术如何帮助一线工人在现实世界中采取行动。Copilot in Dynamics 365 Guides为寻求更高效、更有效的企业提供了巨大的潜力。

私人预览版已经推出，公开预览版即将推出

Copilot in Dynamics 365 Guides已经推出了一个私人预览版本，并提供了一组有限的功能。在即将到来的公共预览版本中，首先是HoloLens 提供并在未来登录移动设备。

微软最终强调隐私保护，他们说Copilotot in Dynamics 365 Guides是根据负责任的人工智能标准开发的，符合公司对数据安全和隐私的长期承诺。