在数字时代基于文本的模拟手册已经被智能眼镜和利用人工智能(AI)的增强现实(AR)所取代。 AK GO是一个由Unity构建的工业解决方案，可以实现沉浸式飞机维护培训，由Augmented Knowledge Corporation创造。

AK GO背后的故事始于2008年。Augmented Knowledge Corp .的创始人兼首席执行官Kevin GS Jo为我们讲述了公司的发展和Unity在其公司发展中所扮演的重要角色。作为虚拟现实（VR）和人工智能的长期拥护者，Kevin GS Jo一直在研究该技术在航空维修领域的应用。

这个项目是如何开始的

在2008年担任大学教授期间，Jo就获得了空中客车公司的资助，与南加州大学和大韩航空公司就使用AR和AI技术进行现场航空维护进行了实证研究。

他的研究证实，使用AR和AI技术进行飞机维护训练将维护效率提高了30%以上。Jo还发现，就质量而言，即使经验不足的工人也可以执行几乎零错误的维护。他在人工智能促进协会（AAAI）关于人工智能的会议上展示了他关于相关基础技术及其应用的论文和这些成果。

当时，AR和混合现实（MR）眼镜很少见，但随着技术的进步，各种智能眼镜，如HoloLens 2和Magic Leap，今天已经在市场上随处可见，这为jo项目的实际应用奠定了基础。Jo在美国、中国和韩国为他的研究成果申请了专利，并开始了在行业内将这些成果商业化。

AK GO：航空维修培训的XR内容

飞机维护是一个必不可少的过程，糟糕的维护会导致致命的事故。根据国际民用航空组织（ICAO）2016年的一项研究，约14%的飞机事故是由故障维修引起的。尽管飞机或复杂机械的维护受到严格控制，以确保维护是根据文件化的程序进行的，但是在维护工作之前找到并理解PDF文件或纸质手册中的大量内容，然后确认二维图纸如何对应于现实生活中的飞机是复杂且耗时的过程。

飞机维修手册配备的AI解决方案AK GO，通过工作人员佩戴的智能眼镜，同步显示三维的飞机零件和手册。通过使用扩展现实（XR）内容、人工智能和语音交互的模拟，对工人进行高效的维护流程培训。

通过使用AK GO，维修人员可以像在真实的飞机上训练一样学习和重复训练现实的维护流程，而培训机构可以提供高质量的培训，而不必购买昂贵的设备。

与现场工作流程完全相同的沉浸式内容

飞机很贵，一架飞机通常至少要花费1000亿韩元。航空维修培训机构获取资源有限。培训机构经常需要使用旧飞机，例如退役的或不再飞行的轻型飞机，作为培训设备。然而，由于担心设备的进一步损坏，即使是旧飞机现在也只能作为展示模型。

为了应对这些挑战，Jo致力于开发能够准确模拟真实现场维护流程的沉浸式培训内容，这是XR技术的一个典型用例。

对于有效的航空维护培训内容，如同在工业场所的所有工作一样，用户必须容易获得信息，并且必须腾出双手来执行工作。现已上市的可穿戴智能眼镜HoloLens 2实现了这一功能，因此Jo的团队专注于为该设备开发航空维修内容。该团队还应用了语音识别技术，以便员工可以轻松获取信息。

当我们的开发团队第一次开始开发时，我们很难选择一个引擎，因为我们之前没有任何引擎经验。Unity引擎有很大的吸引力，因为与其他引擎相比，它新手用户非常友好。此外，由于它支持高级开发，我们确定Unity引擎在长期开发过程中会帮助我们减轻修改的负担。此外，它促进了HoloLens 2的MR内容的开发，并提供了一个环境，使得获取和使用我们开发所需的插件或资产等东西成为可能。这就是我们选择Unity的原因。

–Kevin GS Jo，Augmented Knowledge Corp首席执行官兼创始人

从智能眼镜到平板电脑共享视频

为智能眼镜开发VR内容可能会有问题，因为只有佩戴该设备的人才能看到通过眼镜显示的内容。因此，AK GO团队提高了用户友好性。每个学员不必同时配备昂贵的智能眼镜或虚拟现实设备和一台PC，一名学员可以使用该设备，同时眼镜的视频输入可以共享到其他屏幕，如平板电脑上。

使用AK GO，学员可以通过智能眼镜看到实际飞机的图像，并获得在上下文中显示的工作程序的指导。此外，通过深度学习语音识别技术，受训者可以轻松访问程序每个步骤的菜单和内容。来自HoloLens 2设备的视频也可以传输到平板电脑上，这样就可以与他人分享视频，这样他们也可以实时查看学员使用的内容和训练状况。

在飞机起落架拆卸和组装的过程中，人工智能通过与受训者交流，在受训者的视野内显示手册中的程序步骤。通过结合AI和XR技术，受训者可以与维护知识库进行通信，以查看维护期间的必要信息，这些信息将叠加在AR中的三维模型上。

Unity功能

据首席架构师和AR开发人员Chidon Ahn称，Unity的编辑器脚本对于这个项目来说是无可替代的。但不仅仅是一个项目。如果你正在进行多个类似的项目，一旦使用编辑器脚本定义了任务，那么该任务就可以很容易地重复。

当开发处理随着每次重复而变化的大量数据的内容时，开发人员必须手动处理一切。然而，有了Unity，这个过程就可以通过使用适当产生的元文件和预定义的pre-fabs来实现自动化。

“Unity拥有各种资产，可以被像我们这样的小型开发团队有效地使用。Unity还通过使用云技术优化了共同开发功能，所以我们从这个项目开始就一直使用Unity。”

–Chidon Ahn，Augmented Knowledge公司首席架构师和AR开发人员

未来展望

AK GO在AI和XR融合内容的设计、测试和实现方面的重点目前一直围绕着航空维修领域。AK GO计划在未来将这些功能扩展到数字孪生领域，在这一领域中将涉及对车辆电子设备、家用电器和工厂等工业资产等更多方面进行实时维护培训。

Augmented Knowledge Corporation计划以软件即服务（SaaS）模式向全世界提供各种飞机类型的基于云的实时维修培训内容。Unity也将被计划应用于这些项目之中。