The present invention relates to an apparatus and a method for aircraft maintenance training based on augmented reality (AR). The apparatus for aircraft maintenance training installed on a mobile terminal and executed comprises: a training scenario storage unit storing and managing a training scenario written based on a maintenance manual for an aircraft to be subjected to training; an object identification unit receiving and analyzing an image captured by a camera on the mobile terminal to identify each of components that exist in the image; a voice analysis unit recording and analyzing the voice of a user through a microphone on the mobile terminal to identify and output content that a user is speaking about; a user control value input unit obtaining and outputting a user control value inputted through a touch screen and a button on the mobile terminal; and a training service provision unit analyzing and processing a result of object identification and a user touch value according to a pre-stored training scenario to check a component to be subjected to training and providing training content in an AR mode, wherein the training service provision unit plays English-version training content of the component to be subjected to training, asks the user to repeat the content corresponding to the English-version training content in English, and additionally plays a native language-version training content. Accordingly, a trainee can more easily and accurately search for and read required content on a user terminal.
본 발명은 증강 현실 기반의 항공기 정비 훈련 장치 및 방법에 관한 것으로, 이는 모바일 단말에 설치 및 실행되는 항공기 정비 훈련 장치는 훈련 대상 항공기의 정비 매뉴얼에 기반하여 작성된 훈련 시나리오를 저장 및 관리하는 훈련 시나리오 저장부; 상기 모바일 단말의 카메라를 통해 획득된 카메라 영상을 수신 및 분석하여, 카메라 영상 내에 존재하는 부품 각각을 식별하는 객체 식별부; 상기 모바일 단말의 마이크를 통해 사용자 음성을 녹음 및 분석하여, 사용자가 현재 말하고 있는 내용을 식별 및 출력하는 음성 분석부; 상기 모바일 단말의 터치스크린과 버튼을 통해 입력된 사용자 제어값을 획득 및 출력하는 사용자 제어값 입력부; 및 객체 식별 결과 및 사용자 터치 값을 기 저장된 훈련 시나리오에 따라 분석 처리하여 훈련 대상 부품을 확인하고 훈련 컨텐츠를 증강 현실 방식으로 제공하는 훈련 서비스 제공부를 포함하며, 상기 훈련 서비스 제공부는 훈련 대상 부품의 영어 버전 훈련 컨텐츠를 재생한 후, 영어 버전 훈련 컨텐츠에 상응하는 내용을 영어로 따라 말하기를 요청하고, 자국어 버전 훈련 컨텐츠를 추가 재생하도록 하는 것을 특징으로 한다.
Apparatus and method for aircraft maintenance training based on augmented reality
증강 현실 기반의 항공기 정비 훈련 장치 및 방법
2022-11-29
Patent
Electronic Resource
Korean
IPC: | G09B Unterrichts- oder Vorführungsgeräte , EDUCATIONAL OR DEMONSTRATION APPLIANCES / B64F GROUND OR AIRCRAFT-CARRIER-DECK INSTALLATIONS SPECIALLY ADAPTED FOR USE IN CONNECTION WITH AIRCRAFT , Boden- oder Flugzeugträgerdeckeinrichtungen besonders ausgebildet für die Verwendung in Verbindung mit Luftfahrzeugen / G06Q Datenverarbeitungssysteme oder -verfahren, besonders angepasst an verwaltungstechnische, geschäftliche, finanzielle oder betriebswirtschaftliche Zwecke, sowie an geschäftsbezogene Überwachungs- oder Voraussagezwecke , DATA PROCESSING SYSTEMS OR METHODS, SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL, SUPERVISORY OR FORECASTING PURPOSES |
Apparatus and method for aircraft maintenance training based on augmented reality
European Patent Office | 2023
Augmented reality for aircraft maintenance training and operations support
Tema Archive | 2011
|METHOD FOR SUPPORTING AIRCRAFT MAINTENANCE BASED ON AUGMENTED REALITY
European Patent Office | 2024
METHOD FOR SUPPORTING AIRCRAFT MAINTENANCE BASED ON AUGMENTED REALITY
European Patent Office | 2023
|SHM WITH AUGMENTED REALITY FOR AIRCRAFT MAINTENANCE
British Library Conference Proceedings | 2018
|