The present invention relates to the technical field of air traffic control automation systems. Disclosed is a flight push-out state monitoring method based on multi-modal data fusion, comprising: 1. constructing a control intention recognition rule, and recognizing a push-out intention from a control instruction sent by a controller; 2. constructing a flight intention recognition model, extracting an aircraft action from a real-time monitoring video, and capturing a flight intention; and 3. constructing an intention alignment fusion rule, and determining whether a conflict exists between control intention information and flight intention information. By means of fusion processing of the control intention and the flight intention, the method can realize the following auxiliary functions: determining, in a timely fashion, whether an aircraft follows the push-out instruction sent by the controller; and if an aircraft captain does not act according to the control instruction or acts arbitrarily without the control instruction, giving an inconsistent alarm, thereby realizing the function of monitoring the flight push-out state.

    La présente invention se rapporte au domaine technique des systèmes d'automatisation du contrôle de la circulation aérienne. Un procédé de surveillance d'état de repoussage de vol basé sur la fusion de données multimodales est décrit, qui comprend : 1. la construction d'une règle de reconnaissance d'intention de contrôle, et la reconnaissance d'une intention de repoussage à partir d'une instruction de contrôle envoyée par un contrôleur ; 2. la construction d'un modèle de reconnaissance d'intention de vol, l'extraction d'une action d'aéronef à partir d'une vidéo de surveillance en temps réel, et la capture d'une intention de vol ; et 3. la construction d'une règle de fusion d'alignement d'intentions, et la détermination de l'existence ou non d'un conflit entre des informations d'intention de contrôle et des informations d'intention de vol. Au moyen d'un traitement de fusion de l'intention de contrôle et de l'intention de vol, le procédé peut réaliser les fonctions auxiliaires suivantes : déterminer, en temps opportun, si un aéronef suit l'instruction de repoussage envoyée par le contrôleur ; et si un pilote commandant de bord n'agit pas selon l'instruction de contrôle ou agit arbitrairement sans l'instruction de contrôle, émettre une alarme d'incohérence, ce qui permet de réaliser la fonction de surveillance de l'état de repoussage de vol.

    本发明公开了一种基于多模态数据融合的航班推出状态监视方法,属于空中交通管制自动化系统技术领域,包括1、构建管制意图识别规则,从管制员发出的管制指令中识别推出意图;2、构建航班意图识别模型,从实时监视视频中提取航空器动作,捕捉航班意图;3、构建意图对齐融合规则,判断管制意图信息和航班意图信息是否存在冲突。通过对管制意图和航班意图进行融合处理,该方法可以实现以下辅助功能:及时判断航空器是否遵循管制员发出的推出指令,若机长未按照管制指令行动,或在没有管制指令的情况下擅自行动,则进行不一致告警,实现对航班推出状态的监视功能。


    Access

    Download


    Export, share and cite



    Title :

    FLIGHT PUSH-OUT STATE MONITORING METHOD BASED ON MULTI-MODAL DATA FUSION


    Additional title:

    PROCÉDÉ DE SURVEILLANCE D'ÉTAT DE REPOUSSAGE DE VOL BASÉ SUR LA FUSION DE DONNÉES MULTIMODALES
    一种基于多模态数据融合的航班推出状态监视方法


    Contributors:
    WANG XUAN (author) / TANG WENYI (author) / DING HUI (author) / HUANG JIBO (author) / LIU YAN (author) / XU QIUCHENG (author)

    Publication date :

    2023-04-06


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    Chinese


    Classification :

    IPC:    G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS / G06F ELECTRIC DIGITAL DATA PROCESSING , Elektrische digitale Datenverarbeitung / G06N COMPUTER SYSTEMS BASED ON SPECIFIC COMPUTATIONAL MODELS , Rechnersysteme, basierend auf spezifischen Rechenmodellen



    Flight pushback state monitoring method based on multi-modal data fusion

    WANG XUAN / TANG WENYI / DING HUI et al. | European Patent Office | 2023

    Free access

    FLIGHT PUSHBACK STATE MONITORING METHOD BASED ON MULTI-MODAL DATA FUSION

    WANG XUAN / TANG WENYI / DING HUI et al. | European Patent Office | 2022

    Free access

    Intelligent water affair monitoring device based on multi-modal data fusion

    GU XIAOLONG / WEI YING / ZHANG BING | European Patent Office | 2024

    Free access

    Multi-modal data fusion method based on big data governance

    CHEN SI'EN / WU YANQUAN / YANG JIAHUI | European Patent Office | 2024

    Free access

    Flight deployment model pre-training method based on multi-modal data

    LIU ZEYUAN / TANG WENYI / ZHANG XIANG et al. | European Patent Office | 2024

    Free access