본 발명은 컴퓨팅 수단에 의해 수행되는 접안 모니터링 방법에 관한 것으로 일 실시예에 따른 항만에 설치되어 이미지를 촬상하는 카메라를 이용하여 바다 및 복수의 선박을 포함하는 항만 이미지를 획득하는 단계, 입력 이미지 및 상기 입력 이미지에 포함된 바다, 선박 및 지형지물을 포함하는 오브젝트들에 해당하는 픽셀에 각각 바다, 선박 및 지형지물을 지시하는 클래스 값들을 라벨링한 러닝셋을 이용하여 학습된 인공 신경망을 이용하여 상기 항만 이미지로부터 상기 오브젝트들에 대한 세그멘테이션 이미지를 생성하는 단계, 상기 세그멘테이션 이미지의 선박을 지시하는 클래스 값이 할당된 제1 픽셀들에 기초하여 상기 복수의 선박을 트래킹하여 상기 복수의 선박 각각을 나타내는 대표 포인트들의 위치 정보가 포함된 트래킹 정보를 획득하는 단계, 상기 트래킹 정보에 기초하여 상기 트래킹되는 선박 중 접안 가이드되는 타겟 선박을 결정하는 단계 및 상기 세그멘테이션 이미지에 기초하여 상기 타겟 선박의 선수와 안벽 사이의 거리인 선수 거리 및 상기 타겟 선박의 선미와 안벽 사이의 거리인 선미 거리를 포함하는 접안 가이드 정보를 획득하는 단계를 포함하는 접안 모니터링 방법을 개시한다.

    The present invention relates to a berthing monitoring method performed by a computing means. According to one embodiment, disclosed is the berthing monitoring method which comprises the steps of: obtaining a port image including the sea and a plurality of ships by using a camera installed in a port to capture an image; generating a segmentation image for objects from the port image by using an artificial neural network learned by using a learning set labeling pixels corresponding to an input image and the objects including the sea, ships, and geographic features included in the input image with class values indicating the sea, ships, and geographic features, respectively; obtaining tracking information including location information of representative points representing each of the plurality of ships by tracking the plurality of ships based on first pixels assigned the class values indicating the ships of the segmentation image; determining a target ship to be guided to a berth of the tracked ships based on the tracking information; and obtaining berthing guide information including a bow distance, which is a distance between a bow and a quay wall of the target ship, and a stern distance, which is a distance between a stern and the quay wall of the target ship, based on the segmentation image. According to one embodiment, the ship can be recognized and a monitoring target can be determined based on this.


    Access

    Download


    Export, share and cite



    Title :

    DEVICE AND METHOD FOR MONITORING A BERTHING


    Additional title:

    접안 모니터링 장치 및 방법


    Contributors:

    Publication date :

    2024-01-19


    Type of media :

    Patent


    Type of material :

    Electronic Resource


    Language :

    Korean


    Classification :

    IPC:    G08G Anlagen zur Steuerung, Regelung oder Überwachung des Verkehrs , TRAFFIC CONTROL SYSTEMS / G06T Bilddatenverarbeitung oder Bilddatenerzeugung allgemein , IMAGE DATA PROCESSING OR GENERATION, IN GENERAL / G06V / H04N PICTORIAL COMMUNICATION, e.g. TELEVISION , Bildübertragung, z.B. Fernsehen



    Automatic berthing device and berthing system

    MA ZHONGJUN / SUN JUNJIE / SUN PAN et al. | European Patent Office | 2023

    Free access

    Ship berthing device for yacht berthing

    WANG HONGYANG | European Patent Office | 2020

    Free access

    Ship abutting berthing device and berthing method thereof

    ZHANG HUISHENG / CHEN JUN / TAO JIANGHUA et al. | European Patent Office | 2024

    Free access

    DEVICE AND METHOD FOR MONITORING A BERTHING

    PARK BYEOLTEO / KIM HAN KEUN / KIM DONG HOON | European Patent Office | 2021

    Free access

    DEVICE AND METHOD FOR MONITORING A BERTHING

    PARK BYEOLTEO / KIM HAN KEUN / KIM DONG HOON | European Patent Office | 2024

    Free access