A system and a method for processing a speech are described. According to a predetermined embodiment, speech processing is improved by using visual information. The visual information can be image data obtained from the inside of a vehicle. In an embodiment, the image data illustrates features of a person in the vehicle. According to a predetermined embodiment, the image data is used to obtain a speaker feature vector for use by an adapted speech processing module. The speech processing module can be formed to process audio data illustrating features of a speech by using the speaker feature vector. The audio data can be audio data guided from an audio capture device in the vehicle. According to a predetermined embodiment, a neural network architecture is used to provide an acoustic model processing the audio data and the speaker feature vector.
스피치를 프로세싱하기 위한 시스템 및 방법이 설명된다. 소정의 예는 시각 정보를 사용하여 스피치 프로세싱을 향상시킨다. 이 시각 정보는 차량 내에서 획득되는 이미지 데이터일 수도 있다. 예에서, 이미지 데이터는 차량 내의 사람의 특색을 묘사한다. 소정의 예는 이미지 데이터를 사용하여, 적응된 스피치 프로세싱 모듈에 의한 사용을 위한 화자 피쳐 벡터를 획득한다. 스피치 프로세싱 모듈은 화자 피쳐 벡터를 사용하여 발언의 특색을 묘사하는 오디오 데이터를 프로세싱하도록 구성될 수도 있다. 오디오 데이터는 차량 내의 오디오 캡쳐 디바이스로부터 유도되는 오디오 데이터일 수도 있다. 소정의 예는 신경망 아키텍쳐를 사용하여, 오디오 데이터 및 화자 피쳐 벡터를 프로세싱하는 음향 모델을 제공한다.
VEHICLE-MOUNTED APPARATUS METHOD OF PROCESSING UTTERANCE AND PROGRAM
차량 장착 장치, 발언 프로세싱의 방법, 및 프로그램
2021-03-04
Patent
Electronic Resource
Korean
IPC: | G10L Analyse oder Synthese von Sprache , SPEECH ANALYSIS OR SYNTHESIS / B60R Fahrzeuge, Fahrzeugausstattung oder Fahrzeugteile, soweit nicht anderweitig vorgesehen , VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR / G06F ELECTRIC DIGITAL DATA PROCESSING , Elektrische digitale Datenverarbeitung / G06K Erkennen von Daten , RECOGNITION OF DATA |
VEHICLE-MOUNTED APPARATUS METHOD OF PROCESSING UTTERANCE AND PROGRAM
European Patent Office | 2022
UTTERANCE PROCESSING APPARATUS UTTERANCE PROCESSING METHOD AND PROGRAM
European Patent Office | 2023
UTTERANCE PROCESSING APPARATUS UTTERANCE PROCESSING METHOD AND PROGRAM
European Patent Office | 2022
|VEHICLE-MOUNTED APPARATUS, PROCESSING METHOD, AND PROGRAM
European Patent Office | 2024
|VEHICLE-MOUNTED APPARATUS, PROGRAM, AND INFORMATION PROCESSING METHOD
European Patent Office | 2025
|