스피치를 프로세싱하기 위한 시스템 및 방법이 설명된다. 소정의 예는 시각 정보를 사용하여 스피치 프로세싱을 향상시킨다. 이 시각 정보는 차량 내에서 획득되는 이미지 데이터일 수도 있다. 예에서, 이미지 데이터는 차량 내의 사람의 특색을 묘사한다. 소정의 예는 이미지 데이터를 사용하여, 적응된 스피치 프로세싱 모듈에 의한 사용을 위한 화자 피쳐 벡터를 획득한다. 스피치 프로세싱 모듈은 화자 피쳐 벡터를 사용하여 발언의 특색을 묘사하는 오디오 데이터를 프로세싱하도록 구성될 수도 있다. 오디오 데이터는 차량 내의 오디오 캡쳐 디바이스로부터 유도되는 오디오 데이터일 수도 있다. 소정의 예는 신경망 아키텍쳐를 사용하여, 오디오 데이터 및 화자 피쳐 벡터를 프로세싱하는 음향 모델을 제공한다.
A vehicle-mounted apparatus comprises an audio interface configured to receive audio data from an audio capture device of the vehicle, the audio data featuring an utterance of a person within the vehicle; an image interface configured to receive image data from an image capture device to capture images from the vehicle, wherein the image data includes a facial area of the person within the vehicle; a speaker preprocessing module configured to receive the image data and obtain, based on the image data, a speaker feature vector; and a speech processing module configured to use the speaker feature vector to configure an acoustic model for use in parsing the utterance based on the audio data and the speaker feature vector, the speech processing module comprising: a database of acoustic model configurations; an acoustic model selector configured to select an acoustic model configuration from the database based on the speaker feature vector; and an acoustic model instance, instantiated based on the acoustic model configuration selected by the acoustic model selector, configured to generate phoneme data for use in parsing the utterance.
VEHICLE-MOUNTED APPARATUS METHOD OF PROCESSING UTTERANCE AND PROGRAM
차량 장착 장치, 발언 프로세싱의 방법, 및 프로그램
29.09.2022
Patent
Elektronische Ressource
Koreanisch
IPC: | G10L Analyse oder Synthese von Sprache , SPEECH ANALYSIS OR SYNTHESIS / B60R Fahrzeuge, Fahrzeugausstattung oder Fahrzeugteile, soweit nicht anderweitig vorgesehen , VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR / G06F ELECTRIC DIGITAL DATA PROCESSING , Elektrische digitale Datenverarbeitung / G06K Erkennen von Daten , RECOGNITION OF DATA |
VEHICLE-MOUNTED APPARATUS METHOD OF PROCESSING UTTERANCE AND PROGRAM
Europäisches Patentamt | 2021
|UTTERANCE PROCESSING APPARATUS UTTERANCE PROCESSING METHOD AND PROGRAM
Europäisches Patentamt | 2023
UTTERANCE PROCESSING APPARATUS UTTERANCE PROCESSING METHOD AND PROGRAM
Europäisches Patentamt | 2022
|VEHICLE-MOUNTED APPARATUS, PROCESSING METHOD, AND PROGRAM
Europäisches Patentamt | 2024
|VEHICLE-MOUNTED APPARATUS, PROGRAM, AND INFORMATION PROCESSING METHOD
Europäisches Patentamt | 2025
|