Estimation of acoustic microphone vocal tract parameters from throat microphone recordings

Abstract

Recently, joint processing of throat and acoustic microphone recordings has been an attractive tool for robust speech processing. As the throat microphones record the acoustic sounds in the form of vibrations from skin attached sensors, they are more robust and highly correlated with the acoustic speech signal. We investigate the correlation of throat and acoustic microphone recordings. We propose a hidden Markov model (HMM) based structure to estimate acoustic speech features from throat speech features. The HMM based estimator will be used to estimate clean acoustic speech features from noisy throat and acoustic microphone recordings. Experimental results on acoustic speech feature estimation are provided./ Öz: Gırtlak mikrofonları akustik mikrofon ile yüksek ilintili ve ortam gürültüsünden az etkilenir olmaları nedeni ile gürbüz konuşma işleme uygulamalarında kullanılmaktadır. Bu çalışmada gırtlak mikrofonlarının akustik ses mikrofonları ile olan ilintisini araştırdık. Gırtlak mikrofonu sesi doku üzerindeki titreşimlerden kaydettiği için değişken çevre şartlarına daha gürbüz ama asıl ses işaretinden daha düşük ve bozunmuş bir bant genliğine sahiptir. Gırtlak mikrofonu ve akustik mikrofon ilintisini kullanarak gırtlak mikrofonu ses özniteliklerinden akustik mikrofon ses özniteliklerini kestirmek için saklı Markov modellerine dayalı bir yapı önerdik. Bu kestiriciyi gürültü altında gırtlak ve gürültülü akustik modellerden, temiz akustik modellerin kestirimi için kullanacağız. Akustik mikrofon ses özniteliklerinin kestirimi üzerine sonuçlar sunulmuştur.