手勢聲音合成器 幫助語(yǔ)言障礙者交流

　　據外國媒體報道，科學(xué)家研發(fā)出一種會(huì )說(shuō)話(huà)的3D式交互手套，與人類(lèi)優(yōu)雅的聲音相比之下，其發(fā)音聲似電影復仇里黑武士的神秘聲音，未來(lái)或可實(shí)現用手勢唱歌。研究者的初衷是幫助失去語(yǔ)言能力或有語(yǔ)言交流障礙的人“說(shuō)話(huà)”，它讓傳統意義上不能講話(huà)的人發(fā)出聲音，但又不同于手語(yǔ)，因為使用者不必特意去學(xué)習手勢的含義。隨著(zhù)研究的深入，科學(xué)家們將開(kāi)發(fā)手套的音樂(lè )功能，從而讓人們用手勢唱歌。有研究稱(chēng)，手勢不僅由骨骼肌肉驅動(dòng)，而且受人的信念、意識的驅使，是涉及人的思維活動(dòng)的高級行為。在虛擬現實(shí)系統中，手是用戶(hù)模型中十分重要的動(dòng)作與感知關(guān)系模型，而手勢則是3D交互任務(wù)和技術(shù)的手段。

　　3D交互式手套是溫哥華英屬哥倫比亞大學(xué)——西尼?菲爾斯（Sidney Fels）的最新科研成果，使用者只要戴上它做出各種手勢就可以合成為樂(lè )曲或一段話(huà)。據悉，費爾斯先前開(kāi)發(fā)出“手套交談”系統，采用神經(jīng)網(wǎng)絡(luò )將用戶(hù)手勢轉換成手勢語(yǔ)言參數，通過(guò)語(yǔ)言合成器合成為語(yǔ)言輸出。菲爾斯說(shuō)：“3D交互式手套通過(guò)復制聲帶的每個(gè)動(dòng)作發(fā)出電腦合成音，這是很復雜困難的過(guò)程，就好像通過(guò)打電話(huà)語(yǔ)音發(fā)送郵件一樣”。對于用戶(hù)來(lái)說(shuō)，最大的困難挑戰就是分別學(xué)習左右手套的不同功能，兩只手的不同手勢代表不同聲音片段，比如，右手握緊代表輔音、張開(kāi)代表元音、左手控制音節的長(cháng)短、右手抬起時(shí)代表高聲調、處于水平位置時(shí)是平聲調。右邊的手套象征著(zhù)開(kāi)放和閉合的聲道，它包含運動(dòng)傳感器，通過(guò)手的運動(dòng)來(lái)檢測佩戴者的開(kāi)放和閉合聲音。而左手套則配備按鈕設施激活像“P”和“B”這種清輔音，元音是通過(guò)開(kāi)放聲道發(fā)出的，輔音則是閉合聲道發(fā)出的，例如 “sh”和“zz”。 3D交互式手套隨著(zhù)手的移動(dòng)，通過(guò)傳感器定位，來(lái)改變音調，而音量是通過(guò)腳踏板設備來(lái)控制的，3D交互式手套是用八個(gè)人造聲帶壓縮鼻腔共鳴共同作用發(fā)出聲音。

　　據悉，科學(xué)家致力于發(fā)展人類(lèi)語(yǔ)音系統已有數十年之久，起初，這種手套是被用于聲音合成器用途，直到最近，他們才嘗試開(kāi)發(fā)出模仿人類(lèi)聲帶的發(fā)音系統，并計劃研發(fā)它的唱歌功能。不過(guò)，這項技術(shù)現階段還存在不足，比如，說(shuō)出帶有情感色彩的詞時(shí)，它的聲音還不夠擬人，而是像機器人講話(huà)，此外，學(xué)習如何操作需要大約100小時(shí)。不過(guò)隨著(zhù)科技的發(fā)展，相信終有一天，3D交互手套會(huì )完美的表達人類(lèi)的優(yōu)美語(yǔ)言。