智能手語(yǔ)溝通系統(tǒng)與聾啞人無(wú)障礙交流
南京理工大學(xué)陳德毅團(tuán)隊(duì)在一次社會(huì)實(shí)踐中,接觸到了一群聾啞兒童,萌發(fā)了發(fā)明一款能與聾啞人正常交流的軟件的想法。他們最終開(kāi)發(fā)了一套無(wú)障礙手語(yǔ)溝通系統(tǒng),為無(wú)聲世界賦予有聲夢(mèng)想。
該系統(tǒng)實(shí)現(xiàn)了軟硬件結(jié)合,硬件上,由頭戴式設(shè)備上的紅外攝像頭,來(lái)追蹤和捕捉手勢(shì)動(dòng)作,軟件上,自主研發(fā)的希聲APP,經(jīng)過(guò)在手機(jī)上的語(yǔ)音錄入和圖片顯示,實(shí)現(xiàn)自然語(yǔ)言與手語(yǔ)語(yǔ)言的雙向互譯。通過(guò)“希聲”,聽(tīng)障人士的手勢(shì)信息被雙紅外攝像頭采集,經(jīng)翻譯模塊翻譯成對(duì)應(yīng)語(yǔ)音,供正常人理解,而正常人則對(duì)著手機(jī)說(shuō)出想說(shuō)的話(huà),經(jīng)語(yǔ)音識(shí)別后翻譯成對(duì)應(yīng)的手語(yǔ)圖像,供聽(tīng)障人士理解,以此實(shí)現(xiàn)二者的雙向交流。

