智能手語(yǔ)溝通系統(tǒng)與聾啞人無(wú)障礙交流
南京理工大學(xué)陳德毅團(tuán)隊(duì)在一次社會(huì)實(shí)踐中，接觸到了一群聾啞兒童，萌發(fā)了發(fā)明一款能與聾啞人正常交流的軟件的想法。他們最終開(kāi)發(fā)了一套無(wú)障礙手語(yǔ)溝通系統(tǒng)，為無(wú)聲世界賦予有聲夢(mèng)想。
該系統(tǒng)實(shí)現(xiàn)了軟硬件結(jié)合，硬件上，由頭戴式設(shè)備上的紅外攝像頭，來(lái)追蹤和捕捉手勢(shì)動(dòng)作，軟件上，自主研發(fā)的希聲APP，經(jīng)過(guò)在手機(jī)上的語(yǔ)音錄入和圖片顯示，實(shí)現(xiàn)自然語(yǔ)言與手語(yǔ)語(yǔ)言的雙向互譯。通過(guò)“希聲”，聽(tīng)障人士的手勢(shì)信息被雙紅外攝像頭采集，經(jīng)翻譯模塊翻譯成對(duì)應(yīng)語(yǔ)音，供正常人理解，而正常人則對(duì)著手機(jī)說(shuō)出想說(shuō)的話(huà)，經(jīng)語(yǔ)音識(shí)別后翻譯成對(duì)應(yīng)的手語(yǔ)圖像，供聽(tīng)障人士理解，以此實(shí)現(xiàn)二者的雙向交流。
