12 月 14 日,搜狗 推出了一種人機交互新技術——“唇語識別”。據介紹,唇語識別是一項集機器視覺與自然語言處理于一體的技術,可以直接從有人講話的視頻中,通過識別說話人唇部動作,來解讀說話者所說的內容。
搜狗官方表示,通過復雜端到端深度神經網絡技術進行中文唇語序列建模,經過數千小時的真實唇語數據訓練,搜狗“唇語識別”系統在非特定人開放口語測試集上,該系統達到 60%以上的準確率,在垂直場景命令集如車載、智能家居等場景下甚至已經達到 90%的準確率。
關于唇語識別技術的作用,搜狗方面表示古代僧侶和神父通過唇語讀懂信徒心里所想以顯示神奇。而在 2003 年的倫敦劫鈔案中警察就是在唇語識別專家的幫助下破的案。未來,唇語識別技術可以輔助語音交互及圖像識別,在日常生活、安防、公益等各個領域實現廣泛應用。
比如在車載場景下,周圍噪音過大時會對語音指令產生干擾,在安防領域,由于目前多數監控只有攝像頭沒有麥克風,而唇語識別則可以幫助公安人員獲取重要的講話信息,為公共安全提供有效支持。另外,唇語識別還有機會幫助先天性聽障人群或老年人,幫助他們更好地與人交流。
據了解,這并非業界首個唇語識別技術,早在 2003 年,英特爾便開發了“視聽說識別系統”軟件,供開發者研制能讀懂“唇語”的計算機;2016 年,谷歌 DeepMind 音文唇語識別系統便已經可以支持 17500 個詞,新聞測試集識別準確率達 50%以上。