卡內(nèi)基梅隆大學(xué)的研究人員研發(fā)了一項新技術(shù)：添加聲音和振動意識，從而創(chuàng)造真正的情境感知計算。這個稱為Ubicoustics的系統(tǒng)，為智能設(shè)備交互添加了額外的環(huán)境，使智能揚聲器知道它是在廚房里，或是使智能傳感器知道你在隧道里而不是在馬路上。
卡內(nèi)基梅隆大學(xué)的人機交互研究所的研究員Chris Harrison說：“廚房里的智能揚聲器無法弄清楚它是否在廚房里，更不用說知道一個人在廚房里做了什么。但是如果這些設(shè)備能夠理解周圍發(fā)生的事情，那么它們可能會更有幫助性。”
這個系統(tǒng)的實現(xiàn)是使用內(nèi)置揚聲器來創(chuàng)建“基于聲音的活動識別。”那么它們是如何做到這一點呢？這點非常有趣。
一位博士生Gierad Laput說：“我們的主要想法是利用娛樂業(yè)中常用的專業(yè)音效庫。它們清晰，標(biāo)簽清楚，分割良好，多樣化。此外，我們可以將它們轉(zhuǎn)換并投影到數(shù)百種不同的變體中，創(chuàng)建大量數(shù)據(jù)，這非常適合培訓(xùn)深度學(xué)習(xí)模型。”
Laput表示，識別聲音并將聲音置于正確的環(huán)境中是一項挑戰(zhàn)，在某種程度上，這是因為多種聲音的存在可能會相互產(chǎn)生干擾。在他們的測試中，Ubicoustics的準(zhǔn)確率約為80％--這與人類準(zhǔn)確性相比具有競爭力，但還不足以支持用戶應(yīng)用程序。更好的麥克風(fēng)，更高的采樣率和不同的模型架構(gòu)都可以通過進(jìn)一步的研究來提高準(zhǔn)確性。
在另一篇論文中，國際人機交互設(shè)計協(xié)會的一位博士生Yang Zhang和Laput，Harrison介紹了他們的Vibrosight，它可以使用激光振動測量法來檢測房間特定位置的振動。類似于克格勃（蘇聯(lián)國家安全委員會）曾用于檢測窗戶等反光表面上的振動的基于光的設(shè)備，這使他們可以監(jiān)聽到產(chǎn)生振動的對話內(nèi)容。
這個系統(tǒng)使用低功率激光和反射器來感測物體是處于打開還是關(guān)閉的狀態(tài)，或者椅子或桌子是否被移動過。傳感器可以同時監(jiān)控多個物體，并且，附著在物體上的標(biāo)簽不使用電力。假設(shè)有光線，那么單個激光就能監(jiān)視房間周圍或甚至不同房間內(nèi)的多個物體。
這項研究仍處于早期階段，但在未來，可能你在做菜的時候，機器人能夠聽到，并且根據(jù)它們的技能來提供幫助。
