超越點擊的非觸摸式交互方式探索，使用攝像頭/音頻輸入

所謂“超越點擊的交互” 即交互的范圍超出了屏幕上的簡單交互，比如使用，語音交互、攝像頭、3D 維度交互等等，在某些時候，視頻/音頻交互組件，您可以將其用于您的視頻/音頻聊天應(yīng)用程序、語音命令。
音頻可視化、音頻交互、語音控制、聽寫、網(wǎng)絡(luò)攝像頭...

音頻可視化和交互
音頻交互變得越來越普遍。從語音命令到視頻/音頻聊天應(yīng)用程序，您需要一些視覺效果來響應(yīng)用戶所說的內(nèi)容。這些組件可以作為創(chuàng)建與上述示例類似的交互的起點。只是為了給你一個關(guān)于“音頻可視化”組件如何工作的粗略解釋，我們將使用來自音頻的頻率數(shù)據(jù)并將它們轉(zhuǎn)換為視覺數(shù)據(jù)。

語音到文本 - 語音命令/聽寫
從拾取語音命令到轉(zhuǎn)錄更長的內(nèi)容，這可以讓用戶清楚地了解設(shè)備是否正確拾取了他們所說的內(nèi)容。使用語音交互組件，您可以分配特定的命令詞來觸發(fā)您分配的交互。

網(wǎng)絡(luò)攝像頭
通過攝像頭可以精準(zhǔn)識別圖像、人臉、等各類畫面，從中識別特定的數(shù)據(jù)和后天數(shù)據(jù)進行計算和比對，從而帶動整個產(chǎn)品的交互提升到一個新高度，舉個生活中的例子就是，超市的人臉識別支付系統(tǒng)。

以上是超越點擊的交互方式初探索，后續(xù)我們還會探索和研究更多的有趣的非觸摸式交互方式。