隨著人工智能技術的發(fā)展，相比上一個 IoT 時代，如今的 AIoT 或將為我們帶來更多的想象空間。眾所周知，生成式 AI 一直在為各行各業(yè)注入新的動力，以 AI 為載體的智能硬件行業(yè)自然也不例外。更智能的多模態(tài)大模型賦予了智能硬件更多的可能，全新的人機交互體驗和智能化變革正在進階。

在剛剛過去的 RTE2024 IoT 專場上，聲網 IoT 行業(yè)負責人吳昌儒、海馬爸比聯(lián)合創(chuàng)始人譚國豪、小米 XiaomiVela 開源負責人杜超、蓮偶科技軟件部總裁楊旺、曠視增值業(yè)務部總經理史澤鴻、佐臻技術總監(jiān)徐偉恩等行業(yè)大咖齊聚一堂，分別從不同角度分享了 GenAI 對智能硬件的創(chuàng)新驅動，以及 AIoT 時代下全新的技術趨勢和場景實現(xiàn)。

AIoT 時代，人機的交互方式將如何變革？

1960年，命令行界面（ CLL ）交互方式出現(xiàn)，人們通過鍵盤輸入命令與計算機進行交互。1980年，圖形用戶界面（ GUI ）出現(xiàn)，圖形元素與計算機交互成為主流。2010年，iPhone 誕生開啟了觸摸交互時代，點擊、拖拽和手勢操作等交互方式使人機交互更自然。2020年后，語音/多模態(tài)/對話式（ LUI/MUI/CUI ）交互方式逐漸成熟。今年，OpenAI Realtime API 發(fā)布標志著實時交互又取得了重大進展，人與AI的溝通將變得像人跟人之間一樣自然。

有了多模態(tài)、對話式交互和大模型之后，以大語言模型（ LLM ）為核心引擎的模擬人類智能行為系統(tǒng) AI Agent 也爆火，它的優(yōu)勢是可以通過對環(huán)境的感知、做出決策并執(zhí)行任務，以實現(xiàn)特定的目標。聲網 IoT 行業(yè)負責人吳昌儒表示，隨著 AI 技術的快速發(fā)展，AI Agent 硬件產品正在百花齊放，并為各個領域帶來了全新的智能化體驗。這些產品不僅可以借助人工智能實現(xiàn)高度自動化和個性化，還能通過硬件設備與用戶進行自然交互，智能硬件+ AI Agent將帶來真正的場景升級。

從當下的市場情況來看，目前智能硬件+ AI Agent 主要的應用方向有兩個，一是提高生產力的工具，二是帶來情感陪伴。吳昌儒認為，智能硬件+ AI Agent 將推動 IoT 領域從一次性硬件銷售到長期服務提供的商業(yè)模式轉變，廠商未來可以通過訂閱和增值服務的形式獲得持續(xù)的收入來源。

他還介紹到，聲網為了更好的解決 AI Agent 所帶來的實時互動問題，此前就推出了聲網 AI Agent x IoT 智能硬件解決方案，該方案能夠在低功耗、低算力芯片上快速實現(xiàn)大模型的接入，具備低延時實時互動、低成本靈活適配的特性，通過豐富的功能在智能硬件場景中構建真實、自然的 AI 語音交互體驗。目前，聲網 AI Agent x IoT 智能硬件解決方案已經提供了包含大網實時傳輸，音頻處理、語音識別、文本處理、視頻處理等能力，可以支持智能管家、安防助手、虛擬陪伴、生活助理、實時翻譯等應用場景。

小米在 IoT 操作系統(tǒng)領域的探索與實踐

說到 IoT 領域的發(fā)展，一定繞不開小米。數(shù)據(jù)顯示，目前小米 IoT 可連接設備數(shù)已經達到8.22億，米家 APP 月活9690萬，擁有5件設備及以上的用戶數(shù)1610萬。無論從規(guī)模還是活躍程度上講，小米 IoT 都稱得上是全球領先的消費級 IoT 平臺。那么，在小米的視角下，AI + IoT 會帶來哪些新的進化？

小米 XiaomiVela 開源負責人杜超認為，IoT領域核心痛點就是碎片化。他介紹到，為了解決碎片化這一問題，小米在2017年就啟動了 Vela 自研操作系統(tǒng)的研發(fā)，目標就是為了打通碎片化的 IoT 應用，并在各種不同的硬件平臺上提供統(tǒng)一的軟件服務，為 IoT 的繁榮構建基礎設施。

經過幾年的發(fā)展時間，目前 XiaomiVela 已經在智能穿戴和智能家居領域超5千萬臺設備中得到了應用。其具備的柔性部署、跨端互聯(lián)、端側 AI、安全保障和開發(fā)者生態(tài)五大優(yōu)勢可以讓設備廠商以最低的研發(fā)投入、最短的研發(fā)周期成功地開發(fā)出高體驗的智能產品。

杜超表示，AI 與 IoT 的相互結合將為大家?guī)�來超乎想象的智能體驗。今天的 IoT 設備已經不再局限于個人，更廣泛的家庭使用場景促使著服務要觸達更廣闊群體、并滲透人車家的全生態(tài)場景之中。AI 在這個趨勢中的價值空間很大，它不僅可以用于洞察各種生活場景，精準的捕捉、剖析用戶的意圖，還能通過多應用的智能編排，促進多設備、多應用之間的無縫協(xié)同。

未來，通過 AI + 快應用的創(chuàng)新模式，將有望實現(xiàn)從基于用戶指令的傳統(tǒng)應用到基于用戶意圖主動服務的根本性轉變，徹底重塑跨端體驗。

云端一體，為硬件產品注入智慧基因

作為一家聚焦物聯(lián)網場景的人工智能公司，曠視對 AI +IoT 的未來發(fā)展有著深刻的洞察與諸多實踐。在RTE2024 IoT 論壇上，曠視增值業(yè)務部總經理史澤鴻帶來了題為“云端一體，為硬件產品注入智慧基因”的分享。

據(jù)史澤鴻介紹，曠視作為人工智能行業(yè)的務實者和領跑者，一直以涵蓋算法、系統(tǒng)和硬件的全棧式技術能力，持續(xù)為行業(yè)用戶提供基于大模型的端到端解決方案，并全面擁抱 AI 新浪潮。在硬件方面，曠視集中在偏傳感器類和機器人類的硬件產品的研發(fā)。在系統(tǒng)上，自研AI生產力平臺 Brain++，可以讓大模型落地效率更高、成本更低。在算法上，曠視在通用大模型和行業(yè)大模型兩個方面一直持續(xù)積累，并推出了曠視太乙大模型和算法生產平臺 AIS 。在 AI 硬件上，也持續(xù)在芯片傳感器和機器人硬件方向上投入和實踐。

應用落地上，1套 Brain++算法支撐系統(tǒng)、2個曠視 AIoT 平臺與曠視 AI 算法服務平臺以及一系列嵌入式模組硬件，共同組成了曠視1+2+N 的云端一體解決方案。

史澤鴻也在現(xiàn)場著重介紹了可以實現(xiàn)產品快速搭建的曠視 AIoT 平臺。據(jù)悉，曠視 AIoT 平臺可以集中進行設備、數(shù)據(jù)，本地算法應用、云算法應用、大模型應用的綜合管理，并為客戶提供私有云集成，快速完成 APP 小程序和設備的一站式連接，依托聲網的能力，該平臺已經可以實現(xiàn)更低延時的視頻體驗和算法的散發(fā)體驗。

AI 助力硬件新消費升級：嬰兒看護、空間手勢交互、智慧眼鏡

從交互設施的改變、跨端體驗的重塑再到云端一體，我們看到了 AIoT 時代的基礎設施構建與技術變革。在實際的應用層面，也有多位從業(yè)者帶來了不一樣的進化展示。

先從海馬爸比開始說起，對于從事邊緣計算的企業(yè)來說，如何與大模型做更好的結合，并提供更好的產品體驗在 AIoT 時代顯得尤為重要。以海馬爸比嬰兒看護神器為例，目前該產品在 AI 技術的支撐下，已經具備 AI 遮臉提醒、哭聲檢測、睡眠監(jiān)護等功能。未來通過 AI 技術，這類產品不僅可以成為家庭育兒助手，還能根據(jù)每個孩子的具體情況量身定制教育內容，使其更加智能化和人性化。

在海馬爸比聯(lián)合創(chuàng)始人譚國豪看來，AI 在未來對硬件消費領域的賦能將是全方位的。個性化互動方面，AIGC 技術可以通過分析用戶數(shù)據(jù)和行為，生成符合個人需求的內容，讓設備更具人性化。例如，智能硬件中的AI能自動生成音樂、故事或互動游戲，主動安撫或幫助孩子學習。情感與需求識別方面，AI +智能硬件能夠生成適合特定情緒或需求的內容，并根據(jù)孩子的情感生成個性化的語音對話，主動改善用戶的情緒狀態(tài)。

譚國豪認為，AIGC 正在引領智能硬件變革，AI 不再僅僅是被動監(jiān)測和響應，它將通過生成有意義的內容與用戶互動，推動智能硬件從工具轉向服務。

直播作為當下最熱門的行業(yè)之一，有沒有可能通過AI +智能硬件形式幫助從業(yè)者打破語言壁壘、創(chuàng)新交互玩法？蓮偶科技軟件部總裁楊旺在 RTE2024 IoT 論壇上展示的 L-Ring 2 就是一個很好的例子。

據(jù)介紹，手勢算法驅動、AI 能力算法賦能的最新空間戒指 L-Ring 2，是蓮偶科技在 AR 和硬件結合領域的一次探索。L-Ring 2不僅可以為直播場景提供精準的語音識別和實時的語言翻譯能力，未來還將結合聲紋模擬語音合成、情緒模擬、口型視頻合成等技術，讓直播翻譯更自然，更流暢。在交互玩法上， L-Ring 2可以通過手勢輕松交互，擺脫觸屏與手柄，提升用戶體驗。

不可否認的是，演示講座、大空間交互、實時操控、智駕操作、直播互動正在成為空間手勢實時交互的應用場景。楊旺也表示，未來手勢識別算法結合 AI+RTE ，將為直播平臺提供增強實時互動的融合解決方案。蓮偶科技作為一家深耕大空間科技領域的公司，將持續(xù)結合 RTE、空間算法、手勢識別算法、AI 大模型等技術，致力于實現(xiàn)現(xiàn)實與虛擬世界的無縫融合，為用戶提供更加沉浸式的互動體驗。

除了嬰兒看護、空間手勢交互這類產品之外，以VR / AR 為代表的 XR 技術近年來也出現(xiàn)了井噴式發(fā)展，并在各個行業(yè)得以廣泛應用。當 XR、AI 與物聯(lián)網整合在一起之后，又將發(fā)生怎樣的變化？

在現(xiàn)場，佐臻技術總監(jiān)徐偉恩重點介紹了佐臻推出的 AR 眼鏡。他指出，該款眼鏡可以打破時間和空間上的隔閡，增加人、物、空間和數(shù)位內容之間的連接，已經被應用在了智慧醫(yī)療、教育和智慧樓宇等場景中。除此之外，徐偉恩還分別介紹了包含 XR 展廳和展覽、沉浸式模擬、遠程協(xié)作、5G 直播在內的佐臻遠程多人協(xié)作方案。在多種應用場景中，專家端都可以透過實時互動技術在線協(xié)助現(xiàn)場端的問題，真正實現(xiàn)實時異地同工。

在徐偉恩看來，XR 不單只是一個技術，更是一個改變。它將 Gen AI 的潛力釋放到全新的境地，讓人們在虛擬和現(xiàn)實之間，更智能化的探索無限可能。兩者的結合在未來各種領域、產業(yè)發(fā)展帶來創(chuàng)新和改進、持續(xù)發(fā)揮無限潛力。

不得不承認，在 GenAI 的浪潮下，AIoT 時代正在快速到來。全新的時代，人機交互的形式會變、產品商業(yè)價值會變、盈利模式會變。但不變的是，聲網期待與各場景、各領域從業(yè)者一起共迎接新時代、擁抱新技術的初心。

       原文標題 : RTE2024 IoT 專場：全新人機交互方式提升智能硬件體驗