1994年，滾石樂(lè)隊(duì)首次決定對(duì)他們的演唱會(huì)進(jìn)行網(wǎng)絡(luò)直播，在滾石登場(chǎng)前的半小時(shí)，處在不同城市的Severe Tire Damage(STD)樂(lè)隊(duì)似乎是作為暖場(chǎng)嘉賓出現(xiàn)的，他們表演了20分鐘，并且完成了很好的直播音畫效果，自此被記錄為世界上第一支現(xiàn)場(chǎng)音樂(lè)流，有關(guān)實(shí)時(shí)音視頻技術(shù)的迭代與商業(yè)應(yīng)用自此開(kāi)啟。

如今隨著物聯(lián)網(wǎng)帶來(lái)巨大產(chǎn)業(yè)機(jī)遇，實(shí)時(shí)音視頻在解決“人與硬件設(shè)備”交流溝通方面同樣持續(xù)獲得成果，不同種類的音視頻智能硬件滲透到了人們生活的方方面面，并且它們?nèi)栽诟碌瑫r(shí)刻刷新智能時(shí)代的產(chǎn)業(yè)面貌。

10月24-25日，RTE2023第九屆實(shí)時(shí)互聯(lián)網(wǎng)大會(huì)在北京隆重召開(kāi)，其中25日上午舉行的IoT專場(chǎng)以「RTC+IoT構(gòu)建萬(wàn)物互聯(lián)互動(dòng)底座」為主題，邀請(qǐng)了中國(guó)信通院汽車云工作組組長(zhǎng)馬龍飛、聲網(wǎng)IoT行業(yè)產(chǎn)品總監(jiān)馮曉東、賦之大產(chǎn)品線與業(yè)務(wù)負(fù)責(zé)人夏大偉、移遠(yuǎn)通信云產(chǎn)品部高級(jí)產(chǎn)品經(jīng)理方飛、聲網(wǎng)平行操控技術(shù)負(fù)責(zé)人張樂(lè)陶、低速無(wú)人駕駛聯(lián)盟秘書長(zhǎng)李進(jìn)科、馭勢(shì)戰(zhàn)略產(chǎn)品部負(fù)責(zé)人蔡堯、九號(hào)機(jī)器人自動(dòng)駕駛與AI產(chǎn)品線負(fù)責(zé)人胡哲華等行業(yè)大咖出席并參與分享，分享主題涵蓋消費(fèi)端智能家居、產(chǎn)業(yè)端平行操控兩大領(lǐng)域，全面展現(xiàn)RTC與IoT融合的價(jià)值與魅力。

智能家居下半場(chǎng) 進(jìn)入真互動(dòng)時(shí)代

隨著各類型的音視頻硬件設(shè)備充斥生活，聲網(wǎng)IoT行業(yè)產(chǎn)品總監(jiān)馮曉東表示智能硬件已進(jìn)入真互動(dòng)時(shí)代。在“人與物”的互動(dòng)形式基礎(chǔ)上，人們對(duì)互動(dòng)體驗(yàn)的要求變得更加豐富、更加細(xì)致，比如期待能隨時(shí)隨地、遠(yuǎn)距離、多角度、多人完成互動(dòng);比如希望感受更低的延遲、更高清的畫面、更高保真/立體的聲音。

在用戶需求升級(jí)的推動(dòng)下，智能家居場(chǎng)景的設(shè)備也呈現(xiàn)出普遍的進(jìn)化方向，即通過(guò)增加攝像頭和屏幕來(lái)加強(qiáng)實(shí)時(shí)互動(dòng)，最典型的是帶貓眼和屏幕的智能門鎖廣受歡迎，其他品類如智能手表、智能音箱、智能寵物喂食器等也都有增加攝像頭或屏幕的新品推向市場(chǎng)。

馮曉東介紹，過(guò)去硬件本身的性能可能決定了用戶體驗(yàn)的上限，但聲網(wǎng)的IoT解決方案通過(guò)軟件算法打破硬件上限，在不增加硬件成本的情況下，通過(guò)客戶端的視頻增強(qiáng)方式，基于深度學(xué)習(xí)的自研超分算法，可以支持1.5倍、2倍、3倍的移動(dòng)端實(shí)時(shí)超分，幫助硬件從360P增加到720P，提升畫質(zhì)清晰度。

不僅如此，聲網(wǎng)的多項(xiàng)音視頻黑科技不斷刷新用戶互動(dòng)體驗(yàn)天花板，有專為實(shí)時(shí)互動(dòng)打造的自研高清語(yǔ)音引擎、視頻增強(qiáng)策略、實(shí)時(shí)美聲算法、AI降噪和回聲消除能力等技術(shù)，讓用戶擁有更高保真、更趣味、更高清畫質(zhì)的音視頻體驗(yàn)。

在門鈴門鎖場(chǎng)景，聲網(wǎng)聯(lián)合信通院泰爾實(shí)驗(yàn)室聯(lián)合發(fā)布門鈴門鎖新標(biāo)準(zhǔn)，為品牌廠商提供了從定義體驗(yàn)指標(biāo)到測(cè)試體驗(yàn)指標(biāo)的參考依據(jù)。

此外，聲網(wǎng)的IoT解決方案擁有顯著的跨平臺(tái)互聯(lián)互通能力，包括對(duì)Linux、Android、Harmony、FreeRTOS、AliOS、LiteOS等各類型操作系統(tǒng)都完成了深度適配，以及支持與Native、Web、小程序、Amazon Alexa、Google Assistant的互通。

用實(shí)時(shí)互動(dòng)硬件設(shè)備 增強(qiáng)家庭情感連接

賦之科技選擇切入家庭機(jī)器人賽道也是因?yàn)闀r(shí)下技術(shù)、需求和場(chǎng)景的推動(dòng)。

在這之中，由于全球范圍內(nèi)寵物數(shù)量上升及整體消費(fèi)能力升級(jí)，賦之科技首先推出寵物守護(hù)機(jī)器人，目前憑EBO Air、EBO SE兩款成熟產(chǎn)品在全球獲得35萬(wàn)用戶，其中近80% 的用戶為寵物主，剩余部分用戶使用該類產(chǎn)品滿足輕安防需求。

另外，賦之科技也計(jì)劃把家庭機(jī)器人的服務(wù)場(chǎng)景擴(kuò)大到所有成員，因此推出了EBO X 綜合型家庭服務(wù)機(jī)器人，用戶包括老人、兒童、寵物等。

EBO X的功能包括三大類：1)安全守護(hù)，支持老人跌倒提醒、嬰兒/兒童哭聲&呼救聲提醒、特定區(qū)域闖入提醒、定點(diǎn)&移動(dòng)巡航安防;2)溫暖陪伴，支持遠(yuǎn)程雙向?qū)崟r(shí)通訊、多人共享登錄、私人智能助理、寵物陪玩;3)娛樂(lè)酷玩，支持哈曼音質(zhì)、豐富燈效、海量互聯(lián)網(wǎng)內(nèi)容服務(wù)等。賦之大產(chǎn)品線與業(yè)務(wù)負(fù)責(zé)人夏大偉表示：“在涉及產(chǎn)品音視頻通話能力方面，聲網(wǎng)為賦之科技提供了重要的經(jīng)驗(yàn)分享和技術(shù)支撐。”

IoT+RTC 完整解決方案將推動(dòng)產(chǎn)業(yè)升級(jí)

在智能硬件誕生的過(guò)程中，為設(shè)備獲取通信能力都是必要的。此次大會(huì)上，移遠(yuǎn)通信云產(chǎn)品部高級(jí)產(chǎn)品經(jīng)理方飛介紹了移遠(yuǎn)通信智能模組產(chǎn)品已經(jīng)滲透到大多數(shù)智能硬件和智能設(shè)備中，并同時(shí)為客戶提供開(kāi)發(fā)者中心(IoTHub)、APP、SaaS垂直行業(yè)應(yīng)用解決方案等一系列軟件服務(wù)，全方位幫助智能硬件快速升級(jí)。

此外，方飛以移遠(yuǎn)通信低功耗可視門鎖解決方案為例，表示智能硬件的完整功能構(gòu)建需要IoT技術(shù)和RTC技術(shù)的互相融合。方飛表示，該門鎖解決方案支持可視對(duì)講、遠(yuǎn)程開(kāi)門、異常告警、低功耗、設(shè)備分享、設(shè)備管理、設(shè)備OTA、云存儲(chǔ)等，既需要移遠(yuǎn)模組及移遠(yuǎn)IoT基座能力，也需要聲網(wǎng)專業(yè)的全場(chǎng)景實(shí)時(shí)音視頻互動(dòng)能力。

應(yīng)用在家居安防、戶外監(jiān)控、在崗門衛(wèi)、商超看店、梯控對(duì)講等其他場(chǎng)景，IoT結(jié)合RTC都將為智能硬件創(chuàng)造新的功能和體驗(yàn)，IoT+RTC的融合范圍實(shí)則非常廣泛。

方飛形容：“如果我們把整個(gè)數(shù)字世界比作一個(gè)人，IoT是屬于人的感官和認(rèn)知，它去感知并連接物理世界;RTC就是關(guān)鍵環(huán)節(jié)中的血脈和神經(jīng)，通過(guò)實(shí)時(shí)高密度的媒體數(shù)據(jù)來(lái)連接人和物理世界。”

RTC結(jié)合智能網(wǎng)聯(lián)汽車 以標(biāo)準(zhǔn)規(guī)范產(chǎn)業(yè)發(fā)展

除了智能家居場(chǎng)景，本場(chǎng)大會(huì)的另一主題場(chǎng)景是平行操控。在提及與“車”相關(guān)的話題時(shí)，中國(guó)信通院汽車云工作組組長(zhǎng)馬龍飛表示汽車工業(yè)正在經(jīng)歷新四化變革(電氣化、智能化、網(wǎng)聯(lián)化、共享化)，隨著自動(dòng)駕駛技術(shù)的不斷發(fā)展以及云計(jì)算、5G等通信技術(shù)的廣泛應(yīng)用，智能網(wǎng)聯(lián)汽車已經(jīng)成為汽車行業(yè)的重要發(fā)展趨勢(shì)。隨著智能網(wǎng)聯(lián)汽車行業(yè)的快速發(fā)展，汽車云上遠(yuǎn)程運(yùn)維能力的需求日益凸顯，各種遠(yuǎn)程運(yùn)維平臺(tái)如雨后春筍般涌現(xiàn)，但由于行業(yè)內(nèi)缺乏統(tǒng)一的標(biāo)準(zhǔn)，導(dǎo)致行業(yè)內(nèi)大部分平臺(tái)在技術(shù)、能力上存在較大差異，進(jìn)而各大車廠遠(yuǎn)程運(yùn)維能力參差不齊，其安全性和可靠性也難以保障。

在此背景下，由信通院牽頭，聯(lián)合頭部整車廠、軟件開(kāi)發(fā)商、解決方案商、學(xué)術(shù)產(chǎn)業(yè)共同參與的《智能網(wǎng)聯(lián)汽車遠(yuǎn)程運(yùn)維能力總體要求》公開(kāi)面世，《要求》分為功能性和保障性兩大部分，其中功能性的包括車輛監(jiān)測(cè)、遠(yuǎn)程排障遠(yuǎn)程干能預(yù)三項(xiàng)能力，保障性的包括平臺(tái)管理和安全管理兩項(xiàng)能力。

功能性能力要求主要關(guān)注遠(yuǎn)程運(yùn)維平臺(tái)直接服務(wù)于終端用戶的能力，包括讓用戶“隨時(shí)可看”的車輛監(jiān)測(cè)能力、讓用戶在“運(yùn)營(yíng)結(jié)束后可管”的遠(yuǎn)程排障能力和在“運(yùn)營(yíng)過(guò)程中可控”的遠(yuǎn)程干預(yù)能力。

保障性能力要求則主要關(guān)注如何保障上述功能性能力可以在終端用戶的基礎(chǔ)設(shè)施中被安全地和可靠地使用，包括支撐運(yùn)維服務(wù)運(yùn)轉(zhuǎn)的平臺(tái)基礎(chǔ)系統(tǒng)能力，保障運(yùn)維功能模塊可靠高效運(yùn)行的平臺(tái)管理能力，以及確保運(yùn)維過(guò)程和數(shù)據(jù)安全的安全管理能力。

馬龍飛進(jìn)一步表示，聲網(wǎng)在遠(yuǎn)程駕駛車輛的功能和分級(jí)指標(biāo)等方面為《要求》做出了貢獻(xiàn)，主要有：1)通過(guò)回傳視頻查看現(xiàn)場(chǎng)實(shí)時(shí)畫面，并通過(guò)信令通道對(duì)車輛進(jìn)行遠(yuǎn)程控制，以實(shí)現(xiàn)遠(yuǎn)程駕駛車輛的功能;2)建立3級(jí)指標(biāo)，根據(jù)在弱網(wǎng)、延遲、卡頓率、畫質(zhì)、車速、指令延時(shí)等不同范圍，提供標(biāo)準(zhǔn)支持。

超低延時(shí)助力平行操控極致體驗(yàn)

在現(xiàn)場(chǎng)，聲網(wǎng)平行操控技術(shù)負(fù)責(zé)人張樂(lè)陶從低延時(shí)的技術(shù)層面，全方面講述了平行操控的意義、應(yīng)用場(chǎng)景與創(chuàng)新方案。

平行操控，指遠(yuǎn)程操控，通過(guò)超低延時(shí)視頻傳輸技術(shù)結(jié)合實(shí)時(shí)信令技術(shù)，遠(yuǎn)程操控遠(yuǎn)端的無(wú)人車或者機(jī)械設(shè)備,使用戶突破距離限制，可以操作幾百甚至上千公里外的設(shè)備。

目前，平行操控的應(yīng)用場(chǎng)景集中在機(jī)場(chǎng)、港口、物流配送等應(yīng)急接管場(chǎng)景;礦區(qū)、化工等高危/惡劣環(huán)境場(chǎng)景;以及云賽車、無(wú)人機(jī)、機(jī)器人操控等遠(yuǎn)程服務(wù)場(chǎng)景。運(yùn)維形式基本是機(jī)器替代人在當(dāng)時(shí)場(chǎng)景下高可靠、高穩(wěn)定地完成部分或全部作業(yè)。

聲網(wǎng)平行操控技術(shù)負(fù)責(zé)人張樂(lè)陶介紹，網(wǎng)絡(luò)的差異性和多樣化給遠(yuǎn)程駕駛和操控帶了很大的挑戰(zhàn)，為保證車輛的安全運(yùn)行，業(yè)務(wù)場(chǎng)景對(duì)音視頻的延時(shí)需求較高。對(duì)此聲網(wǎng)的平行操控解決方案給出了端到端的全鏈路延時(shí)優(yōu)化方案，涵蓋了設(shè)備端的深度適配、底層傳輸大網(wǎng)、操控端多端支持等全套解決方案。

在設(shè)備端，深度適配了Nvidia Jetson生態(tài)，提供從采集、編碼到傳輸全套功能，支持車規(guī)級(jí)GMSL攝像頭的采集，支持超低延時(shí)信令。在操控端，基于Native深度優(yōu)化，提供主流終端平臺(tái)的SDK。而依靠聲網(wǎng)自研的SD-RTN傳輸大網(wǎng)，能實(shí)現(xiàn)全球端到端延時(shí)中位數(shù)76ms，能高質(zhì)量保障遠(yuǎn)程操控過(guò)程中車輛畫面的低延時(shí)傳輸。此外，該解決方案提供云端錄制服務(wù)，支持記錄用戶每次遠(yuǎn)程遙控的全過(guò)程并提供回看。在部署形式上，方案支持公網(wǎng)和私有化部署兩種類型。

“聲網(wǎng)的平行操控方案，在大量實(shí)際常規(guī)場(chǎng)景下的性能表現(xiàn)為：在4G路測(cè)弱網(wǎng)環(huán)境，視頻端到端延時(shí)低至100ms，95分位數(shù)為180ms，充分滿足脫困場(chǎng)景下延時(shí)不能高于200毫秒的行業(yè)要求。”張樂(lè)陶介紹。

圓桌會(huì)議：平行操控如何助力無(wú)人車體驗(yàn)升級(jí)?

大會(huì)最后的圓桌環(huán)節(jié)由低速無(wú)人駕駛聯(lián)盟秘書長(zhǎng)李進(jìn)科擔(dān)任主持，中國(guó)信通信院汽車云工作組組長(zhǎng)馬龍飛、聲網(wǎng)IoT行業(yè)產(chǎn)品總監(jiān)馮曉東、馭勢(shì)戰(zhàn)略產(chǎn)品部負(fù)責(zé)人蔡堯、九號(hào)機(jī)器人自動(dòng)駕駛與AI產(chǎn)品線負(fù)責(zé)人胡哲華作為嘉賓分享了一系列前沿觀點(diǎn)和實(shí)踐經(jīng)驗(yàn)。

馮曉東：“從我們的角度來(lái)看，目前無(wú)人車體驗(yàn)上最關(guān)注兩點(diǎn)要求，一是盡可能低時(shí)延獲取實(shí)時(shí)畫面，二是在弱網(wǎng)情況下也能做到實(shí)時(shí)傳輸。”

蔡堯：“在技術(shù)商業(yè)化過(guò)程中，除了平行駕駛技術(shù)和網(wǎng)絡(luò)條件，實(shí)際可能還會(huì)引入更多策略。比如在極端網(wǎng)絡(luò)條件下，系統(tǒng)有意識(shí)選擇特定的攝像頭進(jìn)行監(jiān)控，關(guān)閉其他短時(shí)非必要的視頻流來(lái)減少帶寬;又比如在車端增加基礎(chǔ)的感知和邊緣計(jì)算能力，確保在網(wǎng)絡(luò)失效情況下也能保證基礎(chǔ)安全。”

馬龍飛：“無(wú)人駕駛場(chǎng)景的落地首先是涉及到數(shù)據(jù)采集，目前行業(yè)內(nèi)標(biāo)準(zhǔn)化的動(dòng)作和政策指導(dǎo)還不是特別完備，還需要做更好的分級(jí)規(guī)范。”

胡哲華：“無(wú)人車一定需要根據(jù)當(dāng)?shù)丨h(huán)境做很多本地化的工作，無(wú)論是氣候溫度、網(wǎng)絡(luò)基礎(chǔ)設(shè)施條件、社會(huì)穩(wěn)定狀況等，都可能會(huì)對(duì)無(wú)人車的運(yùn)行效果產(chǎn)生影響。”

（免責(zé)聲明：本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說(shuō)明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。 ）