作為連接物、人和信息資源的智能系統(tǒng)，物聯(lián)網(wǎng)實(shí)現(xiàn)了對(duì)物理和虛擬世界信息的處理，伴隨著 5G 技術(shù)的成熟，物聯(lián)網(wǎng)正在快速發(fā)展并滲透到我們衣食住行的各個(gè)方面，給我們的生活帶來(lái)智能和便捷。
為了幫助更多開(kāi)發(fā)者朋友了解與智能物聯(lián)網(wǎng)有關(guān)的前沿技術(shù)干貨，4 月 23 日，以“智能物聯(lián)網(wǎng)”為主題的百度技術(shù)沙龍第 98 期再次如約而至。
本次，我們邀請(qǐng)到了百度智能云物聯(lián)網(wǎng)主任架構(gòu)師李樂(lè)丁、百度智能云物聯(lián)網(wǎng)高級(jí)產(chǎn)品經(jīng)理徐偉、百度智能云物聯(lián)網(wǎng)虛擬現(xiàn)實(shí)技術(shù)負(fù)責(zé)人柴學(xué)智以及百度智能云物聯(lián)網(wǎng)產(chǎn)品經(jīng)理杜凱，四位老師分別圍繞物聯(lián)網(wǎng)技術(shù)發(fā)表了主題分享。除此以外，百度智能邊緣高級(jí)開(kāi)發(fā)工程師趙鑫、百度高級(jí)研發(fā)工程師袁振坤以及百度智能云物聯(lián)網(wǎng)部資深研發(fā)工程師陳高飛，還結(jié)合實(shí)際產(chǎn)品帶領(lǐng)開(kāi)發(fā)者一同進(jìn)行實(shí)操演練。
智能物聯(lián)網(wǎng)的技術(shù)發(fā)展和應(yīng)用實(shí)踐
開(kāi)場(chǎng)時(shí)，百度智能云物聯(lián)網(wǎng)主任架構(gòu)師李樂(lè)丁首先分享了百度天工 AloT 平臺(tái)的應(yīng)用發(fā)展和實(shí)踐。同時(shí)介紹了天工 AIoT 平臺(tái)可提供完善易用的物聯(lián)網(wǎng)基礎(chǔ)設(shè)施，進(jìn)一步完善智能物聯(lián)網(wǎng)應(yīng)具備的三大特點(diǎn)，第一是連接萬(wàn)物，通過(guò)物聯(lián)網(wǎng)平臺(tái)跨越時(shí)空多維度，連接設(shè)備、數(shù)據(jù)與算力；第二是對(duì)話萬(wàn)物，提供領(lǐng)先的視覺(jué)、語(yǔ)音、數(shù)據(jù)等服務(wù)，賦予萬(wàn)物對(duì)話的能力；第三是智慧萬(wàn)物，基于前沿的 AI 技術(shù)及海量數(shù)據(jù)，打造行業(yè)智慧應(yīng)用，助力行業(yè)升級(jí)。
端邊云全面智能化的天工 AIoT 平臺(tái)，具有專(zhuān)業(yè)可靠的設(shè)備管理、數(shù)據(jù)管理、時(shí)空交互、視覺(jué)分析、語(yǔ)音語(yǔ)義理解能力，為企業(yè)提供完整價(jià)值鏈路。活動(dòng)中，樂(lè)丁老師分別從視覺(jué)智能、數(shù)據(jù)智能、語(yǔ)音語(yǔ)義智能三個(gè)角度解讀了天工 AIoT 平臺(tái)的核心技術(shù)。
視覺(jué)智能與百度視覺(jué)部門(mén)深度合作，提供了視覺(jué)一體終端設(shè)備、深度相機(jī)、巡檢機(jī)器人等一系列視覺(jué)中間件；數(shù)據(jù)智能可以幫助大家獲取各種數(shù)據(jù)分析模型，比如能源數(shù)據(jù)分析模型、設(shè)備分析模型、運(yùn)行數(shù)據(jù)分析模型以及技術(shù)優(yōu)化等，同時(shí)我們也提供創(chuàng)建新的模型訓(xùn)練平臺(tái)，可以將物聯(lián)網(wǎng)原始數(shù)據(jù)進(jìn)行整理和分析，獲取到一些高級(jí)策略；語(yǔ)音智能提供了鴻鵠的高級(jí)語(yǔ)音芯片，幫助我們直接構(gòu)建智能的終端設(shè)備?；谶@些中間件設(shè)備，我們?cè)诠?、電力、燃?xì)?、?yīng)急、工業(yè)、物流、園區(qū)、環(huán)保、醫(yī)療、家居等各場(chǎng)景中都提供了綜合的服務(wù)方案。
物聯(lián)網(wǎng)邊緣計(jì)算與視覺(jué)智能技術(shù)
主題分享
來(lái)自百度智能云的物聯(lián)網(wǎng)高級(jí)產(chǎn)品經(jīng)理徐偉，在開(kāi)場(chǎng)時(shí)引用了一組數(shù)據(jù)，據(jù)介紹，根據(jù)百度和波士頓咨詢的聯(lián)合調(diào)研可以看到：市場(chǎng)上定制化 AI 需求占比達(dá)到 86%；近三年來(lái)，百度 AI 開(kāi)放平臺(tái)定制化模型增長(zhǎng)超過(guò) 6 倍；同時(shí)，一份來(lái)自邊緣計(jì)算產(chǎn)業(yè)研究報(bào)告的數(shù)據(jù)顯示，物聯(lián)網(wǎng)數(shù)據(jù)在邊緣側(cè)處理占比達(dá)到 45%；AI 模型邊緣部署場(chǎng)景比例超過(guò) 50%。由此我們可以得出一個(gè)初步結(jié)論，定制化 AI 模型越來(lái)越多，同時(shí) AI 模型邊緣部署場(chǎng)景也屢創(chuàng)新高。
徐偉還針對(duì) AIoT 視覺(jué)智能整體技術(shù)架構(gòu)做了介紹，百度提供面向不同用戶的 AI 開(kāi)發(fā)平臺(tái)，EasyDL 是零門(mén)檻 AI 開(kāi)發(fā)平臺(tái)，平臺(tái)可以覆蓋圖像、視頻、文本、語(yǔ)音、OCR、結(jié)構(gòu)化數(shù)據(jù)、商品檢測(cè)等七大方向的數(shù)據(jù)來(lái)源，通過(guò)零代碼的交互方式，能夠產(chǎn)出可以部署在公有云、設(shè)備端 SDK、軟硬一體和本地服務(wù)器等多種不同方式下的靈活的部署包；BML 是面向算法工程師的全功能 AI 開(kāi)發(fā)平臺(tái)，提供了從數(shù)據(jù)采集、數(shù)據(jù)清洗、數(shù)據(jù)擴(kuò)充、數(shù)據(jù)標(biāo)注、模型構(gòu)建到模型管理、云端及離線推理服務(wù)管理等 AI 開(kāi)發(fā)過(guò)程的全生命周期管理功能。在完成模型開(kāi)發(fā)以后，百度提供的 EasyEdge 模型轉(zhuǎn)化工具可以讓云端模型適配邊緣異構(gòu)設(shè)備，最終通過(guò)百度天工 AIoT 智能邊緣平臺(tái)的應(yīng)用管理、應(yīng)用編排和應(yīng)用部署能力來(lái)打通視覺(jué)智能交付的最后一公里。
天工智能邊緣 AI 視頻推斷實(shí)戰(zhàn)演練
為了加深開(kāi)發(fā)者朋友們的體驗(yàn)，百度智能邊緣高級(jí)開(kāi)發(fā)工程師趙鑫現(xiàn)場(chǎng)帶領(lǐng)大家進(jìn)行了實(shí)戰(zhàn)演練。
在演練之前，他首先給我們假設(shè)了一個(gè)場(chǎng)景：如果需要把一個(gè)應(yīng)用部署到設(shè)備上，我們需要怎么做？常規(guī)來(lái)看，可以把應(yīng)用在設(shè)備上進(jìn)行安裝，如果應(yīng)用有更新需求，就重新進(jìn)行安裝、部署、更新以及啟動(dòng)。但如果是一個(gè)路邊的智能設(shè)備，我們不方便手動(dòng)地把應(yīng)用進(jìn)行復(fù)制，那我們需要考慮什么事呢？這時(shí)就需要引入一個(gè)云端和控制臺(tái)的概念，只需要把應(yīng)用提交到云端控制臺(tái)，控制臺(tái)發(fā)給后方的服務(wù)，服務(wù)于端上構(gòu)建一條連接，就可以實(shí)現(xiàn)應(yīng)用的遠(yuǎn)程下發(fā)。
這便是邊緣計(jì)算核心的工作流程：完成端上狀態(tài)的上報(bào)，以及云端遠(yuǎn)程應(yīng)用的下發(fā)、更新、部署能力。在介紹完邊緣計(jì)算的基礎(chǔ)概念以及基本模塊的使用方法后，趙鑫帶領(lǐng)開(kāi)發(fā)者朋友進(jìn)行了實(shí)操演練。
虛擬現(xiàn)實(shí)核心技術(shù)剖析與實(shí)踐
主題分享
百度智能云物聯(lián)網(wǎng)虛擬現(xiàn)實(shí)技術(shù)負(fù)責(zé)人柴學(xué)智通過(guò)虛擬現(xiàn)實(shí)技術(shù)發(fā)展史及趨勢(shì)、虛擬現(xiàn)實(shí)核心技術(shù)要素剖析及百度 VR 產(chǎn)品技術(shù)實(shí)踐三個(gè)部分介紹了虛擬現(xiàn)實(shí)技術(shù)。
虛擬現(xiàn)實(shí)產(chǎn)業(yè)的本質(zhì)是 VR 內(nèi)容的生產(chǎn)和消費(fèi)。基于此，虛擬現(xiàn)實(shí)的三大核心技術(shù)包括數(shù)據(jù)三維化、交互多人化以及渲染云端化。在這個(gè)業(yè)務(wù)模式下，柴學(xué)智還介紹了百度 VR 整體技術(shù)框架的三個(gè)顯著特點(diǎn)：首先是能力開(kāi)放，VR 整體技術(shù)架構(gòu)背靠百度智能云與百度大腦，在點(diǎn)直播、云 VR、多人互動(dòng)、三維重建、VR 編輯、內(nèi)容交互場(chǎng)景下，有著行業(yè)領(lǐng)先的技術(shù)積累；其次是平臺(tái)通用，我們夯實(shí)了 VR 內(nèi)容平臺(tái)的全平臺(tái)屬性，讓 VR 內(nèi)容的生產(chǎn)更加便利高效，讓 VR 內(nèi)容的消費(fèi)通路更加順暢；最后是場(chǎng)景豐富，依靠豐富的產(chǎn)品矩陣和深厚的技術(shù)沉淀，百度 VR 團(tuán)隊(duì)在教育、營(yíng)銷(xiāo)、政企、工業(yè)等諸多方向，為電商、廣告、會(huì)展、黨建等場(chǎng)景擴(kuò)展了新的價(jià)值與用戶體驗(yàn)。
百度 VR Suite（VR 開(kāi)發(fā)者套件）實(shí)戰(zhàn)
在全面地了解百度 VR 技術(shù)以后，來(lái)自百度的高級(jí)研發(fā)工程師袁振坤又結(jié)合實(shí)操演練，為開(kāi)發(fā)者們深入介紹了百度 VR Suite 在虛擬現(xiàn)實(shí)領(lǐng)域的技術(shù)生態(tài)以及它的實(shí)現(xiàn)和應(yīng)用實(shí)踐。
據(jù)他介紹，百度 VR Suite 是百度 VR 核心的技術(shù)套件，是一種渲染與展示 VR 內(nèi)容的技術(shù) SDK；可以渲染 3D 環(huán)物、3D 模型、全景圖、全景視頻、景深漫游等多種品類(lèi)，應(yīng)用于 VR 電商、VR 看房、VR 看車(chē)等多個(gè)領(lǐng)域，解決跨平臺(tái)支持、多品類(lèi)渲染的難點(diǎn)，助力開(kāi)發(fā)者實(shí)現(xiàn)全平臺(tái)、全內(nèi)容、高性能地展示與管理 VR 內(nèi)容。
鴻鵠芯片及語(yǔ)音語(yǔ)義一體化
主題分享
百度智能云物聯(lián)網(wǎng)產(chǎn)品經(jīng)理杜凱介紹了度家語(yǔ)音語(yǔ)義平臺(tái)架構(gòu)采用了端到端的設(shè)計(jì)分為鴻鵠芯片、語(yǔ)音技術(shù)以及語(yǔ)義解析三部分，同時(shí)，度家平臺(tái)也會(huì)接入百度天工 AIoT 平臺(tái)進(jìn)行設(shè)備管理和數(shù)據(jù)處理。
在硬件方面，鴻鵠語(yǔ)音芯片是專(zhuān)門(mén)為智能家居和車(chē)載語(yǔ)音交互場(chǎng)景設(shè)計(jì)的遠(yuǎn)場(chǎng)語(yǔ)音交互芯片，具有遠(yuǎn)場(chǎng)陣列信號(hào)實(shí)時(shí)處理、高精度超低誤報(bào)語(yǔ)音喚醒、離線語(yǔ)音識(shí)別、低功耗等核心能力；在產(chǎn)品方案設(shè)計(jì)方面，它可以支持安卓、Linux 系統(tǒng)等不同平臺(tái)；在語(yǔ)義能力方面，度家語(yǔ)音語(yǔ)義平臺(tái)除了可以提供智能問(wèn)答、天氣、笑話、翻譯等功能，還特別針對(duì)控制類(lèi)需求設(shè)計(jì)開(kāi)發(fā)了一套物模型的產(chǎn)品。
實(shí)戰(zhàn)演練
學(xué)習(xí)了理論知識(shí)，百度智能云物聯(lián)網(wǎng)部資深研發(fā)工程師陳高飛，基于鴻鵠芯片帶領(lǐng)開(kāi)發(fā)者朋友做了一個(gè)實(shí)戰(zhàn)演練。用戶通過(guò)購(gòu)買(mǎi)度家語(yǔ)音語(yǔ)義一體化服務(wù)以及鴻鵠芯片開(kāi)發(fā)板后，便可跟隨實(shí)戰(zhàn)演練的步驟，感受端云一體化的演示實(shí)例。
