6月27日，以“AI達(dá)百業(yè)，視之所向”為主題的2024 ECDC螢石云開(kāi)發(fā)者大會(huì)在杭州舉辦。十一年錘煉，螢石成長(zhǎng)為了全球領(lǐng)先的視覺(jué)物聯(lián)網(wǎng)云平臺(tái)，實(shí)現(xiàn)從視頻到視覺(jué)的躍進(jìn)，并通過(guò)構(gòu)建多數(shù)據(jù)中心+就近服務(wù)點(diǎn)的方式服務(wù)于全球客戶(hù)。截至2023年底，螢石云平臺(tái)已擁有超過(guò)31萬(wàn)名開(kāi)發(fā)者客戶(hù)，場(chǎng)景涵蓋了零售連鎖、畜牧養(yǎng)殖、教育教學(xué)等音視頻應(yīng)用普及的千行百業(yè)。

專(zhuān)注于音視頻場(chǎng)景應(yīng)用探索的螢石，在本次大會(huì)上呈現(xiàn)了智慧物聯(lián)與視覺(jué)云的最新動(dòng)向，揭曉了垂直大模型在家庭及商業(yè)服務(wù)中的價(jià)值體現(xiàn)，助力開(kāi)發(fā)者解鎖更多AI應(yīng)用場(chǎng)景。同時(shí)，全棧開(kāi)放的螢石云服務(wù)也迎來(lái)了前沿技術(shù)的引領(lǐng)升級(jí)，螢石對(duì)PaaS平臺(tái)的新組件和新工具進(jìn)行了場(chǎng)景化更新，引入大模型能力，持續(xù)構(gòu)筑視覺(jué)云平臺(tái)的行業(yè)領(lǐng)先地位。

1、攜手ISV客戶(hù)，迎接AI新時(shí)代

現(xiàn)實(shí)世界的每一分每一秒都在發(fā)生著海量的信息交換，在龐大的信息數(shù)據(jù)中，音視頻內(nèi)容具備更全面的通信要素，成為現(xiàn)代社會(huì)各類(lèi)場(chǎng)景使用的重要信息載體。含“信息”量更高的音視頻數(shù)據(jù)，也在更廣泛的行業(yè)獲得了應(yīng)用。

螢石網(wǎng)絡(luò)政企業(yè)務(wù)部總經(jīng)理薄法強(qiáng)先生首先帶來(lái)了“攜手ISV客戶(hù)，迎接AI新時(shí)代”的主題演講。音視頻應(yīng)用行業(yè)覆蓋廣，開(kāi)發(fā)潛力大，螢石云整體業(yè)績(jī)穩(wěn)健增長(zhǎng)，在智能家居、連鎖商貿(mào)、智慧工地與透明家裝、醫(yī)療養(yǎng)老、娛樂(lè)競(jìng)技等諸多領(lǐng)域均擁有優(yōu)秀的開(kāi)發(fā)者合作伙伴，共同落地了豐富的視覺(jué)應(yīng)用。2024年，螢石云升級(jí)為全球領(lǐng)先的視覺(jué)物聯(lián)網(wǎng)云平臺(tái)，立足雙主業(yè)聚”視”向前行。

聚焦音視頻領(lǐng)域，同時(shí)與千行百業(yè)開(kāi)發(fā)者共同深入場(chǎng)景的螢石云業(yè)務(wù)，正在通過(guò)行業(yè)需求的不斷錘煉，迭代平臺(tái)開(kāi)發(fā)能力。有音視頻技術(shù)覆蓋的地方，必然催生通過(guò)音視頻帶來(lái)管理效率提升亦或是業(yè)務(wù)方案創(chuàng)新的需求，AI技術(shù)正在成為螢石過(guò)去沉淀驗(yàn)證的海量基礎(chǔ)能力的催化劑，讓開(kāi)發(fā)者與行業(yè)客戶(hù)看到了不同行業(yè)前行的新路標(biāo)。

2、螢石藍(lán)海大模型：自研垂直物聯(lián)場(chǎng)景的具身智能大模型

螢石在音視頻領(lǐng)域持續(xù)引領(lǐng)，以云服務(wù)為依托，驅(qū)動(dòng)智能家居行業(yè)以及以零售連鎖為代表的更多行業(yè)實(shí)現(xiàn)視覺(jué)智能應(yīng)用升級(jí)，幫助企業(yè)客戶(hù)進(jìn)一步降本增效。對(duì)于大模型的場(chǎng)景化應(yīng)用，智慧物聯(lián)和視覺(jué)能力見(jiàn)長(zhǎng)的螢石，有了新的解讀。

螢石智能算法總經(jīng)理程戰(zhàn)戰(zhàn)分享了螢石的AI技術(shù)策略，螢石聚焦于空間級(jí)的具身智能，螢石的AI是與物理世界交互的具身AI。程博士指出，通用的大模型技術(shù)屬于互聯(lián)網(wǎng)大模型，天生缺少與設(shè)備的交互，不具備具身記憶，端云協(xié)同能力也存在明顯短板。為此，螢石自主研發(fā)了面向物聯(lián)網(wǎng)場(chǎng)景的“藍(lán)海大模型”。藍(lán)海寓意為地球上的生命最初誕生在藍(lán)色的海洋中，進(jìn)而催生出不同智能等級(jí)的物種，螢石期待在高度復(fù)雜的物聯(lián)數(shù)據(jù)海洋中，藍(lán)海大模型能夠奔向通用人工智能。

螢石藍(lán)海大模型是面向物聯(lián)場(chǎng)景的具身智能大模型，具備開(kāi)發(fā)開(kāi)放、基礎(chǔ)交互及具身代理三大體系化AI能力，覆蓋從設(shè)備感知到設(shè)備執(zhí)行全鏈路，接入的設(shè)備多種多樣，能夠感知世界空間信息，處理多模態(tài)數(shù)據(jù)，進(jìn)行精確識(shí)別與理解，最終規(guī)劃指導(dǎo)設(shè)備做出響應(yīng)。

螢石積累的海量AI能力，除了應(yīng)用在自身智能家居行業(yè)，也將進(jìn)一步開(kāi)放給行業(yè)開(kāi)發(fā)者，如對(duì)于原子算法，螢石提供了29大類(lèi)，93子類(lèi)的能力，這些算法是AI開(kāi)發(fā)者“行走江湖”或“居家必備”的基礎(chǔ)能力，覆蓋從基礎(chǔ)的數(shù)據(jù)治理工具到模型部署等AI工具，可以直接進(jìn)行調(diào)用與使用。

螢石提供的端云協(xié)同算法能力，包含了73種基礎(chǔ)感知算法，覆蓋文本、音頻、圖像及視頻，如人臉識(shí)別、人形檢測(cè)、OCR等，可以被直接調(diào)用與使用，供開(kāi)發(fā)者做出對(duì)應(yīng)的AI解決方案。

而對(duì)于交互或生成式類(lèi)算法，螢石也提供了26種能力，覆蓋語(yǔ)言交互、圖像生成、多模態(tài)交互，及多種具身代理服務(wù)。螢石深知AI技術(shù)應(yīng)用也可能伴隨風(fēng)險(xiǎn)，十分注重AI技術(shù)研發(fā)與應(yīng)用過(guò)程中的安全防控，這也是螢石的強(qiáng)項(xiàng)，螢石正在依照法律法規(guī)要求履行相關(guān)算法的安全測(cè)評(píng)、備案等手續(xù)。

3、螢石HomePlay OS：以AI為核心的新一代架構(gòu)

大模型帶來(lái)了準(zhǔn)確率的提升，可以應(yīng)對(duì)更復(fù)雜的任務(wù)，但也讓企業(yè)面臨新的挑戰(zhàn)，如AI應(yīng)用開(kāi)發(fā)變得復(fù)雜，運(yùn)行大模型帶來(lái)的巨大的成本支出。

為此，螢石云系統(tǒng)架構(gòu)負(fù)責(zé)人明旭提出了以AI為核心的新一代架構(gòu)—螢石HomePlay OS，一個(gè)圍繞人、家、商業(yè)，以提升用戶(hù)的生活及工作體驗(yàn)為目的，通過(guò)提供智能代理及以視覺(jué)為主的AI能力，讓開(kāi)發(fā)者可以快速、靈活、低成本的方式開(kāi)發(fā)自身智能場(chǎng)景或應(yīng)用的平臺(tái)。

HomePlay OS—“Home”意指圍繞人、家、商業(yè)，“Play”則代表提升用戶(hù)的生活及工作體驗(yàn)，通過(guò)提供智能代理的方式釋放人的生產(chǎn)力，將人從相對(duì)繁瑣、沒(méi)有樂(lè)趣的事務(wù)中解放出來(lái)?！癘S”表示螢石并不希望所有業(yè)務(wù)都由自身完成，而是將這些能力開(kāi)放給開(kāi)發(fā)者，建立與開(kāi)發(fā)者共同完成的使命。

螢石HomePlay OS 具備AI核心、代理封裝、云邊協(xié)同、隱私保護(hù)、全面開(kāi)放等五大特性。展開(kāi)來(lái)說(shuō)，基于HomePlay OS不僅可以有效實(shí)現(xiàn)以AI為核心的感知、計(jì)算和執(zhí)行，還能將大模型與服務(wù)、工具緊密融合實(shí)現(xiàn)代理封裝，解決開(kāi)發(fā)者大模型應(yīng)用門(mén)檻的問(wèn)題。另外，HomePlay OS基于有效的端云協(xié)同，可靈活分配端和云的算力實(shí)現(xiàn)成本最優(yōu)化，該架構(gòu)還保持了計(jì)算資源、模型、模型組合、代理等多層的全棧開(kāi)放性。注重?cái)?shù)據(jù)安全與隱私保護(hù)一直都是螢石的主張，在HomePlay OS架構(gòu)的演進(jìn)過(guò)程中，螢石采用了用戶(hù)控制下的端到端內(nèi)容加密，盡可能采用邊緣計(jì)算或近場(chǎng)去隱私化的計(jì)算方式。

通過(guò)HomePlay OS的創(chuàng)新實(shí)踐，螢石正積極探索大模型時(shí)代下企業(yè)如何更好地定位自身在AI戰(zhàn)略中的角色。一方面，螢石敏銳地洞察到大模型給企業(yè)帶來(lái)的新挑戰(zhàn)，另一方面，又提出了切實(shí)可行的架構(gòu)解決方案，致力于讓開(kāi)發(fā)者更加高效、低成本地開(kāi)發(fā)AI應(yīng)用，并保障用戶(hù)隱私安全。這既體現(xiàn)了螢石對(duì)行業(yè)發(fā)展趨勢(shì)的前瞻性思考，也凸顯了其作為行業(yè)技術(shù)引領(lǐng)者的責(zé)任擔(dān)當(dāng)。

4、螢石開(kāi)放平臺(tái)：視覺(jué)云推動(dòng)AI場(chǎng)景化應(yīng)用躍升

作為一個(gè)全面開(kāi)放的物聯(lián)平臺(tái)，螢石開(kāi)放平臺(tái)不僅為設(shè)備制造商提供南向的云接入能力，還為行業(yè)開(kāi)發(fā)者提供基于云的音視頻和AI能力，以輔助開(kāi)發(fā)者打造個(gè)性化的行業(yè)解決方案。截至目前，螢石開(kāi)放平臺(tái)已累計(jì)發(fā)布了超過(guò)1000個(gè)開(kāi)放接口，涵蓋接入、直播、通話(huà)、存儲(chǔ)、AI、信令和用戶(hù)連接7個(gè)類(lèi)別，31組原子能力，以及20多款aPaaS低代碼組件，為海量開(kāi)發(fā)者提供了有力的技術(shù)支撐。

螢石開(kāi)放平臺(tái)是螢石與開(kāi)發(fā)者攜手深入行業(yè)的前沿陣地，每時(shí)每刻，開(kāi)發(fā)者都在螢石云上調(diào)用能力，并據(jù)此不斷完善適用于各行各業(yè)的解決方案。螢石開(kāi)放平臺(tái)產(chǎn)品負(fù)責(zé)人邵佩先生表示，2024年螢石開(kāi)放平臺(tái)依舊持續(xù)往開(kāi)放化、智能化、場(chǎng)景化方向發(fā)展。

以當(dāng)下火熱的自助消費(fèi)場(chǎng)景為例，螢石云服務(wù)能力及大模型技術(shù)，將為行業(yè)智能化變革帶來(lái)新的思路。如自助臺(tái)球室，正在追求低人工投入成本，全智能化控制，24小時(shí)不間斷營(yíng)業(yè)的運(yùn)營(yíng)策略，要實(shí)現(xiàn)這樣的物聯(lián)系統(tǒng)，需要具備三個(gè)關(guān)鍵能力：遠(yuǎn)程化的巡檢能力，能夠及時(shí)響應(yīng)的連線服務(wù)能力，以及低成本的運(yùn)維能力。

為滿(mǎn)足這些需求，螢石推出了更優(yōu)的開(kāi)發(fā)者集成方案，包括智能視覺(jué)巡檢組件、智能視頻客服組件，以及遠(yuǎn)程排障專(zhuān)家工具，幫助企業(yè)快速升級(jí)智能化能力，保障項(xiàng)目盡快上線。

新組件的應(yīng)用，為開(kāi)發(fā)者呈現(xiàn)了完善的音視頻開(kāi)發(fā)服務(wù)。其中，結(jié)合螢石藍(lán)海大模型升級(jí)的智能視覺(jué)巡檢組件適用于自助門(mén)店、收銀防飛單、餐飲規(guī)范治理和無(wú)人服務(wù)防糾紛等各種行業(yè)的遠(yuǎn)程巡檢場(chǎng)景。智能視頻客服組件主要用于提供遠(yuǎn)程視頻連線服務(wù)，提供了數(shù)字分身復(fù)刻能力，融合螢石藍(lán)海大模型，可以實(shí)現(xiàn)全天候的音視頻連線服務(wù)，幫助開(kāi)發(fā)者打造專(zhuān)屬的個(gè)性化智能服務(wù)，目前已在零售、銀行、醫(yī)院、景區(qū)等自助化場(chǎng)景中廣泛落地，幫助眾多企業(yè)提升了服務(wù)的半徑和深度。

這些能力都能適配專(zhuān)有化模式，可以協(xié)助我們的開(kāi)發(fā)者為需要私有化部署的中大型企業(yè)客戶(hù)提供服務(wù)支撐。后續(xù)，螢石也將攜手開(kāi)發(fā)者，將全新能力應(yīng)用于更多場(chǎng)景，助力多行業(yè)創(chuàng)新。

5、視覺(jué)應(yīng)用行業(yè)落地，AI價(jià)值長(zhǎng)線釋放

音視頻應(yīng)用深刻改變著行業(yè)管理效率與模式創(chuàng)新，使用方式各有特色，呈現(xiàn)效果百花齊放。本次開(kāi)發(fā)者大會(huì)，以連鎖經(jīng)營(yíng)為代表的兩家位合作伙伴帶來(lái)了行業(yè)落地應(yīng)用的全新方案。

KO臺(tái)球是自助臺(tái)球開(kāi)創(chuàng)者，已在全國(guó)布局300多個(gè)城市，超過(guò)5000家門(mén)店，覆蓋用戶(hù)超800萬(wàn)人，KO臺(tái)球輕裝上陣，利用視覺(jué)能力，讓監(jiān)控、運(yùn)營(yíng)、營(yíng)銷(xiāo)等重人力環(huán)節(jié)高效釋放，持續(xù)為業(yè)務(wù)擴(kuò)張?zhí)峁﹦?dòng)力。北京新守心城科技有限公司（KO臺(tái)球）副總經(jīng)理兼CMO許海波先生表示，基于螢石云服務(wù)能力，創(chuàng)新打造了視頻內(nèi)容生產(chǎn)和用戶(hù)直播功能，通過(guò)自動(dòng)獲取精彩瞬間、低延時(shí)直播等方式，進(jìn)一步放大臺(tái)球在短視頻時(shí)代的社交屬性。雙方在AI應(yīng)用上合作精進(jìn)，已上線AI短視頻剪輯、AI視覺(jué)追蹤算法清臺(tái)、AI電子裁判及AI數(shù)據(jù)化運(yùn)營(yíng)等豐富的運(yùn)營(yíng)、管理方案。

酷店掌是專(zhuān)注于連鎖門(mén)店的數(shù)字化運(yùn)營(yíng)服務(wù)商，合作終端店鋪超150,000家，對(duì)傳統(tǒng)門(mén)店智能化升級(jí)具備豐富的實(shí)踐經(jīng)驗(yàn)。會(huì)議現(xiàn)場(chǎng)，杭州酷店掌科技有限公司客戶(hù)總監(jiān)習(xí)軒昂先生分享了基于螢石云物聯(lián)底座的數(shù)字化門(mén)店運(yùn)營(yíng)變革方案，新一代門(mén)店管理已全面啟用數(shù)字華、可視化和AI智能化，涵蓋線上線下巡店、人員管理、運(yùn)營(yíng)管理、業(yè)務(wù)培訓(xùn)、經(jīng)營(yíng)分析等維度，不斷優(yōu)化門(mén)店降本增效。2024年，酷店掌還進(jìn)一步引入了螢石物聯(lián)專(zhuān)有云服務(wù)，構(gòu)建專(zhuān)屬的視頻AIoT平臺(tái)，為自身業(yè)務(wù)不斷上漲的智能設(shè)備管理持續(xù)保駕護(hù)航。

通過(guò)螢石藍(lán)海大模型、HomePlay OS的全新發(fā)布，以及云開(kāi)放業(yè)務(wù)的能力升級(jí)，在共同面對(duì)的已知場(chǎng)景和未知領(lǐng)域，螢石相信，視覺(jué)服務(wù)將邁入新的價(jià)值釋放階段，新一輪方案構(gòu)思也已快步走來(lái)，新服務(wù)必將帶來(lái)新的增長(zhǎng)點(diǎn)。