AI 大模型時代,所有的行業都要被重構。從 2023 年到今天,我們經歷了 " 百模大戰 ",但更重要的是,在喧囂過后,如何能將 AI 能力在垂直場景進行深度的應用,從而變革產業的運營效率。
現如今,除了在手機、PC、平板等 C 端場景,越來越多的智能硬件也在加速與 AI 大模型的融合。比如在智能家居物聯網行業,已經能夠看到許多搭載大模型的產品應用,借助數據能夠提供更為精準細致化的服務。
" 數字化、智能化的工具不該是少數人的奢侈品,而該成為日用品 ",螢石開放平臺產品經理邵佩說道," 我們希望成為技術普惠的推動者。"
邵佩表示:" 螢石主要專注于兩項核心業務。首先,面向消費者,我們主要提供各類智能家居產品。其次,面向合作伙伴是我們的另一重要板塊,我們致力于開放自身能力,助力合作伙伴共同創業。"
根據官方的介紹,相較于 1.0 版本端云協同的整體框架設計,升級后的螢石藍海大模型 2.0 聚焦技術能力與場景應用的雙重落地,通過多維融合、模態擴展與專項記憶,實現感知、理解、記憶能力的增強。
其中,在感知能力升級層面,螢石藍海大模型 2.0 構建了覆蓋入戶、庭院、室內及商鋪等多場景的 1200 種常見家居目標的萬物模型,實現屬性與目標的雙重感知,比如自研鳥類識別算法可支持超過 7100 種常見鳥類的識別等。
理解能力的全面升級,讓模型具備更復雜的多模態解析能力,視覺理解模型不僅支持 2 分鐘以內的視頻內容理解,還能同時處理多通道視頻信息。而記憶系統的升級讓 AI 有了 " 經驗積累 " 的能力。通過構建目標畫像、設備畫像、用戶畫像的專用存儲體系,模型能夠實現行為分析及預測。
據螢石藍海大模型研發負責人王晟透露,目前,模型已落地入戶安全、老人看護等多個消費類垂直場景模型,未來將通過 " 專用數據 + 平臺框架 + 技術底座 " 的體系,持續拓展更多的消費類場景,同時與開發者共創,實現無人值守、家畜養殖等行業類場景的混合大模型。
在居家養老的場景下,螢石產品經理程松斌表示:" 沒有 AI 之前,更多監測設備是對環境數據進行收集,例如水感、煙感,有了 AI 之后,可以對這些數據進行分析,為監護人提供更精準的提示。例如,在吃藥的場景下,有些藥是不能多吃的,否則會造成更壞的影響。通過不同藥的顏色、吃藥的動作,即可分析出是否按時按量吃藥。"
值得一提的是,AI 碎片化場景時代,出現了需求分散、決策分散、算法分散等新挑戰,在此次開發者大會上,除了螢石藍海大模型能力的提升,螢石還對 EZVIZ HomePlay OS 進行了升級,在架構層面實現場景化智能體、螢石設備開放和螢石 APP 開放,幫助開發者降低開發成本,構建場景應用。
而為了讓開發者在端到端智能物聯方案的全鏈路中實現業務創新,螢石將全棧開放的能力延展到螢石的設備硬件層面,采用云端一體的產品架構,將設備端與云端能力進行系統性整合。在設備端,提供可編程套件,將設備的原子能力開放給開發者,開發者可以針對業務場景改造設備的感知和執行能力。云端能力開放則聚焦 AI 算法訓練能力,支持將訓練好的算法直接下發至設備,方便開發者基于自身 AI 場景在端側拓展。
螢石 APP 開放的產品架構則是提供用戶模塊、設備模塊、音視頻模塊、消息模塊、AI 模塊組件,開發者只需結合業務邏輯,調度設備端、云端的算力和算法,便能實現各種場景的智能化。
只是,開放的背后,意味著對安全等級有著更高的要求,以及在端云結合的應用下,數據隱私也成為用戶最擔心的事情。對此,螢石藍海大模型研發負責人王晟解釋稱,必須在設備端落地的算法,例如人臉解鎖,人臉隱私等最高安全級別的數據不上云。其他的數據通過一些協議后上云。如果是高響應的算法,就在設備端落地,端側負責觸發,云端負責二次精度的判斷。
上文說到的將原子能力開放給開發者,螢石也會進行審核。" 螢石并不是安卓,有點類似微信小程序,可以做設備升級,在開放的 API 內做事情。" 螢石云系統架構負責人明旭如是說。
從此次螢石藍海大模型以及 AI 核心架構 EZVIZ HomePlay OS,其更多的是想要做一個底座,通過開放在設備、技術以及場景等方面的優勢,從而讓更多的開發者參與進來,在更多的垂直場景進行落地。(本文首發于鈦媒體 APP,作者|杜志強,編輯|鐘毅)