“数智”浪潮下,伴随着AI技术的发展及广泛应用,智能物联行业再次开启“狂飙”之路。据IDC数据预测2025年全球智能家居市场规模将达到2367亿美元,年复合增长率为11.8%。今年6月以来,苹果、华为等海内外巨头纷纷推出自研AI大模型,深度卷入智能物联赛道。

在6月27日举行的2024 ECDC萤石云开发者大会上,迎来新十年的视觉物联网云平台——萤石发布首个自研大模型——蓝海大模型。该大模型以AI能力为核心,定位垂直物联场景,深耕智能家居行业及用户痛点,构筑起萤石视觉云平台坚实的技术底座。

萤石推出首个自研AI大模型

以终为始,打造智能物联的空间级具身智能

随着以ChatGPT为代表的生成式技术的崛起,近几年AI力量在交互对话、图像生成、工具代理、具身代理等方面得到了快速发展与应用,并促使AI从被动式走向具身式,从第三视角走向第一视角,即具备具身化的基本能力。

智能物联作为一个专注设备与设备交互、设备与人交互的赛道,其行业特性决定着天然对交互有着极强的需求。而当下主流的通用大模型技术尚无法满足这种需求,究其原因是根植于互联网的通用大模型天生缺少与设备交互的基因,更不具备智能物联所需的具身能力与端云协同,这也是缘何当下消费者面对智能家居产品常常有“智障”的体验感。

在此背景下,萤石自研AI大模型——蓝海大模型应运而生。该大模型以萤石音视频能力为根基,AI能力为核心,是可实现多智能体端云联动的空间级具身智能模型。大模型以萤石深耕多年的智能物联场景为土壤,既具备天然物与物、物与人的交互基因的同时,也解决了智能物联行业的泛化性难题,尤其擅长处理多模态数据、端云协同等复杂需求。

与其他大模型不同的是,萤石蓝海大模型以终为始,直指空间级的具身智能。大模型借助摄像机、控制屏、扫地机器人、陪伴机器人等多样感知设备的接入获取世界空间信息;再作为“大脑”进一步对信息进行精确识别与理解,并处理视觉、音频等多模态信息;最终行动规划,指导设备做出响应,形成从基础性事件感知,到可交互式设备,再到角色具身式交互解决的全方位感知与交互体验闭环。

大模型驱动下,小到一个面板大到一个机器人,每一个智能物联产品都会成为一个独立智能体,具备具身级的AI能力,并可跨越时间与空间互通互联。正如萤石算法部门负责人程战战所言:“具身化是机器智能的最终归宿,也终将促成AI平民化。”

目前萤石蓝海大模型已在积极备案中,后续将持续为企业及开发者提供开发开放、基础交互、具身代理等体系化AI能力,并开放29大类93子类原子算法、73种L0级端云协同算法能力、26种交互或生成式类算法,算法覆盖语言交互、图像生成、多模态交互及多种具身代理服务,可帮助数十万开发者在其基础上完成对应的AI解决方案,让“人工智能+”走进千行百业,切实助力企业降本增效。

AI重塑智能家居新体验,从智有所居到智有优居

在中国人的观念里,“家”不仅仅是一个物理概念,也是一个精神坐标,承载着舒适、安心、放松的向往与期盼。然而,当下大多数融入AI能力的智能家居产品在视觉内容理解、思考上仍存在明显的智力短板,导致人们在实际使用过程中感觉设备“傻乎乎”的,被网友戏称“人工智障”。

此次萤石自研垂直物联场景具身智能大模型的推出,也为优化当前智能家居产品“弊病”提出了一个根本解决方案,实现了从智有所居到智有优居的体验重塑。

目前该技术也已应用在萤石旗下诸多产品中,为消费者提供了更智能、更便捷、更生动、更安心的智能交互体验。DL60FVX智能锁作为萤石品牌中首个成功接入云端大模型的三摄智能锁,其强大的本地算力与云端大模型得以完美结合,显著提升包裹检测、跌倒检测、儿童检测等算法的精准度,也使得用户能够收到更具体、丰富的消息提醒。

今年萤石推出的家庭助理机器人RK3将AI能力与物理机器人相结合,内置的萤石多模态大模型不仅可以识别家庭成员并自动触发交互话题,还可实现全屋门铃、猫眼等端端协同;并融合了儿童坐姿检测等教育功能及吃药提醒等老人看护功能,提供从儿童到老人,从个体到家庭的全方位智能看护。

萤石开放平台再升级,视觉云推动AI场景化应用跃升

在本次发布会上,萤石引入AI大模型能力,对PaaS平台的新组件和新工具进行了场景化更新,推出智能视觉巡检组件、智能视频客服组件和远程排障专家工具,助力开发者及企业用户个性化、智能化的行业解决方案。

以连锁行业为例,企业在巡检等运营管理中普遍存在诸如误报率居高不下、人工投入成本大、人员专业度要求高等痛点。而萤石此次2大组件+1个工具的推出,将为泛连锁行业的智能化变革带来新的思路。

其中,结合萤石蓝海大模型升级的智能视觉巡检组件适用于自助门店、收银防飞单、餐饮规范治理和无人服务防纠纷等各种行业的远程巡检场景;智能视频客服组件则提供了数字分身复刻能力,借助萤石蓝海大模型可以实现全天候的音视频连线服务,帮助开发者打造专属的个性化智能服务;远程排障专家工具的推出是为了帮助企业获得低成本的运维能力,可以主动发现、智能分析、远程排除物联设备的故障,帮助方案商打造有竞争力的售后运维服务。

萤石AI技术的应用落地进一步提升了国内24小时自助台球行业领军品牌——KO台球的优质服务体验。在萤石云服务的共创下,KO台球把过往管理视角出发的视频内容,提升到为用户带去情绪价值的高度,开辟了全新运营思路。AI剪辑可以将每一杆的精彩时段进行剪辑合成,产出“十佳进球集锦”、“一杆清台”等优质视频,内容精彩度直线上升;AI视觉追踪算清台精准识别清台用户,节省店长运营工作;AI电子裁判支持球局胜负的判罚,革新传统赛事举办形式;AI数据化运营可以将用户打球水平数据化,匹配合适对手,提升用户乐趣。在萤石云的助力下,目前KO台球官方App的用户总量超过800万,月活近200万。

萤石开放平台产品负责人邵佩先生表示,2024年萤石开放平台依旧持续往开放化、智能化、场景化方向发展。未来,萤石也以蓝海大模型为技术底座,携手开发者致力于将全新能力应用于更多场景,助力多行业创新。

萤石作为始终专注智能物联领域的代表,此次自研AI大模型的推出和ECDC大会基于人、家、商业场景的开放化、智能化、场景化的技术下放,也必将持续引领智慧物联AI新时代。萤石网络政企业务部总经理薄法强表示:“萤石秉承全栈开放的态度,将模型能力、架构中形成的核心能力,以各种形式开放给开发者,服务千行百业,共同开创AI新时代”。