中国移动为什么要做视联网家庭大模型?
随着数字化进程的加速推进和视频内容的迅猛增长,多样化、个性化、互动化的视频智能需求愈发显著。大模型凭借其强大的泛化性、认知能力和响应能力,成为满足这些需求的关键引擎。中国移动始终将AI技术作为业务发展的核心支撑,自主研发的九天视觉大模型,在通用目标检测、视频理解、视觉生成等多个视觉任务上达到业界领先水平,全面支持国产软硬件技术栈与行业模型微调。基于九天视觉大模型这一坚实的基础底座,中国移动视联网大模型研发攻关联合体成功推出了九天·视联网家庭大模型,以满足现代家庭对视频智能的需求。
九天·视联网家庭大模型能为现代家庭带来什么?
九天·视联网家庭大模型在多样化目标检测的基础上,赋予大模型理解与记忆能力,能时刻识别多个家庭主体的属性、状态,融合时间长期记忆能力为居家生活提供个性化建议,成为每个家庭的定制化生活管家,目前已经在“看家助理”上进行应用,后续将广泛应用于数字乡村、智慧社区和沿街商铺等泛家庭场景。
实时万物识别
九天·视联网家庭大模型可实时精准识别家庭场景常见目标,目前已支持生物、家电、家具、家居物品、交通工具等分类下50种目标识别,广泛覆盖男人、女人、老人、小孩、猫、狗、电饭煲、电脑、椅子、桌子、背包、书籍、自行车等常见目标,能够在识别物品名称的同时进行个性化推荐,并可按照具体指令进行家庭事件回顾,家庭成员、来访情况和家居物品管理等居家生活状况全面掌握。
家庭环境感知
九天·视联网家庭大模型能够实时监测并分析家庭场景中的环境状况,可根据用户的习惯和需求,自动调节室内湿度、照明和音乐等,提高居家生活的舒适度和品质;具备火源预警、入侵检测、环境质量监测等能力,实时检测和识别家中环境安全,有入侵、火灾等特殊情况时进行智能告警。无论昼夜,始终默默守护,让安心,成为常态。
自定义事件理解
九天·视联网家庭大模型能够深度理解家庭成员的行为和需求,实现家庭场景下面向老人、小孩、宠物等家庭成员的事件理解,可应用于老人看护、幼儿照料、宠物喂养等多种场景。能够理解老人久坐、摔倒、吃药、出门、烹饪等多种事件,帮助子女随时关注老人生活状态;能够理解小孩吃饭、哭闹、跳绳、做作业、玩玩具、看电视等多种事件,帮助家长轻松看娃;能够理解宠物出栏、奔跑、进食、睡觉、上厕所等常见事件,帮助主人省心养宠。用户可通过“奶奶今天做了什么?”“小宝今天总体情况如何?”“狗狗今天有大叫过吗?”等自定义指令回顾家庭成员居家状况,让家庭生活变得更加便捷、舒适。
事件长期记忆
九天·视联网家庭大模型具备强大的历史记忆和零样本推理能力,支持基于本地向量化存储的自定义长期事件检索,可长久记忆家庭成员的历史成行为,根据历史事件总结家庭成员的生活习惯,给出个性化提醒和针对性推荐,当家庭成员产生异常行为时,给出智能提醒,例如:大模型总结奶奶一般会在每天上下午各量一次血压,但是今天一直到晚上还没有量,询问是否要提醒奶奶量血压。
九天·视联网家庭大模型以视觉理解之力,洞察家之细微,以视觉检测之智,赋能家之未来,从家到泛家庭,看见家,理解爱,让家庭生活更智能。