Soul App语音大模型“伶伦”升级,上线“异世界回响”支持跨次元“打电话”

2024-06-18 11:23:14     来源:

和喜欢的虚拟人实时通话是一种什么样的体验?

近日,社交平台Soul App(以下简称“Soul”)语音生成大模型上线,同时自研语音大模型“伶伦”正式升级,现阶段,Soul语音大模型“伶伦”包括了语音生成大模型、语音识别大模型、语音对话大模型、音乐生成大模型等,可支持真实音色生成、语音DIY、多语言切换、多情感拟真人实时对话等能力。目前,“伶伦”已应用于Soul “AI苟蛋”、站内狼人游戏“狼人魅影”AI语音实时互动、独立新产品“异世界回响”等场景。

Soul上线于2016年,依托技术和产品模式创新,平台持续推出受用户欢迎的社交玩法和多元社交场景,例如,多对多语音实时互动场景“群聊派对”、一对一互动场景“语音匹配”等,帮助用户基于兴趣相遇同好,提升关系发现的质量和效率,沉淀深度社交网络。

一直以来,声音都是传递信息和情感的重要媒介,也最能在沟通中赋予“情绪温度”和“陪伴感”。在Soul,用户积极通过语音实时互动,表达自我、分享交流,收获新关系,“语音社交”也成为平台颇具代表性的标签之一。

与此同时,作为率先将AI引入社交关系的平台,Soul不断思考如何将AI应用于社交具体场景,进一步实现交互效率、交互质量、交互体验、交互对象等多方面的提升和拓展。2020年,Soul系统启动AIGC的技术研发工作,并在智能对话、图像生成、语音技术、虚拟人等方面拥有前沿的技术积累。

其中,在语音探索方面,Soul基于平台沉淀丰富且多风格的高质量公域语音数据,推出自研语音大模型“伶伦”,在深度融入站内“AI苟蛋”等场景提供多模态互动体验外,还推出了系列趣味社交玩法和活动。

如Soul于2023年上线了“Soul次元歌手”活动,帮助每个人打造自己的AI歌手分身,让很多热爱音乐但不一定会唱歌的人,也能实现“唱歌自由”;“懒人KTV”活动则在音色克隆的基础上,创新性实现多人UGC“AI合唱”。基于音乐模型个性化的创作能力,平台的“AI帮你出灵魂专辑“活动,使用户自由输入任意作曲的主题关键词,即可一键完成词曲创作。

此次,新升级的“伶伦”在训练数据规模和模型架构上均实现了拓展和创新,实现了更真实自然、更多样性和更细颗粒度的控制效果以及流式超低延迟的生成。特别是上线的语音生成大模型在多风格多情感可控、超自然人声生成、多语言切换等方面表现出色。

具体来说,在多情感可控上,“伶伦”能够实现对情绪的深度理解和模拟,在语音生成和对话中表现出不同情感;在声音颗粒度上,支持包括吸气、喘气、笑声、结巴/重复、咳嗽 、叹气、哭声等一系列副语言语音合成,声音效果更真实生动。

值得一提的是,基于新升级的“伶伦”,Soul站内应用场景中多模态互动体验显著提升,例如狼人游戏“狼人魅影”中AI可实现实时发言,流畅完成刀人、悍跳等玩法交互。

此外,独立新产品“异世界回响”,提供多种场景、风格的虚拟人角色,每个虚拟角色具备形象、声音、人设对话能力,用户可与虚拟角色进行沉浸式即时交流。新上线的“语音通话”功能,在“伶伦”支持下,能够让用户体验与虚拟人实时语音通话效果,延迟时间少于行业平均水平,更快响应用户互动需求,提供即时的AI交流和陪伴。

根据Soul发布的《2024 Z世代AIGC态度报告》,三分之一的年轻人表示愿意和AI成为朋友,人机互动已然成为年轻人中的社交新趋势。大模型应用深入人机互动场景,发力语音、视觉等多维度,无疑将进一步提升用户社交体验。

当下,大模型竞赛的焦点正从模型参数延伸至具体应用场景。Soul App CTO陶明在接受媒体采访时表示,“新一轮AI发展中,关注场景和交互体验将会是必然的趋势。”

基于对社交场景的深刻理解,Soul将围绕用户的实际使用场景和核心社交需求,不断提升技术能力,从AI推荐关系到AI辅助对话,从降低表达门槛到提升互动体验,推进AIGC技术与社交场景的深度融合,实现AI原生社交场景创新。

免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。

标签:

猜你喜欢

SNEC2024 | 圆满收官 期待与您再相会
618年中大促 ROG魔霸7Plus大屏电竞本史低价8999元
国产GIS智变:人工智能大模型加速地理信息新质生产力发展
打造地下空间“数字双胞胎” 中地数码亮相第二届软件创新发展大会
维康药业2.3类中药新药银黄滴丸Ⅱb期临床试验总结会在湖南长沙顺利召开
SISP女科技人才风采展:记辽宁向日葵数字技术股份有限公司总经理李艳飞
华为浏览器上线高考频道,查高考分数快人一步
华为手机超强“助攻”!高考后出境游计划一“机”到位
酷态科10号充电器CP 120W开售!149元,插拔不断连+百瓦PPS
海马云发布4090云电脑,打造云电脑行业新标杆
Xmars受邀参加首届亚马逊AMC闭门峰会,携手开启营销技术合作新篇章
某中央媒体基于统信UOS服务器版,支撑业务扩容升级丨标杆100
艾媒咨询发布《2024年中国香港身份规划服务机构TOP10榜单》,银河集团排名第一!
焕新视界,映见未来——2024年SHARP/NEC电影机品鉴会闪耀上海
丰富视听体验+全新美学理念:三星Lifestyle艺术系列构建“有AI的科技·艺术·家”
天猫优品等家电行业17方联合发布《家电换新消费指南》
出席2024北京智源大会 毫末智行贺翔:希望用DriveGPT训练出具备世界知识的老司机
IBM watsonx为全球温网球迷带来全新的生成式AI数字体验
67岁农技达人跑遍全国为果树“问诊”抖音走红,获央视点赞
智能测试大势所趋,大模型为AI自动化测试赋智
华为云华东(芜湖)数据中心正式开服,互联网圆桌研讨会共话算力基础设施新发展
王海峰谈通用人工智能新视角:技术通用、能力全面
SISP科技女性风采展:记辽宁宏图创展测绘勘察有限公司董事长刘莉萍
AORUS全明星计划,茄子来啦!专属定制电竞新座驾茄子×技嘉AORUS全家桶
“感恩相伴 翼路有你”|山东电信618年中大回馈开启,诚意十足不容错过!
青云志5月|牵手鲲鹏昇腾,与中科可控完成产品互认证
革新儿童智能手表市场,360儿童手表荣获公信部“2024年新型数字服务优秀案例”
360儿童手表凭借大模型技术创新荣获公信部新型数字服务优秀案例
绿维文旅:“十五五”规划前期启动,旅游业应关注8大重点
特易资讯2024外贸峰会行业大咖分享:实操管理智慧与AI数据驱动