声网发布Linux Server SDK 支持大模型Python与Go语言

2024-07-29 10:58:08     来源:

AIGC 和 大语言模型 LLM 的快速发展正推动人工智能领域的进步和创新,LLM 作为 AIGC 的核心模块,其发展尤为引人注目。随着技术的不断进步,大语言模型的能力也不断进化,一方面,训练数据量与算力的提升,AI 的生成内容更精准、更智能;另一方面,大模型的交互方式,也从文本升级为音频、视频的多模态,可以支持人与AI的语音对话等。

在多模态大模型的趋势下,RTC 成为了人与 AI 交互中的重要一环,越来越多的企业与开发者纷纷探索在大语言模型或者 AI 应用场景中快速集成高效的音视频能力,构建 AI陪聊、AI口语老师等一系列场景。

对此,声网推出 Linux Server SDK,支持当下大模型编程最主流的两类语言 Python Go企业可基于声网 Linux SDK ,快速接入大模型,上线具备 RTC 传输能力的 AI 应用场景,如 AI 语音助手、AI 口语老师、虚拟恋人、多人语音游戏等。

声网 Linux Server SDK 以 API 的形式提供了一系列的功能,例如 Linux Server SDK for Go 可支持连接管理、信令发送、音频订阅与推送、事件回调通知等,其中信令传输能力不仅可应用于创建 DataStream 数据流,并发送信令,也能应用在大模型中发送数据流消息,例如将 TTS、STT 和 LLM 的结果发送给客户端。

此外,Linux Server SDK 还提供了使用时序的教程,从建立连接、订阅远端用户的音频、获取远端用户的音频数据、推送音频数据、发送文字信令、断开连接等不同流程的详细描述,帮助开发者快速上手。

声网 Linux Server SDK 客户集成实践图

凭借在 RTC 行业日积月累的深耕细作,声网 Linux Server SDK 在 RTC 的低延时、抗弱网、跨国传输、并发等方面具备优秀的性能。

低延时与全球部署:声网自研的 SD-RTN™ 实时传输网络覆盖了全球 200 多个国家与地区,音视频的全球端到端延迟平均达到 200ms。声网还通过优化网络传输协议和算法,进一步降低音视频传输的延迟。

智能路由与抗弱网:针对网络环境的波动,声网的智能路由技术能够根据用户的网络状况自动选择最优的网络路径,确保通话的稳定性和流畅性。声网的抗弱网传输与抗丢包算法,结合网络探测、抗丢包技术、自适应jitter buffer、网络拥塞控制策略等,为用户在各种网络环境下提供流畅的互动体验。

30000+终端机型适配:由于不同的设备可能对于语音处理效果产生影响,声网的 RTC SDK 支持 30000+终端机型适配,中低端机型覆盖广,帮助大模型与客户解决了多设备兼容性的后顾之忧。

并发性能:客户集成声网 Linux Server SDK 后可支持上百路的音视频并发。

支持多频道多路流:声网 SDK 支持用户同时加入多个频道,同一时间可以在多个频道中接收和发布音视频流。

目前声网 Linux Server SDK 为 Alpha 版,如您想进一步了解或接入,可在声网微信公众号找到这篇文章,扫描文章底部的二维码咨询。

免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。

标签:

猜你喜欢

全新智能体上线!小度化身“奥运伙伴”陪你共赴盛会
北京中轴线申遗成功 腾讯数字化技术全过程参与为全球首例
联想AI终端在ChinaJoy 2024惊艳亮相 “一体多端”战略布局添新看点
未来“视”界近在眼前:LG UltraGear™ OLED电竞显示器闪耀ChinaJoy
汕头市委书记温湛滨与管轶院士、殷伟容共探科研合作新篇章
巴黎奥运会开幕,全民在微博开启“热聊”模式
ChinaJoy BTOC互动娱乐馆活力集结!ROG与你共度夏日盛会!
你们沙盒圈也太逗了,《迷你世界》和《我的世界》的瓜后续来了!
 中国国家射击队旗开得胜!联想YOGA好礼同庆
凭借这一信创应用项目,七〇六所江苏公司再获一项专业认定
再添三项国际标准认证!航天中认累计取得军民领域各类专业资质39项
南方周末第四届互联网行业CSR论坛圆满落幕
未来科技的交汇点: BUSINESS GOVirtual科技博览及会议 (BGOV 2024) 凝聚业界,探索创新与实践
高汤面馆亮相巴黎,白象中国面飘香塞纳河畔
腾讯云大数据携手头部寿险“湖仓一体”实践荣获“金鼎奖”
WAFI大咖对话丨中国农业大学校长孙其信对话爱尔兰驻华大使安黛文
ChinaJoy上海开幕 PayerMax携矩阵式服务助力游戏行业全球增长
山东启动“5G蓝海 宽带海疆”建设行动
《剑网三无界》Coser助阵ROG游戏手机8 ChinaJoy2024第二日持续高能
Soul推出“异世界回响”,进一步实现AI+社交场景深度融合
从奥运战车看中国好车 民族品牌喜德盛全球扬帆起航
由七〇六所组织!线上航天科普活动在昌都市实验小学和第二小学落下帷幕
萝卜快跑疾驰引领,重塑移动AI时代网络多维体验新纪元
Soul App出席ChinaJoy AIGC大会:相比“智商”,社交领域更需要有“情商”的大模型
FUN肆嗨 潮好玩 AGON爱攻超级潮玩节落地CJ2024
TCL科技、TCL实业同时进入2024年《财富》中国500强
尊重生命科学程序,健康百年不是梦
世界工业级第三代完全自主知识产权热导式MEMS数字气敏传感器的投产启动仪式在广州增城区举办
国潮加持下的性能狂飙丨神凝 DDR5 系列马甲内存
后摩尔时代,制造业将在原子层面被重新定义