火山引擎携手NVIDIA 开源亿级多媒体处理框架BMF

2023-08-23 16:57:47     来源:

8月22日,火山引擎视频云宣布携手NVIDIA正式开源多媒体处理框架 BMF(Babit Multimedia Framework),可以为企业提供从视频生产到消费的全链路场景支持,并帮助开发者低成本构建视频应用。BMF作为国内首个开源的同类项目,希望通过开源方式推进技术普惠,助力加速视频化进程。

(英伟达开发与技术部门亚太区总经理李曦鹏(左)和火山引擎视频云架构技术总监王悦(右))

视频化正在向各行业渗透,从内容行业、泛娱乐拓展至泛互联网和大量传统行业。作为视频化部署的“底座”,多媒体处理框架越发重要,但目前主流的视频处理框架虽具备沉淀多年的技术能力,却无法完全应对需求多元、业务融合以及快速创新等复杂挑战。对企业而言,自建视频应用对技术积累和资金成本要求较高。行业迫切需要更加强大的视频处理框架,帮助用户实现优势互补、协同工作、快速落地。

因此,火山引擎基于抖音大规模实践和打磨,专为超视频时代打造下一代多媒体处理框架BMF,从应用层、框架层、模块层和异构层这四个层面,帮助用户快速构建视频化能力,驱动业务增长。

首先在应用层,可以支持视频内容从生产到消费的全链路视频场景,包括大量视频AI应用场景。

其次在框架层,包括框架对 Graph / Pipeline 的调度、跨数据类型跨设备的数据流转 Ackend、以及常用的跨设备 reformat、color space conversion、tensor 算子等 SDK ;并自研“自驱调度”和“动态Graph”引擎,适配不同场景的多种执行模式。

再次在模块层,在框架设计之初即采用了“松耦合”设计,包含了具备各种原子能力的模块,提供多种语言的模块开发机制,用户可根据自身需要将算法/处理实现为 Python、Go、C++ 语言的任意一种;目前,已积累超过140个适用于视频场景的原子能力模块。

最后在异构层,负责提供高效的视频处理算力,包括ASIC算力,能够对多种主流框架数据实现无缝转换,使多种主流框架数据互转和协同工作变得更加顺畅和便捷。

字节跳动视频架构负责人、火山引擎视频云架构技术总监王悦介绍,火山引擎与NVIDIA紧密合作,针对GPU相关的框架层能力、处理能力进行了深度优化,使其能够发挥更强大的并行计算能力。

NVIDIA 英伟达开发与技术部门亚太区总经理李曦鹏表示,“未来,我们会与火山引擎保持合作,听取社区及用户的意见,在 NVIDIA 最新的软硬件平台上进行迭代,继续完善 BMF 框架。”

目前,火山引擎多媒体框架BMF已经实现全面开源并上线GitHub,其中BMF框架层整体开源,提供9个开箱即用案例和20+API调用范例。此外,BMF已正式开放试用招募,希望携手更多开发者一起共建视频应用生态。

免责声明:市场有风险,选择需谨慎!此文仅供参考,不作买卖依据。

标签:

猜你喜欢

极智嘉出海动态: 官宣亚太新合作伙伴Ferag、助力沃尔玛智利仓稳定运营
春风十里不如你,维他柠檬茶伴陆冲,年轻人的春日嗨翻秘籍!
AI机器人引发行业热议,商汤科技元萝卜率先深入家庭场景
共赢3万亿大市场,华为携伙伴“智”绘医药制造行业新蓝图
第二届皮肤光生物学国际峰会在上海召开 MISTINE蜜丝婷升级自研成分Taremi Plus®
“一块屏”打通“五大关”:民航二所解读智慧民航“1+5”数字孪生建设方案
回溯时光,“朱”颜有方:3月27日TimeShop双舱饮将携手朱茵惊喜上线
网心科技荣登2023ToB头条行业「创新力产品」价值榜
创新之约,数动蓉城!“2024海纳星火计划”全国巡讲会成都站顺利举办!
周鸿祎AI数字人亮相成都,360智慧商业点亮地标,助力企业生意增长!
探索绿色化学 教育立德树人 ——记北京工商大学轻工科学与工程学院刘畅瑶副教授
华尔永盛:引领建筑智能化革新,助力绿色节能时代!
华尔永盛机电一体化系统:现代智能建筑的强大支撑!
三星最新一代Neo QLED 8K QN900D上市,打造新时代影音体验标杆
创新香港国际人才嘉年华圆满闭幕 助力大湾区人才发展新机遇
TimeShop新品发布会揭幕在即,“不老女神”朱茵携神秘紫光宝盒亮相
TimeShop2024新品发布会定档3月27日,品牌大使朱茵将出席
倍精莱是什么?Cellerator科学力作,直面“男”言之隐
朱茵来了!TimeShop“紫光宝盒”即将发布,开启皮肤抗衰新纪元
朱茵即将亮相TimeShop新品发布会,共鉴双舱饮2X-SKINBOOM新篇章
TimeShop新品双舱饮震撼来袭,品牌大使朱茵亲临现场助阵
倾世紫光,BOOM现年轻!TimeShop即将召开2024新品发布会
朱茵将亮相TimeShop新品发布会,紫光宝盒-双舱饮引领抗衰新风尚
龙年商务礼品推荐:智能办公本X3,实用与时尚兼具,成高端人士新宠
高灯科技受邀出席中国商业地产行业发展论坛
铭师堂助力教育事业发展,协办山海城市教科研共同体第二届会议
打造“n时代”新质生产力,正泰新能黄海燕出席2024浙江光储产业发展大会
入选省级首版次软件,同盾科技引领隐私计算行业创新
全国信标委数字孪生工作组2024首次会议召开,腾讯核心推动数字孪生国标建设
中国首款一站式边缘安全加速产品 EdgeOne,持续技术普惠广大企业及开发者