国内首批!智谱AI CodeGeeX代码大模型获信通院可信AI代码大模型评估最高等级

2024-06-11 21:15:44     来源:

北京智谱华章科技有限公司的智谱CodeGeeX代码大模型参与中国信通院组织的可信AI代码大模型首轮评估,最终获得4+级评级, 成为国内首批通过该项评估的企业之一。

在信通院官方发布的评测中,给予了CodeGeeX代码大模型较高评价:

“参与本次评估的智谱CodeGeeX代码大模型在通用能力方面,其代码解释、代码生成、代码转换等方面表现突出;在专用场景方面,其支持网站开发、桌面应用开发、移动应用开发、数据库开发、人工智能开发等多个场景的能力;在应用成熟度方面,其具备较完善的数据安全合规机制,在数据分类分级、模型服务可追溯性、风险可控性及可维护性等方面均表现优秀。”

CodeGeeX代码大模型基于智谱GLM大模型通过代码数据预训练和指令微调而成,支持超过100种编程语言,具备优秀的模型特性、强大的代码能力、全面的开发辅助能力。代码补全能力支持上下文补全、跨文件补全等;研发问答能力用于代码解释、代码翻译、代码注释、代码审查、代码修复、生成单元测试等任务,显著提高开发效率。基于多来源检索增强RAG技术,可实现基于本地知识库及开源代码仓库的问答,大幅提升准确率。同时,模型具备Code Interpreter代码解释器能力,可以批量处理多种格式的文件、批量实现数据可视化、绘制数学函数图等。

图1:CodeGeeX代码大模型的核心能力

目前,CodeGeeX插件产品的个人用户已经超过100万+,企业版本也已经广泛应用于科技、金融、医疗和制造等多个行业,每天为程序员生成超过2000万行代码,显著提高程序员的编程开发效率。CodeGeeX插件产品适配了VSCode、JetBrains IDEs全家桶、Visual Studio 2022、并独家适配了Visual Studio 2019、HBuilderX和deepin-IDE。在不同场景下,都已成为程序员必备的智能编程助手。

背景信息:信通院可信AI代码大模型评估介绍

可信AI代码大模型评估围绕通用能力、专用场景能力、应用成熟度,为模型能力提升和企业选型提供规范性参考。

(一)通用能力:考察模型的代码理解、代码生成与补全、代码转换、单测生成、代码诊断与优化、研发问答六大能力,一方面采用由多语言、多任务组成的专用评测数据集进行准确度等客观指标的评分,另一方面结合多位编码专家对可接受度指标的主观评分,综合评估代码大模型通用水平。

(二)专用场景能力:关注大模型所支持的专业场景数,如网站开发场景、数据库开发场景、大数据开发场景、人工智能开发场景等,以及相应场景下模型的代码生成和辅助编程的能力。

(三)应用成熟度:关注大模型数据管理机制、模型及其服务管理机制,评估应用实施阶段的服务质量。

图2:可信AI代码大模型评估内容

 

标签:

猜你喜欢

长久的爱与坚持 | 企业协同领军者云砺(票易通)九周年庆圆满落幕!
“益”鼓作气 爱满人间 恒昌公益走进聋哑学校温暖无声世界
青云科技AI智算平台升级,调度智能、运维无忧
浙江大学携手菜鸟云谷园区展示人形机器人最新研究成果
智联招聘CTO王昊:人工智能大模型赋能招聘效能提升
高端租户的首选:祺鲲科技助力商业地产打造LEED认证写字楼 降低空置率
天维信通CBC Tech正式成为Zscaler交付服务授权合作伙伴
城市AI+新质生产力,城市智能体升级“正当时”
把大模型嵌入到城市中,城市智能化进阶迸发新质生产力
城市全域数字化、智能化的未来,藏在“四化”新引擎背后
Aqara携手好好住创始人冯老板,为智能开关注入新灵感
物联网大会新焦点,加泰罗尼亚半导体行业发展关键在人才
区块链浪潮中的领航者:欧科云链的创新与实践
SNEC 2024开展在即 维旺光电将重磅首发两款新品
Energyear Colombia,正泰新能以绿色产品助推拉美绿色转型
抖音618美妆产品热卖,迪仕艾普、可复美等国货美妆品牌占据C位
业界标杆,用户首选:三星AI电视引领视听体验与智慧生活新纪元
KuCoin 携手AMWA开展慈善项目,赋能全球女性
情感大模型Emohaa,用AI呵护大中学生心理健康
梨花教育AI技术领先!以数字化教育开启人才培养新模式
数字赋能 智创未来 | 企业快成长贵州省CIO沙龙活动在贵阳成功举办
中国经济何以破局?快递100出席中欧新知讲堂做圆桌讨论
Lazada 6.6大促年中爆单潮,多款商品上架即售空
中青网评:以“兴趣”为指引,在直播间寻找更多产业带同行者
2024年全球通逐马计划首站乐跑圆满收官 北京移动助力用户健康完赛
忆伯科技与中国电信携手率先完成国内无人机远程识别基站部署
新华社:直播电商“搭好台” 地方特产加速“破圈”
贵州磷化集团与华为签署战略合作协议
打出美洲杯欧洲杯营销王牌,TCL电视销量蝉联全球第二
环球网:赋能山东产业带,直播电商激发区域经济发展新活力