中国信息通信研究院(“信通院”)公布了代码大模型的首轮评估名单,阿里云AI编程助手通义灵码不但位列其中,还在全部100多个能力评估中表现优秀,获得最高评级。
信通院这一评价标准于今年1月正式发布,涵盖通用能力、专用场景能力、应用成熟度三大部分,包括16个能力项、100多个能力要求,从输入多样性、任务多样性、语言完备度、结果可接收性、结果准确度等维度,全面考核代码大模型的全栈技术能力。
阿里云通义灵码在本次评估中获得4+级评级,是评分最高的代码大模型之一。
信通院评测结果显示:
在通用能力方面,通义灵码在代码转换、代码检查及修复、代码优化等方面表现突出;
在专用场景方面,通义灵码提供网站开发、数据库开发、大数据开发、嵌入式开发等多个场景支持能力;
在应用成熟度方面,通义灵码具备较完善的数据合规及数据分类分级机制,且模型稳定性及可维护性表现优异,在模型推理性能、模型服务风险可控性等方面均表现优秀。
据悉,通义灵码已经熟练掌握Java、Python、Go、JavaScript、TypeScript、C/C++、C#等200多种编程语言,可以辅助写代码、读代码、查Bug、优化代码等,并有标准版、专属版两大企业版方案。
其中,标准版可以接入企业私域知识,实现私域知识问答,让AI推荐的代码更贴合企业规范。
专属版在标准服务之外,提供公共云上专属实例部署、独立企业账号系统等服务,能更好地帮助企业定制模型、降低算力成本。
目前,通义灵码每日推荐代码超3000万次,被开发者采纳的代码超亿行,是国内最受欢迎的编程助手,已广泛用于金融、制造、互联网、交通、物流、能源等行业。