厂家:支付宝
简介:
CodeFuse 是一款为国内开发者提供智能研发服务的产品,该产品是基于蚂蚁集团自研的基础大模型进行微调的代码大模型。CodeFuse 具备代码补全、添加注释、解释代码、生成单测,以及代码优化功能,以帮助开发者更快、更轻松地编写代码。
目前 CodeFuse 采用的是百亿参数的代码大模型,它具备代码补全、添加注释、解释代码、生成单测和代码优化能力。
当前版本:0.1.2 beta版
特点
代码领域大模型
蚂蚁自研的代码生成专属大模型,根据开发者的输入提供智能建议和实时支持,帮助开发者自动生成代码、自动增加注释,自动生成测试用例,修复和优化代码等,以提升研发效率。
高性能、多任务代码大模型项目
涵盖代码大模型的模型、数据、训练等,主要特点是支持多任务、多模型、多框架。支持LoRA和QLoRA,可以用很少的资源去微调很大的模型,且训练速度能满足几乎所有微调场景。
高质量训练微调数据
这两份微调数据集可以显著提升大模型在代码领域的能力,通过微调数据集,可将开源大模型在HumanEval测评上的得分提升20%~30%。
多任务评估基准
CodeFuseEval 在 HumanEval-x、MBPP 的基准上,结合 CodeFuse 大模型多任务场景,开发的编程领域多任务的评测基准, 可用于评估模型在代码补全、自然语言生成代码、测试用例生成、跨语言代码翻译、中文指令生成代码等多类任务的性能。
支持的IDE
支持的语言
支持40多种编程语言。
开源
蚂蚁自研的代码生成专属大模型,根据开发者的输入提供智能建议和实时支持,帮助开发者自动生成代码、自动增加注释,自动生成测试用例,修复和优化代码等,以提升研发效率。
支持开源,目前有CodeFuse-13B (modelscope.cn) 、CodeFuse-QWen-14B (modelscope.cn)、CodeFuse-CodeLlama-34B-4bits (modelscope.cn)、CodeFuse-StarCoder-15B (modelscope.cn)、CodeFuse-TestGPT-7B (modelscope.cn) 模型开源。