关于我们

质量为本、客户为根、勇于拼搏、务实创新

< 返回新闻公共列表

基于Qwen1.5的代码模型CodeQwen1.5通义千问开源

发布时间:2024-04-17 16:01:21

站长之家(ChinaZ.com)4月17日 消息:通义千问基于Qwen1.5的代码模型昨晚开源CodeQwen1.5,这是一个基础 Qwen 语言模型的代码专家模型。CodeQwen1.5拥有7B 参数,采用 GQA 经过3T左右的架构 tokens 预训练代码数据支持92种编程语言,最长可处理64K 输入上下文。

代码生成,长序列建模,代码修改和 SQL CodeQwen1n能力等方面.5表现出色,大大提高了开发人员的工作效率,简化了软件开发流程。

image.png

在代码生成方面,CodeQwen1.5已经超过了许多更大尺寸的模型,缩小了开源 CodeLLM 与 GPT-四是编码能力上的差距。通过 HumanEval 和 MBPP CodeQwen1的评估.5.各项指标均表现良好。

此外,LiveCodeBench 根据CodeQwen1的评估,.5在 LeetCode、AtCoder 和 CodeForces 虽然三个竞争平台的问题具有很强的泛化能力,但它们的预训练语料包含 LeetCode 的数据。

CodeQwen1.5不仅精通 Python,还支持多种编程语言。在 MultiPL-E 综合评价8种主流语言,CodeQwen1.5证明了其优秀的多语言编程能力。长序列能力对代码模型至关重要,CodeQwen1.5通过精心构建的长序列代码数据预训练,最长64K 支持输入长度。

在实际应用中,CodeQwen1.5在 SWE Bench 上面的表现尤为突出,它能理解代码仓库,生成可以通过单测的代码,解决了真实软件开发中的问题。

CodeQwen1.5在代码修改方面的能力也得到了验证,在这方面也得到了验证。 CodeEditorBench 的四个方面——Debug、Translate、Switch、Polish——均达到了最佳效果。

作为一种智能 SQL CodeQwen1专家.通过自然语言查询数据库,大大降低了非编程专业人士与高效数据交互之间的学习曲线。在 Spider 和 Bird 两个流行文本到 SQL 在基准测试中,CodeQwen1.5的性能接近 GPT-四、显示了它的存在 SQL 强大的领域实力。

CodeQwen1.5作为 Qwen1.目前,开源家族的一员已经支持各种平台和工具,如 Transformers, vLLM, llama.cpp, Ollama 等。开源社区对 CodeQwen1.5的发布充满了期待,希望它在代码助手,Code Agent 为社区做出贡献,在未来的代码智能建设中发挥重要作用,实现真实性 AI 程序员。

详细的模型介绍:https://qwenlm.github.io/zh/blog/codeqwen1.5/


/template/Home/Zkeys/PC/Static