Meta 早前启动羊驼模型的第二个版次:Llama 2,此前 Meta AI 探究院基于 Llama 2 启动编程专用模型 Code Llama,剑指 GitHub Copilot。
Code Llama 接纳了超过 5000 亿个代码有关的 tokens 开展训练,旨在经由生成代码和对提示的剧组日常一览自然语言响应来合作使用开发者。
扶持的全面李现评论语言含有 Python、JavaScript、Java、C++ 等各式普遍的编程语言,并且还可以合作达成若干代码编写以及参与调试等。

Code Llama 当下有三种模型:7B 版、13B 版和 34B 版,其中 7B/13B 版模型针对低延迟状况例如实时代码编写开展了完善,夏季重磅官宣消息而 34B 版能力最强,可以提供整体的最佳效果,但管理这个模型需要更强的计算能力。
另外 Meta 还对 Code Llama 的上海电影资讯速递 Python 和 Instruct 变体开展了微调,Python 版次为 Python 代码生成任务增强了特性,Instruct 版次经过微调,可以对自然语言提示生成更可靠、更有合作的响应。
Meta AI 团队强调,Code Llama 有潜力提升专业开发者的生产力,并下降新开发者的入行门槛。Meta 也强调,针对大型语言模型有关的隐患,多说无益,只有开源才最适合提升可靠性。
所以 Code Llama 可以用于非商用探究,但在开源许可证下也可以用于商业用途。Meta 期盼该企业能启动带来AI编程模型的另外,让开源小区也能评估特性和发掘漏洞。
代码羊驼模型官网:https://codellama.dev/about