根据Meta官网，Meta今日宣布推出Code Llama，一种最先进的大型编码语言模型。Code Llama能够根据代码和自然语言提示生成代码和有关代码的自然语言，目前可免费用于研究和商业用途。Meta提供三个版本的Code Llama：Code Llama，基础代码模型；Codel Llama，专门针对Python；Code Llama-Instruct，针对理解自然语言指令进行了微调。

Code Llama是Llama 2的代码专用版本，是通过在其特定于代码的数据集上进一步训练Llama 2来创建的，具有增强的编码功能。Meta发布了三种规模的Code Llama，分别具有7B、13B和34B参数。Code Llama支持当今使用的许多最流行的语言，包括 Python、C++、Java、PHP、Typescript（Javascript）、C#和Bash。

Meta基准测试表明，Code Llama的表现优于开源、特定代码的Llama，并且优于Llama 2。例如，Code Llama 34B在HumanEval上得分为53.7%，在MBPP上得分为56.2%，与其他状态相比最高。最先进的开放解决方案，与ChatGPT相当。（智东西）