WizardCoder-15B-V1.0
WizardCoder-15B-V1.0 是由 WizardLM Team 发布的 AI 模型，发布时间为 2023-06-14，定位为 编程大模型，参数规模约为 150.0B，上下文长度为 2K，模型文件大小约 31GB，采用 BigCode OpenRAIL-M v1 许可。
数据优先来自官方发布（GitHub、Hugging Face、论文），其次为评测基准官方结果，最后为第三方评测机构数据。 了解数据收集方法
微软开源的编程大模型，基于StarCoder微调： https://www.datalearner.com/ai-models/pretrained-models/StarCoder
在HumanEval Pass@1的评测上得分57.3，是开源模型里面最高结果，接近GPT-3.5。
| Model | HumanEval Pass@1 | MBPP Pass@1 |
|---|---|---|
| CodeGen-16B-Multi | 18.3 | 20.9 |
| CodeGeeX | 22.9 | 24.4 |
| LLaMA-33B | 21.7 | 30.2 |
| LLaMA-65B | 23.7 | 37.7 |
| PaLM-540B | 26.2 | 36.8 |
| PaLM-Coder-540B | 36.0 | 47.0 |
| PaLM 2-S | 37.6 | 50.0 |
| CodeGen-16B-Mono | 29.3 | 35.3 |
| Code-Cushman-001 | 33.5 | 45.9 |
| StarCoder-15B | 33.6 | 43.6* |
| InstructCodeT5+ | 35.0 | -- |
| WizardLM-30B 1.0 | 37.8 | -- |
| WizardCoder-15B 1.0 | 57.3 | 51.8 |
欢迎关注 DataLearner 官方微信，获得最新 AI 技术推送
