Skip to content

Commit 99aaae8

Browse files
authored
Update README_cn.md
1 parent fa8c226 commit 99aaae8

File tree

1 file changed

+4
-0
lines changed

1 file changed

+4
-0
lines changed

README_cn.md

Lines changed: 4 additions & 0 deletions
Original file line numberDiff line numberDiff line change
@@ -39,6 +39,8 @@
3939

4040

4141
## 新闻
42+
🔥🔥🔥 [2023/09/26]CodeFuse-CodeLlama-34B 4bits量化版本发布,量化后模型在HumanEval pass@1指标为73.8% (贪婪解码)。
43+
4244
🔥🔥🔥 [2023/09/07]MFTCoder微调的模型**CodeFuse-CodeLlama-34B**[HumanEval Benchmarks](https://github.com/openai/human-eval)的Python **Pass@1** 取得了**74.4%**(greedy decoding)的开源SOTA成绩。
4345

4446
🔥 [2023/08/26]MFTCoder支持使用LoRA/QLoRA对Code Llama、Llama、Llama2、StarCoder、ChatGLM2、CodeGeeX2、Qwen和GPT-NeoX模型进行微调。
@@ -47,6 +49,7 @@
4749
| 模型 | HumanEval(Pass@1) | 日期 |
4850
|:----------------------------|:-----------------:|:-------:|
4951
| **CodeFuse-CodeLlama-34B** | **74.4%** | 2023/09 |
52+
|**CodeFuse-CodeLlama-34B-4bits** | **73.8%** | 2023/09 |
5053
| WizardCoder-Python-34B-V1.0 | 73.2% | 2023/08 |
5154
| GPT-4(zero-shot) | 67.0% | 2023/03 |
5255
| PanGu-Coder2 15B | 61.6% | 2023/08 |
@@ -107,6 +110,7 @@ sh init_env.sh
107110
| 模型 | 基座模型 | 训练数据 | Batch Size | Seq Length |
108111
|---------------------------------------------------------------|----------------------|------|------------|------------|
109112
| [🔥🔥🔥 CodeFuse-CodeLlama-34B](https://huggingface.co/codefuse-ai/CodeFuse-CodeLlama-34B) | CodeLlama-34b-Python | 60万 | 80 | 4096 |
113+
| [🔥🔥🔥 CodeFuse-CodeLlama-34B-4bits](https://huggingface.co/codefuse-ai/CodeFuse-CodeLlama-34B-4bits) | CodeLlama-34b-Python | | | 4096 |
110114
| [🔥 CodeFuse-13B](https://huggingface.co/codefuse-ai/CodeFuse-13B) | CodeFuse-13B-Base | 6.6万 | 64 | 4096 |
111115

112116

0 commit comments

Comments
 (0)