GAOKAO-Bench-Updates将中国2023年及之后的高考选择题作为数据集,是对GAOKAO-Bench(包含2010-2022年高考题)测评框架的补充.我们希望将GAOKAO-Bench打造成可持续的大模型测评框架,见证中文大语言模型的不断发展.
GAOKAO-Bench-Updates的具体数据格式可参见GAOKAO-Bench.
评测框架和GAOKAO-Bench相同,具体文件见下表:
| 文件名 | 功能 |
|---|---|
| /Bench/objective_bench | 生成客观题(选择题)答案 |
| /Bench/bench_function | 测试相关函数 |
| /Bench/2023_Obj_Prompt.json | 2023年客观题(选择题)Prompt |
| /Bench/2024_Obj_Prompt.json | 2024年客观题(选择题)Prompt |
具体测评方式可以参考GAOKAO-Bench.