资源库
Code Datasets
面向代码生成、补全与程序理解的公开数据集。
APPS
UC Berkeley
覆盖入门到竞赛难度的 Python 编程题代码生成数据集。
code-generationbenchmark
Code
CodeSearchNet
GitHub
面向代码检索与注释对齐的多语言代码数据集。
code-retrievaldocumentation
Code
DS-1000
University of Hong Kong / others
面向数据科学库使用的 Python 代码生成基准。
code-generationdata-science
Code
HumanEval
OpenAI
用于评估代码生成模型 Python 编程能力的测试数据集。
code-generationbenchmark
CodeMIT
MBPP
Google Research
面向 Python 基础编程题的代码生成基准数据集。
code-generationbenchmark
Code
SWE-bench
Princeton / SWE-bench
基于真实 GitHub issue 评估软件工程修复能力的基准。
software-engineeringbenchmark
Code
The Stack
BigCode
BigCode 发布的大规模多语言源代码数据集,用于代码模型预训练。
pretrainingsource-code
Codeother
The Stack v2
BigCode
The Stack 的升级版本,提供更大规模与更高质量的代码预训练语料。
pretrainingsource-code
Code