为什么数据污染对LLM来说是一个大问题
康奈尔大学推出新的社交机器人,更柔软,更人性化
所以,能动手就别吵吵了
OpenAI旗下AI对话工具
在线设计工具Canva推出的AI设计工具
科大讯飞推出的AI转语音和配音工具
阿里最新推出的AI绘画创作模型
WPS免费开放的AI办公助手
数据集:
codeparrot/github-jupyter-text-code-pairs
任务:
子任务:
语言:
计算机处理:
大小:
许可:
这是 github-jupyter-parsed 的解析版本,其中包含了Markdown和代码对。我们在 preprocessing.py 中提供了预处理脚本。数据经过了去重处理,并且包括了451662个示例。
对于类似的包含文本和Python代码的数据集,还有来自StackOverflow的 CoNaLa 基准数据集,其中一些样本由注释者进行了筛选。
作者:
数据集大小:
172.93 MB