数据集
151 个数据集
热门分类:
VitaBench是一个用于评估大语言模型代理能力的基准测试,基于真实生活服务场景构建,涵盖外卖、到店消费和在线旅游等领域。该基准集成了66种工具,包含100个跨场景任务和300个单场景任务,要求代理在多轮对话中理解模糊指令、追踪用户意图并灵活调用工具。评估显示,当前最先进的模型在跨场景任务上仅能达到32.5%的成功率,凸显了该基准在推动实用化AI代理发展方面的价值。
这是一个大规模、多语言的对话数据集,由13,500多名志愿者众包构建而成。其中包含超过16万条人类编写的助手式对话消息,覆盖35种语言,并附有超过46万条质量评分。数据以对话树形式组织,每条消息包含角色(助手或提示者)、语言、审核结果、标签以及毒性评估等丰富字段,可用于训练和评估对话模型的对齐能力。
OpenOrca是一个大规模英语数据集,专注于自然语言处理中的指令跟随与对话任务。它包含约100万条由GPT-4生成的完成数据和约320万条由GPT-3.5生成的完成数据,总计约420万条样本。该数据集基于FLAN Collection进行增强,旨在与Orca论文中描述的分布对齐,可用于训练和评估高性能语言模型。其覆盖的任务类型广泛,包括对话、问答、文本分类、摘要、文本生成等。数据集采用MIT许可协议开放,是NLP研究和开发的重要资源。
该数据集专为医学大语言模型 HuatuoGPT-o1 的微调设计,包含英文、中文及混合指令等多个版本。数据基于可验证的医学问题构建,通过 GPT-4o 生成推理过程并由医学验证器校验,旨在提升模型在复杂医学推理任务中的表现。
该数据集包含多个股票代码的1分钟级别OHLCV(开盘价、最高价、最低价、收盘价、成交量)数据,所有时间戳均以UTC时区记录。数据集中有一个主要的训练集,以及众多以股票代码命名的独立分片,每个分片对应特定股票的历史行情。整体样本量较大,适合用于金融时间序列分析、量化交易策略回测等场景。
MNBVC 是一个大规模中文语料数据集,由社区持续整理和更新。它包含多个子集,覆盖学术论文、博客、书籍、企业年报、法律判决书、代码等多种文本类型,适用于文本生成、掩码语言建模等自然语言处理任务。数据集以高质量的中文互联网文本为主,旨在为研究和应用提供丰富的语料资源。
FineFineWeb 是一个大规模英文网页语料库,专注于细粒度领域的文本分类与生成。该数据集覆盖了航空航天、农学、艺术、计算机科学、经济学、健康、法律等数十个领域,总计超过1万亿 token。通过多次迭代处理,它提供了丰富的结构化文本,适用于文本分类、文本生成和文本到文本生成等多种自然语言处理任务。
GSM8K(Grade School Math 8K)是一个包含约8500道小学数学应用题的数据集。每个问题都需要2到8步的多步推理,仅涉及基本算术运算(加减乘除),解答以自然语言形式呈现,而非纯数学表达式。该数据集旨在测试语言模型在基础数学推理方面的能力,适合用于文本生成任务。
AgentWorldBench是一个评估语言世界模型能力的综合基准,它基于前沿模型在真实环境中执行任务时的轨迹数据构建而成。该基准覆盖了七个领域:API服务器响应、搜索引擎结果、命令行环境、代码编辑环境、Android UI、浏览器DOM以及桌面操作系统。每个评估样本包含多轮交互历史,要求模型根据之前的动作和观察,预测当前环境观察结果。评价维度包括格式、事实性、一致性、真实性和质量,旨在全面检验世界模型在推理、知识和长上下文理解方面的能力。
这是一个中文数据集,包含约11万条由DeepSeek-R1模型蒸馏得到的指令数据,涵盖数学、考试、STEM以及通用领域(如逻辑推理、社交问答等)。每条数据包含输入、思考过程、输出和评分字段,适用于文本生成、问答等任务的监督微调。数据集采用Apache-2.0许可。
这是一个为 OSWorld 项目提供评估文件缓存的数据集,包含大量用于多模态代理评测的各类文件,覆盖 Chrome、Firefox、GIMP、LibreOffice(Calc、Impress、Writer)、Thunderbird、VS Code 等多个应用场景。文件组织方式按应用分类,每个目录下再按具体评测场景细分,存放图片、文档、电子表格、演示文稿、媒体文件、数据集和配置文件等。该缓存旨在提升文件访问的可靠性和速度,确保评测资源稳定可用,支持直接通过文件路径或编程方式获取。