跳到主内容

OpenDataLab

访问官网

OpenDataLab 是上海人工智能实验室大模型数据基座团队打造的数据开放平台,汇聚覆盖文本、图像、视频、语音和三维等多种模态的公开数据集,支持按任务与模态检索、在线预览与高速下载,并提供 Python SDK 与命令行工具接入。适合算法工程师做训练数据选型、科研人员获取公开语料,以及企业做数据准备与文档解析。

分类: AI开发与模型模型与训练 #模型与训练 #OpenDataLab #开源数据集 #大模型语料 #多模态数据 #数据集下载

OpenDataLab 是上海人工智能实验室(大模型数据基座团队)打造的数据开放平台,定位为面向大模型的开放数据基础设施,也是国内大模型语料数据联盟的开源数据服务指定平台。

平台能提供什么

  • 大规模数据集库:覆盖自然语言处理、计算机视觉、多模态、音频语音与三维等方向,模态齐全。
  • 数据集详情与预览:可查看体量、任务类型、标注情况、许可证与在线可视化样例。
  • 多模态语料:包含面向大模型预训练的多语言文本语料与多模态数据系列。
  • 工具链与 SDK:提供 Python SDK 和命令行工具,便于检索、下载并与训练框架衔接。
  • 数据与文档解析工具:团队开源的文档提取工具 MinerU 也被广泛用于把 PDF 类资料转成结构化数据。

适合什么场景

大模型预训练与微调前的数据选型;做多模态任务时寻找带标注的公开数据集;科研课题需要可复现的公开数据来源;企业做文档类资料结构化时评估 MinerU 一类解析工具。

适合哪些人

算法工程师与数据工程师、高校与科研院所的科研人员、需要公开数据集做实验的学生,以及做训练数据准备的企业团队。

注意事项

每个数据集的许可证与使用范围不同,商用前务必逐个核对授权条款;数据来源、标注质量与时效性也会影响训练效果,选型时先看详情页说明而不是只看体量。

官方入口

https://opendatalab.com/

继续探索 AI 工具

从同类、热门或新收录工具里快速找下一站。

返回工具列表

反馈页面信息

请描述需要更正的地方,页面标题和网址会自动附上。

也可以发邮件至 [email protected]