登录 注册

awesome-public-datasets (高质量公开数据集精选)

去点 Star
开发者工具 aaron-swartzawesome-public-datasetsdatasetsopendata
80,079
Stars
11,949
Forks
2,270
Watchers
169
Open Issues
MIT
许可证
未知
语言
2014-11-20
创建时间
2026-11-12
最近更新

项目能做什么

按主题分类整理的高质量公共开源数据集精选列表。
来源:基于仓库元数据 · 内容以仓库实际 README 为准

使用说明 查看原始 README 原仓库文档

{
  "project_name": "awesome-public-datasets",
  "markdown_guide": "## 项目简介\n\n`awesome-public-datasets` 是一个按主题分类的高质量公开数据集精选列表(属于 Awesome 系列)。该项目最初孵化于上海交通大学 OMNILab,目前归属于白玉兰开源开放 AI 社区(BaiYuLan Open AI community)。列表内的数据集均从各大博客、技术问答和社区反馈中收集整理,涵盖农业(Agriculture)等诸多领域。其中的绝大部分数据集都是免费开放的,但也有少数属于非免费资源。\n\n## 核心功能\n\n- **按主题分类的高质量数据索引**:系统化归纳不同领域的公开数据集,便于快速检索。\n- **状态标识**:每个条目前方带有状态图标,`OK_ICON` 表示链接正常可用,`FIXME_ICON` 表示该资源链接或条目需要修复。\n- **元数据追踪**:大部分数据集都附带了对应的 `Meta` 配置文件链接(基于 `apd-core` 生成的 YAML 文件),方便了解数据集规范。\n\n## 适合谁用\n\n- 需要寻找公开数据进行模型训练、学术实验、论文撰写的高校及科研人员。\n- 寻找真实场景业务数据进行数据分析、数据可视化的开发者与数据工程师。\n\n## 安装步骤\n\n此部分原文未说明,请查看原仓库。\n\n*注:该项目为一个精选资源列表(Curated List),本身不是软件或代码库,无需安装即可直接查阅。*\n\n## 配置说明\n\n此部分原文未说明,请查看原仓库。\n\n## 常见问题\n\n**Q: 我可以直接提 PR 修改该仓库的 README 吗?**\n\nA: 不能。README 原文中特别注明:该仓库内容是由 `apd-core` 自动生成的,**请勿直接修改此文件**。如果你想贡献新的数据集或修正现有内容,需要参考 [apd-core CONTRIBUTING.md](https://github.com/awesomedata/apd-core/blob/master/CONTRIBUTING.md) 提交贡献。"
}
原始 README 摘录(英文原文,节选前 3000 字符)
Awesome Public Datasets
=======================

.. image:: https://cdn.rawgit.com/sindresorhus/awesome/d7305f38d29fed78fa85652e3a63e154dd8e8829/media/badge.svg
   :alt: Awesome
   :target: https://github.com/sindresorhus/awesome

This is a list of `topic-centric public data sources <https://github.com/awesomedata/awesome-public-datasets>`_
in high quality. They are collected and tidied from blogs, answers, and user responses.
Most of the data sets listed below are free, however, some are not.
This project was incubated at `OMNILab <https://github.com/OMNILab>`_, Shanghai Jiao Tong University during Xiaming Chen's Ph.D. studies.
OMNILab is now part of the `BaiYuLan Open AI community <https://github.com/Bai-Yu-Lan>`_.
Other amazingly awesome lists can be found in `sindresorhus's awesome <https://github.com/sindresorhus/awesome>`_ list.

**NOTICE**: This repo is automatically generated by `apd-core <https://github.com/awesomedata/apd-core/tree/master/core>`_.
Please **DO NOT** modify this file directly. We have provided a new way to `contribute to 
this repo <https://github.com/awesomedata/apd-core/blob/master/CONTRIBUTING.md>`_. 
`Join <https://join.slack.com/t/awesomedataworld/shared_invite/zt-dllew5xy-PJYi~mWUdY3hupohbmVZsA>`_ 
the `slack community <https://awesomedataworld.slack.com>`_ for an instant touch of HQ data updates.

.. |OK_ICON| image:: https://raw.githubusercontent.com/awesomedata/apd-core/master/deploy/ok-24.png
.. |FIXME_ICON| image:: https://raw.githubusercontent.com/awesomedata/apd-core/master/deploy/fixme-24.png

* |OK_ICON| I am well.
* |FIXME_ICON| Please fix me.

.. contents:: **Table of Contents**

    
Agriculture
-----------
        
* |OK_ICON| `Chinese Tea Dataset - A curated, open dataset of 100+ Chinese teas covering type, origin, [...] <https://chinatea.house/dataset/>`_ [`Meta <https://github.com/awesomedata/apd-core/tree/master/core//Agriculture/Chinese-Tea-Dataset.yml>`_]
        
* |OK_ICON| `Furrow Farmland Price Index - Agricultural land prices in 37 countries, each from that [...] <https://doi.org/10.5281/zenodo.22212366>`_ [`Meta <https://github.com/awesomedata/apd-core/tree/master/core//Agriculture/Furrow-Farmland-Price-Index.yml>`_]
        
* |OK_ICON| `The global dataset of historical yields for major crops 1981–2016 - The Global Dataset of [...] <https://doi.pangaea.de/10.1594/PANGAEA.909132>`_ [`Meta <https://github.com/awesomedata/apd-core/tree/master/core//Agriculture/Global-dataset-of-historical-yields-for-major-crops.yml>`_]
        
* |OK_ICON| `Hyperspectral benchmark dataset on soil moisture - This dataset was measured in a five-day [...] <https://doi.org/10.5281/zenodo.1227837>`_ [`Meta <https://github.com/awesomedata/apd-core/tree/master/core//Agriculture/Hyperspectral-Benchmark-Dataset-On-Soil-Moisture.yml>`_]
        
* |OK_ICON| `India Agri Export Price Index - Weekly reference prices for 18 Indian agri exports (moringa, [...] <https://nidhi-bhai.github.io/india-agri-export-prices/>`_ [`Meta
阅读完整原文

项目深度分析 规则生成(AI 未配置)

综合评分 58.6 分。该项目在“个人可实施性”维度得 35 分,“付费可能性”维度得 60.0 分,差异化空间 64.0 分(评分依据见评分卡)。

将 awesome-public-datasets 改造为垂直场景 SaaS

产品构想保留核心能力,针对某一类用户(如某行业团队)做托管版,收取月费。
目标用户有该需求的中小团队 / 独立站长
难度/周期较高 · 2~4 周(MVP)
收费模式订阅制(如 ¥29~99/月)
竞争风险需验证付费意愿;注意许可证合规
依据 数据支持的判断:许可证与关键词显示存在商用与付费场景

面向细分需求的二次开发产品

产品构想基于 awesome-public-datasets 的核心能力,聚焦一个更窄的场景(如某平台、某行业)做差异化。
目标用户该细分场景用户
难度/周期中 · 2~6 周
收费模式买断制 / 订阅制 / 广告
竞争风险细分需求规模需验证
依据 AI 推测:基于项目主题标签的判断
以上为规则引擎基于仓库公开数据生成的参考结论,包含推测成分,不构成投资或创业承诺;配置 AI 后可获得更深入的分析。
报告会保存到 个人中心

竞品与相似项目 GitHub Search 真实检索

相似项目数据正在完善中,暂不展示(避免误导)

项目优势与风险

技术成熟度创建于 2014-11-20,近 30 天仍在推送,发布过 1 个 Release
社区活跃Star 80,079 / Fork 11,949 / Issue 169(数据支持,可自行核实)
许可证MIT
主要风险上游项目方向可能变化;同赛道竞争者较多(见竞品表);热度与需求不完全等价

安装与使用

此项目未提供 Docker 镜像,安装步骤以原仓库 README 为准(涉及依赖安装与环境配置,对新手门槛较高)。