“大数据”已经成为科学发现的重要机会,而“开放数据”将提高公共研究企业的效率,生产力和创造力,并抵消知识私有化的趋势。同时公开发表支持科学论文的数据可以为科学的“自我纠正”提供基础。本文汇总了国内外各大开放数据平台及政府数据,后续将不定期更新,欢迎大家讨论补充。
国内政府数据
1. 国家数据
站点名称 | 网址 |
国家统计局官网 | https://data.stats.gov.cn/ |
国家林业和草原数据中心 | http://www.forestdata.cn/ |
国家生态数据中心资源共享服务平台 | http://www.nesdc.org.cn/sdo/list |
自然资源部门户网站 | https://www.mnr.gov.cn/ |
国家气象科学数据中心 | http://data.cma.cn/data/cdcindex/cid/0b9164954813c573.html |
中国环境监测总站 | http://www.cnemc.cn/sssj/ |
中国政府网 | http://www.gov.cn/shuju/ |
2. 省市数据
省 | 网站名 | 网址 |
四川 | 四川省政府数据开放平台 | https://www.sc.gov.cn/10462/c106730/sjkfzt.shtml |
达州市政府数据开放平台 | http://dazhoudata.cn/oportal/index | |
北京 | 北京市政务数据资源网 | https://data.beijing.gov.cn/ |
北京海淀区数据开放平台 | https://www.bjhd.gov.cn/sjkf/ | |
北京东城区数据开放平台 | http://www.bjdch.gov.cn/n7434/n11632867/n12195028/index.html | |
天津 | 天津市信息资源统一开放平台 | https://data.tj.gov.cn/ |
上海 | 上海市公共数据开放平台 | https://data.sh.gov.cn/ |
江苏 | 江苏省人民政府数据开放平台 | http://www.jiangsu.gov.cn/col/col33688/index.html |
常州市政府数据开放平台 | http://opendata.changzhou.gov.cn/ | |
浙江 | 浙江省政府数据开放平台 | http://data.zjzwfw.gov.cn/jdop_front/index.do |
安徽 | 安徽省政府数据开放平台 | https://www.ah.gov.cn/zfsj/index.html |
马鞍山市人民政府数据开放平台 | https://www.mas.gov.cn/content/column/4697374 | |
蚌埠市人民政府数据开放平台 | https://www.bengbu.gov.cn/sjkf/index.html | |
黄山市人民政府数据开放平台 | https://www.huangshan.gov.cn/zfsj/index.html | |
福建 | 福建省公共信息资源统一开放平台 | https://data.fujian.gov.cn/ |
福州市政务数据开放平台 | http://data.fuzhou.gov.cn/ | |
厦门市大数据安全开放平台 | https://data.xm.gov.cn/opendata/#/ | |
江西 | 江西省政府数据开放网站 | https://data.jiangxi.gov.cn/ |
开放抚州门户 | http://data.jxfz.gov.cn/ | |
山东 | 山东公共数据开放网 | https://data.sd.gov.cn/ |
湖北 | 武汉市公共数据开放平台 | https://data.wuhan.gov.cn/ |
荆门市人民政府数据开放平台 | http://www.jingmen.gov.cn/col/col897/ | |
黄冈市人民政府数据开放平台 | http://www.hg.gov.cn/col/col7161/ | |
湖南 | 湖南省政府数据开放平台 | http://www.hunan.gov.cn/hnszf/zfsj/zfsj.html |
广东 | 广东省政府数据开放平台 | https://gddata.gd.gov.cn/index |
广州市政府数据统一开放平台 | https://data.gz.gov.cn/ | |
深圳市政府数据开放平台 | https://opendata.sz.gov.cn/ | |
东莞市政府数据开放平台 | http://dataopen.dg.gov.cn/dataopen/ | |
广西 | 南宁市政府数据开放平台 | http://nn.data.gxzf.gov.cn/ |
海南 | 海南省政府数据统一开放平台 | http://data.hainan.gov.cn/ |
三亚市政府数据统一开放平台 | http://dataopen1.sanya.gov.cn/ | |
贵州 | 贵州省政府数据开放平台 | http://data.guizhou.gov.cn/home |
贵阳市政府数据开放平台 | https://data.guiyang.gov.cn/city/index.htm | |
陕西 | 陕西省公共数据开放平台 | http://www.sndata.gov.cn/ |
宁夏 | 宁夏公共数据开放平台 | http://opendata.nx.gov.cn/portal/index |
银川市城市数据开放平台 | http://data.yinchuan.gov.cn/odweb/ | |
内蒙古 | 内蒙古自治区公共信息资源开放平台 | http://219.159.12.22/ |
内蒙古统计综合数据平台 | http://tj.nmg.gov.cn/datashow/index.htm | |
乌海市数据开放平台 | http://www.wuhai.gov.cn/wuhai/xxgk4/jbxxgk46/zfwznb/index.html | |
黑龙江 | 哈尔滨市公共数据开放平台 | http://data.harbin.gov.cn/oportal/index |
佳木斯市政府数据开放平台 | https://data.jms.gov.cn/ | |
澳门 | 澳門特別行政區政府統計暨普查局 | https://www.dsec.gov.mo/zh-MO/ |
体育类-NBA
1. https://www.basketball-reference.com/
最常用的数据网站,数据全,以基础数据为主。可以导出数据作为Excel文件,故放在首位。由于为全英文界面,后续会更新一些简单说明和操作流程。
2. http://www.stat-nba.com/index.php
现已停更,可用于查询老球员的数据。可以复制数据到Excel。优点为全中文。
3. www.nba.com/stats/
NBA官网数据。
文旅类-各地旅游数据
1.https://data.wgly.hangzhou.gov.cn/#/
杭州文化和旅游数据在线,提供杭州多种旅游数据,还有丰富的图表呈现,可以学习它的一些配色设计。
2.http://whlyj.beijing.gov.cn/zwgk/zxgs/tjxx/
北京市文化和旅游局。
数据分析社区
1.https://www.kaggle.com/
Kaggle 社区是一个进行数据发掘和预测竞赛的在线平台,有各种主题的大数量数据集。
2.https://www.heywhale.com/home
和鲸社区。
3.https://www.datafountain.cn/datasets?view=downloadSort
dataFountain社区。
国外相关数据网站
1. https://opendata.cityofnewyork.us/
纽约政府开放数据平台
2. https://www.data.gov/
美国官网数据超市
3. https://data.gov.sg/
新加坡政府开放数据平台
5. http://academictorrents.com/
Academic Torrents,共享大量数据集的分布式系统,提供 445.96 TB 的研究数据
6. http://hadoopilluminated.com/hadoop_illuminated/Public_Bigdata_Sets.html
提供国外开放数据网站相关信息,目前已集合 35 个查询途径
7. https://www.census.gov/
美国人口普查局
8. http://usgovxml.com/
美国政府提供的公共 Web 服务和 XML 数据源的索引。http://USGovXML.com 索引来自 美国政府所有 3 个分支机构以及董事会,委员会,公司和独立机构的数据来源。
9. https://www.enigma.com/
快速搜索和分析政府、公司和组织发布的数十亿份公共记录。
10. https://datahub.io/
发现和分享高质量数据集,与他人联系和分享知识。
11. https://registry.opendata.aws/
帮助人们发现和共享通过 AWS 资源提供的数据集。
12. https://www.quandl.com/
金融,经济和另类 数据集的主要来源,为投资专业人士提供服务。Quandl 的平台被超过 40 万人使用,其中包括来自世界顶级对冲基金,资产管理公司和投资银行的分析师。
13. https://figshare.com/
研究论文上传网站,已有 2600万+ 浏览量、750万+ 下载、800,000+ 上传、2000,000+ 文章
14. https://dev.maxmind.com/geoip/geoip2/geolite2/
IP 地理定位数据库
15. https://www.quora.com/Where-can-I-find-large-datasets-open-to-the-public
公共开放数据集汇总
16. https://www.internationalgenome.org/data
国际基因组样本资源
17. https://www.google.com/publicdata/directory
谷歌公开数据搜索网站:Google Public Data
18. https://data.worldbank.org/
世界银行开放数据搜索网站:World Bank Data
19. http://chriswhong.github.io/nyctaxi/
纽约出租车数据开放平台:NYC Taxi Data
20. https://www.opendataphilly.org/
费城开放数据平台
21. https://grouplens.org/datasets/
GroupLens,提供关于书籍、电源、wiki数据集等
22. UC Irvine Machine Learning Repository
加州大学欧文机器学习库,旧版地址:http://archive.ics.uci.edu/ml/index.php
23. http://web.archive.org/web/20150320022752/https://bitly.com/bundles/hmason/1
公共数据集汇总
24. https://www.ncdc.noaa.gov/
美国国家环境信息中心,监测,评估和提供国家气候和历史天气数据和信息