“大資料”已經成為科學發現的重要機會,而“開放資料”将提高公共研究企業的效率,生産力和創造力,并抵消知識私有化的趨勢。同時公開發表支援科學論文的資料可以為科學的“自我糾正”提供基礎。本文彙總了國内外各大開放資料平台及政府資料,後續将不定期更新,歡迎大家讨論補充。
國内政府資料
1. 國家資料
站點名稱 | 網址 |
國家統計局官網 | https://data.stats.gov.cn/ |
國家林業和草原資料中心 | http://www.forestdata.cn/ |
國家生态資料中心資源共享服務平台 | http://www.nesdc.org.cn/sdo/list |
自然資源部門戶網站 | https://www.mnr.gov.cn/ |
國家氣象科學資料中心 | http://data.cma.cn/data/cdcindex/cid/0b9164954813c573.html |
中國環境監測總站 | http://www.cnemc.cn/sssj/ |
中國政府網 | http://www.gov.cn/shuju/ |
2. 省市資料
省 | 網站名 | 網址 |
四川 | 四川省政府資料開放平台 | https://www.sc.gov.cn/10462/c106730/sjkfzt.shtml |
達州市政府資料開放平台 | http://dazhoudata.cn/oportal/index | |
北京 | 北京市政務資料資源網 | https://data.beijing.gov.cn/ |
北京海澱區資料開放平台 | https://www.bjhd.gov.cn/sjkf/ | |
北京東城區資料開放平台 | http://www.bjdch.gov.cn/n7434/n11632867/n12195028/index.html | |
天津 | 天津市資訊資源統一開放平台 | https://data.tj.gov.cn/ |
上海 | 上海市公共資料開放平台 | https://data.sh.gov.cn/ |
江蘇 | 江蘇省人民政府資料開放平台 | http://www.jiangsu.gov.cn/col/col33688/index.html |
常州市政府資料開放平台 | http://opendata.changzhou.gov.cn/ | |
浙江 | 浙江省政府資料開放平台 | http://data.zjzwfw.gov.cn/jdop_front/index.do |
安徽 | 安徽省政府資料開放平台 | https://www.ah.gov.cn/zfsj/index.html |
馬鞍山市人民政府資料開放平台 | https://www.mas.gov.cn/content/column/4697374 | |
蚌埠市人民政府資料開放平台 | https://www.bengbu.gov.cn/sjkf/index.html | |
黃山市人民政府資料開放平台 | https://www.huangshan.gov.cn/zfsj/index.html | |
福建 | 福建省公共資訊資源統一開放平台 | https://data.fujian.gov.cn/ |
福州市政務資料開放平台 | http://data.fuzhou.gov.cn/ | |
廈門市大資料安全開放平台 | https://data.xm.gov.cn/opendata/#/ | |
江西 | 江西省政府資料開放網站 | https://data.jiangxi.gov.cn/ |
開放撫州門戶 | http://data.jxfz.gov.cn/ | |
山東 | 山東公共資料開放網 | https://data.sd.gov.cn/ |
湖北 | 武漢市公共資料開放平台 | https://data.wuhan.gov.cn/ |
荊門市人民政府資料開放平台 | http://www.jingmen.gov.cn/col/col897/ | |
黃岡市人民政府資料開放平台 | http://www.hg.gov.cn/col/col7161/ | |
湖南 | 湖南省政府資料開放平台 | http://www.hunan.gov.cn/hnszf/zfsj/zfsj.html |
廣東 | 廣東省政府資料開放平台 | https://gddata.gd.gov.cn/index |
廣州市政府資料統一開放平台 | https://data.gz.gov.cn/ | |
深圳市政府資料開放平台 | https://opendata.sz.gov.cn/ | |
東莞市政府資料開放平台 | http://dataopen.dg.gov.cn/dataopen/ | |
廣西 | 南甯市政府資料開放平台 | http://nn.data.gxzf.gov.cn/ |
海南 | 海南省政府資料統一開放平台 | http://data.hainan.gov.cn/ |
三亞市政府資料統一開放平台 | http://dataopen1.sanya.gov.cn/ | |
貴州 | 貴州省政府資料開放平台 | http://data.guizhou.gov.cn/home |
貴陽市政府資料開放平台 | https://data.guiyang.gov.cn/city/index.htm | |
陝西 | 陝西省公共資料開放平台 | http://www.sndata.gov.cn/ |
甯夏 | 甯夏公共資料開放平台 | http://opendata.nx.gov.cn/portal/index |
銀川市城市資料開放平台 | http://data.yinchuan.gov.cn/odweb/ | |
内蒙古 | 内蒙古自治區公共資訊資源開放平台 | http://219.159.12.22/ |
内蒙古統計綜合資料平台 | http://tj.nmg.gov.cn/datashow/index.htm | |
烏海市資料開放平台 | http://www.wuhai.gov.cn/wuhai/xxgk4/jbxxgk46/zfwznb/index.html | |
黑龍江 | 哈爾濱市公共資料開放平台 | http://data.harbin.gov.cn/oportal/index |
佳木斯市政府資料開放平台 | https://data.jms.gov.cn/ | |
澳門 | 澳門特別行政區政府統計暨普查局 | https://www.dsec.gov.mo/zh-MO/ |
體育類-NBA
1. https://www.basketball-reference.com/
最常用的資料網站,資料全,以基礎資料為主。可以導出資料作為Excel檔案,故放在首位。由于為全英文界面,後續會更新一些簡單說明和操作流程。
2. http://www.stat-nba.com/index.php
現已停更,可用于查詢老球員的資料。可以複制資料到Excel。優點為全中文。
3. www.nba.com/stats/
NBA官網資料。
文旅類-各地旅遊資料
1.https://data.wgly.hangzhou.gov.cn/#/
杭州文化和旅遊資料線上,提供杭州多種旅遊資料,還有豐富的圖表呈現,可以學習它的一些配色設計。
2.http://whlyj.beijing.gov.cn/zwgk/zxgs/tjxx/
北京市文化和旅遊局。
資料分析社群
1.https://www.kaggle.com/
Kaggle 社群是一個進行資料發掘和預測競賽的線上平台,有各種主題的大數量資料集。
2.https://www.heywhale.com/home
和鲸社群。
3.https://www.datafountain.cn/datasets?view=downloadSort
dataFountain社群。
國外相關資料網站
1. https://opendata.cityofnewyork.us/
紐約政府開放資料平台
2. https://www.data.gov/
美國官網資料超市
3. https://data.gov.sg/
新加坡政府開放資料平台
5. http://academictorrents.com/
Academic Torrents,共享大量資料集的分布式系統,提供 445.96 TB 的研究資料
6. http://hadoopilluminated.com/hadoop_illuminated/Public_Bigdata_Sets.html
提供國外開放資料網站相關資訊,目前已集合 35 個查詢途徑
7. https://www.census.gov/
美國人口普查局
8. http://usgovxml.com/
美國政府提供的公共 Web 服務和 XML 資料源的索引。http://USGovXML.com 索引來自 美國政府所有 3 個分支機構以及董事會,委員會,公司和獨立機構的資料來源。
9. https://www.enigma.com/
快速搜尋和分析政府、公司群組織釋出的數十億份公共記錄。
10. https://datahub.io/
發現和分享高品質資料集,與他人聯系和分享知識。
11. https://registry.opendata.aws/
幫助人們發現和共享通過 AWS 資源提供的資料集。
12. https://www.quandl.com/
金融,經濟和另類 資料集的主要來源,為投資專業人士提供服務。Quandl 的平台被超過 40 萬人使用,其中包括來自世界頂級對沖基金,資産管理公司和投資銀行的分析師。
13. https://figshare.com/
研究論文上傳網站,已有 2600萬+ 浏覽量、750萬+ 下載下傳、800,000+ 上傳、2000,000+ 文章
14. https://dev.maxmind.com/geoip/geoip2/geolite2/
IP 地理定位資料庫
15. https://www.quora.com/Where-can-I-find-large-datasets-open-to-the-public
公共開放資料集彙總
16. https://www.internationalgenome.org/data
國際基因組樣本資源
17. https://www.google.com/publicdata/directory
谷歌公開資料搜尋網站:Google Public Data
18. https://data.worldbank.org/
世界銀行開放資料搜尋網站:World Bank Data
19. http://chriswhong.github.io/nyctaxi/
紐約計程車資料開放平台:NYC Taxi Data
20. https://www.opendataphilly.org/
費城開放資料平台
21. https://grouplens.org/datasets/
GroupLens,提供關于書籍、電源、wiki資料集等
22. UC Irvine Machine Learning Repository
加州大學歐文機器學習庫,舊版位址:http://archive.ics.uci.edu/ml/index.php
23. http://web.archive.org/web/20150320022752/https://bitly.com/bundles/hmason/1
公共資料集彙總
24. https://www.ncdc.noaa.gov/
美國國家環境資訊中心,監測,評估和提供國家氣候和曆史天氣資料和資訊