大數(shù)據(jù)時(shí)代讥蟆,用數(shù)據(jù)做出理性分析顯然更為有力。做數(shù)據(jù)分析前停撞,能夠找到合適的數(shù)據(jù)源是一件非常重要的事,獲取數(shù)據(jù)的方式有很多種奄薇,不必局限徘公。本文中給大家推薦一些能夠用得上的數(shù)據(jù)獲取方式~
公開(kāi)數(shù)據(jù)集
常用數(shù)據(jù)公開(kāi)網(wǎng)站
UCI
經(jīng)典的機(jī)器學(xué)習(xí)通熄、數(shù)據(jù)挖掘數(shù)據(jù)集耕腾,包含分類(lèi)、聚類(lèi)云矫、回歸等問(wèn)題下的多個(gè)數(shù)據(jù)集。很經(jīng)典也比較古老,但依然活躍在科研學(xué)者的視線中恐疲。
國(guó)家數(shù)據(jù)
數(shù)據(jù)來(lái)源中華人民共和國(guó)國(guó)家統(tǒng)計(jì)局,包含了我國(guó)經(jīng)濟(jì)民生等多個(gè)方面的數(shù)據(jù)套么,并且在月度培己、季度、年度都有覆蓋胚泌,全面又權(quán)威省咨。
CEIC
最完整的一套超過(guò)128個(gè)國(guó)家的經(jīng)濟(jì)數(shù)據(jù),能夠精確查找GDP玷室、CPI零蓉、進(jìn)口、出口穷缤、外資直接投資敌蜂、零售、銷(xiāo)售以及國(guó)際利率等深度數(shù)據(jù)津肛。其中的“中國(guó)經(jīng)濟(jì)數(shù)據(jù)庫(kù)”收編了300,000多條時(shí)間序列數(shù)據(jù)章喉,數(shù)據(jù)內(nèi)容涵蓋宏觀經(jīng)濟(jì)數(shù)據(jù)、行業(yè)經(jīng)濟(jì)數(shù)據(jù)和地區(qū)經(jīng)濟(jì)數(shù)據(jù)身坐。
萬(wàn)得
被譽(yù)為中國(guó)的Bloomberg秸脱,在金融業(yè)有著全面的數(shù)據(jù)覆蓋,金融數(shù)據(jù)的類(lèi)目更新非巢可撸快摊唇,據(jù)說(shuō)很受?chē)?guó)內(nèi)的商業(yè)分析者和投資人的青睞。
搜數(shù)網(wǎng)
已加載到搜數(shù)網(wǎng)站的統(tǒng)計(jì)資料達(dá)到7874本涯鲁,涵蓋1,761,009張統(tǒng)計(jì)表格和364,580,479個(gè)統(tǒng)計(jì)數(shù)據(jù)遏片,匯集了中國(guó)資訊行自92年以來(lái)收集的所有統(tǒng)計(jì)和調(diào)查數(shù)據(jù),并提供多樣化的搜索功能撮竿。
中國(guó)統(tǒng)計(jì)信息網(wǎng)
國(guó)家統(tǒng)計(jì)局的官方網(wǎng)站吮便,匯集了海量的全國(guó)各級(jí)政府各年度的國(guó)民經(jīng)濟(jì)和社會(huì)發(fā)展統(tǒng)計(jì)信息,建立了以統(tǒng)計(jì)公報(bào)為主幢踏,統(tǒng)計(jì)年鑒髓需、階段發(fā)展數(shù)據(jù)、統(tǒng)計(jì)分析房蝉、經(jīng)濟(jì)新聞僚匆、主要統(tǒng)計(jì)指標(biāo)排行等微渠。
亞馬遜
來(lái)自亞馬遜的跨科學(xué)云數(shù)據(jù)平臺(tái),包含化學(xué)咧擂、生物逞盆、經(jīng)濟(jì)等多個(gè)領(lǐng)域的數(shù)據(jù)集。
figshare
研究成果共享平臺(tái)松申,在這里可以找到來(lái)自世界的大牛們的研究成果分享云芦,獲取其中的研究數(shù)據(jù)。
github
一個(gè)非常全面的數(shù)據(jù)獲取渠道贸桶,包含各個(gè)細(xì)分領(lǐng)域的數(shù)據(jù)庫(kù)資源舅逸,自然科學(xué)和社會(huì)科學(xué)的覆蓋都很全面,適合做研究和數(shù)據(jù)分析的人員皇筛。
政府開(kāi)放數(shù)據(jù)
北京市政務(wù)數(shù)據(jù)資源網(wǎng):包含競(jìng)技琉历、交通、醫(yī)療水醋、天氣等數(shù)據(jù)旗笔。
深圳市政府?dāng)?shù)據(jù)開(kāi)放平臺(tái):交通、文娛拄踪、就業(yè)蝇恶、基礎(chǔ)設(shè)施等數(shù)據(jù)。
上海市政務(wù)數(shù)據(jù)服務(wù)網(wǎng):覆蓋經(jīng)濟(jì)建設(shè)宫蛆、文化科技艘包、信用服務(wù)、交通出行等12個(gè)重點(diǎn)領(lǐng)域數(shù)據(jù)耀盗。
貴州省政府?dāng)?shù)據(jù)開(kāi)放平臺(tái):貴州省在政務(wù)數(shù)據(jù)開(kāi)放方面做的確實(shí)不錯(cuò)想虎。
Data.gov:美國(guó)政府開(kāi)放數(shù)據(jù),包含氣候叛拷、教育舌厨、能源金融等各領(lǐng)域數(shù)據(jù)。
數(shù)據(jù)競(jìng)賽網(wǎng)站
競(jìng)賽的數(shù)據(jù)集通常干凈且可研究性非常高忿薇。
DataCastle:專(zhuān)業(yè)的數(shù)據(jù)科學(xué)競(jìng)賽平臺(tái)裙椭。
Kaggle:全球最大的數(shù)據(jù)競(jìng)賽平臺(tái)。
天池:阿里旗下數(shù)據(jù)科學(xué)競(jìng)賽平臺(tái)署浩。
Datafountain:CCF制定大數(shù)據(jù)競(jìng)賽平臺(tái)揉燃。
利用爬蟲(chóng)可獲得有價(jià)值數(shù)據(jù)
這里給出了一些網(wǎng)站平臺(tái),我們可以使用爬蟲(chóng)爬取網(wǎng)站上的數(shù)據(jù)筋栋,某些網(wǎng)站上也給出獲取數(shù)據(jù)的API接口炊汤,但需要付費(fèi)。
財(cái)經(jīng)數(shù)據(jù)
新浪財(cái)經(jīng):免費(fèi)提供接口,這篇博客教授了如何在新浪財(cái)經(jīng)上獲取獲取歷史和實(shí)時(shí)股票數(shù)據(jù)抢腐。
東方財(cái)富網(wǎng):可以查看財(cái)務(wù)指標(biāo)或者根據(jù)財(cái)務(wù)指標(biāo)選股姑曙。
中財(cái)網(wǎng):提供各類(lèi)財(cái)經(jīng)數(shù)據(jù)。
黃金頭條:各種財(cái)經(jīng)資訊迈倍。
StockQ:國(guó)際股市指數(shù)行情伤靠。
Quandl:金融數(shù)據(jù)界的維基百科。
Investing:投資數(shù)據(jù)啼染。
整合的96個(gè)股票API合集宴合。
Market Data Feed and API:提供大量數(shù)據(jù),付費(fèi)提完,有試用期形纺。
網(wǎng)貸數(shù)據(jù)
網(wǎng)貸之家:包含各大網(wǎng)貸平臺(tái)不同時(shí)間段的放貸數(shù)據(jù)丘侠。
零壹數(shù)據(jù):各大平臺(tái)的放貸數(shù)據(jù)徒欣。
網(wǎng)貸天眼:網(wǎng)貸平臺(tái)、行業(yè)數(shù)據(jù)蜗字。
76676互聯(lián)網(wǎng)金融門(mén)戶:網(wǎng)貸打肝、P2P、理財(cái)?shù)然ソ饠?shù)據(jù)挪捕。
公司年報(bào)
巨潮資訊:各種股市咨詢粗梭,公司股票、財(cái)務(wù)信息级零。
SEC.gov:美國(guó)證券交易數(shù)據(jù)
HKEx news披露易:年度業(yè)績(jī)報(bào)告和年報(bào)断医。
創(chuàng)投數(shù)據(jù)
36氪:最新的投資資訊。
投資潮:投資資訊奏纪、上市公司信息鉴嗤。
IT桔子:各種創(chuàng)投數(shù)據(jù)。
社交平臺(tái)
新浪微博:評(píng)論序调、輿情數(shù)據(jù)醉锅,社交關(guān)系數(shù)據(jù)。
Twitter:輿情數(shù)據(jù)发绢,社交關(guān)系數(shù)據(jù)硬耍。
知乎:優(yōu)質(zhì)問(wèn)答、用戶數(shù)據(jù)边酒。
微信公眾號(hào):公眾號(hào)運(yùn)營(yíng)數(shù)據(jù)经柴。
百度貼吧:輿情數(shù)據(jù)
Tumblr:各種福利圖片、視頻墩朦。
就業(yè)招聘
拉勾:互聯(lián)網(wǎng)行業(yè)人才需求數(shù)據(jù)坯认。
中華英才網(wǎng):招聘信息數(shù)據(jù)。
智聯(lián)招聘:招聘信息數(shù)據(jù)。
獵聘網(wǎng):高端職位招聘數(shù)據(jù)鹃操。
餐飲食品
美團(tuán)外賣(mài):區(qū)域商家韭寸、銷(xiāo)量、評(píng)論數(shù)據(jù)荆隘。
百度外賣(mài):區(qū)域商家恩伺、銷(xiāo)量、評(píng)論數(shù)據(jù)椰拒。
餓了么:區(qū)域商家晶渠、銷(xiāo)量、評(píng)論數(shù)據(jù)燃观。
大眾點(diǎn)評(píng):點(diǎn)評(píng)褒脯、輿情數(shù)據(jù)。
交通旅游
12306:鐵路運(yùn)行數(shù)據(jù)缆毁。
攜程:景點(diǎn)番川、路線、機(jī)票脊框、酒店等數(shù)據(jù)颁督。
去哪兒:景點(diǎn)、路線浇雹、機(jī)票沉御、酒店等數(shù)據(jù)。
途牛:景點(diǎn)昭灵、路線吠裆、機(jī)票、酒店等數(shù)據(jù)烂完。
貓途鷹:世界各地旅游景點(diǎn)數(shù)據(jù)试疙,來(lái)自全球旅行者的真實(shí)點(diǎn)評(píng)。
類(lèi)似的還有同程窜护、驢媽媽效斑、途家等
電商平臺(tái)
亞馬遜:商品、銷(xiāo)量柱徙、折扣缓屠、點(diǎn)評(píng)等數(shù)據(jù)
淘寶:商品、銷(xiāo)量护侮、折扣敌完、點(diǎn)評(píng)等數(shù)據(jù)
天貓:商品、銷(xiāo)量羊初、折扣滨溉、點(diǎn)評(píng)等數(shù)據(jù)
京東:3C產(chǎn)品為主的商品信息什湘、銷(xiāo)量、折扣晦攒、點(diǎn)評(píng)等數(shù)據(jù)
當(dāng)當(dāng):圖書(shū)信息闽撤、銷(xiāo)量、點(diǎn)評(píng)數(shù)據(jù)脯颜。
類(lèi)似的唯品會(huì)哟旗、聚美優(yōu)品、1號(hào)店等栋操。
影音數(shù)據(jù)
豆瓣電影:國(guó)內(nèi)最受歡迎的電影信息闸餐、評(píng)分、評(píng)論數(shù)據(jù)矾芙。
時(shí)光網(wǎng):最全的影視資料庫(kù)舍沙,評(píng)分、影評(píng)數(shù)據(jù)剔宪。
貓眼電影專(zhuān)業(yè)版:實(shí)時(shí)票房數(shù)據(jù)拂铡,電影票房排行。
網(wǎng)易云音樂(lè):音樂(lè)歌單歼跟、歌手信息和媳、音樂(lè)評(píng)論數(shù)據(jù)格遭。
房屋信息
58同城房產(chǎn):二手房數(shù)據(jù)哈街。
安居客:新房和二手房數(shù)據(jù)。
Q房網(wǎng):新房信息拒迅、銷(xiāo)售數(shù)據(jù)骚秦。
房天下:新房、二手房璧微、租房數(shù)據(jù)作箍。
小豬短租:短租房源數(shù)據(jù)。
購(gòu)車(chē)租車(chē)
網(wǎng)易汽車(chē):汽車(chē)資訊前硫、汽車(chē)數(shù)據(jù)胞得。
人人車(chē):二手車(chē)信息、交易數(shù)據(jù)屹电。
中國(guó)汽車(chē)工業(yè)協(xié)會(huì):汽車(chē)制造商產(chǎn)量阶剑、銷(xiāo)量數(shù)據(jù)。
新媒體數(shù)據(jù)
新榜:新媒體平臺(tái)運(yùn)營(yíng)數(shù)據(jù)危号。
清博大數(shù)據(jù):微信公眾號(hào)運(yùn)營(yíng)榜單及輿情數(shù)據(jù)牧愁。
微問(wèn)數(shù)據(jù):一個(gè)針對(duì)微信的數(shù)據(jù)網(wǎng)站。
知微傳播分析:微博傳播數(shù)據(jù)外莲。
分類(lèi)信息
58同城:豐富的同城分類(lèi)信息猪半。
趕集網(wǎng):豐富的同城分類(lèi)信息。