推薦5個機(jī)器學(xué)習(xí)Python 庫,國內(nèi)外評價超高

機(jī)器學(xué)習(xí)令人無比神往暑塑,但從事這個工作的人可能并不這么想吼句。

機(jī)器學(xué)習(xí)的工作內(nèi)容往往復(fù)雜枯燥又困難——通過大量重復(fù)工作進(jìn)行提升必不可少:

匯總工作流及傳輸渠道、設(shè)置數(shù)據(jù)源以及在內(nèi)部部署和云部署的資源之間來回分流事格。

所以使用工具提升你的工作效率實在很關(guān)鍵惕艳,而且像這樣的工具越多越好。

好在你學(xué)的是Python驹愚,作為一門威力巨大的工具語言远搪,Python可以給你提供足夠的輔助工具,讓你在大數(shù)據(jù)和機(jī)器學(xué)習(xí)項目中游刃有余么鹤。

唯一的問題在于Python海量的資源庫讓患有選擇困難癥的你難以取舍终娃,因此糖豆貼心的給你找來了目前評價最高的五個Python庫。

Python學(xué)習(xí)資料或者需要代碼、視頻加Python學(xué)習(xí)群:960410445

1. PyWren

項目地址:https://github.com/ericmjonas/pywren

PyWren項目


PyWren棠耕,簡單而強(qiáng)大余佛,用于進(jìn)行基于Python的科學(xué)計算工作。

項目 At The New Stack 的簡介這樣描述 PyWren:

把 AWS Lambda 作為一個巨大的平行處理系統(tǒng)窍荧,以處理那些可被切割成諸多小任務(wù)的項目辉巡,同時還可以節(jié)約很多內(nèi)存和硬盤空間。

Lambda 函數(shù)的一個缺點是運行時間最長不能超過 300 秒蕊退。

但是郊楣,如果你有一個只花費幾分鐘就能完成卻需要在數(shù)據(jù)集中運行數(shù)千次的工作,那么 PyWren 也許是一個好選擇瓤荔,它可以在云端完成一種用戶硬件上不可用的規(guī)模平行化的工作净蚤。

2. Tfdeploy

項目地址:https://github.com/riga/tfdeploy

Tfdeploy項目

如果你需要使用基于谷歌的 TensorFlow 框架的訓(xùn)練模型卻不想使用框架本身的話,Tfdeploy可以幫你输硝。

借由 Tfdeploy今瀑,可以在 Python 中使用模型,而且僅僅需要Numpy 的數(shù)學(xué)和統(tǒng)計庫作為支撐点把。

幾乎所有能在 TensorFlow 上跑的運行也能在 Tfdeploy 上跑橘荠,而且你可以通過標(biāo)準(zhǔn) Python 隱喻方式來延伸庫的行為(比如,超載一個類別)郎逃。

但是哥童,Tf 部署并不支持 GPU 加速。

3.Luigi

項目地址:https://github.com/spotify/luigi

Luigi項目

編寫成批作業(yè)通常只是處理海量數(shù)據(jù)的其中一步:你也不得不將所有這些工作串聯(lián)起來褒翰,做成類似工作流程的東西贮懈。

Luigi 是 Spotify 打造的,用于解決所有通常與長期運行成批處理作業(yè)有關(guān)的管道問題优训。

有了 Luigi错邦,研發(fā)人員就可以從事幾個很難、與數(shù)據(jù)無關(guān)的任務(wù)處理——「 Hive 詢問型宙,在 Jave 上完成的 Hadoop 任務(wù)撬呢, Scala 上的 Spark 任務(wù),從數(shù)據(jù)庫中導(dǎo)出表格」——創(chuàng)造一個端到端運行它們的工作流妆兑。

對任務(wù)的整個描述以及依存性被打造為 Python 模塊魂拦,和 XML 配置文檔或其他數(shù)據(jù)形式不同,因此搁嗓,可以被組合到其他以 Python 為中心的項目中去芯勘。

4.Kubelib

項目地址:https://github.com/safarijv/kubelib

Kubelib項目

如果你采用 Kubernetes 作為完成機(jī)器學(xué)習(xí)工作的編排系統(tǒng)(orchestration system),那你可能要小心的維護(hù)以免其自身運行的BUG比它能解決的問題都多腺逛。

Kubelib 為 Kubernetes 提供了一系列的 Python 接口荷愕,雖說需要 Jekins ing 作為支持,但沒有 Jenkins 的情況下也能夠使用。

它能夠完成 暴露在 kubectl CLI 或者 Kubernetes API 中的所有事安疗。

5.PyTorch

項目地址:https://github.com/pytorch/pytorch

PyTorch項目

最后一個成員還比較新抛杨,但卻已經(jīng)制造了足夠大的聲勢:Python 庫新成員 Pytorch,這一個Torch 機(jī)器學(xué)習(xí)框架工具荐类。

PyTorch 不僅為 Torch 添加了 Python 端口怖现,也增加了許多其他的便利,比如 GPU 加速玉罐,共享內(nèi)存完成多重處理(multiprocessing屈嗤,特別是多核上隔離開的工作。)

最大的亮點在于它們能為 Numpy 中的無加速功能提供 GPU 驅(qū)動的替代選擇吊输。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末饶号,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子季蚂,更是在濱河造成了極大的恐慌讨韭,老刑警劉巖,帶你破解...
    沈念sama閱讀 206,839評論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件癣蟋,死亡現(xiàn)場離奇詭異,居然都是意外死亡狰闪,警方通過查閱死者的電腦和手機(jī)疯搅,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,543評論 2 382
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來埋泵,“玉大人幔欧,你說我怎么就攤上這事±錾” “怎么了礁蔗?”我有些...
    開封第一講書人閱讀 153,116評論 0 344
  • 文/不壞的土叔 我叫張陵,是天一觀的道長雁社。 經(jīng)常有香客問我浴井,道長,這世上最難降的妖魔是什么霉撵? 我笑而不...
    開封第一講書人閱讀 55,371評論 1 279
  • 正文 為了忘掉前任磺浙,我火速辦了婚禮,結(jié)果婚禮上徒坡,老公的妹妹穿的比我還像新娘撕氧。我一直安慰自己,他們只是感情好喇完,可當(dāng)我...
    茶點故事閱讀 64,384評論 5 374
  • 文/花漫 我一把揭開白布伦泥。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪不脯。 梳的紋絲不亂的頭發(fā)上府怯,一...
    開封第一講書人閱讀 49,111評論 1 285
  • 那天,我揣著相機(jī)與錄音跨新,去河邊找鬼富腊。 笑死,一個胖子當(dāng)著我的面吹牛域帐,可吹牛的內(nèi)容都是我干的赘被。 我是一名探鬼主播,決...
    沈念sama閱讀 38,416評論 3 400
  • 文/蒼蘭香墨 我猛地睜開眼肖揣,長吁一口氣:“原來是場噩夢啊……” “哼民假!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起龙优,我...
    開封第一講書人閱讀 37,053評論 0 259
  • 序言:老撾萬榮一對情侶失蹤羊异,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后彤断,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體野舶,經(jīng)...
    沈念sama閱讀 43,558評論 1 300
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 36,007評論 2 325
  • 正文 我和宋清朗相戀三年宰衙,在試婚紗的時候發(fā)現(xiàn)自己被綠了平道。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 38,117評論 1 334
  • 序言:一個原本活蹦亂跳的男人離奇死亡供炼,死狀恐怖一屋,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情袋哼,我是刑警寧澤冀墨,帶...
    沈念sama閱讀 33,756評論 4 324
  • 正文 年R本政府宣布,位于F島的核電站涛贯,受9級特大地震影響诽嘉,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜弟翘,卻給世界環(huán)境...
    茶點故事閱讀 39,324評論 3 307
  • 文/蒙蒙 一含懊、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧衅胀,春花似錦岔乔、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,315評論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽嘿歌。三九已至,卻和暖如春茁影,著一層夾襖步出監(jiān)牢的瞬間宙帝,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 31,539評論 1 262
  • 我被黑心中介騙來泰國打工募闲, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留步脓,地道東北人。 一個月前我還...
    沈念sama閱讀 45,578評論 2 355
  • 正文 我出身青樓浩螺,卻偏偏與公主長得像靴患,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子要出,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 42,877評論 2 345

推薦閱讀更多精彩內(nèi)容