推薦5個(gè)機(jī)器學(xué)習(xí)Python 庫每辟,國內(nèi)外評(píng)價(jià)超高

機(jī)器學(xué)習(xí)令人無比神往叶堆,但從事這個(gè)工作的人可能并不這么想少梁。

機(jī)器學(xué)習(xí)的工作內(nèi)容往往復(fù)雜枯燥又困難——通過大量重復(fù)工作進(jìn)行提升必不可少:

匯總工作流及傳輸渠道洛口、設(shè)置數(shù)據(jù)源以及在內(nèi)部部署和云部署的資源之間來回分流。

所以使用工具提升你的工作效率實(shí)在很關(guān)鍵凯沪,而且像這樣的工具越多越好第焰。

好在你學(xué)的是Python,作為一門威力巨大的工具語言妨马,Python可以給你提供足夠的輔助工具挺举,讓你在大數(shù)據(jù)和機(jī)器學(xué)習(xí)項(xiàng)目中游刃有余。

唯一的問題在于Python海量的資源庫讓患有選擇困難癥的你難以取舍烘跺,因此糖豆貼心的給你找來了目前評(píng)價(jià)最高的五個(gè)Python庫湘纵。

1. PyWren

項(xiàng)目地址:https://github.com/ericmjonas/pywren

推薦5個(gè)機(jī)器學(xué)習(xí)Python 庫,國內(nèi)外評(píng)價(jià)超高

PyWren項(xiàng)目

PyWren滤淳,簡(jiǎn)單而強(qiáng)大梧喷,用于進(jìn)行基于Python的科學(xué)計(jì)算工作。

項(xiàng)目 At The New Stack 的簡(jiǎn)介這樣描述 PyWren:

把 AWS Lambda 作為一個(gè)巨大的平行處理系統(tǒng)脖咐,以處理那些可被切割成諸多小任務(wù)的項(xiàng)目铺敌,同時(shí)還可以節(jié)約很多內(nèi)存和硬盤空間。

Lambda 函數(shù)的一個(gè)缺點(diǎn)是運(yùn)行時(shí)間最長不能超過 300 秒屁擅。

但是偿凭,如果你有一個(gè)只花費(fèi)幾分鐘就能完成卻需要在數(shù)據(jù)集中運(yùn)行數(shù)千次的工作,那么 PyWren 也許是一個(gè)好選擇派歌,它可以在云端完成一種用戶硬件上不可用的規(guī)模平行化的工作弯囊。

2. Tfdeploy

項(xiàng)目地址:https://github.com/riga/tfdeploy

推薦5個(gè)機(jī)器學(xué)習(xí)Python 庫岂津,國內(nèi)外評(píng)價(jià)超高

Tfdeploy項(xiàng)目

如果你需要使用基于谷歌的 TensorFlow 框架的訓(xùn)練模型卻不想使用框架本身的話寡夹,Tfdeploy可以幫你。

借由 Tfdeploy勺美,可以在 Python 中使用模型早抠,而且僅僅需要Numpy 的數(shù)學(xué)和統(tǒng)計(jì)庫作為支撐霎烙。

幾乎所有能在 TensorFlow 上跑的運(yùn)行也能在 Tfdeploy 上跑,而且你可以通過標(biāo)準(zhǔn) Python 隱喻方式來延伸庫的行為(比如,超載一個(gè)類別)吼过。

但是,Tf 部署并不支持 GPU 加速咪奖。

3.Luigi

項(xiàng)目地址:https://github.com/spotify/luigi

推薦5個(gè)機(jī)器學(xué)習(xí)Python 庫盗忱,國內(nèi)外評(píng)價(jià)超高

Luigi項(xiàng)目

編寫成批作業(yè)通常只是處理海量數(shù)據(jù)的其中一步:你也不得不將所有這些工作串聯(lián)起來,做成類似工作流程的東西羊赵。

Luigi 是 Spotify 打造的趟佃,用于解決所有通常與長期運(yùn)行成批處理作業(yè)有關(guān)的管道問題。

有了 Luigi昧捷,研發(fā)人員就可以從事幾個(gè)很難闲昭、與數(shù)據(jù)無關(guān)的任務(wù)處理——「 Hive 詢問,在 Jave 上完成的 Hadoop 任務(wù)靡挥, Scala 上的 Spark 任務(wù)序矩,從數(shù)據(jù)庫中導(dǎo)出表格」——?jiǎng)?chuàng)造一個(gè)端到端運(yùn)行它們的工作流。

對(duì)任務(wù)的整個(gè)描述以及依存性被打造為 Python 模塊跋破,和 XML 配置文檔或其他數(shù)據(jù)形式不同簸淀,因此,可以被組合到其他以 Python 為中心的項(xiàng)目中去毒返。

4.Kubelib

項(xiàng)目地址:https://github.com/safarijv/kubelib

推薦5個(gè)機(jī)器學(xué)習(xí)Python 庫租幕,國內(nèi)外評(píng)價(jià)超高

Kubelib項(xiàng)目

如果你采用 Kubernetes 作為完成機(jī)器學(xué)習(xí)工作的編排系統(tǒng)(orchestration system),那你可能要小心的維護(hù)以免其自身運(yùn)行的BUG比它能解決的問題都多拧簸。

Kubelib 為 Kubernetes 提供了一系列的 Python 接口劲绪,雖說需要 Jekins ing 作為支持,但沒有 Jenkins 的情況下也能夠使用盆赤。

它能夠完成 暴露在 kubectl CLI 或者 Kubernetes API 中的所有事贾富。

5.PyTorch

項(xiàng)目地址:https://github.com/pytorch/pytorch

推薦5個(gè)機(jī)器學(xué)習(xí)Python 庫,國內(nèi)外評(píng)價(jià)超高

PyTorch項(xiàng)目

最后一個(gè)成員還比較新弟劲,但卻已經(jīng)制造了足夠大的聲勢(shì):Python 庫新成員 Pytorch祷安,這一個(gè)Torch 機(jī)器學(xué)習(xí)框架工具。

PyTorch 不僅為 Torch 添加了 Python 端口兔乞,也增加了許多其他的便利汇鞭,比如 GPU 加速,共享內(nèi)存完成多重處理(multiprocessing庸追,特別是多核上隔離開的工作霍骄。)

最大的亮點(diǎn)在于它們能為 Numpy 中的無加速功能提供 GPU 驅(qū)動(dòng)的替代選擇。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末淡溯,一起剝皮案震驚了整個(gè)濱河市读整,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌咱娶,老刑警劉巖米间,帶你破解...
    沈念sama閱讀 206,839評(píng)論 6 482
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件强品,死亡現(xiàn)場(chǎng)離奇詭異,居然都是意外死亡屈糊,警方通過查閱死者的電腦和手機(jī)的榛,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 88,543評(píng)論 2 382
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來逻锐,“玉大人夫晌,你說我怎么就攤上這事∶劣眨” “怎么了晓淀?”我有些...
    開封第一講書人閱讀 153,116評(píng)論 0 344
  • 文/不壞的土叔 我叫張陵,是天一觀的道長盏档。 經(jīng)常有香客問我凶掰,道長,這世上最難降的妖魔是什么蜈亩? 我笑而不...
    開封第一講書人閱讀 55,371評(píng)論 1 279
  • 正文 為了忘掉前任锄俄,我火速辦了婚禮,結(jié)果婚禮上勺拣,老公的妹妹穿的比我還像新娘奶赠。我一直安慰自己,他們只是感情好药有,可當(dāng)我...
    茶點(diǎn)故事閱讀 64,384評(píng)論 5 374
  • 文/花漫 我一把揭開白布毅戈。 她就那樣靜靜地躺著,像睡著了一般愤惰。 火紅的嫁衣襯著肌膚如雪苇经。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 49,111評(píng)論 1 285
  • 那天宦言,我揣著相機(jī)與錄音扇单,去河邊找鬼。 笑死奠旺,一個(gè)胖子當(dāng)著我的面吹牛蜘澜,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播响疚,決...
    沈念sama閱讀 38,416評(píng)論 3 400
  • 文/蒼蘭香墨 我猛地睜開眼鄙信,長吁一口氣:“原來是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來了忿晕?” 一聲冷哼從身側(cè)響起装诡,我...
    開封第一講書人閱讀 37,053評(píng)論 0 259
  • 序言:老撾萬榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個(gè)月后鸦采,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體宾巍,經(jīng)...
    沈念sama閱讀 43,558評(píng)論 1 300
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,007評(píng)論 2 325
  • 正文 我和宋清朗相戀三年渔伯,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了蜀漆。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點(diǎn)故事閱讀 38,117評(píng)論 1 334
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡咱旱,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出绷耍,到底是詐尸還是另有隱情吐限,我是刑警寧澤,帶...
    沈念sama閱讀 33,756評(píng)論 4 324
  • 正文 年R本政府宣布褂始,位于F島的核電站诸典,受9級(jí)特大地震影響,放射性物質(zhì)發(fā)生泄漏崎苗。R本人自食惡果不足惜狐粱,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 39,324評(píng)論 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望胆数。 院中可真熱鬧肌蜻,春花似錦、人聲如沸必尼。這莊子的主人今日做“春日...
    開封第一講書人閱讀 30,315評(píng)論 0 19
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽判莉。三九已至豆挽,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間券盅,已是汗流浹背帮哈。 一陣腳步聲響...
    開封第一講書人閱讀 31,539評(píng)論 1 262
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留锰镀,地道東北人娘侍。 一個(gè)月前我還...
    沈念sama閱讀 45,578評(píng)論 2 355
  • 正文 我出身青樓,卻偏偏與公主長得像泳炉,于是被迫代替她去往敵國和親私蕾。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 42,877評(píng)論 2 345

推薦閱讀更多精彩內(nèi)容