只需要一篇就能搞定本地部署DeepSeek钓简,告別服務器繁忙

1 安裝模型部署工具

Ollama是一款開源的本地化大型語言模型(LLM)運行和部署工具讶踪,專注于簡化大型語言模型在本地環(huán)境中的安裝、管理和交互流程牛郑。它特別適合開發(fā)者和研究者快速在本地計算機(尤其是支持GPU的設(shè)備)上運行如Llama菊霜、Mistral、Gemma等主流開源大模型金抡,無需復雜的配置即可直接體驗模型能力。

1.1 下載Ollama

使用瀏覽器打開Ollama下載地址,當前Ollama提供macOS梅鹦、Linux、Windows三種操作系統(tǒng)的安裝包冗锁,讀者選擇合適的安裝包進行下載齐唆,筆者以macOS為例。

image.png

1.2 安裝Ollama

image.png
image.png

1.3 驗證安裝是否成功

安裝完成后冻河,如何判斷Ollama安裝成功呢箍邮?在macOS上使用快捷鍵Command + 空格鍵方式打開聚焦搜索框,輸入“終端”叨叙,按回車鍵打開終端應用程序锭弊。在終端應用程序中輸入ollama -v命令,如果完整輸出Ollama的版本信息擂错,則表示安裝成功味滞。否則,重新打開Ollama安裝包進行安裝钮呀。

image.png

2 部署DeepSeek R1模型

在Ollama官網(wǎng)切換Models頁簽剑鞍,選擇第一個deepseek-r1模型。

image.png

2.1 DeepSeek-R1模型

DeepSeek-R1提供了蒸餾后的小模型1.5b行楞、7b攒暇、8b、14b子房、32b形用、70b就轧,以及基礎(chǔ)大模型671b,區(qū)別主要體現(xiàn)在參數(shù)規(guī)模田度、模型容量妒御、性能表現(xiàn)、準確性镇饺、訓練成本乎莉、推理成本、適用場景以及硬件要求方面奸笤。筆者嘗試使用1.5b模型惋啃,相較于其他模型對硬件的要求比較低,可用于學習监右。

進入deepseek-r1模型詳細頁面边灭,在列表中選擇1.5b,然后復制ollama運行命令健盒。

image.png

2.2 下載DeepSeek-R1模型

在終端中粘貼復制的Ollama命令ollama run deepseek-r1:1.5b绒瘦,當然我們可以指定其存儲路徑。

image.png

注:下載速度過慢扣癣,可以使用^+C退出命令惰帽,然后重新輸入命令啟動下載。

下載完成后父虑,會出現(xiàn)success该酗,表示我們現(xiàn)在可以直接進行對話,或者輸入/?獲取具體的命令列表频轿。

image.png

2.3 初次體驗

接下來垂涯,讓它幫用Java語言編寫輸出9*9乘法口訣的代碼,并輸出結(jié)果航邢。首先耕赘,模型對我們的需求進行了詳細的推理,這種明確的推理過程有效的幫助了用戶對問題的認知膳殷。

image.png

模型根據(jù)推理過程操骡,輸出我們需要的具體內(nèi)容。

image.png

這種形式的輸入輸出對于用于來說赚窃,不是很友好册招,就上面輸出結(jié)果而言,代碼缺少高亮勒极。接下來是掰,我們將

使用一些開源的、支持多種流行LLM模型的桌面客戶端來讓我們的模型更傾向于用戶的使用習慣辱匿。

3 Chatbox

Chatbox是一款支持多種流行LLM模型的桌面客戶端键痛,當前提供macOS炫彩、Windows、Linux操作系統(tǒng)安裝包絮短。

image.png

安裝完成后江兢,在打開的Chatbox中選擇“使用自己的API Key或本地模型”。

image.png

在“選擇并配置AI模型提供方”彈窗中選擇本地部署的“Ollama API”丁频。

image.png

接下來杉允,需要配置我們的模型,在模型下拉列表中選擇我們部署到本地的deepseek-r1:1.5b席里,其他的默認即可叔磷,點擊“保存”按鈕保存即可。

image.png

我們依舊使用2.3小節(jié)的體驗示例來體驗我們的配置的deepseek-r1:1.5b模型胁勺,可以在對話框右上角查看當前使用的模型世澜。

image.png
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
  • 序言:七十年代末独旷,一起剝皮案震驚了整個濱河市署穗,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌嵌洼,老刑警劉巖案疲,帶你破解...
    沈念sama閱讀 219,188評論 6 508
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異麻养,居然都是意外死亡褐啡,警方通過查閱死者的電腦和手機,發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 93,464評論 3 395
  • 文/潘曉璐 我一進店門鳖昌,熙熙樓的掌柜王于貴愁眉苦臉地迎上來备畦,“玉大人,你說我怎么就攤上這事许昨《危” “怎么了?”我有些...
    開封第一講書人閱讀 165,562評論 0 356
  • 文/不壞的土叔 我叫張陵糕档,是天一觀的道長莉恼。 經(jīng)常有香客問我,道長速那,這世上最難降的妖魔是什么俐银? 我笑而不...
    開封第一講書人閱讀 58,893評論 1 295
  • 正文 為了忘掉前任,我火速辦了婚禮端仰,結(jié)果婚禮上捶惜,老公的妹妹穿的比我還像新娘。我一直安慰自己荔烧,他們只是感情好吱七,可當我...
    茶點故事閱讀 67,917評論 6 392
  • 文/花漫 我一把揭開白布坞淮。 她就那樣靜靜地躺著,像睡著了一般陪捷。 火紅的嫁衣襯著肌膚如雪回窘。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 51,708評論 1 305
  • 那天市袖,我揣著相機與錄音啡直,去河邊找鬼。 笑死苍碟,一個胖子當著我的面吹牛酒觅,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播微峰,決...
    沈念sama閱讀 40,430評論 3 420
  • 文/蒼蘭香墨 我猛地睜開眼舷丹,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了蜓肆?” 一聲冷哼從身側(cè)響起颜凯,我...
    開封第一講書人閱讀 39,342評論 0 276
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎仗扬,沒想到半個月后症概,有當?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 45,801評論 1 317
  • 正文 獨居荒郊野嶺守林人離奇死亡早芭,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 37,976評論 3 337
  • 正文 我和宋清朗相戀三年彼城,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片退个。...
    茶點故事閱讀 40,115評論 1 351
  • 序言:一個原本活蹦亂跳的男人離奇死亡募壕,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出语盈,到底是詐尸還是另有隱情舱馅,我是刑警寧澤,帶...
    沈念sama閱讀 35,804評論 5 346
  • 正文 年R本政府宣布黎烈,位于F島的核電站习柠,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏照棋。R本人自食惡果不足惜资溃,卻給世界環(huán)境...
    茶點故事閱讀 41,458評論 3 331
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望烈炭。 院中可真熱鬧溶锭,春花似錦、人聲如沸符隙。這莊子的主人今日做“春日...
    開封第一講書人閱讀 32,008評論 0 22
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至拱绑,卻和暖如春综芥,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背猎拨。 一陣腳步聲響...
    開封第一講書人閱讀 33,135評論 1 272
  • 我被黑心中介騙來泰國打工膀藐, 沒想到剛下飛機就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人红省。 一個月前我還...
    沈念sama閱讀 48,365評論 3 373
  • 正文 我出身青樓额各,卻偏偏與公主長得像,于是被迫代替她去往敵國和親吧恃。 傳聞我的和親對象是個殘疾皇子虾啦,可洞房花燭夜當晚...
    茶點故事閱讀 45,055評論 2 355

推薦閱讀更多精彩內(nèi)容