小男孩‘自慰网亚洲一区二区,亚洲一级在线播放毛片,亚洲中文字幕av每天更新,黄aⅴ永久免费无码,91成人午夜在线精品,色网站免费在线观看,亚洲欧洲wwwww在线观看

分享

簡單兩步將Lllama、Qwen等開源大模型安裝到自己的電腦上

 AIGC部落 2024-05-08 發(fā)布于廣東

現(xiàn)在已經(jīng)有非常多優(yōu)秀的開源大語言模型了,比如Command R+、Mistral、Qwen、MiniMax、Baichuan、Phi3等,其中Lllama3和Qwen等已經(jīng)和GPT4的性能比較接近了。

如果能把這些免費的開源大模型部署到本地電腦或手機上,可以完全自由的使用,而且數(shù)據(jù)安全性有保障,可以節(jié)省大量成本。對于高手而言,還可以對這些大模型進行微調(diào)等深度定制,來滿足個性化需求。

將大模型安裝部署到電腦上也非常方便,簡單兩步即可:

第一步:下載安裝Ollama軟件https://ollama.com/download

安裝完成后,在電腦上打開命令提示符,并輸入ollama serve來啟動Ollama服務(wù):

然后輸入命令:ollama pull phi3,這是來下載微軟的Phi-3模型:

下載完成后,輸入命令:ollama run phi3,這時候 phi3大模型就運行成功了:

但是,這樣在命令行界面下對話,非常不方便。接下來安裝一個圖形界面,然后和大模型的對話就和ChatGPT對話一樣了。

第二步:安裝圖形界面chatbox https://chatboxai.app/zh

點擊打開chatbox,設(shè)置中AI模型提供方選擇olllam

API域名是http://localhost:11434,系統(tǒng)已經(jīng)默認(rèn)填好了,模型選擇剛才安裝的phi3

Ok,接下來就可以暢快的和phi3模型聊天了:

Ollama支持的開源模型是非常多的,具體可以在官網(wǎng)進行查看:

比如如果想安裝阿里巴巴的qwen大模型,可以在命令行中輸入:

ollama run qwen:7b

安裝llama3:

ollama run llama3

安裝Llama 2 對話中文微調(diào)參數(shù)模型:

ollama run llama2-chinese

    轉(zhuǎn)藏 分享 獻花(0

    0條評論

    發(fā)表

    請遵守用戶 評論公約

    類似文章 更多