听说了吗!最近论坛里好些年轻人都在折腾一个叫Ollama的东西,我一开始还以为是啥新出的零食牌子,结果发现是在自己电脑上跑大模型!
你们知道吗,这玩意儿真神了,装好之后敲一行命令就能把Llama、Mistral这些开源模型拉到本地~最绝的是不用联网、不掉隐私,写代码卡壳了就本地问它一句,比切出去开网页快多了。我听说有哥们儿直接拿它本地跑Agent做自动化,连API调用费都省了。
有个事不知道该不该说,我看github上star涨地飞快,背后好像还有一帮做推理优化的在暗中较劲。咱普通人不管那些,好用就完了!你们谁也在玩这个,交流交流心得呗。