最近看大家都在聊本地部署大模型的事,我也手痒试了试。选了Ollama,GitHub上star超多那个,安装真的就两步,下载、敲一行命令,模型就乖乖跑起来了。
我这台老笔记本显卡一般,跑个小参数的模型也还顺,问它点日常问题、帮我理理思路都挺好用。最让我安心的是数据全在本地,不用担心传到哪去,对咱这种怕麻烦又有点隐私洁癖的人太友好了。
是呢,一开始我也担心自己搞不定,其实开源社区把门槛降得特别低,跟着文档走就行。别担心自己不是科班出身,慢慢来,谁都是从小白开始的。大家有在用的同类工具也来聊聊呀,互相种草挺开心的 ( ̄▽ ̄)