本地跑大模型代码助手还挺好用

songray · 2024-9-4 18:21:12 · 71 次点击
用 ollama 跑的 llama3 8b 用来对话,starcode2 3b 用来补全,大概有 copilot 7 成的体验。  

m2 mac mini 同时运行两个模型没啥压力。  

小内存核显本也可以白嫖 cloudflare worker ai 的免费额度。  

Blog: https://ray-d-song.com/zh-cn/blog/continue-free-ai-code-assistant/
举报· 71 次点击
登录 注册 站外分享
2 条回复  
Mianmiss 小成 2024-9-5 08:46:45

本地跑大模型代码助手还挺好用

和通义灵马 比呢?
tabc2tgacd 小成 2024-9-5 12:49:14

本地跑大模型代码助手还挺好用

以前试过在自己本地跑,但是效果很差。等空下了试试你推荐的这个
返回顶部