离线大模型系列 1: 怎么本地部署离线大模型应用 LM Studio?

Silicon Gamer

10/06/2024

1. 部署步骤

下载模型和安装包

硅基玩家 此处内容被隐藏,请输入验证码查看内容。
验证码:
请关注微信公众号,回复“硅基玩家”,获取验证码。在微信里搜索“ 硅基玩家”或者“silicongamer”或者微信扫描右侧二维码都可以关注本站微信公众号。

2. 效果测试

3. 编程

4. 博弈论

 

5. 中英翻译

 

6. 效果对比

  • 和ChatGPT3.5简单测试对比后发现, 回答质量不落下风, 在中文内容方面甚至更有优势.
  • 生成速度等各方面细节也非常不错

7. 总结

OpenAI的ChatGPT 4.0 无疑是目前最简先进的聊天AI, 但是有很多缺点:

  • 需要付费, 比较贵, 而且国内用户付费比较麻烦.
  • 因为不可说的原因, 而且存在网络不稳定, 更换IP会导致账号被封.

所以在本地机器上部署自己的大模型, 具有其自己的优势:

  • 完全离线可控, 不需要联网.
  • 效果和体验良好

 

 

 

 

 

 

发表评论