标签: lora

1 篇文章

thumbnail
【教程】ChatGLM3-6B模型微调之Lora方法
最近入手一块NVIDIA Tesla P100-16G,用来学习模型微调。模型跑得也挺快,特好用,也算是进入低配玩转AI了。接下来就来简单讲解一下如何训练模型了。由于ChatGLM3-6B对中文支持较好,也不像Qwen有这么多各种7B、14B等等的版本,那么首先就用ChatGLM3-6B进行训练测试了。 下载训练框架 在ChatGLM3的GitHu…