Home Topic library logo Library Mine
More

ChatGLM-6B 微调：基于 P-Tuningv2 实践

摘要

P-Tuning v2 在 3亿到100 亿参数的广阔参数规模上，均能仅以 0.1%～3% 的微调参数量，取得和精调方法媲美的迁移效果；在文本分类和问答到序列标注的广泛任务类型上，P-Tuning v2 也总能取得和精调方法接近的表现水平。

阅读原文 3018 海报分享
关联话题： #ChatGLM

欢迎在评论区写下你对这篇文章的看法。

评论

Home - Wiki
Copyright © 2011-2024 iteam. Current version is 2.137.1. UTC+08:00, 2024-11-05 14:42
浙ICP备14020137号-1 $Map of visitor$