홈 항목 library logo 글 내
자세히

大语言模型系列—预训练数据集及其清洗框架

摘要

​在参与得物大语言模型（Large Language Model, LLM）项目深度实践中，笔者亲历了预训练数据的搜集与清洗全过程。通过梳理现有预训练数据集及其清洗框架，旨在提供全面而实用的参考，为LLM训练提供快速有效的数据集落地方案。

阅读原文
xiaozi 于 2024-01-03 分享
1400 海报分享
关联话题： #得物

欢迎在评论区写下你对这篇文章的看法。

评论

홈 - 위키
Copyright © 2011-2024 iteam. Current version is 2.137.1. UTC+08:00, 2024-11-08 23:40
浙ICP备14020137号-1 $방문자$