ShareGPT数据集用于大模型微调的方法:从数据准备到训练启动的完整流程
ShareGPT中文微调需先清洗并格式转换:确认conversations结构合法、过滤非中文样本、清除HTML/URL;再按ChatGLM3、LLaMA-Factory或Axolotl要求转为instruction-input-ou...
ShareGPT中文微调需先清洗并格式转换:确认conversations结构合法、过滤非中文样本、清除HTML/URL;再按ChatGLM3、LLaMA-Factory或Axolotl要求转为instruction-input-ou...
高质量ShareGPT类对话数据筛选需五步:一评复杂性(≥4.2分且含多层语义),二验连贯性(强依赖轮次语义一致率≥65%),三查真实性(保留有分享理由或收藏/浏览比≥0.18样本),四核格式(from字段仅限human/gpt,co...