指令数据集SFT
一、SFT 指令数据集完整通俗解释1. SFT 全称Supervised Fine-Tuning监督微调数据集行业简称 SFT 数据集也叫指令跟随数据集。2. 核心作用普通预训练大模型只会续写文字不懂 “听懂人的指令、按要求回答” SFT 数据集就是人工制作的「用户指令 标准答案」配对样本用来微调模型教会模型看懂提问、规范输出、贴合业务场景电商客服、政务问答、行业咨询。3. 标准格式考试固定两种格式 1单轮指令Alpaca 标准考场最常用 JSONL{instruction:如何申请退换货,input:,output:订单签收7天内无损坏可联系客服申请退换上传商品照片即可。}instruction用户指令 / 问题input补充上下文无则为空output模型必须输出的标准回答格式 2多轮对话ChatML智能客服考题{messages: [ {role:user,content:物流几天能到}, {role:assistant,content:普通快递3-5个工作日偏远地区5-7天。} ]}4. 考试里 SFT 数据集要做的操作原始对话清洗、去重、脱敏把杂乱聊天整理成标准指令问答对均衡各类场景样本避免某类问题太少导出 JSONL 格式作为模型微调训练素材质检过滤答非所问、错误、违规样本。二、SFT 指令数据集对应考试哪两道大题结合你官方认定文档1. 前置基础2.1 数据处理规范制定必考 15 分对应 SFT 工作原始数据治理、标注规范、问答对构建细分操作题型多模态文本清洗、敏感信息脱敏编写对话 / 指令数据标注规范原始聊天素材转化为标准指令问答初稿数据集去重、样本均衡、训练 / 验证集划分。考点SFT 数据集前期数据预处理、标注标准、样本均衡规则。2. 核心大题2.2 算法测试必考 20 分三级独有含模型微调SFT 数据集最终使用环节整张试卷唯一考微调的题目细分操作题型完全围绕 SFT导入 2.1 环节产出的 SFT 指令数据集数据集格式校验、过滤低质量指令样本划分训练集 / 验证集配置 LoRA 微调超参数启动微调监控 Loss 曲线解决过拟合 / 欠拟合微调完成后用 SFT 测试集批量推理评测分析 Badcase指令不遵循、幻觉优化 SFT 数据集。总结题号对应关系2.1.X 数据处理规范制定制作、清洗、标准化 SFT 原始指令数据前置工序2.2.X 算法测试使用 SFT 数据集完成模型微调、评测、迭代优化核心应用大题三、考试典型 SFT 实操考题示例2.2 算法测试试题场景电商售后对话大模型微调 操作步骤读取清洗完成的客服对话原始文本批量生成 instruction-output 标准问答对SFT 样本剔除重复、无效、回答错误样本均衡 6 类业务意图导出 JSONL 格式 SFT 训练数据集上传至训练平台设置学习率、epoch 完成 LoRA 微调用测试指令集批量推理计算准确率、召回率汇总模型无法正确响应的指令补充优化 SFT 数据集。四、简历里如何对应写 SFT项目描述原文对应 SFT 内容基于清洗后对话数据构建标准 SFT 指令问答对 8600 条统一 JSONL 训练格式均衡退换货、查物流等 6 类场景样本解决类别样本不均衡问题使用该 SFT 数据集完成 LoRA 轻量化微调模型意图分类准确率由 76.2% 提升至 91.5%。