大模型基础认知与Prompt提示词工程完整笔记
摘要本文从零梳理大模型基础原理、技术演进、训练流程、运行机制、行业应用系统讲解Prompt提示词工程全套实战方法包含零样本/少样本/RAG/角色设定/格式约束/思维链技巧最后总结大模型风险体系与合规治理方案适合AI入门、面试复习、职场实战。一、大模型基础认知1.1 生成式人工智能AIGC定义让人工智能产生结构化、复杂内容的技术核心是赋予AI自主创作能力。常见品类对话类大模型、绘图类大模型、多模态模型、语音大模型等。实用能力修改论文、撰写邮件、文案润色、内容创作、问题解答可作为全能办公助理。局限性模型受训练数据限制存在固有偏见、知识滞后与幻觉问题。1.2 大模型整体认知与技术演变1大模型优点能够整合海量数据与知识库根据用户需求智能提炼、总结、重组内容高效输出高质量答案。2技术演变脉络人工智能为顶层总领域整体呈现嵌套式层级递进发展关系人工智能总领域→ 两大分支机器学习ML、深度学习DL → 生成式人工智能AIGC3机器学习 ML 三大学习范式监督学习依托标注数据集训练用于分类、预测任务。无监督学习基于无标注原始数据自主挖掘数据规律。强化学习模型自主试错、迭代优化提升决策能力。4深度学习 DL 神经网络架构深度学习依托神经网络实现主流三大架构卷积神经网络 CNNs循环神经网络 RNNsTransformer 网络大模型核心基础架构1.3 大模型训练完整流程预训练 → 监督微调SFT→ RLHF人类反馈强化学习核心目标让模型输出贴合人类价值观与使用偏好减少幻觉、规避有害及违规内容。1.4 大模型分类体系1底层技术划分基于Transformer架构大语言模型LLM、多模态模型。2任务场景划分多模态模型可处理文本、图像、音频、视频等多格式输入。模态类型应用场景视觉文本VQR视觉问答、图像字幕、图文检索、文生图、图生图音频文本语音生成、语音摘要、语音识别、语音转写音频视觉音生图、虚拟人演讲人脸生成1.5 大模型工作运行原理用户通过 Prompt提示词 与大模型完成交互。1分词与词表映射分词化将句子拆分为最小语义单元 Token。分词粒度词粒度适用于英文等西方语言字符粒度中文最直接分词方式子词粒度词根、词缀拆分2文本生成过程采用自回归生成根据已有Token概率预测下一个最大概率Token逐字生成直到达到长度阈值或终止Token。1.6 大模型应用场景通义系列为例通义千问通用大语言模型通义万相图像文本生成模型通义百聆语音大模型通义灵码代码辅助开发通义听悟会议速记、同声传译通义法睿法律垂直场景通义晓密智能客服咨询通义星尘虚拟角色个性化创建通义点金金融财报、研报分析二、AI大模型的使用Prompt提示词工程2.1 批量数据处理方案几十份数据人工整理上百份数据大模型批量处理上万份数据调用API自动化批量处理2.2 提示词优化体系1提示词工程步骤理解任务需求 → 构建有效提示词 → 评估提示词效果 → 持续迭代优化2核心提示词技巧① 零样本提问直接提问不提供案例依靠模型原生能力完成任务。要求简洁、具体、无歧义、上下文完整。② 少样本提示增加示例提供少量示例让模型学习任务规则适合分类、判别任务。海量专业场景可结合 RAG检索增强生成。示例选择原则代表性、多样性、格式统一、可模型自生成。③ 角色分配设定给模型设定身份、性格、职业、目标、语言风格、约束规则实现专业化输出。支持动态调整角色状态。④ 限定输出风格与格式风格限定文体、语气、作者风格、情感基调、句式修辞。格式限定字数、段落结构、列表、表格、JSON、学术引用、公文格式。⑤ 思维链 CoT 复杂任务拆解引导模型分步推理避免跳步大幅降低逻辑错误。3提示词框架分类纯指令型背景指令型指令/背景输出指示型综合复合型提示高精度任务首选4通用模型与推理模型选用策略简单、高时效任务使用通用模型复杂逻辑、多步推理任务使用推理模型可组合使用实现Agent决策执行。三、大模型风险与合规治理3.1 风险来源1个人信息风险训练阶段隐私泄露、推理阶段用户隐私采集泄露。2内容安全风险模型幻觉、虚假内容生成来源于数据缺陷、模型缺陷、使用不当、环境因素。3模型安全风险传统软件漏洞 生成模型特有攻击Prompt注入、对抗攻击。4知识产权风险训练数据版权、生成内容版权纠纷。3.2 风险治理方案1个人信息治理数据分级分类、隐私脱敏、拒绝隐私生成、合规处理。2内容安全保障应用层风险拦截、内容溯源与声明、模型风险评测、训练阶段安全对齐。3模型安全防控鲁棒性对抗测试、公平性优化、可解释性溯源。4知识产权保护数据合规获取、内容溯源、制度革新监管。四、总结本文完整覆盖大模型底层原理、训练逻辑、运行机制、行业应用、Prompt工程全套技巧、模型风险与合规体系是一套可直接用于学习、面试、工作落地的完整版笔记。