ADK.wang AI & 软件技术百科
全库汇聚全球 22,000+ 核心技术词条,深度引证上千本行业权威学术专著,涵盖大模型原理、云原生、架构设计与工程效能。
22,077
全量学术技术词条
9 大
核心专业领域体系
10,000+
权威专著深度引证
100%
原书精粹与工业对齐
专业技术领域分类
共 12 篇词条Named Entity Recognition (NER)
foundational for various NLP applications such as Named Entity Recognition (NER) and sentiment analysis. When fine-tuning these ...
监督微调
Supervised Fine-tuning
· 人类意图对齐训练:使用了监督微调(Supervised Fine-Tuning)、反馈自助(Feedback Bootstrap)、人工强化学习反馈(RLHF)等方式,使模型初具理解人类指令意图的能力。
提示词工程
Prompt Engineering
目前,尝试解决LLM领域专业化问题的方法分为3类:外部增强(External Augmentation)、提示词工程(Prompt Engineering)和模型微调(Model Fine-Tuning),如图5-1所示。
Large Language Models (LLM)
eneral, corporations are on the precipice of something really, really big. Comparing RAG with Model Fine-Tuning#nEstablished Lar...
人工强化学习反馈 (RLHF)
· 人类意图对齐训练:使用了监督微调(Supervised Fine-Tuning)、反馈自助(Feedback Bootstrap)、人工强化学习反馈(RLHF)等方式,使模型初具理解人类指令意图的能力。
微调系统
Fine-Tuning
在介绍BERT的预训练任务前,首先介绍BERT在使用时的思路,即BERT在训练过程中将自己的训练任务和可替换的微调系统(Fine-Tuning)分离。
大白话大模型微调
Fine-tuning
大白话大模型微调(Fine-tuning) - 特定任务的有监督训练 我们用教机器人当小厨师来解释“微调”,就像给它上烹饪特训班!
传统微调
Fine-Tuning
如图5-14所示,传统微调(Fine-Tuning)会更新模型所有的参数,并且需要为每个任务存储一个完整的模型副本。
全参数微调
Full Fine-Tuning
全参数微调 全参数微调( Full Fine-Tuning )是最早的微调技术形式,它使用特定任务数据调整预训 练模型的所有参数,使模型能够适应新任务。
加微调
Fine-tuning
预训练(Pre-training)加微调(Fine-tuning)的迁移学习方法就是一种模型迁移,这种方法也是最常用的迁移学习方法之一。
型微调
Fine-tuning
[[7]模](#indexsplit003.htmlpage13)型微调(Fine-tuning)是指在预训练好的大模型的 基础上,通过使用特定领域或任务的数据进行二次训练,使模 型在特定场景下表现得更好的技术。
大模型做全量参数微调
Full Fine-Tuning
对一个现有的大模型做全量参数微调(Full Fine-Tuning)。