AI 词汇表
人工智能完整词典
自定义嵌入
通过Textual Inversion训练的数值向量文件,捕获特定视觉概念的语义特征,可在提示词中使用以影响图像生成。
LyCORIS权重
泛化LoRA的微调权重格式,能够对模型的任何部分(包括U-Net层)应用低秩修改,为模型适配提供更高的灵活性。
概念微调
在目标数据集上调整整个扩散模型的训练过程,使其掌握特定主题、风格或对象,代价是更大的泛化能力损失。
语义保持正则化
微调过程中使用的技术(特别是DreamBooth),通过使用多样化的正则化图像来避免过拟合和模型生成其他概念能力的丧失。
微调检查点
概念微调的完整模型文件(通常数GB),包含扩散网络所有修改后的权重,可替换或与基础模型结合使用。
控制适配器(ControlNet)
条件控制系统,添加可训练的辅助神经网络,以从草图、姿态或深度图等空间输入精确控制图像生成。
类别引导扩散微调
微调的变体,模型不仅由文本条件控制,还由类别标签控制,从而对生成对象的属性实现更精细的控制。
自定义扩散模型
通过DreamBooth或LoRA等技术专门适配的扩散模型,擅长生成独特的风格、角色或视觉世界。
Apprentissage par Diffusion sur le Style
Application du fine-tuning où l'objectif est d'enseigner au modèle de diffusion un style artistique particulier (ex: aquarelle, cyberpunk) en l'entraînant exclusivement sur des images représentatives de ce style.
Fusion de Poids de Fine-tuning
Processus de combinaison mathématique de plusieurs ensembles de poids de fine-tuning (ex: plusieurs LoRAs) pour créer un effet hybride, en ajustant leur ratio d'influence respectif.
Prompt de Référence pour Fine-tuning
Texte descriptif utilisé pendant l'entraînement du fine-tuning pour associer les images d'entraînement à un concept textuel, servant de pont entre les données visuelles et l'espace d'incorporation du modèle.
Quantification de Poids pour Fine-tuning
Technique de réduction de la précision numérique des poids d'un modèle de fine-tuning (ex: de FP32 à FP16 ou INT8) pour diminuer la taille du fichier et l'usage mémoire, souvent au détriment d'une légère perte de qualité.
Fine-tuning à Faible Tirage (Low-Shot)
Défi du fine-tuning qui consiste à adapter un modèle avec un nombre très limité d'exemples d'entraînement, nécessitant des techniques comme DreamBooth ou Textual Inversion pour être efficace.
Dégradation Catastrophique de l'Oubli
Phénomène où un modèle de diffusion, après un fine-tuning intensif sur un concept, oublie comment générer d'autres concepts qu'il maîtrisait auparavant, réduisant sa polyvalence.