stablediffusion吧 关注:32,765贴子:115,633
  • 6回复贴,共1

大佬们,触发词和提示词什么区别

只看楼主收藏回复

大佬们,如何在训练模型的时候设置触发词




IP属地:广东来自Android客户端1楼2023-09-02 10:05回复
    触发词就是提示词的一种,炼丹时样本都加入一个冷门的词,那就成为触发词,按lora用途有优有劣。


    IP属地:中国香港来自Android客户端2楼2023-09-03 10:22
    收起回复

      举例一个归终lora,作者在右方资讯卡标示了三个触发词 guizhong_genshin default_outfit sleeves over wrists
      按经验来说,前两者就是作者设置的触发词,作者在所要喂食的样本当中都标示guizhong_genshin,而同人作品当中除了不画官方服饰的,使用官服的会再加上default_outfit,这样就是触发词,lora被调用时大模型相关节点的权重会改写,clip传入这些提示词演变成的参数时那些节点就会被更多的激发,使图片展示出归终的样子
      那么,如果不用lora却输入这些提示词,因为大模型没有相关记忆,流向会流到这些空节点并湮没,并没有左右到生成图的结果
      sleeves over wrists是普通的水袖提示词,虽然作者或在样本中有水袖的都加入这提示词,但其实大部份大模型都能做出完全覆盖手部的水袖,但是lora更多的标注了这提示词而形成有触发词之类的用途的话,出图时加上此提示词或会覆写原本的流向而形成趋向出产「很归终的」接近样本提供的水袖样式(先不论效果如何)
      我没有炼lora,但是有设定某额外文本档案要求指训练所示输入的样本应该是有什么的提示词,就如出图时要输入的的格式一样


      IP属地:中国香港3楼2023-09-03 13:01
      收起回复
        浅谈一下我个人的见解和自己训练时的经验,比如说我有十张训练集图片就会有十个tag的文本,触发词这个东西就同时存在这个十个文本中,集这十张图片的共同之处,大多是写图片人物的名字,比如我训练的是初音。输入触发词(初音)+lora后,生成的图片就是训练集的总和的人物效果。 提示词就不同了,比如说训练集里,有连衣裙,泳装,便服等不同的服装。在训练集对应衣服的tag文档里单独写上对应服装的提示词,那么生成时:触发词+提示词(连衣裙)+lord=很接近训练集里的连衣裙样式的人物。


        IP属地:广东4楼2023-09-03 20:07
        收起回复