训练使用的句子长度

by junnyu - opened Nov 22, 2022

我看BAAI/AltDiffusion的tokenizer最大长度被HF改成了77，请问这里是不是也应该为77？

Beijing Academy of Artificial Intelligence org Nov 22, 2022

是的，训练的时候也是参考CLIP原本的设置 77.

好的谢谢，还有个疑惑，这里的model_index.json里面使用的是PNDM scheduler而scheduler文件夹里面用的是ddim scheduler，感觉需要纠正一下吧

Beijing Academy of Artificial Intelligence org Nov 22, 2022

我理解是主要以model_index.json为准，训练的时候用的是ddim，推理的时候可以随意设置

我理解是主要以model_index.json为准，训练的时候用的是ddim，推理的时候可以随意设置
为什么训练的时候用的是ddim?哪里有说明？请问下推理和和训练选择scheduler有什么讲究？

Beijing Academy of Artificial Intelligence org Dec 2, 2022

stable diffusion 给的默认配置里面是DDPM 抽样方法

但是LDM paper里面evaluate主要是用DDIM抽样方法

Upload images, audio, and videos by dragging in the text input, pasting, or clicking here.

Tap or paste here to upload images

· Sign up or log in to comment