训练过程问题

[chenxm12394]

作者您好，代码里的随机种子和时间相关，那您的结果是进行了多次实验取平均了吗？如果是的话，具体是多少次呢？

[woxuankai]

您好，感谢提问。
正如您在代码里所见到的那样，我们一开始的时候固定了随机数，确保可视化所使用数据保持一致，然后重新使用时间设置随机种子并继续训练过程。因此，并没有多次实验取平均。

[chenxm12394]

感谢您的回复
但我使用您给的代码仅在不同时间进行运行时，发现可视化结果中的mask，以及产生的训练损失曲线都有较大的差异。请问这不会对最终结果产生影响吗？

上图为不同时间进行训练时4倍随机降采样可视化中的mask以及其训练过程的损失图

[woxuankai]

您好，

但我使用您给的代码仅在不同时间进行运行时，发现可视化结果中的mask，以及产生的训练损失曲线都有较大的差异。

考虑到每次实验中，四种设定使用的都是同样的mask（因为在训练Multi-Modal等模型的同时都会加载Single-Modal的checkpoint），所以我们还是认为，实验比较是公平的，同时也可以体现本方法的鲁棒性。

[chenxm12394]

您好，我理解您的意思了，那能够麻烦您提供一下训练过程中使用的四种Mask的文件吗？感谢。

[woxuankai]

您好，

当前我也已经没有权限访问相关文件了，非常抱歉。

[chenxm12394]

好的，感谢您的回复。