多卡运行 和 参数问题

为什么项目使用多 GPU 运行 导致推理结果乱码，得到的评估结果很差呢 ？请问是什么原因导致的呢
另外一个问题是，论文说的是实验运用llama2的默认参数，比如温度等。但是实际推理时好像用的是llama-factory的参数，是0.95。而模型的默认温度是0.6。