<div dir="ltr">Hi all,<br><br>I found a discrepancy in total energy and total_magnetization even though I used the same input, the same pw.x, the same Intel libraries, and the same host. The only difference is the number of MPI processes.<div><img src="cid:ii_l8wnd9aj0" alt="mail2.png" width="542" height="32"><br></div><div><br></div><div>Is it expected behavior? If not, can anyone give me advice? Is there any mistake in my input?</div><div><br><br>==Input and output files==</div><div><a href="https://www.scl.kyoto-u.ac.jp/~tchiba/SCFdiff.tar.gz">https://www.scl.kyoto-u.ac.jp/~tchiba/SCFdiff.tar.gz</a></div><div>==</div><div><br></div><div>==QE compilation==</div><div>QE 7.1 is prepared by "./configure --enable-openmp --enable-signals --with-scalapack=intel && make && make install". No issue was found with the test-suite. Version of Intel Compiler, MKL, and MPI was 2018.5.274. </div><div>==QE execution==</div><div><div style="background-color:rgb(30,30,30);font-family:Consolas,"Courier New",monospace;font-size:12px;line-height:16px;white-space:pre"><div style=""><font color="#d4d4d4" style="--darkreader-inline-color:#cdc8c2;">mpirun -genv I_MPI_DEBUG 5 \</font></div><div style=""><font color="#d4d4d4" style="--darkreader-inline-color:#cdc8c2;">-env I_MPI_FABRICS shm:tcp -bootstrap sge -env OMP_NUM_THREADS </font><font color="#87d5fe" style="--darkreader-inline-color:#78d0fe;">1</font><font color="#d4d4d4" style="--darkreader-inline-color:#cdc8c2;"> \</font></div><div style="color:rgb(212,212,212)">pw.x -ni 1 -nk 1 -ndiag 1 -i <span style="color:rgb(156,220,254)">${INP}</span> > <span style="color:rgb(156,220,254)">${OUT}</span></div></div></div><div>==Hardware==</div><div>2x Xeon Gold 6330, 256GB DDR4<br></div><div>(2x 28 Cores Ice Lake)</div><div>==</div><div><br></div><div>==I tried below, but no luck==</div><div>1. Different hosts with the same CPU</div><div>2. QE 7.0</div><div>3. Other pseudo (*.pbe-spn-kjpaw_psl.1.0.0.UPF)</div><div>4. More ecutwfc (120, 160 Ry)</div><div>==</div><div><br></div><div><br></div><div>Sincerely,<br>Takahiro<br><br>---Sender---<br>Takahiro Chiba<br>Grad. school of chem. sci. and eng., Hokkaido Univ.<br>Group:   <a href="https://www.cat.hokudai.ac.jp/hasegawa/HOME.html">https://www.cat.hokudai.ac.jp/hasegawa/HOME.html</a><br>Mail:      <a href="mailto:takahiro_chiba@eis.hokudai.ac.jp">takahiro_chiba@eis.hokudai.ac.jp</a></div></div>