<div dir="ltr">Hi,<div><br></div><div>unfortunately I can't see anything obvious - it just seems that the box gets overloaded and things slow down...you can see that the FFTs aren't scaling at all for instance, but it seems to be hitting everything fairly equally, presumably the bottle neck is between the processors on the board.</div><div><br></div><div>Pragmatically, a couple of minor suggestions</div><div>- as Flo said, your cutoff is pretty high, which is making the FFTs etc very costly. Whilst this may well be needed for geometry optimization, a lower cutoff ~400 Ry or should be fine for molecular dynamics</div><div>- if you run with more nodes, the amount of data per node should drop significantly and the scaling should improve significantly. I'd guess you'd see much better scaling if you ran on 64-256 cores (which doesn't help if your infiniband is down, but in the longer term...).</div><div>- depending on what you are planning to do you could experiment with the GAPW method. It should require a much smaller cutoff.</div><div><br></div><div>Sorry for nothing more constructive, maybe someone else will have some bright ideas,</div><div><br></div><div>Matt<br><br>On Tuesday, March 18, 2014 10:46:57 AM UTC, labicia wrote:<blockquote class="gmail_quote" style="margin: 0;margin-left: 0.8ex;border-left: 1px #ccc solid;padding-left: 1ex;"><div dir="ltr">Hi,<div>please find attached the file containing the scaling behavior in a single machine with 4 processors:</div><div>1 MPI </div><div>4 MPI (one MPI per different processor)</div><div>8 MPI (two MPI per processor)</div><div>16 MPI (saturated)</div><div>please note that there is no network communications because the processors are all on the same motherboard.</div><div><br></div><div>Currently our multi node cluster with InfiniBand interconnections is down, but we can assure that scaling across nodes is linear. </div><div><br></div><div>The non-linear scaling within a single node is what concern us! (It seems a waste of resources) <br><br></div><div>Best regards</div><div>Marco and Andrea</div><div><br></div></div></blockquote></div></div>