<br><br>On Thursday, July 28, 2011 5:55:43 AM UTC-4, sassy wrote:<blockquote class="gmail_quote" style="margin: 0;margin-left: 0.8ex;border-left: 1px #ccc solid;padding-left: 1ex;">Dear all,<p>maybe less of a specific cp2k problem but I was wondering if somebody on the <br>list has made similar experiences before and could comment on it.</p><p>We have a number (18) of a bit dated InfiniBand Opteron dual core 2220 nodes in <br>one cluster. For that last 6 weeks or so cp2k runs tend to crash the node <br>(i.e. kernel panic). In order to rule out any OS related problems I have <br>upgrade the OS to Debian Squeeze and compiled the latest version of cp2k on it <br>using the gfortran 4.4.5 compiler with the Intel MKL which comes with the <br>Intel Fortan Compiler 11.1.073. Compilation on that node went without <br></p></blockquote><div>you didn't say what version of OFED or else you are running to drive the IB cards</div><div>and what type of IB cards to begin with.</div><div><br></div><blockquote class="gmail_quote" style="margin: 0;margin-left: 0.8ex;border-left: 1px #ccc solid;padding-left: 1ex;"><p>I know that plane wave code is quite memory intense but I find it a bit odd <br>that memtest runs ok and cp2k crashes the nodes. I would like to rule out any <br>other possibility but hardware problems. It is easy for me to say that one or <br>two nodes are gone (due to hardware problems beyond repair) but writing off a <br>complete cluster is a bit more difficult to explain. </p><p>Has anybody made similar experiences and would not mind to share it with me? <br>It can be off-list if they prefer.</p></blockquote><div>i've seen similar behavior with infinipath DDR-IB HCAs on some of our nodes.</div><div>all applications would run well, but the communication pattern of cp2k would</div><div>overload the kernel part of the IB driver and lead to intermittent crashes.</div><div> </div><div>cheers,</div><div>    axel.</div><blockquote class="gmail_quote" style="margin: 0;margin-left: 0.8ex;border-left: 1px #ccc solid;padding-left: 1ex;"><p>All the best from a sunny London!</p><p>Jörg</p><p>-- <br>******************************<wbr>******************************<wbr>*<br>Jörg Saßmannshausen<br>University College London<br>Department of Chemistry<br>Gordon Street<br>London<br>WC1H 0AJ </p><p>email: <a>j.sas...@ucl.ac.uk</a><br>web: <a href="http://sassy.formativ.net" target="_blank">http://sassy.formativ.net</a></p><p>Please avoid sending me Word or PowerPoint attachments.<br>See <a href="http://www.gnu.org/philosophy/no-word-attachments.html" target="_blank">http://www.gnu.org/philosophy/<wbr>no-word-attachments.html</a><br></p><p></p><p></p><p></p><p></p><p></p><p></p><p></p><p></p></blockquote>