<html><head><style type='text/css'>p { margin: 0; }</style></head><body><div style='font-family: Times New Roman; font-size: 12pt; color: #000000'>Thanks Rishi,<div><br></div><div>We added "<span class="Apple-style-span" style="font-size: medium; ">ulimit -u unlimited" to the pbs_mom start stop scripts and that has appeared to resolve the issues.</span></div><div><span class="Apple-style-span" style="font-size: medium;"><br></span></div><div><span class="Apple-style-span" style="font-size: medium;">Best Regards,<br></span><br><hr id="zwchr"><blockquote style="border-left:2px solid rgb(16, 16, 255);margin-left:5px;padding-left:5px;">Hi Chris,<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; We faced the same problem with 2.3.6. It seemed like on pbs_mom startup at system boot did'nt inherited limits from /etc/security/limits.conf. We verified this by submitting a interactive job and listing the limits using ulimit -a. Subsequent restart of pbs_mom(w/o reboot) comes up with defined limits. We observed that ssh login for a user shows the correct limits for the node in question. Next what we tried was to make pbs_mom start after sshd, but the results were same. <br>
<br><div class="gmail_quote">On Fri, Jun 18, 2010 at 6:35 PM, Chris Vaughan <span dir="ltr">&lt;<a href="mailto:chris@adaptivecomputing.com" target="_blank">chris@adaptivecomputing.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="border-left: 1px solid rgb(204, 204, 204); margin: 0pt 0pt 0pt 0.8ex; padding-left: 1ex;">
<div><div style="font-family: Times New Roman; font-size: 12pt; color: rgb(0, 0, 0);"><span><p style="font-size: medium;">Hi,</p><p style="font-size: medium;"><br></p><p style="font-size: medium;">I have a customer with the following error with ulimits for the job not being unlimited, does anyone know how to resolve this? &nbsp;Do I need to have this set when pbs_server and pbs_mom starts?</p>
<p style="font-size: medium;"><br></p><p style="font-size: medium;">Thanks,</p><p style="font-size: medium;"><br></p><p style="font-size: medium;">We've been having problems running Fluent software at our site. It works well when running interactively, but it give errors(see attached error file), when running it in a queue. You'll see in the file attached, it complains about 'locked down' memory, which it tries to use for MPI which is using locked memory for Infiniband communications. The /etc/security/limits.conf file on all nodes reads</p>
<p style="font-size: medium;">@ *&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; hard&nbsp;&nbsp;&nbsp; memlock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; unlimited<br>@ * &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; soft&nbsp;&nbsp;&nbsp; memlock&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; unlimited</p><p style="font-size: medium;"><br></p><font color="#888888"><br>-- <br><span></span><div>
<div><div><p><font color="#1f497d"><font size="3"><b>Chris Vaughan</b></font></font><font color="#a6a6a6">&nbsp; |&nbsp; Technical Consultant - EMEA<br></font></p>
<p><font color="#a6a6a6">Adaptive Computing | Mobile: +44 7800 973062 | Office: +44 1483 243578<br></font></p>
<p><font color="#a6a6a6">3000 Cathedral Hill | Guildford GU2 7YB&nbsp; |&nbsp; United Kingdom<br></font></p>
<p>&nbsp;</p>
<p><img dfsrc="http://www.adaptivecomputing.com/sig.png" src="http://www.adaptivecomputing.com/sig.png"></p></div></div></div><span></span><br></font></span></div></div><br>_______________________________________________<br>
torqueusers mailing list<br>
<a href="mailto:torqueusers@supercluster.org" target="_blank">torqueusers@supercluster.org</a><br>
<a href="http://www.supercluster.org/mailman/listinfo/torqueusers" target="_blank">http://www.supercluster.org/mailman/listinfo/torqueusers</a><br>
<br></blockquote></div><br><br clear="all"><br>-- <br>Regards--<br>Rishi Pathak<br>National PARAM Supercomputing Facility<br>Center for Development of Advanced Computing(C-DAC)<br>Pune University Campus,Ganesh Khind Road<br>
Pune-Maharastra<br>
</blockquote><br><span><br><br>-- <br><span name="x"></span><div><div><div><p><font color="#1f497d"><font size="3"><strong>Chris Vaughan</strong></font></font><font color="#a6a6a6">&nbsp; |&nbsp; Technical Consultant - EMEA<br></font></p>
<p><font color="#a6a6a6">Adaptive Computing | Mobile: +44 7800 973062 | Office: +44 1483 243578<br></font></p>
<p><font color="#a6a6a6">3000 Cathedral Hill | Guildford GU2 7YB&nbsp; |&nbsp; United Kingdom<br></font></p>
<p>&nbsp;</p>
<p><img src="http://www.adaptivecomputing.com/sig.png"></p></div></div></div><span name="x"></span><br></span></div></div></body></html>