<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<!-- Template generated by Exclaimer Mail Disclaimers on 02:58:02 Friday, 6 July 2012 -->
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<style type="text/css">P.6423aeae-e995-4524-ac6a-ae3552255b67 {
        MARGIN: 0cm 0cm 0pt
}
LI.6423aeae-e995-4524-ac6a-ae3552255b67 {
        MARGIN: 0cm 0cm 0pt
}
DIV.6423aeae-e995-4524-ac6a-ae3552255b67 {
        MARGIN: 0cm 0cm 0pt
}
TABLE.6423aeae-e995-4524-ac6a-ae3552255b67Table {
        MARGIN: 0cm 0cm 0pt
}
DIV.Section1 {
        page: Section1
}
</style>
<meta name="Generator" content="Microsoft Word 14 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";
        mso-fareast-language:EN-US;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal-compose;
        font-family:"Calibri","sans-serif";
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-family:"Calibri","sans-serif";
        mso-fareast-language:EN-US;}
@page WordSection1
        {size:612.0pt 792.0pt;
        margin:72.0pt 72.0pt 72.0pt 72.0pt;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-AU" link="blue" vlink="purple">
<p class="6423aeae-e995-4524-ac6a-ae3552255b67"></p>
<div class="WordSection1">
<p class="MsoNormal"><span lang="EN-US">Hi,<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="EN-US"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span lang="EN-US">I’m installing a small HPC cluster at work, which I’ve never done before and it’s causing me problems.&nbsp;
<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="EN-US"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span lang="EN-US">My nodes file contains 14 compute nodes named node01, node02, etc.&nbsp; At the moment I just have four nodes switched on, with the remainder shown as ‘down’ with pbsnodes -a.&nbsp; When I submit a number of jobs, jobs are submitted
 to the first two nodes with the remaining two marked as ‘free’, regardless of how many jobs are waiting to be submitted.&nbsp; Jobs are kept in the queue until either of node01 or node02 come free, then are run.&nbsp; node03 and node12 (the other two live nodes) never
 run a job.<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="EN-US"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span lang="EN-US">However, when I remove node01 for example (by commenting out node01 in the nodes file and restarting pbs_server), jobs will run on node12.&nbsp; Bizarrely, node03 is then marked as ‘down’ in pbsnodes –a.&nbsp;
<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="EN-US"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span lang="EN-US">This is long but basically I’m getting a lot of odd behavior and I’m not sure where to start debugging.&nbsp; All live nodes are running pbs_mom.&nbsp; The system was working as expected with just one compute node.&nbsp; With more than
 one it is having problems. I’m running pbs_sched.&nbsp; Can anyone please help?<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="EN-US"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span lang="EN-US">Cheers,<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="EN-US">Rob<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="EN-US"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span lang="EN-US"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><span lang="EN-US"><o:p>&nbsp;</o:p></span></p>
<p class="MsoNormal"><b><span style="font-size:10.0pt;font-family:&quot;Arial&quot;,&quot;sans-serif&quot;;color:#005581;mso-fareast-language:EN-AU">Rob Holmes</span></b><b><span style="font-size:12.0pt;font-family:&quot;Arial&quot;,&quot;sans-serif&quot;;color:#005581;mso-fareast-language:EN-AU"><o:p></o:p></span></b></p>
<p class="MsoNormal"><b><span style="font-size:9.0pt;font-family:&quot;Arial&quot;,&quot;sans-serif&quot;;color:#1ABDC9;mso-fareast-language:EN-AU">Environmental Scientist&nbsp;– Catchments and Receiving Environments</span></b><b><span style="font-size:12.0pt;font-family:&quot;Arial&quot;,&quot;sans-serif&quot;;color:#005581;mso-fareast-language:EN-AU"><o:p></o:p></span></b></p>
<p class="MsoNormal"><b><span style="font-size:12.0pt;font-family:&quot;Arial&quot;,&quot;sans-serif&quot;;color:#005581;mso-fareast-language:EN-AU">&nbsp;<o:p></o:p></span></b></p>
<p class="MsoNormal"><b><span style="font-size:12.0pt;font-family:&quot;Arial&quot;,&quot;sans-serif&quot;;color:#005581;mso-fareast-language:EN-AU">&nbsp;</span></b><span lang="EN-US"><o:p></o:p></span></p>
</div>
<p></p>
<p class="6423aeae-e995-4524-ac6a-ae3552255b67"><font color="#1f497d" size="2" face="Arial"><strong>BMT WBM Pty Ltd
<br>
</strong></font><font color="#1f497d" size="1" face="Arial"><span style="font-size:xx-small; font-weight: normal; ">Level 8, 200 Creek Street<br>
Brisbane QLD 4000 Australia</span></font></p>
<p class="6423aeae-e995-4524-ac6a-ae3552255b67"><font color="#1f497d" size="1" face="Arial"><strong>P:
</strong></font><span style="font-family:Arial; font-size:xx-small; color: #1F497D; font-weight: normal; ">&#43;61 7 3831 6744</span></p>
<p class="6423aeae-e995-4524-ac6a-ae3552255b67"><span style="font-family:Arial; font-size:xx-small; color: #1F497D; font-weight: normal; "></span></p>
<p class="6423aeae-e995-4524-ac6a-ae3552255b67"><font color="#1f497d" size="1" face="Arial"><strong>F:
</strong></font><span style="font-family:Arial; font-size:xx-small; color: #1F497D; font-weight: normal; "></span></p>
<p style="FONT-SIZE: 8px" class="6423aeae-e995-4524-ac6a-ae3552255b67"><span style="font-family:Arial; font-size:xx-small; color: #1F497D; font-weight: normal; "></span></p>
<p class="6423aeae-e995-4524-ac6a-ae3552255b67"><font color="#1f497d" size="1" face="Arial"><strong>W:&nbsp;www.bmtwbm.com.au</strong></font></p>
<p class="6423aeae-e995-4524-ac6a-ae3552255b67"><font size="1" face="Arial"></font>&nbsp;</p>
<p class="6423aeae-e995-4524-ac6a-ae3552255b67"><font face="Arial"><img id="IMG1" border="0" src="cid:image4b8ac8.GIF@1b9b1df5.4bb7fab4" width="171" height="48">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;
<a href="http://www.bmt.org/times100best"><img id="IMG1" border="0" src="cid:imagee21530.GIF@d18efb23.4ebf582f" width="63" height="60"></a></font></p>
<p class="6423aeae-e995-4524-ac6a-ae3552255b67"><font face="Arial"><font size="1"><br>
<br>
<font color="#606060"><strong>E-mail confidentiality notice and disclaimer:</strong></font><font color="#606060"><a href="http://www.bmt.org/times100best"><strong>&nbsp;<br>
</strong></a>The contents of this e-mail are intended for the use of the mail addressee(s) shown. If you are not that person, you are not allowed to read, action, copy, forward, distribute or disclose the contents and you should delete it from your system.
 BMT WBM accepts no liability for any errors or omissions in the content of this e-mail, nor does it accept liability for statements which are those of the author and clearly not made on behalf of the company.&nbsp;</font></font><br>
<font size="1"><br>
<font color="#606060"><strong>Commercial Terms and Conditions:</strong></font><font color="#606060"><strong>&nbsp;</strong><br>
Unless otherwise agreed by BMT WBM in writing, all services or products supplied by BMT WBM shall be subject to and governed by BMT WBM’s standard terms and conditions, which are available upon request.</font></font></p>
</font>
<p class="6423aeae-e995-4524-ac6a-ae3552255b67">&nbsp;</p>
<p class="6423aeae-e995-4524-ac6a-ae3552255b67"></p>
<p></p>
<p></p>
</body>
</html>