Sorry, forgot to specify Moab version 3.3.1 and Torque version 2.5.5.<br><br><div class="gmail_quote">On Thu, Mar 24, 2011 at 8:27 PM, Marvin Novaglobal <span dir="ltr">&lt;<a href="mailto:marvin.novaglobal@gmail.com">marvin.novaglobal@gmail.com</a>&gt;</span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;">Hi,<div>    On my setup,</div><div>$ qsub -l nodes=1:ppn=12:1:ppn=1 (works)</div><div>$ qsub -l nodes=2:ppn=12:1:ppn=1 (works)</div>
<div><div>$ qsub -l nodes=3:ppn=12:1:ppn=1 (job goes to idle and never get executed)</div>
</div><div><div>$ qsub -l nodes=4:ppn=12:1:ppn=1 (works)</div></div><div><div>$ qsub -l nodes=5:ppn=12:1:ppn=1 (job goes to idle and never get executed)</div></div><div><br></div><div>&lt;Maui.cfg&gt;</div><div>...</div>
<div>
<div>ENABLEMULTINODEJOBS[0]            TRUE</div><div>ENABLEMULTIREQJOBS[0]              TRUE</div><div>JOBNODEMATCHPOLICY[0]             EXACTNODE</div></div><div><div><div>NODEALLOCATIONPOLICY[0]           MINRESOURCE</div>

</div></div><div><br></div><div><br></div><div>&lt;Torque.cfg&gt;</div><div><div>set server scheduling = True</div><div>set server acl_hosts = aquarius.local</div><div>set server managers = torque@aquarius</div><div>set server operators = torque@aquarius</div>

<div>set server default_queue = DEFAULT</div><div>set server log_events = 511</div><div>set server mail_from = adm</div><div>set server resources_available.nodect = 2048</div><div>set server scheduler_iteration = 600</div>

<div>set server node_check_rate = 150</div><div>set server tcp_timeout = 6</div><div>set server mom_job_sync = True</div><div>set server keep_completed = 300</div><div>set server next_job_number = 377</div></div><div><br>

</div><div>&lt;maui.log&gt;</div><div><div>03/24 20:23:48 MResDestroy(377)</div><div>03/24 20:23:48 MResChargeAllocation(377,2)</div><div>03/24 20:23:48 MQueueSelectJobs(SrcQ,DstQ,SOFT,5120,4096,2140000000,EVERY,FReason,TRUE)</div>

<div>03/24 20:23:48 INFO:     total jobs selected in partition ALL: 1/1</div><div>03/24 20:23:48 MQueueSelectJobs(SrcQ,DstQ,SOFT,5120,4096,2140000000,DEFAULT,FReason,TRUE)</div><div>03/24 20:23:48 INFO:     total jobs selected in partition DEFAULT: 1/1</div>

<div>03/24 20:23:48 MQueueScheduleIJobs(Q,DEFAULT)</div><div>03/24 20:23:48 INFO:     72 feasible tasks found for job 377:0 in partition DEFAULT (36 Needed)</div><div>03/24 20:23:48 INFO:     72 feasible tasks found for job 377:1 in partition DEFAULT (1 Needed)</div>

<div>03/24 20:23:48 ALERT:    inadequate tasks to allocate to job 377:1 (0 &lt; 1)</div><div>03/24 20:23:48 ERROR:    cannot allocate nodes to job &#39;377&#39; in partition DEFAULT</div><div>03/24 20:23:48 MJobPReserve(377,DEFAULT,ResCount,ResCountRej)</div>

<div>03/24 20:23:48 MJobReserve(377,Priority)</div><div>03/24 20:23:48 INFO:     72 feasible tasks found for job 377:0 in partition DEFAULT (36 Needed)</div><div>03/24 20:23:48 INFO:     72 feasible tasks found for job 377:1 in partition DEFAULT (1 Needed)</div>

<div>03/24 20:23:48 INFO:     72 feasible tasks found for job 377:0 in partition DEFAULT (36 Needed)</div><div>03/24 20:23:48 INFO:     72 feasible tasks found for job 377:1 in partition DEFAULT (1 Needed)</div><div>03/24 20:23:48 INFO:     located resources for 36 tasks (144) in best partition DEFAULT for job 377 at time 00:00:01</div>

<div>03/24 20:23:48 INFO:     tasks located for job 377:  37 of 36 required (144 feasible)</div><div>03/24 20:23:48 MResJCreate(377,MNodeList,00:00:01,Priority,Res)</div><div>03/24 20:23:48 INFO:     job &#39;377&#39; reserved 36 tasks (partition DEFAULT) to start in 00:00:01 on Thu Mar 24 20:23:49</div>

<div> (WC: 2592000)</div></div><div><br></div><div>&lt;pbs_server.log&gt;</div><div><div>03/24/2011 20:23:17;0100;PBS_Server;Job;377.aquarius;enqueuing into DEFAULT, state 1 hop 1</div><div>03/24/2011 20:23:17;0008;PBS_Server;Job;377.aquarius;Job Queued at request of torque@aquarius, owner = torque@aquarius, job name = parallel.sh, queue = DEFAULT</div>

<div>03/24/2011 20:23:17;0040;PBS_Server;Svr;aquarius;Scheduler was sent the command new</div></div><div><br></div><div><br></div><div>Anyone encounter problem with multiple job requests? </div><div><br></div><div><br></div>

<div>Regards,</div><div>Marvin</div><font color="#888888"><div><br></div>
</font></blockquote></div><br>