so wrong mailing list huh?<div><br></div><div>sorry to bother</div><div><br></div><div>thanks for your time<br><br><div class="gmail_quote">On Wed, Nov 30, 2011 at 1:52 PM, Lloyd Brown <span dir="ltr">&lt;<a href="mailto:lloyd_brown@byu.edu">lloyd_brown@byu.edu</a>&gt;</span> wrote:<br>

<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;">Ricardo,<br>
<br>
Have you seen section 4.1.4 (&quot;Mapping a Queue to a Subset of Resources&quot;)<br>
in the Torque documentation?  It might give you some ideas.  However,<br>
the short answer to your question, as seen in that section is this:<br>
<br>
&gt; TORQUE does not currently provide a simple mechanism for mapping queues to nodes. However, schedulers such as Moab and Maui can provide this functionality.<br>
<br>
<br>
Lloyd Brown<br>
Systems Administrator<br>
Fulton Supercomputing Lab<br>
Brigham Young University<br>
<a href="http://marylou.byu.edu" target="_blank">http://marylou.byu.edu</a><br>
<div><div class="h5"><br>
<br>
<br>
On 11/30/2011 12:37 PM, Ricardo Román Brenes wrote:<br>
&gt; Hello everyone thanks for the time of reading and the long post :P<br>
&gt;<br>
&gt;<br>
&gt; The question is about multiple queues with Torque:<br>
&gt;<br>
&gt;<br>
&gt; We have here different clusternodes with difrente architectures:<br>
&gt; 4 PS-3<br>
&gt; 3 CPU+GPU<br>
&gt; 2 CPU<br>
&gt;<br>
&gt; and i want to be able to send jobs to each of hte nodes independly<br>
&gt; (using torque). Im guessing that having several queues and that each<br>
&gt; node belonging to a queue in particular and then submittint jobs to that<br>
&gt; queue will do the trick:<br>
&gt;<br>
&gt; say i got 4 queues<br>
&gt; IBMCELL with the 4 PS-3<br>
&gt; TESLA with the 3 nodes that have GPUs<br>
&gt; XEON with te 5 nodes that have Xeons (which in turn 3 of them have<br>
&gt; teslas :P)<br>
&gt;<br>
&gt; and when i submit a job:<br>
&gt; qsub -q IBMCELL a.pbs<br>
&gt; should run on the PS-3 only, but im not being able to make it work like<br>
&gt; that.<br>
&gt;<br>
&gt; As a test i made 2 queues in the PS3 pbs_server (&quot;uno&quot; and &quot;dos&quot;):<br>
&gt;<br>
&gt;     #<br>
&gt;     # Create queues and set their attributes.<br>
&gt;     #<br>
&gt;     #<br>
&gt;     # Create and define queue uno<br>
&gt;     #<br>
</div></div>&gt;     *create queue uno<br>
&gt;     **set queue uno queue_type = Execution<br>
&gt;     **set queue uno acl_host_enable = False<br>
&gt;     **set queue uno acl_hosts = zarate-0+zarate-1<br>
&gt;     **set queue uno enabled = True<br>
&gt;     **set queue uno started = True<br>
&gt;     *#<br>
<div class="im">&gt;     # Create and define queue dos<br>
&gt;     #<br>
</div>&gt;     *create queue dos<br>
&gt;     **set queue dos queue_type = Execution<br>
&gt;     **set queue dos acl_host_enable = **False**<br>
&gt;     **set queue dos acl_hosts = zarate-2+zarate-3<br>
&gt;     **set queue dos enabled = True<br>
&gt;     **set queue dos started = True<br>
&gt;     *#<br>
<div class="im">&gt;     # Set server attributes.<br>
&gt;     #<br>
&gt;     set server scheduling = True<br>
&gt;     set server acl_hosts = zarate-0<br>
&gt;     set server log_events = 511<br>
&gt;     set server mail_from = adm<br>
&gt;     set server scheduler_iteration = 600<br>
&gt;     set server node_check_rate = 150<br>
&gt;     set server tcp_timeout = 6<br>
&gt;     set server next_job_number = 22<br>
&gt;<br>
&gt;<br>
</div>&gt; and i changed the _nodes_ file in the server_priv directory so it is<br>
<div><div class="h5">&gt; like this (zarate are just the hostname :P):<br>
&gt;<br>
&gt;<br>
&gt;     zarate-0 np=2 uno<br>
&gt;     zarate-1 np=2 uno<br>
&gt;     zarate-2 np=2 dos<br>
&gt;     zarate-3 np=2 dos<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; but its not working... when i launch a job:<br>
&gt;<br>
&gt;     #PBS -N mpi_hello<br>
&gt;     /usr/local/bin/mpiexec -n 8 /home/rroman/a.out<br>
&gt;<br>
&gt;<br>
&gt; with teh command:<br>
&gt;<br>
&gt; #PBS -N mpi_hello<br>
&gt;<br>
&gt;     /usr/local/bin/mpiexec -n 8 /home/rroman/a.out<br>
&gt;<br>
&gt;<br>
&gt; the output file is:<br>
&gt;<br>
&gt;     zarate-1: hello world from process 2 of 8<br>
&gt;     zarate-2: hello world from process 5 of 8<br>
&gt;     zarate-2: hello world from process 6 of 8<br>
&gt;     zarate-3: hello world from process 0 of 8<br>
&gt;     zarate-3: hello world from process 7 of 8<br>
&gt;     zarate-1: hello world from process 3 of 8<br>
&gt;     zarate-0: hello world from process 4 of 8<br>
&gt;     zarate-3: hello world from process 1 of 8<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; And there it shows that the job is running in ALL the nodes instead of<br>
&gt; running only in zarate-0 and zarate-1 as the queue said (according to me :P)<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; SO! the question is: is it possible to do waht i want like this? and if<br>
&gt; so, what am i doing wrong! :P<br>
&gt;<br>
&gt; Thank you Kay!<br>
&gt;<br>
&gt; -ricardo<br>
&gt;<br>
&gt;<br>
&gt;<br>
</div></div>&gt; _______________________________________________<br>
&gt; torqueusers mailing list<br>
&gt; <a href="mailto:torqueusers@supercluster.org">torqueusers@supercluster.org</a><br>
&gt; <a href="http://www.supercluster.org/mailman/listinfo/torqueusers" target="_blank">http://www.supercluster.org/mailman/listinfo/torqueusers</a><br>
_______________________________________________<br>
torqueusers mailing list<br>
<a href="mailto:torqueusers@supercluster.org">torqueusers@supercluster.org</a><br>
<a href="http://www.supercluster.org/mailman/listinfo/torqueusers" target="_blank">http://www.supercluster.org/mailman/listinfo/torqueusers</a><br>
</blockquote></div><br></div>