<div dir="ltr">Hi Ricardo,<div><br></div><div>Just to add to what Gus wrote, you can run qrun with -H option I believe. If you wanted to push your job, let&#39;s say onto compute-3-2 and compute-3-3, something like this would do it</div>

<div><br></div><div>qrun -H compute-3-2:ppn=8+compute-3-3:ppn=8 &lt;job ID&gt;</div><div><br></div><div>Sreedhar.</div></div><div class="gmail_extra"><br clear="all"><div><div dir="ltr"><font face="arial narrow, sans-serif">Sreedhar Manchu<br>

HPC Systems Administrator</font><div><font><font face="arial narrow, sans-serif">eSystems &amp; Research Services<br>New York University, New York 10012</font><br></font><br></div></div></div>
<br><br><div class="gmail_quote">On Tue, Nov 26, 2013 at 4:03 PM, Gus Correa <span dir="ltr">&lt;<a href="mailto:gus@ldeo.columbia.edu" target="_blank">gus@ldeo.columbia.edu</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">

Hi Ricardo<br>
<br>
1. I think qrun will use the &quot;worst possible node&quot;.<br>
See &#39;man qrun&#39;.<br>
<br>
2. Which scheduler are you using?  There were problems<br>
(job in Q state forever) reported<br>
with pbs_sched on Torque 4.X (probably fixed at this point).<br>
Maui should start the jobs.<br>
<br>
3. Did you enable scheduling?<br>
qmgr -c &#39;set server scheduling = True&#39;<br>
<br>
I hope this helps,<br>
Gus Correa<br>
<div><div class="h5"><br>
On 11/26/2013 03:15 PM, Ricardo Román Brenes wrote:<br>
&gt; Hello everyone.<br>
&gt;<br>
&gt; I got a server running torque and a lot of nodes. Im trying to make ONE<br>
&gt; of those nodes run something.<br>
&gt;<br>
&gt; im issuing<br>
&gt;<br>
&gt; [rroman@meta ~]$ qsub -I -q ps3 -l nodes=1:ppn=2<br>
&gt;<br>
&gt; and the job never runs.<br>
&gt;<br>
&gt; i tried to force-run it with qrun but oddly... it started the<br>
&gt; interactive job in a node that does not belong to that queue...<br>
&gt;<br>
&gt; [rroman@meta ~]$ qsub -I -q ps3 -l nodes=1:ppn=2<br>
&gt; qsub: waiting for job 1038.meta.cnca to start<br>
&gt; qsub: job 1038.meta.cnca ready<br>
&gt;<br>
&gt; [rroman@cadejos-0 ~]$ qstat -f 1038<br>
&gt; Job Id: 1038.meta.cnca<br>
&gt;      Job_Name = STDIN<br>
&gt;      Job_Owner = rroman@meta.cnca<br>
&gt;      job_state = R<br>
&gt;      queue = ps3<br>
&gt;      server = meta.cnca<br>
&gt;      Checkpoint = u<br>
&gt;      ctime = Tue Nov 26 20:27:26 2013<br>
&gt;      Error_Path = /dev/pts/0<br>
&gt;      exec_host = cadejos-0.cnca/1+cadejos-0.cnca/0<br>
&gt;      Hold_Types = n<br>
&gt;      interactive = True<br>
&gt;      Join_Path = n<br>
&gt;      Keep_Files = n<br>
&gt;      Mail_Points = a<br>
&gt;      mtime = Tue Nov 26 20:38:17 2013<br>
&gt;      Output_Path = /dev/pts/0<br>
&gt;      Priority = 0<br>
&gt;      qtime = Tue Nov 26 20:27:26 2013<br>
&gt;      Rerunable = False<br>
&gt;      Resource_List.nodect = 1<br>
&gt;      Resource_List.nodes = 1:ppn=2<br>
&gt;      Resource_List.walltime = 01:00:00<br>
&gt;      session_id = 1668<br>
&gt;      Variable_List = PBS_O_QUEUE=ps3,PBS_O_HOME=/home/rroman,<br>
&gt; PBS_O_LANG=en_US.UTF-8,PBS_O_LOGNAME=rroman,<br>
&gt; PBS_O_PATH=/usr/lib64/qt-3.3/bin:/usr/local/bin:/bin:/usr/bin:/usr/lo<br>
&gt; cal/sbin:/usr/sbin:/sbin:/home/rroman/bin,<br>
&gt; PBS_O_MAIL=/var/spool/mail/rroman,PBS_O_SHELL=/bin/bash,<br>
&gt; PBS_O_HOST=meta.cnca,PBS_SERVER=meta.cnca,PBS_O_WORKDIR=/home/rroman,<br>
&gt; HOSTNAME=meta.cnca,TERM=xterm,SHELL=/bin/bash,HISTSIZE=1000,<br>
&gt; SSH_CLIENT=10.4.255.9 59203 22,QTDIR=/usr/lib64/qt-3.3,<br>
&gt; QTINC=/usr/lib64/qt-3.3/include,SSH_TTY=/dev/pts/1,USER=rroman,<br>
&gt; LS_COLORS=rs=0:di=01;34:ln=01;36:mh=00:pi=40;33:so=01;35:do=01;35:bd=<br>
&gt; 40;33;01:cd=40;33;01:or=40;31;01:mi=01;05;37;41:su=37;41:sg=30;43:ca=3<br>
&gt; 0;41:tw=30;42:ow=34;42:st=37;44:ex=01;32:*.tar=01;31:*.tgz=01;31:*.arj<br>
&gt; =01;31:*.taz=01;31:*.lzh=01;31:*.lzma=01;31:*.tlz=01;31:*.txz=01;31:*.<br>
&gt; zip=01;31:*.z=01;31:*.Z=01;31:*.dz=01;31:*.gz=01;31:*.lz=01;31:*.xz=01<br>
&gt; ;31:*.bz2=01;31:*.tbz=01;31:*.tbz2=01;31:*.bz=01;31:*.tz=01;31:*.deb=0<br>
&gt; 1;31:*.rpm=01;31:*.jar=01;31:*.rar=01;31:*.ace=01;31:*.zoo=01;31:*.cpi<br>
&gt; o=01;31:*.7z=01;31:*.rz=01;31:*.jpg=01;35:*.jpeg=01;35:*.gif=01;35:*.b<br>
&gt; mp=01;35:*.pbm=01;35:*.pgm=01;35:*.ppm=01;35:*.tga=01;35:*.xbm=01;35:*<br>
&gt; .xpm=01;35:*.tif=01;35:*.tiff=01;35:*.png=01;35:*.svg=01;35:*.svgz=01;<br>
&gt; 35:*.mng=01;35:*.pcx=01;35:*.mov=01;35:*.mpg=01;35:*.mpeg=01;35:*.m2v=<br>
&gt; 01;35:*.mkv=01;35:*.ogm=01;35:*.mp4=01;35:*.m4v=01;35:*.mp4v=01;35:*.v<br>
&gt; ob=01;35:*.qt=01;35:*.nuv=01;35:*.wmv=01;35:*.asf=01;35:*.rm=01;35:*.r<br>
&gt; mvb=01;35:*.flc=01;35:*.avi=01;35:*.fli=01;35:*.flv=01;35:*.gl=01;35:*<br>
&gt; .dl=01;35:*.xcf=01;35:*.xwd=01;35:*.yuv=01;35:*.cgm=01;35:*.emf=01;35:<br>
&gt; *.axv=01;35:*.anx=01;35:*.ogv=01;35:*.ogx=01;35:*.aac=01;36:*.au=01;36<br>
&gt; :*.flac=01;36:*.mid=01;36:*.midi=01;36:*.mka=01;36:*.mp3=01;36:*.mpc=0<br>
&gt; 1;36:*.ogg=01;36:*.ra=01;36:*.wav=01;36:*.axa=01;36:*.oga=01;36:*.spx=<br>
&gt; 01;36:*.xspf=01;36:,MAIL=/var/spool/mail/rroman,<br>
&gt; PATH=/usr/lib64/qt-3.3/bin:/usr/local/bin:/bin:/usr/bin:/usr/local/sb<br>
&gt; in:/usr/sbin:/sbin:/home/rroman/bin,PWD=/home/rroman,LANG=en_US.UTF-8,<br>
&gt; SSH_ASKPASS=/usr/libexec/openssh/gnome-ssh-askpass,<br>
&gt; HISTCONTROL=ignoredups,SHLVL=1,HOME=/home/rroman,LOGNAME=rroman,<br>
&gt; QTLIB=/usr/lib64/qt-3.3/lib,CVS_RSH=ssh,<br>
&gt; SSH_CONNECTION=10.4.255.9 59203 192.168.0.2 22,<br>
&gt; LESSOPEN=|/usr/bin/lesspipe.sh %s,DISPLAY=localhost:11.0,<br>
&gt; G_BROKEN_FILENAMES=1,_=/usr/bin/qsub<br>
&gt;      etime = Tue Nov 26 20:27:26 2013<br>
&gt;      submit_args = -V -I -q ps3 -l nodes=1:ppn=2<br>
&gt;      start_time = Tue Nov 26 20:38:17 2013<br>
&gt;      Walltime.Remaining = 3585<br>
&gt;      start_count = 1<br>
&gt;      fault_tolerant = False<br>
&gt;      submit_host = meta.cnca<br>
&gt;      init_work_dir = /home/rroman<br>
&gt;<br>
&gt; [rroman@cadejos-0 ~]$<br>
&gt;<br>
&gt;<br>
&gt; my nodes file:<br>
&gt; [root@meta server_priv]# cat nodes<br>
&gt; cadejos-0.cnca np=8 tesla xeon<br>
&gt; cadejos-1.cnca np=8 tesla xeon<br>
</div></div>&gt; cadejos-2.cnca np=8tesla xeon<br>
<div class="im HOEnZb">&gt; cadejos-3.cnca np=8 xeon<br>
&gt; cadejos-4.cnca np=8 xeon<br>
&gt; zarate-0.cncanp=2ps3<br>
&gt; zarate-1.cncanp=2ps3<br>
&gt; zarate-2.cncanp=2ps3<br>
&gt; zarate-3.cncanp=2ps3<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt;<br>
</div><div class="HOEnZb"><div class="h5">&gt; _______________________________________________<br>
&gt; torqueusers mailing list<br>
&gt; <a href="mailto:torqueusers@supercluster.org">torqueusers@supercluster.org</a><br>
&gt; <a href="http://www.supercluster.org/mailman/listinfo/torqueusers" target="_blank">http://www.supercluster.org/mailman/listinfo/torqueusers</a><br>
<br>
_______________________________________________<br>
torqueusers mailing list<br>
<a href="mailto:torqueusers@supercluster.org">torqueusers@supercluster.org</a><br>
<a href="http://www.supercluster.org/mailman/listinfo/torqueusers" target="_blank">http://www.supercluster.org/mailman/listinfo/torqueusers</a><br>
</div></div></blockquote></div><br></div>