<div dir="ltr"><div><div>If you are doing rolling upgrades keep your pbs_server at the earlier version and upgrade the pbs_moms to 4.2.6. After all of your MOMs have upgraded then move pbs_server to 4.2.6.<br><br></div>This has been fixed and will be available in all upcoming TORQUE releases.<br>
<br></div>Regards<br></div><div class="gmail_extra"><br><br><div class="gmail_quote">On Wed, Nov 20, 2013 at 3:01 PM, Rick McKay <span dir="ltr">&lt;<a href="mailto:rmckay@adaptivecomputing.com" target="_blank">rmckay@adaptivecomputing.com</a>&gt;</span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Eva,<div><br></div><div>That&#39;s a defect. As soon as you upgrade your MOMs to 4.2.6, they&#39;ll start jobs. It&#39;s marked for correction in 4.2.7. Here&#39;s the changeset hash:</div>
<div><br></div><div>

<font color="#333333" face="Arial, sans-serif"><span style="line-height:20px">345daa2..e3fb235 HEAD -&gt; 4.2-dev</span></font><span class="HOEnZb"><font color="#888888"><br></font></span></div><span class="HOEnZb"><font color="#888888"><div>
<br></div><div>Rick McKay | Technical Support Engineer</div><div>Adaptive Computing</div>


<div><br></div></font></span></div><div class="HOEnZb"><div class="h5"><div class="gmail_extra"><br><br><div class="gmail_quote">On Wed, Nov 20, 2013 at 2:54 PM, Eva Hocks <span dir="ltr">&lt;<a href="mailto:hocks@sdsc.edu" target="_blank">hocks@sdsc.edu</a>&gt;</span> wrote:<br>


<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><br>
<br>
torque server 4.2.6 cannot start jobs on moms running 4.2.5 due to<br>
Undefined attribute  (15002) in send_job_work? Is this an expected behavior?<br>
<br>
<br>
<br>
11/20/2013 13:42:07;0040;PBS_Server.17972;Req;set_nodes;allocating nodes for job 206074.mskcc-fe1.local with node expression &#39;gpu-1-4:ppn=10&#39;<br>
11/20/2013 13:42:07;0040;PBS_Server.17972;Req;set_nodes;job 206074.mskcc-fe1.local allocated 1 nodes (nodelist=gpu-1-4/0+gpu-1-4/1+gpu-1-4/2+gpu-1-4/3+gpu-1-4/4+gpu-1-4/5+gpu-1-4/6+gpu-1-4/7+gpu-1-4/8+gpu-1-4/9)<br>
11/20/2013 13:42:07;0008;PBS_Server.17972;Job;206074.mskcc-fe1.local;Job Run at request of root@mskcc-fe1.local<br>
11/20/2013 13:42:07;0008;PBS_Server.17972;Job;svr_setjobstate;svr_setjobstate: setting job 206074.mskcc-fe1.local state from QUEUED-QUEUED to RUNNING-PRERUN (4-40)<br>
11/20/2013 13:42:07;0008;PBS_Server.17972;Job;206074.mskcc-fe1.local;send of job to gpu-1-4 failed error = 15002<br>
11/20/2013 13:42:07;0001;PBS_Server.17972;Svr;PBS_Server;LOG_ERROR::Undefined attribute  (15002) in send_job_work, child failed in previous commit request for job 206074.mskcc-fe1.local<br>
11/20/2013 13:42:07;0008;PBS_Server.17972;Job;206074.mskcc-fe1.local;entering finish_sendmom<br>
11/20/2013 13:42:07;0002;PBS_Server.17972;Job;206074.mskcc-fe1.local;child reported failure for job after 0 seconds (dest=???), rc=-1<br>
11/20/2013 13:42:07;0008;PBS_Server.17972;Job;206074.mskcc-fe1.local;unable to run job, MOM rejected/rc=-1<br>
11/20/2013 13:42:07;0040;PBS_Server.17972;Req;free_nodes;freeing nodes for job 206074.mskcc-fe1.local<br>
11/20/2013 13:42:07;0008;PBS_Server.17972;Job;svr_setjobstate;svr_setjobstate: setting job 206074.mskcc-fe1.local state from RUNNING-TRNOUT to QUEUED-QUEUED (1-10)<br>
11/20/2013 13:42:07;0040;PBS_Server.17972;Req;free_nodes;freeing nodes for job 206074.mskcc-fe1.local<br>
11/20/2013 13:42:07;0008;PBS_Server.17972;Job;206074.mskcc-fe1.local;unable to run job, send to MOM &#39;183508983&#39; failed<br>
11/20/2013 13:42:07;0008;PBS_Server.17972;Job;svr_setjobstate;svr_setjobstate: setting job 206074.mskcc-fe1.local state from QUEUED-QUEUED to QUEUED-QUEUED (1-10)<br>
<br>
<br>
<br>
Thanks<br>
Eva<br>
<br>
_______________________________________________<br>
torqueusers mailing list<br>
<a href="mailto:torqueusers@supercluster.org" target="_blank">torqueusers@supercluster.org</a><br>
<a href="http://www.supercluster.org/mailman/listinfo/torqueusers" target="_blank">http://www.supercluster.org/mailman/listinfo/torqueusers</a><br>
</blockquote></div><br></div>
</div></div><br>_______________________________________________<br>
torqueusers mailing list<br>
<a href="mailto:torqueusers@supercluster.org">torqueusers@supercluster.org</a><br>
<a href="http://www.supercluster.org/mailman/listinfo/torqueusers" target="_blank">http://www.supercluster.org/mailman/listinfo/torqueusers</a><br>
<br></blockquote></div><br><br clear="all"><br>-- <br>Ken Nielson<br>+1 801.717.3700 office +1 801.717.3738 fax<br>1712 S. East Bay Blvd, Suite 300  Provo, UT  84606<br><a href="http://www.adaptivecomputing.com" target="_blank">www.adaptivecomputing.com</a><br>
<br>
</div>