<html><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; "><div><blockquote type="cite"><div><blockquote type="cite">If pbs_mom is restarted with the -q option and there are no jobs still running pbs_server will re-queue the jobs so they can be run again later. &nbsp;If jobs are still running when pbs_mom is started with -q, the jobs are terminated, go to an E state but are then re-queued so they can be run again.<br></blockquote></div></blockquote><div><br></div><div><br></div>I briefly tested the -q, it did not get me what I wanted. If you believe -q will allow rerunable jobs to run again after the MOM node gets rebooted after a crash, I'll redo my test.</div><div><br></div><div><br><blockquote type="cite"><div><blockquote type="cite">What was the default behavior previously?</blockquote></div></blockquote><br></div><div><br></div><div>From Torque 2.3.7 man page:</div><div><br></div><div><br></div><div>----</div><div>Normally the mini-server is started from&nbsp;the system boot file without the -p or the&nbsp;-r &nbsp;option. The mini-server will make no&nbsp;attempt to signal the &nbsp;former &nbsp;session of&nbsp;any job which may have been running when&nbsp;the mini-server terminated. It is assumed&nbsp;that on reboot, &nbsp;all processes have been&nbsp;killed. &nbsp;The MOM will &nbsp;mark &nbsp;the &nbsp;jobs &nbsp;as&nbsp;terminated &nbsp;and &nbsp;notify &nbsp;the &nbsp;batch server&nbsp;which owns the job.</div><div><div>----</div><div><br></div></div><div>From OpenPBS man page:</div><div><br></div><div>----</div><div><font class="Apple-style-span" size="3"><span class="Apple-style-span" style="font-size: 12px;">Normally the mini-server is started from the system boot file without the&nbsp;</span></font><small><font class="Apple-style-span" size="3"><span class="Apple-style-span" style="font-size: 12px;">-p</span></font></small><font class="Apple-style-span" size="3"><span class="Apple-style-span" style="font-size: 12px;">&nbsp;or the&nbsp;</span></font><small><font class="Apple-style-span" size="3"><span class="Apple-style-span" style="font-size: 12px;">-r</span></font></small><font class="Apple-style-span" size="3"><span class="Apple-style-span" style="font-size: 12px;">&nbsp;option. The mini-server will make no attempt to signal the former session of any job which may have been running when the mini-server terminated. It is assumed that on reboot, all processes have been killed.</span></font></div><div><div>----</div><div><br></div><div>Looks like Torque added the MOM's sending obit part, which I believe is the problem.</div><div><br></div></div><div apple-content-edited="true"> <span class="Apple-style-span" style="border-collapse: separate; color: rgb(0, 0, 0); font-family: Helvetica; font-size: 12px; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-align: auto; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; -webkit-text-decorations-in-effect: none; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0; "><div style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; "><span class="Apple-style-span" style="border-collapse: separate; color: rgb(0, 0, 0); font-family: Helvetica; font-size: 12px; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; -webkit-text-decorations-in-effect: none; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0px; "><span class="Apple-style-span" style="border-collapse: separate; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; color: rgb(0, 0, 0); font-family: Helvetica; font-size: 12px; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; -webkit-text-decorations-in-effect: none; text-indent: 0px; -webkit-text-size-adjust: auto; text-transform: none; orphans: 2; white-space: normal; widows: 2; word-spacing: 0px; "><div>--&nbsp;</div><div>Wendy Lin</div><div><a href="mailto:hclin@lbl.gov">hclin@lbl.gov</a></div><div><br class="khtml-block-placeholder"></div><br class="Apple-interchange-newline"></span></span><br class="Apple-interchange-newline"></div></span> </div><br></body></html>