I&#39;ve found out the problem.<div>My platform is CentOS 5.4. I&#39;m not sure whether this will happen in other distro.</div><div>I built the Maui and Torque rpms and the problem was caused by the Maui rpm.</div><div><br>

</div><div>If I configure and make Maui manually, the problem will not happen.</div><div><br></div><div>Finally, I find out that one should edit the /usr/lib/rpm/redhat/macros before building the Maui rpm.</div><div>- %__global_cflags        -O2 -g -pipe -Wall -Wp,-D_FORTIFY_SOURCE=2 -fexceptions -fstack-protector --param=ssp-buffer-size=4</div>

<div><br></div><div>+ %__global_cflags        -O2</div><div><br></div><div>PN</div><div><br><br><div class="gmail_quote">2009/11/8 PN <span dir="ltr">&lt;<a href="mailto:poknam@gmail.com">poknam@gmail.com</a>&gt;</span><br>

<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;">Hi James,<div><br></div><div>I&#39;ve tried your suggestion.</div><div>However the $PBS_NODEFILE only contains node0001:</div>

<div><div>node0001</div><div>node0001</div><div>node0001</div><div>node0001</div><div><br></div>
<div>This make the mpi job fails to start since it conflicts with the HPL.dat settings.</div><div>Any suggestion to due with it?</div><div>Thanks.</div><div><br>PN</div><div><br></div><div><br></div><div><br></div><br><div class="gmail_quote">


2009/11/8 James A. Peltier <span dir="ltr">&lt;<a href="mailto:jpeltier@fas.sfu.ca" target="_blank">jpeltier@fas.sfu.ca</a>&gt;</span><div><div></div><div class="h5"><br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">


<div>On Sat, 7 Nov 2009, PN wrote:<br>
<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
Hi,<br>
<br>
I&#39;m using  maui-3.2.6p21-snap.1252608389 and torque-2.4.2.<br>
I have 2 nodes, each with 4 cpus.<br>
<br>
$ cat pbs.sh<br>
#PBS -l nodes=2:ppn=4<br>
#PBS -N hpl-8cpus<br>
#PBS -j oe<br>
<br>
cd /home/admin/hpl/hpl-2.0-openmpi<br>
<br>
cat $PBS_NODEFILE<br>
<br>
NP=`wc -l $PBS_NODEFILE | awk &#39;{ print $1 }&#39;`<br>
<br>
cat $PBS_NODEFILE | awk &#39;{ print $1&quot;-clust&quot; }&#39; &gt; ./machines<br>
</blockquote>
<br></div>
Have you considered just compiling Open-MPI with Torque support (--with-tm) which might make it work for you.<br>
<br>
-- <br>
James A. Peltier<br>
Systems Analyst (FASNet), VIVARIUM Technical Director<br>
HPC Coordinator<br>
Simon Fraser University - Burnaby Campus<br>
Phone   : 778-782-6573<br>
Fax     : 778-782-3045<br>
E-Mail  : <a href="mailto:jpeltier@sfu.ca" target="_blank">jpeltier@sfu.ca</a><br>
Website : <a href="http://www.fas.sfu.ca" target="_blank">http://www.fas.sfu.ca</a> | <a href="http://vivarium.cs.sfu.ca" target="_blank">http://vivarium.cs.sfu.ca</a><br>
          <a href="http://blogs.sfu.ca/people/jpeltier" target="_blank">http://blogs.sfu.ca/people/jpeltier</a><br>
MSN     : <a href="mailto:subatomic_spam@hotmail.com" target="_blank">subatomic_spam@hotmail.com</a><br>
<br>
Treat your password like your toothbrush.  Don&#39;t let anybody<br>
else use it, and get a new one every six months.<br>
 - Clifford Stoll</blockquote></div></div></div><br><br clear="all"><br>-- <br>Best Regards,<br>PN Lai<br>HPC Specialist<br>Galactic Computng Corp.<br>Tel: 86-755-26733939 ext 826<br>Mobile: 86-13823161729<br>Fax: 86-755-26733780<br>


URL: <a href="http://www.galactic.com.hk" target="_blank">http://www.galactic.com.hk</a><br>
</div>
</blockquote></div><br><br clear="all"><br>-- <br>Best Regards,<br>PN Lai<br>HPC Specialist<br>Galactic Computng Corp.<br>Tel: 86-755-26733939 ext 826<br>Mobile: 86-13823161729<br>Fax: 86-755-26733780<br>URL: <a href="http://www.galactic.com.hk">http://www.galactic.com.hk</a><br>


</div>