<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 3.2//EN">
<HTML>
<HEAD>
<META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=us-ascii">
<META NAME="Generator" CONTENT="MS Exchange Server version 6.5.7652.24">
<TITLE>Getting started</TITLE>
</HEAD>
<BODY>
<!-- Converted from text/rtf format -->

<P><FONT SIZE=2 FACE="Arial">All,</FONT>
</P>

<P><FONT SIZE=2 FACE="Arial">Ok, I have been using Torque and the default scheduler for a bit now and I am finally getting around to trying out maui.</FONT></P>

<P><FONT SIZE=2 FACE="Arial">First, I prefer to use RPMs when I add/remove software from our system. It is a bit cleaner. So I build Torque RPMs from the spec file that is included with it.</FONT></P>

<P><FONT SIZE=2 FACE="Arial">For Maui, I came across a nice one at </FONT><A HREF="http://hepunx.rl.ac.uk/~traylens/rpms/maui/"><U><FONT COLOR="#0000FF" SIZE=2 FACE="Arial">http://hepunx.rl.ac.uk/~traylens/rpms/maui/</FONT></U></A>

<BR><FONT SIZE=2 FACE="Arial">I decided to use the p17 src rpm and rebuild it. It seems to work very well. I had to make a change in the maui.cfg file for my systems (use the server name rather than localhost and update it to use RMCFG) and I added the config path for my installation of Torque but that was it.</FONT></P>

<P><FONT SIZE=2 FACE="Arial">I installed the client package on the login node and the server+client package on the server with Torque. So far so good. I turned off the pbs_sched from Torque and started Maui. </FONT></P>

<P><FONT SIZE=2 FACE="Arial">I am no able to run showq and see what is up. I submitted a job and it went through. Cool!</FONT>
</P>

<P><FONT SIZE=2 FACE="Arial">But wait, the output of my job is simple, it says 'Hello, I am process X of Y on node Z&quot;. My script requests 5 nodes with 1 processors per node, but my output is only showing one node that it ran on!?</FONT></P>

<P><FONT SIZE=2 FACE="Arial">Hmm. I stop maui and restart pbs_sched and resubmit the job. It runs, and the output is showing info from 5 nodes. So apparently there is more that has to be done for Maui to work. </FONT></P>

<P><FONT SIZE=2 FACE="Arial">Any ideas? My submission script follows:</FONT>
</P>

<P><FONT SIZE=2 FACE="Arial">-------------------------------------------------------</FONT>

<BR><FONT SIZE=2 FACE="Arial">#!/bin/bash</FONT>

<BR><FONT SIZE=2 FACE="Arial">#PBS -j oe</FONT>

<BR><FONT SIZE=2 FACE="Arial">#PBS -l nodes=5:ppn=1</FONT>

<BR><FONT SIZE=2 FACE="Arial">#PBS -N TestJob</FONT>

<BR><FONT SIZE=2 FACE="Arial">#PBS -q medium</FONT>

<BR><FONT SIZE=2 FACE="Arial">#PBS -o output.txt</FONT>
</P>

<P><FONT SIZE=2 FACE="Arial">mpiexec --bynode /data/andrus/hello</FONT>

<BR><FONT SIZE=2 FACE="Arial">-------------------------------------------------------</FONT>
</P>

<P><FONT SIZE=2 FACE="Arial">cat output.txt (when using pbs_sched)</FONT>

<BR><FONT SIZE=2 FACE="Arial">-------------------------------------------------------</FONT>

<BR><FONT SIZE=2 FACE="Arial">Hello from process 0 of 5 on node n5</FONT>

<BR><FONT SIZE=2 FACE="Arial">Hello from process 1 of 5 on node n4</FONT>

<BR><FONT SIZE=2 FACE="Arial">Hello from process 2 of 5 on node n3</FONT>

<BR><FONT SIZE=2 FACE="Arial">Hello from process 3 of 5 on node n2</FONT>

<BR><FONT SIZE=2 FACE="Arial">Hello from process 4 of 5 on node n1</FONT>

<BR><FONT SIZE=2 FACE="Arial">-------------------------------------------------------</FONT>
</P>

<P><FONT SIZE=2 FACE="Arial">cat output.txt (when using maui)</FONT>

<BR><FONT SIZE=2 FACE="Arial">-------------------------------------------------------</FONT>

<BR><FONT SIZE=2 FACE="Arial">Hello from process 0 of 1 on node n22</FONT>

<BR><FONT SIZE=2 FACE="Arial">-------------------------------------------------------</FONT>
</P>
<BR>
<BR>

<P><B><FONT COLOR="#000080" SIZE=2 FACE="Arial">Brian Andrus</FONT> <FONT COLOR="#FF0000" SIZE=2 FACE="Arial">perot</FONT><FONT SIZE=2 FACE="Arial">systems<BR>
</FONT><FONT COLOR="#000080" SIZE=2 FACE="Arial">Site Manager | Sr. Computer Scientist<BR>
Naval Research Lab<BR>
</FONT></B><FONT SIZE=2 FACE="Arial">7 Grace Hopper Ave, Monterey, CA&nbsp; 93943<BR>
Phone (831) 656-4839 | Fax (831) 656-4866<BR>
</FONT>
</P>

</BODY>
</HTML>