<HTML dir=ltr><HEAD>
<META http-equiv=Content-Type content="text/html; charset=unicode">
<META content="MSHTML 6.00.2900.3462" name=GENERATOR></HEAD>
<BODY>
<DIV id=idOWAReplyText53921 dir=ltr>
<DIV dir=ltr><FONT face=Arial color=#000000 size=2>Jen,</FONT></DIV>
<DIV dir=ltr><FONT face=Arial size=2></FONT>&nbsp;</DIV>
<DIV dir=ltr><FONT face=Arial size=2>Can you submit a job to a specific queue and get the correct resources (i.e. with "#PBS -q altix" as a PBS directive in your script, do you get altix nodes)?</FONT></DIV>
<DIV dir=ltr><FONT face=Arial size=2></FONT>&nbsp;</DIV>
<DIV dir=ltr><FONT face=Arial size=2>--Joe</FONT></DIV></DIV>
<DIV dir=ltr><BR>
<HR tabIndex=-1>
<FONT face=Tahoma size=2><B>From:</B> mauiusers-bounces@supercluster.org on behalf of Jen<BR><B>Sent:</B> Mon 12/22/2008 3:58 AM<BR><B>To:</B> torqueusers@supercluster.org; mauiusers@supercluster.org<BR><B>Subject:</B> [Mauiusers] Need to partition or allocate nodes to queues?<BR></FONT><BR></DIV>
<DIV>Hi All,<BR><BR>I am not sure if this is a torque or Maui question, so please forgive the crosspost. :}<BR><BR>I used to do this blissfully boringly using acl_hosts.&nbsp; Something has changed and this is not working anymore between torque 2.1.x and now.&nbsp; I have the following:<BR><BR clear=all>torque 2.3.5<BR>maui 3.2.6p21<BR><BR>I have a large cluster with several departments and these departments want to use the nodes they purchased.&nbsp; In the past, I set up a queue for each of these departments and I assigned nodes to the queues in torque.&nbsp; Has the way to do this changed?&nbsp; I have seen several messages lately from folks no longer able to get it to work...&nbsp; <BR>I am not married to this method and will happily implement any method that will keep my (hundreds) of users separated and on their own nodes.&nbsp; I do not want them to have to change their scripts.&nbsp; These are heterogeneous, too, so it is not just a policy thing - the infiniband jobs won't run on the non IB nodes, and the some are 8proc, some are 2, etc.<BR><BR>I have tried the "neednodes" method.&nbsp; It did nothing.<BR><BR>I've been trying to do partitions in Maui and that seems to be ignored as well.&nbsp; This is a 64 bit system, by the way.<BR><BR>Can anyone point me to modern documentation on how to partition the nodes?&nbsp; <BR><BR>I tried defining attributes in "nodes" under server_priv:<BR>node74 np=2 noib<BR>node75 np=2 noib<BR>node76 np=2 altix<BR>node77 np=8 altix<BR>node78 np=8 hiio<BR><BR>And then I have in my torque config, something like:<BR># Create and define esmg08q<BR>create queue esmg08q<BR>set queue esmg08q queue_type = Execution<BR>set queue esmg08q resources_max.cput = 10000:00:00<BR>set queue esmg08q resources_max.ncpus = 179<BR>set queue esmg08q resources_max.nodect = 22<BR>set queue esmg08q resources_max.walltime = 10000:00:00<BR>set queue esmg08q resources_min.cput = 00:00:01<BR>set queue esmg08q resources_min.ncpus = 1<BR>set queue esmg08q resources_min.nodect = 1<BR>set queue esmg08q resources_default.neednodes=altix<BR>set queue esmg08q resources_min.walltime = 00:00:01<BR>set queue esmg08q resources_default.cput = 10000:00:00<BR>set queue esmg08q resources_default.ncpus = 8<BR>set queue esmg08q resources_default.walltime = 100:00:00<BR>set queue esmg08q acl_logic_or = true<BR>set queue esmg08q acl_groups = esmg<BR>set queue esmg08q acl_groups += admin<BR>set queue esmg08q acl_group_sloppy = true<BR>set queue esmg08q acl_group_enable = true<BR>set queue esmg08q enabled = True<BR>set queue esmg08q started = True<BR><BR>- From this I see in maui a line in showconfig:<BR><BR>maui]# /usr/local/maui/bin/showconfig | grep esmg<BR>CLASSCFG[esmg08q]&nbsp; DEFAULT.FEATURES=[altix]<BR><BR>So I was hopeful!&nbsp; But it ignores it and doesn't assign the nodes with the altix attribute?&nbsp; No matter what I do, I always get the first nodes and in order.&nbsp; Like it is reading from a machine file that I don't know about...&nbsp; I do get 8 proc nodes if I ask for nodes with 8 processors, I do get whatever node I ask for in my submit script.&nbsp; I literally lets me request any node I want, no matter which user I am or which queue I submit to.&nbsp; Does anyone have any ideas?<BR><BR><BR>Thanks all for your help.<BR><BR>-Jennifer Tippens<BR>Really Sleepy Admin, ORNL Institutional Clusters<BR><BR><BR><BR><BR><BR><BR><BR><BR>-- <BR>Use it up; wear it out; make it do or do without! - L Reid<BR></DIV></BODY></HTML>