<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta http-equiv=Content-Type content="text/html; charset=iso-8859-1"><meta name=Generator content="Microsoft Word 12 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Tahoma;
        panose-1:2 11 6 4 3 5 4 4 2 4;}
@font-face
        {font-family:Consolas;
        panose-1:2 11 6 9 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman","serif";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
span.E-MailFormatvorlage17
        {mso-style-type:personal-reply;
        font-family:"Calibri","sans-serif";
        color:#1F497D;}
.MsoChpDefault
        {mso-style-type:export-only;}
@page WordSection1
        {size:612.0pt 792.0pt;
        margin:70.85pt 70.85pt 2.0cm 70.85pt;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=DE link=blue vlink=purple><div class=WordSection1><p class=MsoNormal><span lang=EN-US style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'>Hi,<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'>all of our nodes (compute nodes and service nodes) are equipped with IPMI-capable BMCs (Baseboard Management Controller) so that we can control all aspects of power (including measuring the current power consumption, turning it on or off, power cycles, etc&#8230;) from the batch server just by using the ipmitools-package.<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'>We have used this for controlling nodes within a torque/maui in the context of a bachelor project. But our clusters is so busy all the time, that we could not find a dramatic reduction of the over-all power consumption of the cluster (including water cooling of the racks).<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'>Best regards<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>--<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>---------------------------------------------------------<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>| | Dr. rer. nat. Stephan Raub<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>| | Dipl. Chem.<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>| | High-Performance-Computing<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>| | Zentrum für Informations- und Medientechnologie <o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>| | Heinrich-Heine-Universität Düsseldorf<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>| | Universitätsstr. 1 / Raum 25.41.O2.25-2<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>| | 40225 Düsseldorf / Germany<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>| |<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>| | Tel: +49-211-811-3911<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>| | Fax: +49-211-811-2539<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>---------------------------------------------------------<o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>Wichtiger Hinweis: Diese E-Mail kann Betriebs- oder Geschäftsgeheimnisse, bzw. <o:p></o:p></span></p><p class=MsoNormal><span style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>sonstige vertrauliche Informationen enthalten. Sollten Sie diese E-Mail irrtümlich erhalten haben, ist Ihnen eine Kenntnisnahme des Inhalts, eine Vervielfältigung oder Weitergabe der E-Mail ausdrücklich untersagt. Bitte benachrichtigen Sie uns und vernichten Sie die empfangene E-Mail. </span><span lang=EN-US style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>Vielen Dank.<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:Consolas;color:#1F497D'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:Consolas;color:#1F497D'>Important Note: This e-mail may contain trade secrets or privileged, undisclosed or otherwise confidential information. If you have received this e-mail in error, you are hereby notified that any review, copying or distribution of it is strictly prohibited. Please inform us immediately and destroy the original transmittal. Thank you for your cooperation.<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1F497D'><o:p>&nbsp;</o:p></span></p><div style='border:none;border-left:solid blue 1.5pt;padding:0cm 0cm 0cm 4.0pt'><div><div style='border:none;border-top:solid #B5C4DF 1.0pt;padding:3.0pt 0cm 0cm 0cm'><p class=MsoNormal><b><span style='font-size:10.0pt;font-family:"Tahoma","sans-serif"'>Von:</span></b><span style='font-size:10.0pt;font-family:"Tahoma","sans-serif"'> torqueusers-bounces@supercluster.org [mailto:torqueusers-bounces@supercluster.org] <b>Im Auftrag von </b>Ryan Golhar<br><b>Gesendet:</b> Dienstag, 28. Februar 2012 15:08<br><b>An:</b> Torque Users Mailing List<br><b>Betreff:</b> Re: [torqueusers] reducing energy usage of torque<o:p></o:p></span></p></div></div><p class=MsoNormal><o:p>&nbsp;</o:p></p><p class=MsoNormal style='margin-bottom:12.0pt'>What about cycling the power using a PDU?<o:p></o:p></p><div><p class=MsoNormal>On Tue, Feb 28, 2012 at 2:43 AM, Daniel Fernando Coimbra &lt;<a href="mailto:danielfcoimbra@gmail.com">danielfcoimbra@gmail.com</a>&gt; wrote:<o:p></o:p></p><p class=MsoNormal>I assume that by &quot;turning off&quot; you mean actually power down the node. I<br>am just curious on how do you intend to power it up again later. &nbsp;I<br>suppose you could use something like WakeUp on Lan, but I never actually<br>got to test this kind of thing and don't know how it would behave on a<br>high traffic network (I suppose the network card doesn't keep it's IP<br>once it's in such state).<o:p></o:p></p><div><p class=MsoNormal><br>On 02/26/2012 08:24 PM, Arka Aloke Bhattacharya wrote:<br>&gt; Hi everyone,<br>&gt;<br>&gt; I am a PhD student at UC Berkeley, and I wanted to add a &quot;turning off<br>&gt; idle/underutilized servers&quot; feature to our 100 server torque+maui<br>&gt; deployment. However, I want to implement this feature using only<o:p></o:p></p></div><p class=MsoNormal>&gt; existing torque+ maui interfaces and extensions ( i,e _without<br>&gt; modifying_ the torque or maui source code in any way ).<o:p></o:p></p><div><p class=MsoNormal>&gt;<br>&gt; My proposed way is to<br>&gt; 1. monitor the maui queue length , and estimate the number of servers<br>&gt; I can switch off.<br>&gt; 2. I would then use &quot;pbsnodes -o &lt;nodename&gt;&quot; command to render a<br>&gt; certain number of servers offline for scheduling.<br>&gt; 3. A bash script would turn the servers off.<br>&gt;<br>&gt; The servers would be turned back on (and added to the torque nodes<br>&gt; list) when the queue length increases beyond a certain threshold.<br>&gt;<br>&gt; I had two questions :<br>&gt;<br>&gt; 1. Is there any existing open source code which already implements the<br>&gt; &quot;turning off idle servers&quot; functionality in torque ?<br>&gt; 2. Are there complications that would arise if I implemented the<br>&gt; &quot;turning-off idle servers&quot; feature in my proposed way ? [ e.g - Is it<br>&gt; possible that after turning off servers, they would lose some state<br>&gt; and hence would not get added to the torque &lt;nodes_list&gt; when turned<br>&gt; back on? Are there long lived TCP connections which need to be<br>&gt; restarted separately ? , etc ]<br>&gt;<br>&gt; It would be great if anyone could help.<br>&gt;<br>&gt; Thanks a lot,<br>&gt; Arka.<br>&gt;<br>&gt;<o:p></o:p></p></div><p class=MsoNormal>&gt; _______________________________________________<br>&gt; torqueusers mailing list<br>&gt; <a href="mailto:torqueusers@supercluster.org">torqueusers@supercluster.org</a><br>&gt; <a href="http://www.supercluster.org/mailman/listinfo/torqueusers" target="_blank">http://www.supercluster.org/mailman/listinfo/torqueusers</a><br><br>_______________________________________________<br>torqueusers mailing list<br><a href="mailto:torqueusers@supercluster.org">torqueusers@supercluster.org</a><br><a href="http://www.supercluster.org/mailman/listinfo/torqueusers" target="_blank">http://www.supercluster.org/mailman/listinfo/torqueusers</a><o:p></o:p></p></div><p class=MsoNormal><o:p>&nbsp;</o:p></p></div></div></body></html>