<div dir="ltr">Yep, will be in my email tomorrow. Understand about 2N thanks.<div><br></div><div>SMART on HDDs don't show much increase, then again it is cool isle so I wouldn't expect much increase. Understand about cheep power and generators (as an aside Bev didn't include details, how does this work practically? Does the energy provider call up the DC and say oh hey, as per agreement go onto generators for X hours thanks, your next bill will be credited ABC ?).</div>
<div><br></div><div>I forgot to mention both DCs are operated by the same company, and both are rural, not in areas with fires at the moment, but I haven't traced electricity supply to see if transmission is.</div><div>
<br></div><div>Thanks.</div></div><div class="gmail_extra"><br><br><div class="gmail_quote">On Wed, Jan 15, 2014 at 11:04 PM, James Braunegg <span dir="ltr"><<a href="mailto:james.braunegg@micron21.com" target="_blank">james.braunegg@micron21.com</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div lang="EN-US" link="blue" vlink="purple"><div><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">Dear Joshua<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""><u></u> <u></u></span></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">My first question back to the datacentre would be are they running the UPS’s in double conversion mode and what brand / make / model is the UPS technology, without this information it would be very hard to tell what the issue is.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""><u></u> <u></u></span></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">If the power infrastructure is true 2N no system should ever be above 45% to 48% maximum at full load (assuming no failure on any component) so being a hot day should never push things “over the edge”<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""><u></u> <u></u></span></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">I doubt the cooling system is UPS’ed and if it was it would be running it would be more than likely running of different UPS not the same UPS for IT load. Typically mechanical cooling are backed up by diesel generation but not UPS power as you can be without cooling for a few seconds whilst diesel generators start.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""><u></u> <u></u></span></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">If your monitoring temperature in the rack have you noticed any increase in temperatures during the day ?<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""><u></u> <u></u></span></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">You might also find they might be running on generator power (you can get very cheap power if you agree to stop using mains power in periods of high demand on the grid) however again in double conversion mode you should not see any differences in power supply coming to your rack.<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""><u></u> <u></u></span></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">What is very strange is your seeing the same issue across to physical different sites, what brand / model UPS’s are you using within your rack ?<u></u><u></u></span></p>
<div class="im"><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""><u></u> <u></u></span></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">Kindest Regards<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""><u></u> <u></u></span></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""><u></u> <u></u></span></p>
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Verdana","sans-serif"">James Braunegg<br></span></b><b><span style="font-size:8.0pt;font-family:"Verdana","sans-serif"">P:</span></b><span style="font-size:8.0pt;font-family:"Verdana","sans-serif"">  1300 769 972  |  <b>M:</b>  0488 997 207 |  <b>D:</b>  (03) 9751 7616</span><span style="font-size:8.0pt;font-family:"Verdana","sans-serif""><u></u><u></u></span></p>
</div><p class="MsoNormal"><b><span style="font-size:8.0pt;font-family:"Verdana","sans-serif"">E:</span></b><span style="font-size:8.0pt;font-family:"Verdana","sans-serif"">   </span><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""><a href="mailto:james.braunegg@micron21.com" target="_blank"><span style="font-size:8.0pt;font-family:"Verdana","sans-serif"">james.braunegg@micron21.com</span></a></span><span style="font-size:8.0pt;font-family:"Verdana","sans-serif"">  |  <b>ABN:</b>  <a href="tel:12%20109%20977%20666" value="+12109977666" target="_blank">12 109 977 666</a>   <br>
<b>W:</b>  <a href="http://www.micron21.com/ddos-protection" target="_blank"><span style>www.micron21.com/ddos-protection</span></a>   <b>T:</b> @micron21<u></u><u></u></span></p><div class="im"><p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Verdana","sans-serif""><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Verdana","sans-serif""><br><img border="0" width="250" height="39" src="cid:image001.jpg@01CF1246.14173670" alt="Description: Description: Description: Description: M21.jpg"><br>
</span><span lang="EN-AU" style="font-size:8.0pt;font-family:"Verdana","sans-serif"">This message is intended for the addressee named above. It may contain privileged or confidential information. If you are not the intended recipient of this message you must not use, copy, distribute or disclose it to anyone other than the addressee. If you have received this message in error please return the message to the sender by replying to it and then delete the message from your computer.</span><span style="font-size:8.0pt;font-family:"Verdana","sans-serif""><u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""><u></u> <u></u></span></p></div><p class="MsoNormal"><b><span style="font-size:10.0pt;font-family:"Tahoma","sans-serif"">From:</span></b><span style="font-size:10.0pt;font-family:"Tahoma","sans-serif""> Joshua D'Alton [mailto:<a href="mailto:joshua@railgun.com.au" target="_blank">joshua@railgun.com.au</a>] <br>
<b>Sent:</b> Wednesday, January 15, 2014 10:47 PM<br><b>To:</b> James Braunegg<br><b>Cc:</b> <a href="mailto:AusNOG@lists.ausnog.net" target="_blank">AusNOG@lists.ausnog.net</a><br><b>Subject:</b> Re: [AusNOG] DC undervoltage issues<u></u><u></u></span></p>
<div><div class="h5"><p class="MsoNormal"><u></u> <u></u></p><div><p class="MsoNormal">Thanks for the answers, mostly what I surmised but good to have some other opinions.<u></u><u></u></p><div><p class="MsoNormal"><u></u> <u></u></p>
</div><div><p class="MsoNormal">James, so formal!  216V I saw briefly, its since increased to around 225 somewhat stable now. Across a single phase. UPS doesn't have freq information in the GUI, I'd have to wait for the weekly report, but I wouldn't imagine any freq changes. Power factor is also missing from the GUI. One DC says 100% isolated 2N from supplier to rack feeds, the other don't have the docs with me but IIRC N+1. Nothing upstream, the feeds come into the racks into a powerbar on either side of the rack, which then the UPS are plugged into, and then the servers into the UPSs.<u></u><u></u></p>
</div><div><p class="MsoNormal"><u></u> <u></u></p></div><div><p class="MsoNormal">Both DCs are somewhat remote, I suspect that is partly responsible. Cheers.<u></u><u></u></p></div></div><div><p class="MsoNormal" style="margin-bottom:12.0pt">
<u></u> <u></u></p><div><p class="MsoNormal">On Wed, Jan 15, 2014 at 10:33 PM, James Braunegg <<a href="mailto:james.braunegg@micron21.com" target="_blank">james.braunegg@micron21.com</a>> wrote:<u></u><u></u></p><div>
<div><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">Dear Joshua</span><u></u><u></u></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">Thanks for your post, and questions regarding Datacentre voltages.</span><u></u><u></u></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">What type of voltage drops are you seeing and is this across a single phase or three phase circuit ?</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""> </span><u></u><u></u></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">Have you notice the Hz frequency change, and are you monitoring power factor ?</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""> </span><u></u><u></u></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">What is upstream from the power within your rack ? </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""> </span><u></u><u></u></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">Whilst you might have A and B power feeds it  could be supplied via a STS (static transfer switch) via a N+1 (x) UPS deployment or is it a 2N UPS setup where both feed A and feed B are 100% isolated.</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""> </span><u></u><u></u></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">Most if not all double conversion battery based UPS’s will have phase voltage monitoring and below “x” threshold on any incoming phase from its upstream power source will transfer load to say batteries to remove any issues with zero interruption.</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""> </span><u></u><u></u></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">Upstream from the UPS infrastructure will be ATSs which also will have phase voltage monitoring and below “x” threshold on any phase from the incoming supply will trigger the ATS to obtain power from its alternative source typically diesel generation power.</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""> </span><u></u><u></u></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">As for power problems within Victoria I have not seen any issues with our mains supply its been perfect, nor noticed any issues at our pop sites.</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""> </span><u></u><u></u></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif"">Kindest Regards</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""> </span><u></u><u></u></p><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""> </span><u></u><u></u></p>
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Verdana","sans-serif"">James Braunegg<br></span></b><b><span style="font-size:8.0pt;font-family:"Verdana","sans-serif"">P:</span></b><span style="font-size:8.0pt;font-family:"Verdana","sans-serif"">  1300 769 972  |  <b>M:</b>  0488 997 207 |  <b>D:</b>  (03) 9751 7616</span><u></u><u></u></p>
<p class="MsoNormal"><b><span style="font-size:8.0pt;font-family:"Verdana","sans-serif"">E:</span></b><span style="font-size:8.0pt;font-family:"Verdana","sans-serif"">   </span><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""><a href="mailto:james.braunegg@micron21.com" target="_blank"><span style="font-size:8.0pt;font-family:"Verdana","sans-serif"">james.braunegg@micron21.com</span></a></span><span style="font-size:8.0pt;font-family:"Verdana","sans-serif"">  |  <b>ABN:</b>  <a href="tel:12%20109%20977%20666" target="_blank">12 109 977 666</a>   <br>
<b>W:</b>  <a href="http://www.micron21.com/ip-transit" target="_blank">www.micron21.com/ip-transit</a>   <b>T:</b> @micron21</span><u></u><u></u></p><p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Verdana","sans-serif""> </span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:8.0pt;font-family:"Verdana","sans-serif""><br><img border="0" width="250" height="39" src="cid:image001.jpg@01CF1246.14173670" alt="Description: Description: Description: Description: M21.jpg"><br>
</span><span lang="EN-AU" style="font-size:8.0pt;font-family:"Verdana","sans-serif"">This message is intended for the addressee named above. It may contain privileged or confidential information. If you are not the intended recipient of this message you must not use, copy, distribute or disclose it to anyone other than the addressee. If you have received this message in error please return the message to the sender by replying to it and then delete the message from your computer.</span><u></u><u></u></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif""> </span><u></u><u></u></p><p class="MsoNormal"><b><span style="font-size:10.0pt;font-family:"Tahoma","sans-serif"">From:</span></b><span style="font-size:10.0pt;font-family:"Tahoma","sans-serif""> AusNOG [mailto:<a href="mailto:ausnog-bounces@lists.ausnog.net" target="_blank">ausnog-bounces@lists.ausnog.net</a>] <b>On Behalf Of </b>Joshua D'Alton<br>
<b>Sent:</b> Wednesday, January 15, 2014 10:15 PM</span><u></u><u></u></p><div><p class="MsoNormal"><br><b>To:</b> <a href="mailto:AusNOG@lists.ausnog.net" target="_blank">AusNOG@lists.ausnog.net</a><br><b>Subject:</b> [AusNOG] DC undervoltage issues<u></u><u></u></p>
</div><p class="MsoNormal"> <u></u><u></u></p><div><p class="MsoNormal">Evening noggers, hope you're all surviving the heat, especially in VIC!<u></u><u></u></p><div><div><div><p class="MsoNormal"> <u></u><u></u></p></div>
<div><p class="MsoNormal">Speaking of, in 2 DCs were seeing borderline undervoltage on our UPSs (yes we run them even with A+B power because sensitive equipment), I've read that there are power issues in VIC at the moment, but I thought they were limited to residential zones (with rolling black/brownouts)?<u></u><u></u></p>
</div><div><p class="MsoNormal"> <u></u><u></u></p></div><div><p class="MsoNormal">Anyone else seeing this, or have comments?<u></u><u></u></p></div><div><p class="MsoNormal"> <u></u><u></u></p></div><div><p class="MsoNormal">
As a side question, does anyone (perhaps Bevan?) know if DCs will manually switch to genny/backup power in this sort of scenario, if so details would be nice.<u></u><u></u></p></div><div><p class="MsoNormal"> <u></u><u></u></p>
</div><div><p class="MsoNormal">(with regards to that, I looked at one DC contract and it doesn't mention anything about the specifics of power delivered, just that it is A+B with X battery backup and Y generator capacity, and Z SLA, doesn't mention what sorts of voltages would break said SLA...)<u></u><u></u></p>
</div><div><p class="MsoNormal"> <u></u><u></u></p></div><div><p class="MsoNormal">Anyhoo, cheers!<u></u><u></u></p></div><div><p class="MsoNormal"> <u></u><u></u></p></div><div><p class="MsoNormal">PS, also seeing strange intermittent issues with Telstra and Pacnet connecting to local google and others, not sure why the power quality would affect that, but..<u></u><u></u></p>
</div></div></div></div></div></div></div><p class="MsoNormal"><u></u> <u></u></p></div></div></div></div></div></blockquote></div><br></div>