<div dir="ltr">Good Morning / Afternoon Everyone,<div><br></div><div><div>We had an outage this morning affecting 35% of compute customers in our Sydney availability zone. One cluster of hosts was affected and VMs required rebooting. No data was lost however with the number of hosts affected we needed to use a staged reboot.</div><div> The root cause is being investigated however it relates to storage path affinity and storage controllers in a specific SAN not failing cleanly, therefore VMs didn't automatically migrating to an alternate storage path.</div><div> At this point in time, all customers VMs should be available, if not, please contact <a href="mailto:support@zettagrid.com">support@zettagrid.com</a> or call on 1300 597 656.</div><div><br></div><div>A Post-Incident Review will be available next week for all customers who request it by emailing <a href="mailto:support@zettagrid.com">support@zettagrid.com</a>.<br></div></div><div><br></div><div>As mentioned all updates are posted to our status page: <a href="http://status.zettagrid.com/incidents/fg08ll8yylfw">http://status.zettagrid.com/incidents/fg08ll8yylfw</a><br></div><div><br></div><div>Regards,</div><div><br></div><div><br></div><div>Zettagrid Operations Team</div><div><br></div><div><br></div><div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Wed, Jun 24, 2015 at 9:11 AM, James Cunningham <span dir="ltr"><<a href="mailto:jjazza26@gmail.com" target="_blank">jjazza26@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Hi All,<br><div><br>Does anyone have any information on the massive outage that Zettagrid are having in Sydney at the moment? No answer from their support phone number, and emails are going unanswered.<br><br>Apparantly all of their VMs in their Sydney data centre are offline because of hardware failure on their SAN. <br><div><br>

<p class="MsoNormal"><a href="http://status.zettagrid.com/" target="_blank">http://status.zettagrid.com/</a></p>

<br></div><div>We have about 20 customer servers there, and they are all offline, and our helpdesk can't handle all the screaming customers we have at the moment.<br><br></div><div>So much for redundancy....<span class="HOEnZb"><font color="#888888"><br><br></font></span></div><span class="HOEnZb"><font color="#888888"><div>James<br></div><div><br></div></font></span></div></div>
<br>_______________________________________________<br>
AusNOG mailing list<br>
<a href="mailto:AusNOG@lists.ausnog.net">AusNOG@lists.ausnog.net</a><br>
<a href="http://lists.ausnog.net/mailman/listinfo/ausnog" rel="noreferrer" target="_blank">http://lists.ausnog.net/mailman/listinfo/ausnog</a><br>
<br></blockquote></div><br></div>