<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:dt="uuid:C2F41010-65B3-11d1-A29F-00AA00C14882" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<!--[if !mso]><style>v\:* {behavior:url(#default#VML);}
o\:* {behavior:url(#default#VML);}
w\:* {behavior:url(#default#VML);}
.shape {behavior:url(#default#VML);}
</style><![endif]--><style><!--
/* Font Definitions */
@font-face
        {font-family:Helvetica;
        panose-1:2 11 6 4 2 2 2 2 2 4;}
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
p.msonormal0, li.msonormal0, div.msonormal0
        {mso-style-name:msonormal;
        mso-margin-top-alt:auto;
        margin-right:0cm;
        mso-margin-bottom-alt:auto;
        margin-left:0cm;
        font-size:11.0pt;
        font-family:"Calibri",sans-serif;}
span.EmailStyle18
        {mso-style-type:personal;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.EmailStyle19
        {mso-style-type:personal-reply;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:612.0pt 792.0pt;
        margin:72.0pt 72.0pt 72.0pt 72.0pt;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-AU" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal"><span style="mso-fareast-language:EN-US">Hi again all,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US">The problems appeared to gradually clear up yesterday. I believe all of the issues we saw are now resolved.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US">I spent about an hour on a call with a Microsoft engineer last night and they couldn’t identify any reason for the problems. I did some testing to try to reproduce the issue but could not.
<o:p></o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US">Did anyone get any feedback to say that Microsoft were working on it? If so, could you share the case number so that I can get the engineer I was working with to identify what, if anything, was done?<o:p></o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US"><o:p> </o:p></span></p>
<div>
<p class="MsoNormal"><span lang="EN-US" style="mso-fareast-language:JA">Regards,<o:p></o:p></span></p>
<p class="MsoNormal"><b><span lang="EN-US" style="color:#1F497D;mso-fareast-language:JA">Philip Loenneker | Senior Network Engineer</span></b><b><span lang="EN-US" style="color:#ED7D31;mso-fareast-language:JA"> | TasmaNet<o:p></o:p></span></b></p>
<p class="MsoNormal"><span lang="EN-US" style="font-size:10.0pt;color:gray;mso-fareast-language:JA">40-50 Innovation Drive, Dowsing Point, Tas 7010, Australia<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="EN-US" style="font-size:10.0pt;color:gray;mso-fareast-language:JA">P: 1300 792 711<o:p></o:p></span></p>
<p class="MsoNormal"><span lang="EN-US" style="font-size:10.0pt;mso-fareast-language:JA"><a href="mailto:philip.loenneker@tasmanet.com.au"><span style="color:#0563C1">philip.loenneker@tasmanet.com.au</span></a><o:p></o:p></span></p>
<p class="MsoNormal"><u><span style="font-size:10.0pt;color:#ED7D31"><a href="http://www.tasmanet.com.au/"><span style="color:#0563C1">www.tasmanet.com.au</span></a><o:p></o:p></span></u></p>
</div>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US"><o:p> </o:p></span></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0cm 0cm 0cm">
<p class="MsoNormal"><b><span lang="EN-US">From:</span></b><span lang="EN-US"> AusNOG <ausnog-bounces@lists.ausnog.net>
<b>On Behalf Of </b>Philip Loenneker<br>
<b>Sent:</b> Thursday, 4 June 2020 12:59 PM<br>
<b>To:</b> Johnathon Brandis <jcbrandis@gmail.com>; David Allen <david@virtutel.com.au><br>
<b>Cc:</b> ausnog@ausnog.net<br>
<b>Subject:</b> Re: [AusNOG] Microsoft bilateral peer issues via Megaport Melbourne<o:p></o:p></span></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US">Thanks everyone for the feedback, I’m glad to hear it isn’t just us.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US">Things seem to be a bit more stable over the past hour or so, but we’re still seeing errors in our monitoring.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US">I have requested an update from Microsoft - I’ll let everyone know when I have an update.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US"><o:p> </o:p></span></p>
<p class="MsoNormal"><b><span lang="EN-US">From:</span></b><span lang="EN-US"> Johnathon Brandis <jcbrandis@gmail.com>
<br>
<b>Sent:</b> Thursday, 4 June 2020 12:37 PM<br>
<b>To:</b> David Allen <david@virtutel.com.au><br>
<b>Cc:</b> Philip Loenneker <Philip.Loenneker@tasmanet.com.au>; ausnog@ausnog.net<br>
<b>Subject:</b> Re: [AusNOG] Microsoft bilateral peer issues via Megaport Melbourne<o:p></o:p></span></p>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<p class="MsoNormal">Gday,<o:p></o:p></p>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">Speculating, however, have seen a series of rolling planned works for MS in MegIX locations this week and last. Again, speculating could be related.Starting 9am<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div>
<p class="MsoNormal">On Thu, Jun 4, 2020 at 12:29 PM David Allen <<a href="mailto:david@virtutel.com.au">david@virtutel.com.au</a>> wrote:<o:p></o:p></p>
</div>
<blockquote style="border:none;border-left:solid #CCCCCC 1.0pt;padding:0cm 0cm 0cm 6.0pt;margin-left:4.8pt;margin-top:5.0pt;margin-right:0cm;margin-bottom:5.0pt">
<div>
<p class="MsoNormal">Hi Philip,<o:p></o:p></p>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">Can confirmed we have experienced the same issue and I have a ticket lodged with both Megaport and Microsoft over it. It seems to be fine over Equinix IX however.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">Regards<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal">David<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><span style="font-size:9.0pt;font-family:"Helvetica",sans-serif;color:black"><br>
</span><span style="font-size:9.0pt;font-family:"Helvetica",sans-serif;color:#676767">Kind regards,<br>
<br>
<b>David Allen | Director, CTO</b><br>
P: 1300 655 132 or +61 3 9999 8800 F: +61 3 9999 8899 <br>
E: <a href="mailto:david@virtutel.com.au" target="_blank">david@virtutel.com.au</a> W:
<a href="https://aus01.safelinks.protection.outlook.com/?url=http%3A%2F%2Fwww.virtutel.com.au%2F&data=02%7C01%7Cphilip.loenneker%40tasmanet.com.au%7C8f17e03ae45b46b0164d08d808336295%7Cb53dc580ab7847208b30536f36d398ac%7C0%7C0%7C637268364071568603&sdata=sXucGFhwWcvjjD%2B3CQMLlOmiqkVVUFs4ogsIqi9uw%2FA%3D&reserved=0" target="_blank">
www.virtutel.com.au</a><br>
A: Level 9, 401 Collins Street, Melbourne, Victoria, 3000, Australia</span><span style="font-size:9.0pt;font-family:"Helvetica",sans-serif;color:black"><o:p></o:p></span></p>
</div>
<p class="MsoNormal"><span style="font-size:9.0pt;font-family:"Helvetica",sans-serif;color:black"><br>
</span><img border="0" width="145" height="100" style="width:1.5104in;height:1.0416in" id="gmail-m_-40287617593527933460A3D6C29-774C-4418-ABC1-43EAAA21423E" src="cid:image001.jpg@01D63B16.61FBA790"><span style="font-size:9.0pt;font-family:"Helvetica",sans-serif;color:black"><br>
<br>
<br>
</span><span style="font-size:7.0pt;font-family:"Helvetica",sans-serif;color:#676767">This e-mail message and any accompanying attachments may contain confidential information. If you are not the intended recipient, do not read, use, disseminate, distribute
 or copy this message or attachments. If you have received this message in error, please notify the sender immediately and delete this message. Any views expressed in this message are those of the individual sender, except where the sender expressly, and with
 authority, states them to be the views of Virtutel Before opening any attachments, please check them for viruses and defects.</span>
<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal" style="margin-bottom:12.0pt"><o:p> </o:p></p>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<div>
<p class="MsoNormal">On 4 Jun 2020, at 12:13 pm, Philip Loenneker <<a href="mailto:Philip.Loenneker@tasmanet.com.au" target="_blank">Philip.Loenneker@tasmanet.com.au</a>> wrote:<o:p></o:p></p>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div>
<div>
<p class="MsoNormal">Good morning everyone,<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"> <o:p></o:p></p>
</div>
<div>
<p class="MsoNormal">We became aware of issues this morning for clients on our network reaching some Azure workloads and Office365 services. Traffic was reaching the remote end of our bilateral peer with Microsoft over Megaport Melbourne, but we had connectivity
 issues reaching hops past that. We stopped sending and receiving routes via this peer (keeping the BGP peer up for testing purposes) and after a few minutes most services appeared to be back to normal, with the traffic currently preferring a path via NSW-IX.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"> <o:p></o:p></p>
</div>
<div>
<p class="MsoNormal">Since then however, we’re still having issues with Azure workloads in AU-SE region. We’re seeing 42% error rate in initiating connections to some VMs.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"> <o:p></o:p></p>
</div>
<div>
<p class="MsoNormal">I’ve logged a fault directly with Microsoft, and they are investigating, but I was wondering if anyone else is having similar issues that could help to isolate the cause. I can share the incident number with others experiencing problems
 if it is helpful.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"> <o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span lang="EN-US">Regards,</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><b><span lang="EN-US" style="color:#1F497D">Philip Loenneker | Senior Network Engineer</span></b><b><span lang="EN-US" style="color:#ED7D31"> | TasmaNet</span></b><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span lang="EN-US" style="font-size:10.0pt;color:gray">40-50 Innovation Drive, Dowsing Point, Tas 7010, Australia</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><span lang="EN-US" style="font-size:10.0pt;color:gray">P: 1300 792 711</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><a href="mailto:philip.loenneker@tasmanet.com.au" target="_blank"><span lang="EN-US" style="font-size:10.0pt;color:#954F72">philip.loenneker@tasmanet.com.au</span></a><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><a href="https://aus01.safelinks.protection.outlook.com/?url=http%3A%2F%2Fwww.tasmanet.com.au%2F&data=02%7C01%7Cphilip.loenneker%40tasmanet.com.au%7C8f17e03ae45b46b0164d08d808336295%7Cb53dc580ab7847208b30536f36d398ac%7C0%7C0%7C637268364071578601&sdata=5L5IY%2BEDFufGZlB29fMUvNVkzrXSBjGgeaaSwz7aZzo%3D&reserved=0" target="_blank"><span style="font-size:10.0pt;color:#954F72">www.tasmanet.com.au</span></a><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"> <o:p></o:p></p>
</div>
</div>
<p class="MsoNormal"><span style="font-size:9.0pt;font-family:"Helvetica",sans-serif">_______________________________________________<br>
AusNOG mailing list<br>
</span><a href="mailto:AusNOG@lists.ausnog.net" target="_blank"><span style="font-size:9.0pt;font-family:"Helvetica",sans-serif;color:#954F72">AusNOG@lists.ausnog.net</span></a><span style="font-size:9.0pt;font-family:"Helvetica",sans-serif"><br>
</span><a href="https://aus01.safelinks.protection.outlook.com/?url=http%3A%2F%2Flists.ausnog.net%2Fmailman%2Flistinfo%2Fausnog&data=02%7C01%7Cphilip.loenneker%40tasmanet.com.au%7C8f17e03ae45b46b0164d08d808336295%7Cb53dc580ab7847208b30536f36d398ac%7C0%7C0%7C637268364071578601&sdata=GGmAgbupjCXA%2FfOLi%2FlflSZlwdeAUXfM%2FKnKH2Cifts%3D&reserved=0" target="_blank"><span style="font-size:9.0pt;font-family:"Helvetica",sans-serif;color:#954F72">http://lists.ausnog.net/mailman/listinfo/ausnog</span></a><o:p></o:p></p>
</div>
</blockquote>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</div>
<p class="MsoNormal">_______________________________________________<br>
AusNOG mailing list<br>
<a href="mailto:AusNOG@lists.ausnog.net" target="_blank">AusNOG@lists.ausnog.net</a><br>
<a href="https://aus01.safelinks.protection.outlook.com/?url=http%3A%2F%2Flists.ausnog.net%2Fmailman%2Flistinfo%2Fausnog&data=02%7C01%7Cphilip.loenneker%40tasmanet.com.au%7C8f17e03ae45b46b0164d08d808336295%7Cb53dc580ab7847208b30536f36d398ac%7C0%7C0%7C637268364071588592&sdata=zTZMLMCSTRSwuncrmEa54AEYlcQHFgXVgb0ifVu3430%3D&reserved=0" target="_blank">http://lists.ausnog.net/mailman/listinfo/ausnog</a><o:p></o:p></p>
</blockquote>
</div>
</div>
</body>
</html>