<div dir="ltr">Hi Narelle,<div><br></div><div>Yes, I have seen something like this recently while working with an IoT developer.</div><div><br></div><div>There is a tendency to set short DNS TTL's for load balancing purposes in modern web apps. If the development team is optimising for "cloud" deployments with a view to having AWS available to handle additional load, then this flexibility is probably rational.</div><div><br></div><div>A problem with short TTL's in embedded devices is that they then need to do a DNS lookup nearly every time they send a heartbeat - instead of just checking the resolver cache from the last lookup. This works fine in the lab, but in the real world it means that a single lost packet in a UDP DNS lookup can cause a TCP heartbeat process to fail.</div><div><br></div><div>Failure scenario => Congestion => More lost packets => Race condition.</div><div><br></div><div>If this is the case, a time-series graph of such failures may show spikes with an interval equivalent to the DNS record TTL.</div><div><br></div><div>John</div><div><br></div><div><br></div><div><br></div><div><br></div><div><br></div><div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On 27 May 2016 at 14:06, Narelle <span dir="ltr"><<a href="mailto:narellec@gmail.com" target="_blank">narellec@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><br>At the risk of triggering a whirlpool like response - has anyone else seen a fault like this in other implementations?<br><br><a href="http://exchange.telstra.com.au/2016/05/27/nbn-and-adsl-disruption-what-happened/" target="_blank">http://exchange.telstra.com.au/2016/05/27/nbn-and-adsl-disruption-what-happened/</a><br><br>Any other thoughts or comments - feel free to send off list.<span class="HOEnZb"><font color="#888888"><br><br><br><br><br>-- <br><br><br>Narelle<br><a href="mailto:narellec@gmail.com" target="_blank">narellec@gmail.com</a></font></span></div>
<br>_______________________________________________<br>
AusNOG mailing list<br>
<a href="mailto:AusNOG@lists.ausnog.net">AusNOG@lists.ausnog.net</a><br>
<a href="http://lists.ausnog.net/mailman/listinfo/ausnog" rel="noreferrer" target="_blank">http://lists.ausnog.net/mailman/listinfo/ausnog</a><br>
<br></blockquote></div><br></div>