Hold on, there&#39;s more output that appeared after I sent the original email. This instance took 14 minutes to shut down.<br><br>The additional rabbit@mq1-sasl.log file looks like this:<br><br>=CRASH REPORT==== 12-Sep-2012::16:51:56 ===<br>
� crasher:<br>��� initial call: amqp_main_reader:init/1<br>��� pid: &lt;0.316.0&gt;<br>��� registered_name: []<br>��� exception exit: {socket_error,etimedout}<br>����� in function� gen_server:terminate/6 (gen_server.erl, line 747)<br>
��� ancestors: [&lt;0.314.0&gt;,&lt;0.310.0&gt;,amqp_sup,&lt;0.245.0&gt;]<br>��� messages: []<br>��� links: [&lt;0.314.0&gt;]<br>��� dictionary: []<br>��� trap_exit: false<br>��� status: running<br>��� heap_size: 987<br>��� stack_size: 24<br>
��� reductions: 2142252<br>� neighbours:<br><br>=CRASH REPORT==== 12-Sep-2012::16:51:56 ===<br>� crasher:<br>��� initial call: amqp_gen_connection:init/1<br>��� pid: &lt;0.311.0&gt;<br>��� registered_name: []<br>��� exception exit: {socket_error,etimedout}<br>
����� in function� gen_server:terminate/6 (gen_server.erl, line 747)<br>��� ancestors: [&lt;0.310.0&gt;,amqp_sup,&lt;0.245.0&gt;]<br>��� messages: []<br>��� links: [&lt;0.310.0&gt;,#Port&lt;0.5488&gt;]<br>��� dictionary: []<br>
��� trap_exit: false<br>��� status: running<br>��� heap_size: 1597<br>��� stack_size: 24<br>��� reductions: 805<br>� neighbours:<br><br>=SUPERVISOR REPORT==== 12-Sep-2012::16:51:56 ===<br>���� Supervisor: {&lt;0.314.0&gt;,amqp_connection_type_sup}<br>
���� Context:��� child_terminated<br>���� Reason:���� {socket_error,etimedout}<br>���� Offender:�� [{pid,&lt;0.316.0&gt;},<br>����������������� {name,main_reader},<br>����������������� {mfa,<br>��������������������� {amqp_main_reader,start_link,<br>
������������������������� [#Port&lt;0.5488&gt;,&lt;0.311.0&gt;,&lt;0.313.0&gt;,<br>�������������������������� {method,rabbit_framing_amqp_0_9_1}]}},<br>����������������� {restart_type,transient},<br>����������������� {shutdown,4294967295},<br>
����������������� {child_type,worker}]<br><br><br>=SUPERVISOR REPORT==== 12-Sep-2012::16:51:56 ===<br>���� Supervisor: {&lt;0.314.0&gt;,amqp_connection_type_sup}<br>���� Context:��� shutdown<br>���� Reason:���� reached_max_restart_intensity<br>
���� Offender:�� [{pid,&lt;0.316.0&gt;},<br>����������������� {name,main_reader},<br>����������������� {mfa,<br>��������������������� {amqp_main_reader,start_link,<br>������������������������� [#Port&lt;0.5488&gt;,&lt;0.311.0&gt;,&lt;0.313.0&gt;,<br>
�������������������������� {method,rabbit_framing_amqp_0_9_1}]}},<br>����������������� {restart_type,transient},<br>����������������� {shutdown,4294967295},<br>����������������� {child_type,worker}]<br><br><br>=SUPERVISOR REPORT==== 12-Sep-2012::16:51:56 ===<br>
���� Supervisor: {&lt;0.310.0&gt;,amqp_connection_sup}<br>���� Context:��� child_terminated<br>���� Reason:���� {socket_error,etimedout}<br>���� Offender:�� [{pid,&lt;0.311.0&gt;},<br>����������������� {name,connection},<br>
����������������� {mfa,<br>��������������������� {amqp_gen_connection,start_link,<br>������������������������� [amqp_network_connection,<br>�������������������������� {amqp_params_network,&lt;&lt;&quot;guest&quot;&gt;&gt;,&lt;&lt;&quot;guest&quot;&gt;&gt;,<br>
������������������������������ &lt;&lt;&quot;/&quot;&gt;&gt;,&quot;<a href="http://slg1matt1.mgmt.xyz.com">slg1matt1.mgmt.xyz.com</a>&quot;,<br>������������������������������ 5672,0,0,0,infinity,none,<br>������������������������������ [#Fun&lt;amqp_auth_mechanisms.plain.3&gt;,<br>
������������������������������� #Fun&lt;amqp_auth_mechanisms.amqplain.3&gt;],<br>������������������������������ [],[]},<br>�������������������������� #Fun&lt;amqp_connection_sup.0.39273983&gt;,<br>�������������������������� #Fun&lt;amqp_connection_sup.2.54430129&gt;,[]]}},<br>
����������������� {restart_type,intrinsic},<br>����������������� {shutdown,brutal_kill},<br>����������������� {child_type,worker}]<br><br><br>=SUPERVISOR REPORT==== 12-Sep-2012::16:51:56 ===<br>���� Supervisor: {&lt;0.310.0&gt;,amqp_connection_sup}<br>
���� Context:��� shutdown<br>���� Reason:���� reached_max_restart_intensity<br>���� Offender:�� [{pid,&lt;0.311.0&gt;},<br>����������������� {name,connection},<br>����������������� {mfa,<br>��������������������� {amqp_gen_connection,start_link,<br>
������������������������� [amqp_network_connection,<br>�������������������������� {amqp_params_network,&lt;&lt;&quot;guest&quot;&gt;&gt;,&lt;&lt;&quot;guest&quot;&gt;&gt;,<br>������������������������������ &lt;&lt;&quot;/&quot;&gt;&gt;,&quot;<a href="http://slg1matt1.mgmt.xyz.com">slg1matt1.mgmt.xyz.com</a>&quot;,<br>
������������������������������ 5672,0,0,0,infinity,none,<br>������������������������������ [#Fun&lt;amqp_auth_mechanisms.plain.3&gt;,<br>������������������������������� #Fun&lt;amqp_auth_mechanisms.amqplain.3&gt;],<br>������������������������������ [],[]},<br>
�������������������������� #Fun&lt;amqp_connection_sup.0.39273983&gt;,<br>�������������������������� #Fun&lt;amqp_connection_sup.2.54430129&gt;,[]]}},<br>����������������� {restart_type,intrinsic},<br>����������������� {shutdown,brutal_kill},<br>
����������������� {child_type,worker}]<br><br><br>=SUPERVISOR REPORT==== 12-Sep-2012::16:51:56 ===<br>���� Supervisor: {&lt;0.310.0&gt;,amqp_connection_sup}<br>���� Context:��� shutdown_error<br>���� Reason:���� shutdown<br>
���� Offender:�� [{pid,&lt;0.314.0&gt;},<br>����������������� {name,connection_type_sup},<br>����������������� {mfa,<br>��������������������� {amqp_connection_type_sup,start_link_network,<br>������������������������� [#Port&lt;0.5488&gt;,&lt;0.311.0&gt;,&lt;0.313.0&gt;]}},<br>
����������������� {restart_type,transient},<br>����������������� {shutdown,infinity},<br>����������������� {child_type,supervisor}]<br><br><br>=CRASH REPORT==== 12-Sep-2012::16:51:56 ===<br>� crasher:<br>��� initial call: gen:init_it/6<br>
��� pid: &lt;0.200.0&gt;<br>��� registered_name: []<br>��� exception exit: {undef,<br>�������������������� [{rabbit_federation_old_status,report,<br>���������������������� [{upstream,<br>������������������������ {amqp_params_network,&lt;&lt;&quot;guest&quot;&gt;&gt;,&lt;&lt;&quot;guest&quot;&gt;&gt;,<br>
������������������������� &lt;&lt;&quot;/&quot;&gt;&gt;,&quot;<a href="http://slg1matt1.mgmt.xyz.com">slg1matt1.mgmt.xyz.com</a>&quot;,5672,0,<br>������������������������� 0,0,infinity,none,<br>������������������������� [#Fun&lt;amqp_auth_mechanisms.plain.3&gt;,<br>
�������������������������� #Fun&lt;amqp_auth_mechanisms.amqplain.3&gt;],<br>������������������������� [],[]},<br>������������������������ &lt;&lt;&quot;skytap&quot;&gt;&gt;,1000,1,1,none,none,none,&quot;upstream-slg&quot;},<br>
����������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>����������������������� {shutdown,<br>������������������������ {gen_server,call,<br>������������������������� [&lt;0.319.0&gt;,<br>
�������������������������� {call,<br>��������������������������� {&#39;exchange.unbind&#39;,0,<br>���������������������������� &lt;&lt;&quot;federation: skytap -&gt; <a href="mailto:rabbit@mq1.matt.internal.xyz.com">rabbit@mq1.matt.internal.xyz.com</a> B&quot;&gt;&gt;,<br>
���������������������������� &lt;&lt;&quot;skytap&quot;&gt;&gt;,<br>���������������������������� &lt;&lt;&quot;ConfigurationManager.us-east.default&quot;&gt;&gt;,false,<br>���������������������������� []},<br>��������������������������� none,&lt;0.200.0&gt;},<br>
�������������������������� infinity]}}],<br>���������������������� []},<br>��������������������� {rabbit_federation_link,terminate,2,[]},<br>��������������������� {gen_server2,terminate,3,[]},<br>��������������������� {proc_lib,init_p_do_apply,3,<br>
���������������������� [{file,&quot;proc_lib.erl&quot;},{line,227}]}]}<br>����� in function� gen_server2:terminate/3 <br>��� ancestors: [&lt;0.199.0&gt;,&lt;0.196.0&gt;,rabbit_federation_link_sup_sup,<br>����������������� rabbit_federation_sup,rabbit_sup,&lt;0.145.0&gt;]<br>
��� messages: [{&#39;$gen_cast&#39;,<br>��������������������� {enqueue,23,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;ConfigurationManager.us-west.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,queue,<br>�������������������������������������� &lt;&lt;&quot;ConfigurationManager&quot;&gt;&gt;},<br>
���������������������������������� []}]}}},<br>����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,24,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;ConfigurationManager.us-west.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,<br>�������������������������������������� &lt;&lt;&quot;federation: skytap -&gt; <a href="mailto:rabbit@slg1matt1.mgmt.xyz.com">rabbit@slg1matt1.mgmt.xyz.com</a> B&quot;&gt;&gt;},<br>
���������������������������������� []}]}}},<br>����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,25,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;charon.us-east.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,<br>�������������������������������������� &lt;&lt;&quot;federation: skytap -&gt; <a href="mailto:rabbit@slg1matt1.mgmt.xyz.com">rabbit@slg1matt1.mgmt.xyz.com</a> B&quot;&gt;&gt;},<br>
���������������������������������� []}]}}},<br>����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,26,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;charon.us-west.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,queue,&lt;&lt;&quot;charon&quot;&gt;&gt;},<br>���������������������������������� []}]}}},<br>
����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,27,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;charon.us-west.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,<br>�������������������������������������� &lt;&lt;&quot;federation: skytap -&gt; <a href="mailto:rabbit@slg1matt1.mgmt.xyz.com">rabbit@slg1matt1.mgmt.xyz.com</a> B&quot;&gt;&gt;},<br>
���������������������������������� []}]}}},<br>����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,28,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;cmcmd.us-east.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,<br>�������������������������������������� &lt;&lt;&quot;federation: skytap -&gt; <a href="mailto:rabbit@slg1matt1.mgmt.xyz.com">rabbit@slg1matt1.mgmt.xyz.com</a> B&quot;&gt;&gt;},<br>
���������������������������������� []}]}}},<br>����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,29,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;cmcmd.us-west.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,queue,&lt;&lt;&quot;cmcmd&quot;&gt;&gt;},<br>���������������������������������� []}]}}},<br>
����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,30,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;cmcmd.us-west.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,<br>�������������������������������������� &lt;&lt;&quot;federation: skytap -&gt; <a href="mailto:rabbit@slg1matt1.mgmt.xyz.com">rabbit@slg1matt1.mgmt.xyz.com</a> B&quot;&gt;&gt;},<br>
���������������������������������� []}]}}},<br>����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,31,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;system_test.us-east.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,<br>�������������������������������������� &lt;&lt;&quot;federation: skytap -&gt; <a href="mailto:rabbit@slg1matt1.mgmt.xyz.com">rabbit@slg1matt1.mgmt.xyz.com</a> B&quot;&gt;&gt;},<br>
���������������������������������� []}]}}},<br>����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,32,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;system_test.us-west.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,<br>�������������������������������������� &lt;&lt;&quot;federation: skytap -&gt; <a href="mailto:rabbit@slg1matt1.mgmt.xyz.com">rabbit@slg1matt1.mgmt.xyz.com</a> B&quot;&gt;&gt;},<br>
���������������������������������� []}]}}},<br>����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,33,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;system_test.us-west.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,queue,&lt;&lt;&quot;system_test&quot;&gt;&gt;},<br>
���������������������������������� []}]}}},<br>����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,34,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;unit_test.us-east.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,<br>�������������������������������������� &lt;&lt;&quot;federation: skytap -&gt; <a href="mailto:rabbit@slg1matt1.mgmt.xyz.com">rabbit@slg1matt1.mgmt.xyz.com</a> B&quot;&gt;&gt;},<br>
���������������������������������� []}]}}},<br>����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,35,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;unit_test.us-west.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,<br>�������������������������������������� &lt;&lt;&quot;federation: skytap -&gt; <a href="mailto:rabbit@slg1matt1.mgmt.xyz.com">rabbit@slg1matt1.mgmt.xyz.com</a> B&quot;&gt;&gt;},<br>
���������������������������������� []}]}}},<br>����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,36,<br>������������������������� {remove_bindings,<br>����������������������������� [{binding,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
���������������������������������� &lt;&lt;&quot;unit_test.us-west.default&quot;&gt;&gt;,<br>���������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,queue,&lt;&lt;&quot;unit_test&quot;&gt;&gt;},<br>���������������������������������� []}]}}},<br>
����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,37,<br>������������������������� {add_binding,<br>����������������������������� {binding,<br>��������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
��������������������������������� &lt;&lt;&quot;charon.us-west.default&quot;&gt;&gt;,<br>��������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,queue,&lt;&lt;&quot;charon&quot;&gt;&gt;},<br>��������������������������������� []}}}},<br>
����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,38,<br>������������������������� {add_binding,<br>����������������������������� {binding,<br>��������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
��������������������������������� &lt;&lt;&quot;ConfigurationManager.us-west.default&quot;&gt;&gt;,<br>��������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,queue,<br>������������������������������������� &lt;&lt;&quot;ConfigurationManager&quot;&gt;&gt;},<br>
��������������������������������� []}}}},<br>����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,39,<br>������������������������� {add_binding,<br>����������������������������� {binding,<br>��������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
��������������������������������� &lt;&lt;&quot;unit_test.us-west.default&quot;&gt;&gt;,<br>��������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,queue,&lt;&lt;&quot;unit_test&quot;&gt;&gt;},<br>��������������������������������� []}}}},<br>
����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,40,<br>������������������������� {add_binding,<br>����������������������������� {binding,<br>��������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
��������������������������������� &lt;&lt;&quot;system_test.us-west.default&quot;&gt;&gt;,<br>��������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,queue,&lt;&lt;&quot;system_test&quot;&gt;&gt;},<br>��������������������������������� []}}}},<br>
����������������� {&#39;$gen_cast&#39;,<br>��������������������� {enqueue,41,<br>������������������������� {add_binding,<br>����������������������������� {binding,<br>��������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>
��������������������������������� &lt;&lt;&quot;cmcmd.us-west.default&quot;&gt;&gt;,<br>��������������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,queue,&lt;&lt;&quot;cmcmd&quot;&gt;&gt;},<br>��������������������������������� []}}}},<br>
����������������� {&#39;DOWN&#39;,#Ref&lt;0.0.0.1656&gt;,process,&lt;0.306.0&gt;,shutdown},<br>����������������� {&#39;EXIT&#39;,&lt;0.199.0&gt;,shutdown},<br>����������������� {&#39;DOWN&#39;,#Ref&lt;0.0.0.1688&gt;,process,&lt;0.319.0&gt;,shutdown}]<br>
��� links: []<br>��� dictionary: []<br>��� trap_exit: true<br>��� status: running<br>��� heap_size: 4181<br>��� stack_size: 24<br>��� reductions: 1851087<br>� neighbours:<br><br>=SUPERVISOR REPORT==== 12-Sep-2012::16:51:56 ===<br>
���� Supervisor: {&lt;0.199.0&gt;,<br>������������������������������������������ rabbit_federation_link_sup}<br>���� Context:��� shutdown_error<br>���� Reason:���� {undef,<br>����������������� [{rabbit_federation_old_status,report,<br>
������������������� [{upstream,<br>��������������������� {amqp_params_network,&lt;&lt;&quot;guest&quot;&gt;&gt;,&lt;&lt;&quot;guest&quot;&gt;&gt;,&lt;&lt;&quot;/&quot;&gt;&gt;,<br>���������������������� &quot;<a href="http://slg1matt1.mgmt.xyz.com">slg1matt1.mgmt.xyz.com</a>&quot;,5672,0,0,0,<br>
���������������������� infinity,none,<br>���������������������� [#Fun&lt;amqp_auth_mechanisms.plain.3&gt;,<br>����������������������� #Fun&lt;amqp_auth_mechanisms.amqplain.3&gt;],<br>���������������������� [],[]},<br>��������������������� &lt;&lt;&quot;skytap&quot;&gt;&gt;,1000,1,1,none,none,none,&quot;upstream-slg&quot;},<br>
�������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>�������������������� {shutdown,<br>��������������������� {gen_server,call,<br>���������������������� [&lt;0.319.0&gt;,<br>
����������������������� {call,<br>������������������������ {&#39;exchange.unbind&#39;,0,<br>������������������������� &lt;&lt;&quot;federation: skytap -&gt; <a href="mailto:rabbit@mq1.matt.internal.xyz.com">rabbit@mq1.matt.internal.xyz.com</a> B&quot;&gt;&gt;,<br>
������������������������� &lt;&lt;&quot;skytap&quot;&gt;&gt;,<br>������������������������� &lt;&lt;&quot;ConfigurationManager.us-east.default&quot;&gt;&gt;,false,[]},<br>������������������������ none,&lt;0.200.0&gt;},<br>
����������������������� infinity]}}],<br>������������������� []},<br>������������������ {rabbit_federation_link,terminate,2,[]},<br>������������������ {gen_server2,terminate,3,[]},<br>������������������ {proc_lib,init_p_do_apply,3,<br>
������������������� [{file,&quot;proc_lib.erl&quot;},{line,227}]}]}<br>���� Offender:�� [{pid,&lt;0.200.0&gt;},<br>����������������� {name,<br>��������������������� {upstream,<br>������������������������� {amqp_params_network,&lt;&lt;&quot;guest&quot;&gt;&gt;,&lt;&lt;&quot;guest&quot;&gt;&gt;,<br>
����������������������������� &lt;&lt;&quot;/&quot;&gt;&gt;,&quot;<a href="http://slg1matt1.mgmt.xyz.com">slg1matt1.mgmt.xyz.com</a>&quot;,<br>����������������������������� 5672,0,0,0,infinity,none,<br>����������������������������� [#Fun&lt;amqp_auth_mechanisms.plain.3&gt;,<br>
������������������������������ #Fun&lt;amqp_auth_mechanisms.amqplain.3&gt;],<br>����������������������������� [],[]},<br>������������������������� &lt;&lt;&quot;skytap&quot;&gt;&gt;,1000,1,1,none,none,none,<br>������������������������� &quot;upstream-slg&quot;}},<br>
����������������� {mfa,<br>��������������������� {rabbit_federation_link,start_link,<br>������������������������� [{{upstream,<br>������������������������������� {amqp_params_network,&lt;&lt;&quot;guest&quot;&gt;&gt;,&lt;&lt;&quot;guest&quot;&gt;&gt;,<br>
����������������������������������� &lt;&lt;&quot;/&quot;&gt;&gt;,<br>����������������������������������� &quot;<a href="http://slg1matt1.mgmt.xyz.com">slg1matt1.mgmt.xyz.com</a>&quot;,5672,<br>����������������������������������� 0,0,0,infinity,none,<br>
����������������������������������� [#Fun&lt;amqp_auth_mechanisms.plain.3&gt;,<br>������������������������������������ #Fun&lt;amqp_auth_mechanisms.amqplain.3&gt;],<br>����������������������������������� [],[]},<br>������������������������������� &lt;&lt;&quot;skytap&quot;&gt;&gt;,1000,1,1,none,none,none,<br>
������������������������������� &quot;upstream-slg&quot;},<br>��������������������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;}}]}},<br>����������������� {restart_type,{permanent,1}},<br>
����������������� {shutdown,4294967295},<br>����������������� {child_type,worker}]<br><br><div class="gmail_quote">On Wed, Sep 12, 2012 at 4:51 PM, Matt Pietrek <span dir="ltr">&lt;<a href="mailto:mpietrek@skytap.com" target="_blank">mpietrek@skytap.com</a>&gt;</span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">I&#39;m experience a problem where &quot;rabbitmqctl stop&quot; takes a very long time (5+ minutes, or never) shuts down.<br>
<br>This is RabbitMQ 2.8.6 and Erlang R15B01 on Ubuntu 10.04.<br><br>The broker is running with the Federation plug-in in use, FWIW.<br>
<br>The last little bits of console output are:<br><br>--------<br>Mnesia(rabbit@mq1): write performed by {tid,307,&lt;0.151.0&gt;} on record:<br>��� {rabbit_durable_route,<br>����������� {binding,<br>��������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,exchange,&lt;&lt;&quot;skytap&quot;&gt;&gt;},<br>

��������������� &lt;&lt;&quot;cmcmd.us-west.default&quot;&gt;&gt;,<br>��������������� {resource,&lt;&lt;&quot;/&quot;&gt;&gt;,queue,&lt;&lt;&quot;cmcmd&quot;&gt;&gt;},<br>��������������� []},<br>����������� const}<br>Mnesia(rabbit@mq1): Transaction log dump initiated by time_threshold: {needs_dump,40}<br>

Mnesia(rabbit@mq1): delete_object performed by {dirty,&lt;0.237.0&gt;} on record:<br>��� {rabbit_listener,rabbit@mq1,amqp,&quot;<a href="http://mq1.blah.com" target="_blank">mq1.blah.com</a>&quot;,<br>������������������������ {0,0,0,0},<br>

������������������������ 5672}<br>Mnesia(rabbit@mq1): Transaction log dump initiated by time_threshold: already_dumped<br>Mnesia(rabbit@mq1): Transaction log dump initiated by time_threshold: already_dumped<br>Mnesia(rabbit@mq1): Transaction log dump initiated by time_threshold: already_dumped<br>

--------<br><br>The rabbit@mq1.log file:<br><br>-------<br>=INFO REPORT==== 12-Sep-2012::16:38:14 ===<br>Stopping Rabbit<br><br>=INFO REPORT==== 12-Sep-2012::16:38:14 ===<br>��� application: rabbitmq_management<br>��� exited: stopped<br>

��� type: permanent<br><br>=INFO REPORT==== 12-Sep-2012::16:38:14 ===<br>��� application: rabbitmq_federation<br>��� exited: stopped<br>��� type: permanent<br><br>=INFO REPORT==== 12-Sep-2012::16:38:14 ===<br>��� application: rabbitmq_management_agent<br>

��� exited: stopped<br>��� type: permanent<br><br>=INFO REPORT==== 12-Sep-2012::16:38:14 ===<br>stopped TCP Listener on <a href="http://0.0.0.0:5672" target="_blank">0.0.0.0:5672</a><br><br>=WARNING REPORT==== 12-Sep-2012::16:38:14 ===<br>

Connection (&lt;0.299.0&gt;) closing: internal error in channel (&lt;0.306.0&gt;): shutdown<br>-------<br><br>And the rabbitm@mq1-sasl log:<br><br>--------<br>=SUPERVISOR REPORT==== 12-Sep-2012::16:38:14 ===<br>���� Supervisor: {&lt;0.304.0&gt;,amqp_channel_sup}<br>

���� Context:��� child_terminated<br>���� Reason:���� shutdown<br>���� Offender:�� [{pid,&lt;0.306.0&gt;},<br>����������������� {name,channel},<br>����������������� {mfa,{amqp_channel,start_link,<br>������������������������������������ [direct,&lt;0.299.0&gt;,1,&lt;0.305.0&gt;,<br>

������������������������������������� #Fun&lt;amqp_channel_sup.0.24953263&gt;]}},<br>����������������� {restart_type,intrinsic},<br>����������������� {shutdown,4294967295},<br>����������������� {child_type,worker}]<br><br>

<br>=SUPERVISOR REPORT==== 12-Sep-2012::16:38:14 ===<br>���� Supervisor: {&lt;0.304.0&gt;,amqp_channel_sup}<br>���� Context:��� shutdown<br>���� Reason:���� reached_max_restart_intensity<br>���� Offender:�� [{pid,&lt;0.306.0&gt;},<br>

����������������� {name,channel},<br>����������������� {mfa,{amqp_channel,start_link,<br>������������������������������������ [direct,&lt;0.299.0&gt;,1,&lt;0.305.0&gt;,<br>������������������������������������� #Fun&lt;amqp_channel_sup.0.24953263&gt;]}},<br>

����������������� {restart_type,intrinsic},<br>����������������� {shutdown,4294967295},<br>����������������� {child_type,worker}]<br>--------<br>
</blockquote></div><br>