<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 14 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
{font-family:Calibri;
panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
{font-family:"Segoe UI";
panose-1:2 11 5 2 4 2 4 2 2 3;}
@font-face
{font-family:Verdana;
panose-1:2 11 6 4 3 5 4 4 2 4;}
@font-face
{font-family:Webdings;
panose-1:5 3 1 2 1 5 9 6 7 3;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
{margin:0in;
margin-bottom:.0001pt;
font-size:11.0pt;
font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
{mso-style-priority:99;
color:blue;
text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
{mso-style-priority:99;
color:purple;
text-decoration:underline;}
span.EmailStyle17
{mso-style-type:personal-compose;
font-family:"Calibri","sans-serif";
color:windowtext;}
.MsoChpDefault
{mso-style-type:export-only;
font-family:"Calibri","sans-serif";}
@page WordSection1
{size:8.5in 11.0in;
margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
{page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="EN-US" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal">Hi Michael,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">We’ve been trying to track down a similar problem with our cluster of RabbitMQ on VMWare machines. We started here a few months back and Simon gave us some things to try. We’ve still not figured it out, but we really think it is something
in the VMWare layer of things.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Not sure if your problem is the same, but we tried the increasing of the nettick time and all to no avail<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">When we have our problem, on the VMWARE console, the performance charting just goes blank for a bit. Nothing is recorded, just a gap in the timeline<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">I was wondering if you see the same thing? We’ve been tweaking our vmware settings, and it seems to be tied to our web app deploys.
<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">------------------------------------------------------------------------------<o:p></o:p></p>
<p class="MsoNormal">Hi all,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">We observe some net split on our cluster and we don't know why.<o:p></o:p></p>
<p class="MsoNormal">Before change the net tick parameter and change the net split behavior, I<o:p></o:p></p>
<p class="MsoNormal">want to understand why it's happening.<o:p></o:p></p>
<p class="MsoNormal">Our environment is :<o:p></o:p></p>
<p class="MsoNormal">RabbitMQ 3.2.1 Elrang R16B<o:p></o:p></p>
<p class="MsoNormal">3 RabbitMQ Node in the same sub-network<o:p></o:p></p>
<p class="MsoNormal">RabbitMQ is installed on Windows 2008 R2 (VMWare ESXi 5.1)<o:p></o:p></p>
<p class="MsoNormal">We have 4 Mirrored Queues on this cluster.<o:p></o:p></p>
<p class="MsoNormal">In production, the normal stream is about 20 messages/second.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">We observe that split occurs always at the end of the snapshot (NetBackup)<o:p></o:p></p>
<p class="MsoNormal">on the VM.<o:p></o:p></p>
<p class="MsoNormal">But, we made snapshot each night and the network split occurs 1 time each<o:p></o:p></p>
<p class="MsoNormal">15 or 20 days.<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">*Log server rabbit@FRA-VSP-32545 :*<o:p></o:p></p>
<p class="MsoNormal">=INFO REPORT==== 19-Feb-2014::18:34:47 ===<o:p></o:p></p>
<p class="MsoNormal">rabbit on node 'rabbit@FRA-VSP-32596' down<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">=INFO REPORT==== 19-Feb-2014::18:34:49 ===<o:p></o:p></p>
<p class="MsoNormal">Mirrored-queue (queue 'conso.queue.dead' in vhost '/IEC'): Slave<o:p></o:p></p>
<p class="MsoNormal"><'rabbit@FRA-VSP-32545'.2.269.0> saw deaths of mirrors<o:p></o:p></p>
<p class="MsoNormal"><'rabbit@FRA-VSP-32596'.1.270.0><o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">*Log server rabbit@FRA-VSP-32596 :*<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">=INFO REPORT==== 19-Feb-2014::18:34:28 ===<o:p></o:p></p>
<p class="MsoNormal">rabbit on node 'rabbit@FRA-VSP-32545' down<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">=ERROR REPORT==== 19-Feb-2014::18:34:30 ===<o:p></o:p></p>
<p class="MsoNormal">** Generic server <0.279.0> terminating<o:p></o:p></p>
<p class="MsoNormal">** Last message in was {'DOWN',#Ref<0.0.0.248452>,process,<5383.278.0>,<o:p></o:p></p>
<p class="MsoNormal"> noconnection}<o:p></o:p></p>
<p class="MsoNormal">** When Server state == {state,<o:p></o:p></p>
<p class="MsoNormal"> {76,<0.279.0>},<o:p></o:p></p>
<p class="MsoNormal"> {{79,<5383.278.0>},#Ref<0.0.0.248452>},<o:p></o:p></p>
<p class="MsoNormal"> {{82,<5066.278.0>},#Ref<0.0.1.42330>},<o:p></o:p></p>
<p class="MsoNormal"> {resource,<<"/IEC">>,queue,<<"conso.queue">>},<o:p></o:p></p>
<p class="MsoNormal"> rabbit_mirror_queue_coordinator,<o:p></o:p></p>
<p class="MsoNormal"> {83,<o:p></o:p></p>
<p class="MsoNormal"> [{{76,<0.279.0>},<o:p></o:p></p>
<p class="MsoNormal"> {view_member,<o:p></o:p></p>
<p class="MsoNormal"> {76,<0.279.0>},<o:p></o:p></p>
<p class="MsoNormal"> [],<o:p></o:p></p>
<p class="MsoNormal"> {79,<5383.278.0>},<o:p></o:p></p>
<p class="MsoNormal"> {82,<5066.278.0>}}},<o:p></o:p></p>
<p class="MsoNormal"> {{79,<5383.278.0>},<o:p></o:p></p>
<p class="MsoNormal"> {view_member,<o:p></o:p></p>
<p class="MsoNormal"> {79,<5383.278.0>},<o:p></o:p></p>
<p class="MsoNormal"> [],<o:p></o:p></p>
<p class="MsoNormal"> {82,<5066.278.0>},<o:p></o:p></p>
<p class="MsoNormal"> {76,<0.279.0>}}},<o:p></o:p></p>
<p class="MsoNormal"> {{82,<5066.278.0>},<o:p></o:p></p>
<p class="MsoNormal"> {view_member,<o:p></o:p></p>
<p class="MsoNormal"> {82,<5066.278.0>},<o:p></o:p></p>
<p class="MsoNormal"> [],<o:p></o:p></p>
<p class="MsoNormal"> {76,<0.279.0>},<o:p></o:p></p>
<p class="MsoNormal"> {79,<5383.278.0>}}}]},<o:p></o:p></p>
<p class="MsoNormal"> 1457518,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">[{{76,<0.279.0>},{member,{[],[]},1457518,1457518}},<o:p></o:p></p>
<p class="MsoNormal"> {{79,<5383.278.0>},{member,{[],[]},1,1}},<o:p></o:p></p>
<p class="MsoNormal"> {{82,<5066.278.0>},{member,{[],[]},0,0}}],<o:p></o:p></p>
<p class="MsoNormal"> [<0.1272.0>],<o:p></o:p></p>
<p class="MsoNormal"> {[],[]},<o:p></o:p></p>
<p class="MsoNormal"> [],undefined,<o:p></o:p></p>
<p class="MsoNormal"> #Fun<rabbit_misc.execute_mnesia_transaction.1>}<o:p></o:p></p>
<p class="MsoNormal">** Reason for termination ==<o:p></o:p></p>
<p class="MsoNormal">** {function_clause,<o:p></o:p></p>
<p class="MsoNormal"> [{orddict,fetch,<o:p></o:p></p>
<p class="MsoNormal"> [{76,<0.279.0>},<o:p></o:p></p>
<p class="MsoNormal"> [{{82,<5066.278.0>},<o:p></o:p></p>
<p class="MsoNormal"> {view_member,<o:p></o:p></p>
<p class="MsoNormal"> {82,<5066.278.0>},<o:p></o:p></p>
<p class="MsoNormal"> [{79,<5383.278.0>}],<o:p></o:p></p>
<p class="MsoNormal"> {82,<5066.278.0>},<o:p></o:p></p>
<p class="MsoNormal"> {82,<5066.278.0>}}}]],<o:p></o:p></p>
<p class="MsoNormal"> [{file,"orddict.erl"},{line,72}]},<o:p></o:p></p>
<p class="MsoNormal"> {gm,check_neighbours,1,[]},<o:p></o:p></p>
<p class="MsoNormal"> {gm,handle_info,2,[]},<o:p></o:p></p>
<p class="MsoNormal"> {gen_server2,handle_msg,2,[]},<o:p></o:p></p>
<p class="MsoNormal"> {proc_lib,wake_up,3,[{file,"proc_lib.erl"},{line,249}]}]}<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">=ERROR REPORT==== 19-Feb-2014::18:34:30 ===<o:p></o:p></p>
<p class="MsoNormal">** Generic server <0.283.0> terminating<o:p></o:p></p>
<p class="MsoNormal">** Last message in was {'DOWN',#Ref<0.0.0.248454>,process,<5383.282.0>,<o:p></o:p></p>
<p class="MsoNormal"> noconnection}<o:p></o:p></p>
<p class="MsoNormal">** When Server state == {state,<o:p></o:p></p>
<p class="MsoNormal"> {67,<0.283.0>},<o:p></o:p></p>
<p class="MsoNormal"> {{70,<5383.282.0>},#Ref<0.0.0.248454>},<o:p></o:p></p>
<p class="MsoNormal"> {{73,<5066.282.0>},#Ref<0.0.1.42352>},<o:p></o:p></p>
<p class="MsoNormal"> {resource,<<"/IEC">>,queue,<<"event.queue">>},<o:p></o:p></p>
<p class="MsoNormal"> rabbit_mirror_queue_coordinator,<o:p></o:p></p>
<p class="MsoNormal"> {74,<o:p></o:p></p>
<p class="MsoNormal"> [{{67,<0.283.0>},<o:p></o:p></p>
<p class="MsoNormal"> {view_member,<o:p></o:p></p>
<p class="MsoNormal"> {67,<0.283.0>},<o:p></o:p></p>
<p class="MsoNormal"> [],<o:p></o:p></p>
<p class="MsoNormal"> {70,<5383.282.0>},<o:p></o:p></p>
<p class="MsoNormal"> {73,<5066.282.0>}}},<o:p></o:p></p>
<p class="MsoNormal"> {{70,<5383.282.0>},<o:p></o:p></p>
<p class="MsoNormal"> {view_member,<o:p></o:p></p>
<p class="MsoNormal"> {70,<5383.282.0>},<o:p></o:p></p>
<p class="MsoNormal"> [],<o:p></o:p></p>
<p class="MsoNormal"> {73,<5066.282.0>},<o:p></o:p></p>
<p class="MsoNormal"> {67,<0.283.0>}}},<o:p></o:p></p>
<p class="MsoNormal"> {{73,<5066.282.0>},<o:p></o:p></p>
<p class="MsoNormal"> {view_member,<o:p></o:p></p>
<p class="MsoNormal"> {73,<5066.282.0>},<o:p></o:p></p>
<p class="MsoNormal"> [],<o:p></o:p></p>
<p class="MsoNormal"> {67,<0.283.0>},<o:p></o:p></p>
<p class="MsoNormal"> {70,<5383.282.0>}}}]},<o:p></o:p></p>
<p class="MsoNormal"> 212075,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">[{{67,<0.283.0>},{member,{[],[]},212075,212075}},<o:p></o:p></p>
<p class="MsoNormal"> {{70,<5383.282.0>},{member,{[],[]},1,1}},<o:p></o:p></p>
<p class="MsoNormal"> {{73,<5066.282.0>},{member,{[],[]},0,0}}],<o:p></o:p></p>
<p class="MsoNormal"> [<0.1271.0>],<o:p></o:p></p>
<p class="MsoNormal"> {[],[]},<o:p></o:p></p>
<p class="MsoNormal"> [],undefined,<o:p></o:p></p>
<p class="MsoNormal"> #Fun<rabbit_misc.execute_mnesia_transaction.1>}<o:p></o:p></p>
<p class="MsoNormal">** Reason for termination ==<o:p></o:p></p>
<p class="MsoNormal">** {function_clause,<o:p></o:p></p>
<p class="MsoNormal"> [{orddict,fetch,<o:p></o:p></p>
<p class="MsoNormal"> [{67,<0.283.0>},<o:p></o:p></p>
<p class="MsoNormal"> [{{73,<5066.282.0>},<o:p></o:p></p>
<p class="MsoNormal"> {view_member,<o:p></o:p></p>
<p class="MsoNormal"> {73,<5066.282.0>},<o:p></o:p></p>
<p class="MsoNormal"> [{70,<5383.282.0>}],<o:p></o:p></p>
<p class="MsoNormal"> {73,<5066.282.0>},<o:p></o:p></p>
<p class="MsoNormal"> {73,<5066.282.0>}}}]],<o:p></o:p></p>
<p class="MsoNormal"> [{file,"orddict.erl"},{line,72}]},<o:p></o:p></p>
<p class="MsoNormal"> {gm,check_neighbours,1,[]},<o:p></o:p></p>
<p class="MsoNormal"> {gm,handle_info,2,[]},<o:p></o:p></p>
<p class="MsoNormal"> {gen_server2,handle_msg,2,[]},<o:p></o:p></p>
<p class="MsoNormal"> {proc_lib,wake_up,3,[{file,"proc_lib.erl"},{line,249}]}]}<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">=ERROR REPORT==== 19-Feb-2014::18:34:30 ===<o:p></o:p></p>
<p class="MsoNormal">** Generic server <0.203.0> terminating<o:p></o:p></p>
<p class="MsoNormal">** Last message in was {mnesia_tm,'rabbit@FRA-VSP-32545',<o:p></o:p></p>
<p class="MsoNormal"> {vote_yes,{tid,10316,<0.203.0>}}}<o:p></o:p></p>
<p class="MsoNormal">** When Server state == 1<o:p></o:p></p>
<p class="MsoNormal">** Reason for termination ==<o:p></o:p></p>
<p class="MsoNormal">** {unexpected_info,{mnesia_tm,'rabbit@FRA-VSP-32545',<o:p></o:p></p>
<p class="MsoNormal"> {vote_yes,{tid,10316,<0.203.0>}}}}<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">=ERROR REPORT==== 19-Feb-2014::18:34:30 ===<o:p></o:p></p>
<p class="MsoNormal">** Generic server <0.275.0> terminating<o:p></o:p></p>
<p class="MsoNormal">** Last message in was {'DOWN',#Ref<0.0.1.38240>,process,<5383.274.0>,<o:p></o:p></p>
<p class="MsoNormal"> noconnection}<o:p></o:p></p>
<p class="MsoNormal">** When Server state == {state,<o:p></o:p></p>
<p class="MsoNormal"> {70,<0.275.0>},<o:p></o:p></p>
<p class="MsoNormal"> {{76,<5066.274.0>},#Ref<0.0.1.42305>},<o:p></o:p></p>
<p class="MsoNormal"> {{73,<5383.274.0>},#Ref<0.0.1.38240>},<o:p></o:p></p>
<p class="MsoNormal"> {resource,<<"/IEC">>,queue,<o:p></o:p></p>
<p class="MsoNormal"> <<"activity.queue.dead">>},<o:p></o:p></p>
<p class="MsoNormal"> rabbit_mirror_queue_coordinator,<o:p></o:p></p>
<p class="MsoNormal"> {77,<o:p></o:p></p>
<p class="MsoNormal"> [{{70,<0.275.0>},<o:p></o:p></p>
<p class="MsoNormal"> {view_member,<o:p></o:p></p>
<p class="MsoNormal"> {70,<0.275.0>},<o:p></o:p></p>
<p class="MsoNormal"> [],<o:p></o:p></p>
<p class="MsoNormal"> {76,<5066.274.0>},<o:p></o:p></p>
<p class="MsoNormal"> {73,<5383.274.0>}}},<o:p></o:p></p>
<p class="MsoNormal"> {{73,<5383.274.0>},<o:p></o:p></p>
<p class="MsoNormal"> {view_member,<o:p></o:p></p>
<p class="MsoNormal"> {73,<5383.274.0>},<o:p></o:p></p>
<p class="MsoNormal"> [],<o:p></o:p></p>
<p class="MsoNormal"> {70,<0.275.0>},<o:p></o:p></p>
<p class="MsoNormal"> {76,<5066.274.0>}}},<o:p></o:p></p>
<p class="MsoNormal"> {{76,<5066.274.0>},<o:p></o:p></p>
<p class="MsoNormal"> {view_member,<o:p></o:p></p>
<p class="MsoNormal"> {76,<5066.274.0>},<o:p></o:p></p>
<p class="MsoNormal"> [],<o:p></o:p></p>
<p class="MsoNormal"> {73,<5383.274.0>},<o:p></o:p></p>
<p class="MsoNormal"> {70,<0.275.0>}}}]},<o:p></o:p></p>
<p class="MsoNormal"> 6,<o:p></o:p></p>
<p class="MsoNormal"> [{{70,<0.275.0>},{member,{[],[]},6,6}},<o:p></o:p></p>
<p class="MsoNormal"> {{73,<5383.274.0>},{member,{[],[]},1,1}},<o:p></o:p></p>
<p class="MsoNormal"> {{76,<5066.274.0>},{member,{[],[]},0,0}}],<o:p></o:p></p>
<p class="MsoNormal"> [<0.1273.0>],<o:p></o:p></p>
<p class="MsoNormal"> {[],[]},<o:p></o:p></p>
<p class="MsoNormal"> [],undefined,<o:p></o:p></p>
<p class="MsoNormal"> #Fun<rabbit_misc.execute_mnesia_transaction.1>}<o:p></o:p></p>
<p class="MsoNormal">** Reason for termination ==<o:p></o:p></p>
<p class="MsoNormal">** {noproc,{gen_server2,call,<o:p></o:p></p>
<p class="MsoNormal"> [<0.203.0>,<o:p></o:p></p>
<p class="MsoNormal"> {submit,#Fun<rabbit_misc.6.116010224>},<o:p></o:p></p>
<p class="MsoNormal"> infinity]}}<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">=ERROR REPORT==== 19-Feb-2014::18:34:30 ===<o:p></o:p></p>
<p class="MsoNormal">** Generic server <0.204.0> terminating<o:p></o:p></p>
<p class="MsoNormal">** Last message in was {mnesia_tm,'rabbit@FRA-VSP-32545',<o:p></o:p></p>
<p class="MsoNormal"> {vote_yes,{tid,10315,<0.204.0>}}}<o:p></o:p></p>
<p class="MsoNormal">** When Server state == 2<o:p></o:p></p>
<p class="MsoNormal">** Reason for termination ==<o:p></o:p></p>
<p class="MsoNormal">** {unexpected_info,{mnesia_tm,'rabbit@FRA-VSP-32545',<o:p></o:p></p>
<p class="MsoNormal"> {vote_yes,{tid,10315,<0.204.0>}}}}<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">=ERROR REPORT==== 19-Feb-2014::18:34:30 ===<o:p></o:p></p>
<p class="MsoNormal">** Generic server <0.1268.0> terminating<o:p></o:p></p>
<p class="MsoNormal">** Last message in was {'$gen_cast',{gm_deaths,[<5066.266.0>,<0.267.0>]}}<o:p></o:p></p>
<p class="MsoNormal">** When Server state == {state,<o:p></o:p></p>
<p class="MsoNormal"> {amqqueue,<o:p></o:p></p>
<p class="MsoNormal"> {resource,<<"/IEC">>,queue,<o:p></o:p></p>
<p class="MsoNormal"> <<"gps.queue.dead">>},<o:p></o:p></p>
<p class="MsoNormal"> true,false,none,[],<0.266.0>,<o:p></o:p></p>
<p class="MsoNormal"> [<5066.265.0>],<o:p></o:p></p>
<p class="MsoNormal"> [<5066.265.0>],<o:p></o:p></p>
<p class="MsoNormal"> [{vhost,<<"/IEC">>},<o:p></o:p></p>
<p class="MsoNormal"> {name,<<"Queue HA">>},<o:p></o:p></p>
<p class="MsoNormal"> {pattern,<<".queue">>},<o:p></o:p></p>
<p class="MsoNormal"> {'apply-to',<<"queues">>},<o:p></o:p></p>
<p class="MsoNormal"> {definition,<o:p></o:p></p>
<p class="MsoNormal"> [{<<"ha-mode">>,<<"all">>},<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">{<<"ha-sync-mode">>,<<"automatic">>}]},<o:p></o:p></p>
<p class="MsoNormal"> {priority,0}],<o:p></o:p></p>
<p class="MsoNormal"> [{<5066.266.0>,<5066.265.0>},<o:p></o:p></p>
<p class="MsoNormal"> {<5383.266.0>,<5383.265.0>}],<o:p></o:p></p>
<p class="MsoNormal"> []},<o:p></o:p></p>
<p class="MsoNormal"> <0.267.0>,<o:p></o:p></p>
<p class="MsoNormal"> {state,<o:p></o:p></p>
<p class="MsoNormal"> {dict,0,16,16,8,80,48,<o:p></o:p></p>
<p class="MsoNormal"> {[],[],[],[],[],[],[],[],[],[],[],[],[],<o:p></o:p></p>
<p class="MsoNormal"> [],[],[]},<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">{{[],[],[],[],[],[],[],[],[],[],[],[],[],<o:p></o:p></p>
<p class="MsoNormal"> [],[],[]}}},<o:p></o:p></p>
<p class="MsoNormal"> erlang},<o:p></o:p></p>
<p class="MsoNormal"> #Fun<rabbit_mirror_queue_master.5.69128381>,<o:p></o:p></p>
<p class="MsoNormal"> #Fun<rabbit_mirror_queue_master.6.50493311>}<o:p></o:p></p>
<p class="MsoNormal">** Reason for termination ==<o:p></o:p></p>
<p class="MsoNormal">** {{case_clause,{ok,<5066.265.0>,[]}},<o:p></o:p></p>
<p class="MsoNormal"> [{rabbit_mirror_queue_coordinator,handle_cast,2,[]},<o:p></o:p></p>
<p class="MsoNormal"> {gen_server2,handle_msg,2,[]},<o:p></o:p></p>
<p class="MsoNormal"> {proc_lib,wake_up,3,[{file,"proc_lib.erl"},{line,249}]}]}<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">=ERROR REPORT==== 19-Feb-2014::18:34:31 ===<o:p></o:p></p>
<p class="MsoNormal">** Generic server <0.266.0> terminating<o:p></o:p></p>
<p class="MsoNormal">** Last message in was {'EXIT',<0.1268.0>,<o:p></o:p></p>
<p class="MsoNormal"> {{case_clause,{ok,<5066.265.0>,[]}},<o:p></o:p></p>
<p class="MsoNormal"> [{rabbit_mirror_queue_coordinator,handle_cast,2,<o:p></o:p></p>
<p class="MsoNormal"> []},<o:p></o:p></p>
<p class="MsoNormal"> {gen_server2,handle_msg,2,[]},<o:p></o:p></p>
<p class="MsoNormal"> {proc_lib,wake_up,3,<o:p></o:p></p>
<p class="MsoNormal"> [{file,"proc_lib.erl"},{line,249}]}]}}<o:p></o:p></p>
<p class="MsoNormal">** When Server state == {q,<o:p></o:p></p>
<p class="MsoNormal"> {amqqueue,<o:p></o:p></p>
<p class="MsoNormal"> {resource,<<"/IEC">>,queue,<<"gps.queue.dead">>},<o:p></o:p></p>
<p class="MsoNormal"> true,false,none,[],<0.266.0>,<o:p></o:p></p>
<p class="MsoNormal"> [<5383.265.0>,<5066.265.0>],<o:p></o:p></p>
<p class="MsoNormal"> [<5066.265.0>,<5383.265.0>],<o:p></o:p></p>
<p class="MsoNormal"> [{vhost,<<"/IEC">>},<o:p></o:p></p>
<p class="MsoNormal"> {name,<<"Queue HA">>},<o:p></o:p></p>
<p class="MsoNormal"> {pattern,<<".queue">>},<o:p></o:p></p>
<p class="MsoNormal"> {'apply-to',<<"queues">>},<o:p></o:p></p>
<p class="MsoNormal"> {definition,<o:p></o:p></p>
<p class="MsoNormal"> [{<<"ha-mode">>,<<"all">>},<o:p></o:p></p>
<p class="MsoNormal"> {<<"ha-sync-mode">>,<<"automatic">>}]},<o:p></o:p></p>
<p class="MsoNormal"> {priority,0}],<o:p></o:p></p>
<p class="MsoNormal"> [{<5066.266.0>,<5066.265.0>},<o:p></o:p></p>
<p class="MsoNormal"> {<5383.266.0>,<5383.265.0>},<o:p></o:p></p>
<p class="MsoNormal"> {<0.267.0>,<0.266.0>}],<o:p></o:p></p>
<p class="MsoNormal"> []},<o:p></o:p></p>
<p class="MsoNormal"> none,false,rabbit_mirror_queue_master,<o:p></o:p></p>
<p class="MsoNormal"> {state,<o:p></o:p></p>
<p class="MsoNormal"> {resource,<<"/IEC">>,queue,<<"gps.queue.dead">>},<o:p></o:p></p>
<p class="MsoNormal"> <0.267.0>,<0.1268.0>,rabbit_variable_queue,<o:p></o:p></p>
<p class="MsoNormal"> {vqstate,<o:p></o:p></p>
<p class="MsoNormal"> {0,{[],[]}},<o:p></o:p></p>
<p class="MsoNormal"> {0,{[],[]}},<o:p></o:p></p>
<p class="MsoNormal"> {delta,undefined,0,undefined},<o:p></o:p></p>
<p class="MsoNormal"> {0,{[],[]}},<o:p></o:p></p>
<p class="MsoNormal"> {0,{[],[]}},<o:p></o:p></p>
<p class="MsoNormal"> 0,<o:p></o:p></p>
<p class="MsoNormal"> {0,nil},<o:p></o:p></p>
<p class="MsoNormal"> {0,nil},<o:p></o:p></p>
<p class="MsoNormal"> {qistate,<o:p></o:p></p>
<p class="MsoNormal"> "d:/tools/RabbitMQ<o:p></o:p></p>
<p class="MsoNormal">Server/data/db/rabbit@FRA-VSP-32596-mnesia<o:p></o:p></p>
<p class="MsoNormal">/queues/6IXYXKMC8M51EEAXH5MKLR0Q4",<o:p></o:p></p>
<p class="MsoNormal"> {{dict,0,16,16,8,80,48,<o:p></o:p></p>
<p class="MsoNormal"> {[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],<o:p></o:p></p>
<p class="MsoNormal"> []},<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">{{[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],<o:p></o:p></p>
<p class="MsoNormal"> []}}},<o:p></o:p></p>
<p class="MsoNormal"> []},<o:p></o:p></p>
<p class="MsoNormal"> undefined,0,65536,<o:p></o:p></p>
<p class="MsoNormal"> #Fun<rabbit_variable_queue.2.81334491>,<o:p></o:p></p>
<p class="MsoNormal"> {0,nil}},<o:p></o:p></p>
<p class="MsoNormal"> {{client_msstate,msg_store_persistent,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><<55,209,140,132,77,86,75,214,37,255,72,56,103,92,<o:p></o:p></p>
<p class="MsoNormal"> 154,75>>,<o:p></o:p></p>
<p class="MsoNormal"> {dict,0,16,16,8,80,48,<o:p></o:p></p>
<p class="MsoNormal"> {[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],<o:p></o:p></p>
<p class="MsoNormal"> []},<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">{{[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],<o:p></o:p></p>
<p class="MsoNormal"> []}}},<o:p></o:p></p>
<p class="MsoNormal"> {state,340043,<o:p></o:p></p>
<p class="MsoNormal"> "d:/tools/RabbitMQ<o:p></o:p></p>
<p class="MsoNormal">Server/data/db/rabbit@FRA-VSP-32596-mnesia/msg_store_persistent"},<o:p></o:p></p>
<p class="MsoNormal"> rabbit_msg_store_ets_index,<o:p></o:p></p>
<p class="MsoNormal"> "d:/tools/RabbitMQ<o:p></o:p></p>
<p class="MsoNormal">Server/data/db/rabbit@FRA-VSP-32596-mnesia/msg_store_persistent",<o:p></o:p></p>
<p class="MsoNormal"> <0.255.0>,344140,335946,348237,352334},<o:p></o:p></p>
<p class="MsoNormal"> {client_msstate,msg_store_transient,<o:p></o:p></p>
<p class="MsoNormal"> <<148,176,200,245,252,25,203,27,190,186,25,104,<o:p></o:p></p>
<p class="MsoNormal"> 217,230,131,35>>,<o:p></o:p></p>
<p class="MsoNormal"> {dict,0,16,16,8,80,48,<o:p></o:p></p>
<p class="MsoNormal"> {[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],<o:p></o:p></p>
<p class="MsoNormal"> []},<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">{{[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],<o:p></o:p></p>
<p class="MsoNormal"> []}}},<o:p></o:p></p>
<p class="MsoNormal"> {state,319558,<o:p></o:p></p>
<p class="MsoNormal"> "d:/tools/RabbitMQ<o:p></o:p></p>
<p class="MsoNormal">Server/data/db/rabbit@FRA-VSP-32596-mnesia/msg_store_transient"},<o:p></o:p></p>
<p class="MsoNormal"> rabbit_msg_store_ets_index,<o:p></o:p></p>
<p class="MsoNormal"> "d:/tools/RabbitMQ<o:p></o:p></p>
<p class="MsoNormal">Server/data/db/rabbit@FRA-VSP-32596-mnesia/msg_store_transient",<o:p></o:p></p>
<p class="MsoNormal"> <0.250.0>,323655,315461,327752,331849}},<o:p></o:p></p>
<p class="MsoNormal"> true,0,0,0,infinity,0,0,0,0,0,<o:p></o:p></p>
<p class="MsoNormal"> {rates,<o:p></o:p></p>
<p class="MsoNormal"> {{1392,831016,530070},0},<o:p></o:p></p>
<p class="MsoNormal"> {{1392,831016,530070},0},<o:p></o:p></p>
<p class="MsoNormal"> 0.0,0.0,<o:p></o:p></p>
<p class="MsoNormal"> {1392,831128,748070}},<o:p></o:p></p>
<p class="MsoNormal"> {0,nil},<o:p></o:p></p>
<p class="MsoNormal"> {0,nil},<o:p></o:p></p>
<p class="MsoNormal"> {0,nil},<o:p></o:p></p>
<p class="MsoNormal"> {0,nil},<o:p></o:p></p>
<p class="MsoNormal"> 0,0,<o:p></o:p></p>
<p class="MsoNormal"> {rates,<o:p></o:p></p>
<p class="MsoNormal"> {{1392,831016,530070},0},<o:p></o:p></p>
<p class="MsoNormal"> {{1392,831016,530070},0},<o:p></o:p></p>
<p class="MsoNormal"> 0.0,0.0,<o:p></o:p></p>
<p class="MsoNormal"> {1392,831128,748070}}},<o:p></o:p></p>
<p class="MsoNormal"> {dict,0,16,16,8,80,48,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">{[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],[]},<o:p></o:p></p>
<p class="MsoNormal"> {{[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],<o:p></o:p></p>
<p class="MsoNormal"> []}}},<o:p></o:p></p>
<p class="MsoNormal"> [],<o:p></o:p></p>
<p class="MsoNormal"> {set,0,16,16,8,80,48,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">{[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],[]},<o:p></o:p></p>
<p class="MsoNormal"> {{[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],<o:p></o:p></p>
<p class="MsoNormal"> []}}}},<o:p></o:p></p>
<p class="MsoNormal"> {queue,[],[],0},<o:p></o:p></p>
<p class="MsoNormal"> undefined,undefined,undefined,undefined,<o:p></o:p></p>
<p class="MsoNormal"> {state,fine,5000,undefined},<o:p></o:p></p>
<p class="MsoNormal"> {0,nil},<o:p></o:p></p>
<p class="MsoNormal"> undefined,undefined,undefined,<o:p></o:p></p>
<p class="MsoNormal"> {state,<o:p></o:p></p>
<p class="MsoNormal"> {dict,0,16,16,8,80,48,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">{[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],[]},<o:p></o:p></p>
<p class="MsoNormal"> {{[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],<o:p></o:p></p>
<p class="MsoNormal"> []}}},<o:p></o:p></p>
<p class="MsoNormal"> delegate},<o:p></o:p></p>
<p class="MsoNormal"> undefined,undefined,undefined,4,running}<o:p></o:p></p>
<p class="MsoNormal">** Reason for termination ==<o:p></o:p></p>
<p class="MsoNormal">** {{case_clause,{ok,<5066.265.0>,[]}},<o:p></o:p></p>
<p class="MsoNormal"> [{rabbit_mirror_queue_coordinator,handle_cast,2,[]},<o:p></o:p></p>
<p class="MsoNormal"> {gen_server2,handle_msg,2,[]},<o:p></o:p></p>
<p class="MsoNormal"> {proc_lib,wake_up,3,[{file,"proc_lib.erl"},{line,249}]}]}<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Any ideas?<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Best regards,<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">* ________________________________________________________________*<o:p></o:p></p>
<p class="MsoNormal">*Micha?l OULLION*<o:p></o:p></p>
<p class="MsoNormal">*Architecte JAVA*<o:p></o:p></p>
<p class="MsoNormal">*ND Informatique*<o:p></o:p></p>
<p class="MsoNormal">Adresse (1208 route des Pierrelles B.P. 98 BEAUSEMBLANT - 26240<o:p></o:p></p>
<p class="MsoNormal">Beausemblant - FRANCE)<o:p></o:p></p>
<p class="MsoNormal">Tel. +33 (0)4 75 23 68 07<o:p></o:p></p>
<p class="MsoNormal">Visit our web site at www.norbert-dentressangle.com<o:p></o:p></p>
<p class="MsoNormal">-------------- next part --------------<o:p></o:p></p>
<p class="MsoNormal">An HTML attachment was scrubbed...<o:p></o:p></p>
<p class="MsoNormal">URL: <http://lists.rabbitmq.com/pipermail/rabbitmq-discuss/attachments/20140220/4a2828a3/attachment-0001.html><o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">------------------------------<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">Subject: Digest Footer<o:p></o:p></p>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Segoe UI","sans-serif";color:black"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Segoe UI","sans-serif";color:black"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:10.0pt;font-family:"Segoe UI","sans-serif";color:black"><o:p> </o:p></span></p>
<p class="MsoNormal"><b><span style="font-family:"Arial","sans-serif";color:#F0982E">Bill Chmura
</span></b><span style="color:black"> </span><i><span style="font-size:10.0pt;font-family:"Arial","sans-serif";color:#7C7C7C">Director, IT Development Services<br>
</span></i><span style="font-family:"Arial","sans-serif";color:black"><br>
</span><b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#F0982E">direct
</span></b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#7C7C7C">860 676 3618</span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:black"> </span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#F0982E">|
<b>toll-free</b> </span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#7C7C7C">800 293 0056</span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:black"> </span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#7C7C7C">
x61009<br>
<br>
</span><b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#F0982E">Nurtur</span></b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:black"> </span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#F0982E">|
</span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#798082">20 Batterson Park Road</span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:black"> </span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#F0982E">|
</span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#798082">Farmington, CT 06032</span><span style="font-family:"Arial","sans-serif";color:black"><br>
</span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#7F7F7F"><a href="mailto:bchmura@nurturhealth.com"><span style="color:#7F7F7F">bchmura@nurturhealth.com</span></a></span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:gray">
</span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#F79646"> | </span><span style="color:black"><a href="http://www.nurturhealth.com/"><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:gray">www.nurturhealth.com</span></a></span><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#7C7C7C"><br>
</span><span style="font-family:"Arial","sans-serif";color:#7C7C7C"><br>
</span><span style="color:black"><a href="http://www.letstalkhealthcarereform.com/" title="Let's Talk Blog"><b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:gray">Let's Talk Blog</span></b></a></span><b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#7A8183">
</span></b><b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#F0982E">| </span></b><span style="color:black"><a href="http://www.nurturhealth.com/journey/" title="Journey Newsletter "><b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:gray">Journey
Newsletter </span></b></a></span><b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#7A8183"> </span></b><b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#F0982E">| </span></b><span style="color:black"><a href="http://twitter.com/#!/nurturhealth" title="Twitter"><b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:gray">Twitter</span></b></a></span><b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:black">
</span></b><b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:#F0982E">| </span></b><span style="color:black"><a href="http://www.linkedin.com/company/nurtur" title="LinkedIn"><b><span style="font-size:9.0pt;font-family:"Arial","sans-serif";color:gray">LinkedIn</span></b></a></span><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal"><b><span style="font-size:20.0pt;font-family:Webdings;color:green">P</span></b><b><span style="font-size:20.0pt;font-family:"Verdana","sans-serif";color:green">
</span></b><b><span style="font-size:8.0pt;font-family:"Times New Roman","serif";color:green">Think Green. Please consider the environment before printing this email.</span></b><span style="color:black"><o:p></o:p></span></p>
<p class="MsoNormal" style="margin-bottom:12.0pt"><span style="color:black"><o:p> </o:p></span></p>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<p><br>
This email and all attachments are confidential and intended solely <br>
for the use of the individual or entity to which they are addressed. <br>
If you have received this email in error please notify the sender <br>
by replying to this message. If you are not the intended recipient, <br>
please delete this message and all attachments immediately. Do not <br>
copy, disclose, use or act upon the information contained. Please <br>
note that any views or opinions presented in this email are solely <br>
those of the author and do not necessarily represent those of the <br>
company. Finally, the recipient should check this email and any <br>
attachments for the presence of viruses. While every attempt is made <br>
to verify that the contents are safe, the company accepts no liability <br>
for any damage caused by any virus transmitted by this email.</p></body>
</html>