<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:x="urn:schemas-microsoft-com:office:excel" xmlns:p="urn:schemas-microsoft-com:office:powerpoint" xmlns:a="urn:schemas-microsoft-com:office:access" xmlns:dt="uuid:C2F41010-65B3-11d1-A29F-00AA00C14882" xmlns:s="uuid:BDC6E3F0-6DA3-11d1-A2A3-00AA00C14882" xmlns:rs="urn:schemas-microsoft-com:rowset" xmlns:z="#RowsetSchema" xmlns:b="urn:schemas-microsoft-com:office:publisher" xmlns:ss="urn:schemas-microsoft-com:office:spreadsheet" xmlns:c="urn:schemas-microsoft-com:office:component:spreadsheet" xmlns:odc="urn:schemas-microsoft-com:office:odc" xmlns:oa="urn:schemas-microsoft-com:office:activation" xmlns:html="http://www.w3.org/TR/REC-html40" xmlns:q="http://schemas.xmlsoap.org/soap/envelope/" xmlns:rtc="http://microsoft.com/officenet/conferencing" xmlns:D="DAV:" xmlns:Repl="http://schemas.microsoft.com/repl/" xmlns:mt="http://schemas.microsoft.com/sharepoint/soap/meetings/" xmlns:x2="http://schemas.microsoft.com/office/excel/2003/xml" xmlns:ppda="http://www.passport.com/NameSpace.xsd" xmlns:ois="http://schemas.microsoft.com/sharepoint/soap/ois/" xmlns:dir="http://schemas.microsoft.com/sharepoint/soap/directory/" xmlns:ds="http://www.w3.org/2000/09/xmldsig#" xmlns:dsp="http://schemas.microsoft.com/sharepoint/dsp" xmlns:udc="http://schemas.microsoft.com/data/udc" xmlns:xsd="http://www.w3.org/2001/XMLSchema" xmlns:sub="http://schemas.microsoft.com/sharepoint/soap/2002/1/alerts/" xmlns:ec="http://www.w3.org/2001/04/xmlenc#" xmlns:sp="http://schemas.microsoft.com/sharepoint/" xmlns:sps="http://schemas.microsoft.com/sharepoint/soap/" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:udcs="http://schemas.microsoft.com/data/udc/soap" xmlns:udcxf="http://schemas.microsoft.com/data/udc/xmlfile" xmlns:udcp2p="http://schemas.microsoft.com/data/udc/parttopart" xmlns:wf="http://schemas.microsoft.com/sharepoint/soap/workflow/" xmlns:dsss="http://schemas.microsoft.com/office/2006/digsig-setup" xmlns:dssi="http://schemas.microsoft.com/office/2006/digsig" xmlns:mdssi="http://schemas.openxmlformats.org/package/2006/digital-signature" xmlns:mver="http://schemas.openxmlformats.org/markup-compatibility/2006" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns:mrels="http://schemas.openxmlformats.org/package/2006/relationships" xmlns:spwp="http://microsoft.com/sharepoint/webpartpages" xmlns:ex12t="http://schemas.microsoft.com/exchange/services/2006/types" xmlns:ex12m="http://schemas.microsoft.com/exchange/services/2006/messages" xmlns:pptsl="http://schemas.microsoft.com/sharepoint/soap/SlideLibrary/" xmlns:spsl="http://microsoft.com/webservices/SharePointPortalServer/PublishedLinksService" xmlns:Z="urn:schemas-microsoft-com:" xmlns:st="&#1;" xmlns="http://www.w3.org/TR/REC-html40"><head><meta http-equiv=Content-Type content="text/html; charset=us-ascii"><meta name=Generator content="Microsoft Word 12 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
        {font-family:Wingdings;
        panose-1:5 0 0 0 0 0 0 0 0 0;}
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
p.MsoListParagraph, li.MsoListParagraph, div.MsoListParagraph
        {mso-style-priority:34;
        margin-top:0cm;
        margin-right:0cm;
        margin-bottom:0cm;
        margin-left:36.0pt;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";}
span.EmailStyle17
        {mso-style-type:personal-compose;
        font-family:"Calibri","sans-serif";
        color:windowtext;}
.MsoChpDefault
        {mso-style-type:export-only;}
@page WordSection1
        {size:612.0pt 792.0pt;
        margin:72.0pt 72.0pt 72.0pt 72.0pt;}
div.WordSection1
        {page:WordSection1;}
/* List Definitions */
@list l0
        {mso-list-id:98063582;
        mso-list-type:hybrid;
        mso-list-template-ids:-1783092960 1697282638 67698691 67698693 67698689 67698691 67698693 67698689 67698691 67698693;}
@list l0:level1
        {mso-level-start-at:0;
        mso-level-number-format:bullet;
        mso-level-text:\F0B7;
        mso-level-tab-stop:none;
        mso-level-number-position:left;
        text-indent:-18.0pt;
        font-family:Symbol;
        mso-fareast-font-family:Calibri;
        mso-bidi-font-family:"Times New Roman";}
ol
        {margin-bottom:0cm;}
ul
        {margin-bottom:0cm;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=EN-US link=blue vlink=purple><div class=WordSection1><p class=MsoNormal><span lang=EN-IE>Hi,<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-IE><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-IE>We are using RabbitMQ 2.5.1 with the java client.&nbsp; Our application requires at quite reliable at most once delivery QoS Semantics. We achieve this by using persistent messages and calling basic_ack just before processing each message (using the channel that delivered the message).&nbsp; If the ack fails we discard the message and try the next message from the consumers internal in memory queue.&nbsp; If a channel or connection is closed, a management thread re-establishes the channel or connection and reconnects the consumer asynchronously, so all unacked messages get redelivered to the consumer. &nbsp;The original version of these messages might still be in the consumers internal queue, but since we try to ack them before processing they will be silently ignored.<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-IE><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-IE>The problem is some messages are getting processed twice.&nbsp; This means that a message that is acked successfully by the client is getting redelivered when the connection drops at the same time as the ack.&nbsp; We currently have some network conditions that we haven&#8217;t figured out yet that cause the connection to drop every 15 minutes.&nbsp; When this happens the message sometimes gets redelivered to consumer on a different system.<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-IE><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-IE>I have attached a network diagram to explain our topology.&nbsp; We have two rabbitmq boxed in a cluster, but they are not involved in any HA or automatic failover.&nbsp; Failover is handled by the clients on the producer and consumer systems.&nbsp; The queues and exchanges are duplicated across each server (with a server identifier added).&nbsp; We have multiple producer systems each connecting to one rabbitmq server (chosen at random).&nbsp; There are two ESB servers forming a cluster that consume the messages from the queues on both rabbitmq servers.&nbsp; The consumers on each ESB merge the queues from each rabbitmq server and present it as one queue to the application layer.&nbsp; The application layer does not get the message until after it is acked. <o:p></o:p></span></p><p class=MsoNormal><span lang=EN-IE><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-IE>Obviously we have to fix our network issues.&nbsp; However we would also like to understand how we can process messages twice when a connection drops. &nbsp;Is the ack asynchronous? Or is there a chance of a race condition when a connection is dropped during an ack where the client considers the message acked but the server does not?&nbsp; Or does this look like a bug?<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-IE><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-IE>I haven&#8217;t yet made a small application to reproduce this but should be able to if required.<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-IE><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-IE>Regards,<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-IE>Iain.<o:p></o:p></span></p></div></body></html>