
<html><head></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; ">I pushed a rough draft/alpha version of the asynchronous distributed cache I blogged about last week to GitHub. It works pretty well for a rough draft. I am noticing some pretty large variances in my metrics from one run to another, though. I'm throwing 25 messages at a time at an object with 25 workers waiting for those objects (so there's no waiting for objects to be processed). I'm seeing run times as fast as 10ms and as slow as 150-200ms. It really varies from one run to the next.<div><br></div><div>I'm sure there are bottlenecks in my code. I'm starting to investigate that right now. But I was wondering if there was some consensus on maximizing throughput (using the Java client). Since this is a cache, I'm wanting to keep load times to an absolute minimum (duh). In several runs, I've gotten down to 10-15 ms but I can't get it to do that consistently.</div><div><br></div><div>Will I be able to process more messages if each of my workers has its own queue, but binds to the exchange using a common key--or should I do what I'm currently doing, which is to use the QueueingConsumer and simply use multiple workers to pull messages off the single BlockingQueue? Which has the potential for higher throughput while not increasing the likelihood I'll end up with duplicate messages?</div><div><br></div><div>Is there a better way to process messages if performance is the primary consideration than using the QueueingConsumer? I've haven't looked at the code to see what it's doing, but I would think fewer method calls between delivery of the message and calling the callback provided by the application code would give me greater throughput and shorter run times.</div><div><br></div><div>I should probably also investigate alternative languages. I started this as a Java object cache, so naturally I used Java. But I'm wondering if I could get better performance by skipping the serialize/deserialize step in the cache provider (I'm storing actual objects in memory rather than the byte array, which I considered doing at first).</div><div><br></div><div>Have a good weekend!<br><div>

<span class="Apple-style-span" style="border-collapse: separate; color: rgb(0, 0, 0); font-family: Palatino; font-size: 14px; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-align: auto; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; -webkit-text-decorations-in-effect: none; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0px; "><span class="Apple-style-span" style="border-collapse: separate; color: rgb(0, 0, 0); font-family: Times; font-size: 14px; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; -webkit-text-decorations-in-effect: none; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0px; "><span class="Apple-style-span" style="border-collapse: separate; color: rgb(0, 0, 0); font-family: Helvetica; font-size: 12px; font-style: normal; font-variant: normal; font-weight: normal; letter-spacing: normal; line-height: normal; orphans: 2; text-indent: 0px; text-transform: none; white-space: normal; widows: 2; word-spacing: 0px; -webkit-border-horizontal-spacing: 0px; -webkit-border-vertical-spacing: 0px; -webkit-text-decorations-in-effect: none; -webkit-text-size-adjust: auto; -webkit-text-stroke-width: 0px; "><div style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; "><div><div><font class="Apple-style-span" face="Palatino" size="4"><span class="Apple-style-span" style="font-size: 14px; "><br class="Apple-interchange-newline">Thanks!</span></font></div><div><font class="Apple-style-span" face="Palatino" size="4"><span class="Apple-style-span" style="font-size: 14px; "><br></span></font></div><div><font class="Apple-style-span" face="Palatino" size="4"><span class="Apple-style-span" style="font-size: 14px; ">J. Brisbin</span></font></div><div><font class="Apple-style-span" face="Palatino" size="4"><span class="Apple-style-span" style="font-size: 14px; "><a href="http://jbrisbin.com/">http://jbrisbin.com/</a></span></font></div><div><font class="Apple-style-span" face="Palatino" size="4"><span class="Apple-style-span" style="font-size: 14px; "><br></span></font></div><div><font class="Apple-style-span" face="Palatino" size="4"><span class="Apple-style-span" style="font-size: 14px; "><br></span></font></div></div><font class="Apple-style-span" face="Palatino" size="4"><span class="Apple-style-span" style="font-size: 14px; "><br></span></font></div></span><br class="Apple-interchange-newline"></span><br class="Apple-interchange-newline"></span>

</div>

<br></div></body></html>