<html><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; "><div>Ed,</div><br><div><div>On 8 May 2008, at 06:13, Edwin Fine wrote:</div><blockquote type="cite"><br>Well, I have put most of the code I am using into a test program (two modules). This code is not for the mailing list's consumption, if that's ok with you. The problem is, I can't even make the code work for more than 1 consumer and I don't know why. I think I am too tired. In any case, the two modules included are:<br> <ul><li>rabbit_chan_crash.erl - The actual test program, which contains most of the Rabbit-related working code;</li></ul></blockquote>I've run you code. The problem that that you are executing synchronous RPCs on the same channel concurrently, which doesn't work, because the protocol flow stipulates that a client performs a blocking receive for synchronous commands within a channel.</div><div><br></div><div>By doing this though, you have uncovered a bug in the synchronous RPC handling code in the client that doesn't protect against this properly. So I've fixed this bug and will send it down to the repository.&nbsp;</div><div><br></div><div>This will not solve your problem, it will just make a clearer indication of what went wrong. When designing the client, we deliberated whether the client channel module should contain the intelligence to queue up pending RPC requests in order to accept concurrent requests from user code and essentially serialize their dispatch to the server.&nbsp;Initially, we decided against this approach because of the complexity it introduces. In general, queue declaration and binding is an operation that you don't need to perform concurrently per channel. While I think that this view is still valid, your use case may provide some food for thought. Thoughts anyone?</div><div><br></div><div>To solve your problem, you can do one of a few things:</div><div><br></div><div>1. Refactor your code so that synchronous RPCs are not executed in parallel (e.g. QueueDeclare, QueueBind, etc) within one channel process;</div><div>2. Manage by exception - catch an&nbsp;illegal_pending_rpc error (which is the bug fix I just put in) and resend the request;</div><div>3. Use more channel processes - this *may* be a bit heavy weight for the TCP client, this is better suited to the direct client.</div><div><br></div><div>If you want to go down route 2, let me know because we're currently in the process of moving the source code from monotone to mercurial.</div><div><br></div><div>BTW, I see that you've made a local modification to the amqp_connection module to export the start/4 function which allows the caller to specify a virtual host. This is probably a good idea and we may incorporate this into the API.</div><div><br></div><div><blockquote type="cite"><ul><li><span class="Apple-style-span" style="-webkit-text-stroke-width: -1; ">rbmq_admin.erl - An interface to the admin part of Rabbit that I wrote because I wanted to be able to create exchanges, users, etc from within Erlang instead of the command line. Feel free to use this if you think it's of any use, or improve it - feedback welcome. Actually, at some point I want to write a full Web admin interface for Rabbit. Real Soon Now.</span></li></ul></blockquote><div>Glad you've mentioned this topic. I've done some initial work of doing some remote management of Rabbit, if and when you actually want to get going, it will probably be a good idea to start a&nbsp;separate discussion thread on this one. There are many design issues that would need to be discussed, most importantly dependencies that may arise.&nbsp;</div><div><br></div><br><blockquote type="cite">To compile you will need all the usual RabbitMQ paths, and the Erlang client of course. You will also need .erlang.cookie or setcookie with your Rabbit's cookie. I am pretty sure there are no external dependencies other than Rabbit and Erlang.<br> <br>To run is simple (but please note that the code will try to create a user named emf_test, and an exchange and a bunch of queues). Feel free to hack into shape if you have the time and interest. Tomorrow I will try to run Rabbit and my code co-located.<br> <br>>rabbit_chan_crash:go(rabbit@mynode, NumConsumers, NumMsgsPerSec).<br>>rabbit_chan_crash:stop(). % If you can even read the screen to type this in :)<br><br>When I use rabbit_chan_crash:go(rabbit@mynode, 1, 10) it's all good.<br> When I use rabbit_chan_crash:go(rabbit@mynode, 2, 10) it's all bad. I don't know what I am doing wrong, but my other code works (each consumer is in its own gen_event server, which is probably why. I think I am getting messages in the wrong message queues due to my lack of Erlang experience. And I am tired, too).<br> <br>Anyway I have included the "bad" output.<br><br>If you have any luck please let me know. Feedback welcome, too.<br><br> Regards,<br> Ed<br> <br>(xhg@ender)3> rabbit_chan_crash:go(rabbit@ender,2,10).<br>Setting up channel on realm &lt;&lt;"/data">> for connection {&lt;0.60.0>,network}<br>Access granted for channel &lt;0.65.0> on realm &lt;&lt;"/data">> for connection {&lt;0.60.0>,<br> &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; network}<br>Declaring exchange &lt;&lt;"emf_test">> using ticket 101<br>Declared exchange &lt;&lt;"emf_test">> using ticket 101<br> Declaring queue &lt;&lt;"EMF_TEST_Q.1">><br>Declared queue &lt;&lt;"EMF_TEST_Q.1">>, msgc = 0, cons_c = 0<br>Declaring queue &lt;&lt;"EMF_TEST_Q.2">><br>Declared queue &lt;&lt;"EMF_TEST_Q.2">>, msgc = 0, cons_c = 0<br> Environment setup complete, rmq_state =<br>{rmq_state,"guest","guest",<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; {&lt;0.60.0>,network},<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &lt;0.65.0>,101,&lt;&lt;"emf_test">>,&lt;&lt;"/data">>,&lt;&lt;"/emf_test">>,<br> &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; rabbit@ender,2}<br>Consumers started: [&lt;0.69.0>,&lt;0.70.0>]<br>[&lt;0.69.0>] Started consumer tag &lt;&lt;"EMF_TEST_Q.1">> for existing channel/ticket/queue &lt;0.65.0>/101/&lt;&lt;"EMF_TEST_Q.1">><br> [&lt;0.70.0>] Started consumer tag &lt;&lt;"EMF_TEST_Q.2">> for existing channel/ticket/queue &lt;0.65.0>/101/&lt;&lt;"EMF_TEST_Q.2">><br>&lt;0.68.0><br>Producer started: &lt;0.71.0><br> Binding queue &lt;&lt;"EMF_TEST_Q.1">>, ticket 101, exchange &lt;&lt;"emf_test">>, routing key &lt;&lt;"EMF_TEST_Q.1">><br>Binding queue &lt;&lt;"EMF_TEST_Q.2">>, ticket 101, exchange &lt;&lt;"emf_test">>, routing key &lt;&lt;"EMF_TEST_Q.2">><br> Bound queue &lt;&lt;"EMF_TEST_Q.2">> to exchange &lt;&lt;"emf_test">><br>Subscribing consumer &lt;&lt;"EMF_TEST_Q.2">> to channel &lt;0.65.0><br>(xhg@ender)4> <br>=ERROR REPORT==== 8-May-2008::00:57:23 ===<br> ** Generic server &lt;0.65.0> terminating <br>** Last message in was {method,{'basic.consume_ok',&lt;&lt;"EMF_TEST_Q.2">>},none}<br>** When Server state == {channel_state,1,&lt;0.60.0>,&lt;0.62.0>,&lt;0.66.0>,<br> &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; #Fun&lt;amqp_network_driver.do.2>,<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; #Fun&lt;amqp_network_driver.do.3>,&lt;&lt;>>,&lt;0.70.0>,<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; false,undefined,<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; {dict,0,16,16,8,80,48,<br> &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; {[],[],[],[],[],[],[],[],[],[],[],[],[],[],[],<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; []},<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; {{[],[],[],[],[],[],[],[],[],[],[],[],[],[],<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; [],[]}}}}<br> ** Reason for termination == <br>** {function_clause,[{gen_server,reply,<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; [&lt;&lt;>>,<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; {'basic.consume_ok',&lt;&lt;"EMF_TEST_Q.2">>}]},<br> &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; {amqp_channel,rpc_bottom_half,2},<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; {amqp_channel,handle_method,2},<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; {gen_server,handle_msg,5},<br>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; {proc_lib,init_p,5}]}<br><br>=ERROR REPORT==== 8-May-2008::00:57:23 ===<br> Error in process &lt;0.70.0> on node 'xhg@ender' with exit value: {{badmatch,{'queue.bind_ok'}},[{rabbit_chan_crash,subscribe,2},{rabbit_chan_crash,consumer,5}]}<br>---------</blockquote><br></div><div><br></div><div>HTH,</div><div><br></div><div>Ben</div><div><br></div><div>PS I'm attaching your code to the list for reference.</div><div><br></div><div><div></div></div></body></html>