<div class="gmail_quote">On Thu, Oct 13, 2011 at 10:48 AM, Matthew Sackman <span dir="ltr">&lt;<a href="mailto:matthew@rabbitmq.com">matthew@rabbitmq.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;">
<div class="im">On Thu, Oct 13, 2011 at 10:44:43AM -0500, Bryan Murphy wrote:<br>
&gt; I&#39;ll try to get it into a bad state later today. �If I can manage that, I<br>
&gt; can easily grant temporary remote access to anybody who needs it.<br>
<br>
</div>That&#39;d be great, many thanks. However, please note that almost all of<br>
the Rabbit team is in London, UK, and so there&#39;s the usual fun-and-games<br>
with timezones...<br>
<font color="#888888"><br>
Matthew<br>
</font></blockquote></div><br><div>I&#39;ve managed to get it into a bad state, but yet again the behavior is inconsistent with what I&#39;ve seen before. �Now, I&#39;ve got the following behavior:</div><div><br></div><div>
<font class="Apple-style-span" face="&#39;courier new&#39;, monospace">/etc/init.d/rabbitmq-server stop works</font></div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">/etc/init.d/rabbitmq-server start never exits</font></div>
<div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace"><br></font></div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">rabbitmqctl list_queues works</font></div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">rabbitmqctl cluster_status works</font></div>
<div><br></div><div>Sending messages to the server fails:</div><div><br></div><div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">WARNING:root:Traceback (most recent call last):</font></div><div>
<font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� File &quot;/usr/local/lib/python2.7/dist-packages/mediafly/bus/__init__.py&quot;, line 111, in publish</font></div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� � connection = pika.BlockingConnection(host)</font></div>
<div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� File &quot;/usr/local/lib/python2.7/dist-packages/pika/adapters/blocking_connection.py&quot;, line 32, in __init__</font></div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� � BaseConnection.__init__(self, parameters, None, reconnection_strategy)</font></div>
<div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� File &quot;/usr/local/lib/python2.7/dist-packages/pika/adapters/base_connection.py&quot;, line 50, in __init__</font></div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� � reconnection_strategy)</font></div>
<div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� File &quot;/usr/local/lib/python2.7/dist-packages/pika/connection.py&quot;, line 170, in __init__</font></div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� � self._connect()</font></div>
<div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� File &quot;/usr/local/lib/python2.7/dist-packages/pika/connection.py&quot;, line 228, in _connect</font></div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� � self.parameters.port or �spec.PORT)</font></div>
<div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� File &quot;/usr/local/lib/python2.7/dist-packages/pika/adapters/blocking_connection.py&quot;, line 36, in _adapter_connect</font></div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� � BaseConnection._adapter_connect(self, host, port)</font></div>
<div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� File &quot;/usr/local/lib/python2.7/dist-packages/pika/adapters/base_connection.py&quot;, line 58, in _adapter_connect</font></div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� � self.socket.connect((host, port))</font></div>
<div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� File &quot;/usr/lib/python2.7/socket.py&quot;, line 224, in meth</font></div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">� � return getattr(self._sock,name)(*args)</font></div>
<div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace">error: [Errno 111] Connection refused</font></div></div><div><font class="Apple-style-span" face="&#39;courier new&#39;, monospace"><br></font></div>
<div>I was able to get it into this state by repeatedly stopping and/or killing the first node in the cluster and restarting it while simultaneously trying various ways of tickling it with our application. �</div><div><br>
</div><div>startup_log is getting stuck at &quot;starting database&quot; but there&#39;s no activity going on in the cluster and I&#39;d be surprised if I&#39;ve sent &gt;100 messages since I provisioned it.</div><div><br>
</div><div>I can provide remote access to whomever needs it, I just need their public ssh key.</div><div><br></div><div>Thanks,</div><div>Bryan</div>