<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta http-equiv=Content-Type content="text/html; charset=us-ascii"><meta name=Generator content="Microsoft Word 14 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
p.MsoPlainText, li.MsoPlainText, div.MsoPlainText
        {mso-style-priority:99;
        mso-style-link:"Plain Text Char";
        margin:0in;
        margin-bottom:.0001pt;
        font-size:11.0pt;
        font-family:"Calibri","sans-serif";}
span.PlainTextChar
        {mso-style-name:"Plain Text Char";
        mso-style-priority:99;
        mso-style-link:"Plain Text";
        font-family:"Calibri","sans-serif";}
.MsoChpDefault
        {mso-style-type:export-only;
        font-family:"Calibri","sans-serif";}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body lang=EN-US link=blue vlink=purple><div class=WordSection1><p class=MsoPlainText>I have a few 2 node clusters and I notice that recently the clusters lose quorum when I reboot the node without running services.  I could do this in the past without any problems.  CentOS 5.5 on ESX 4.0 u1.  Maybe a bug with a new kernel or cman software?<o:p></o:p></p><p class=MsoPlainText><o:p> </o:p></p><p class=MsoPlainText>I get the following right away when the node reboots:<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:02:32 happy5 clurgmgrd[4269]: <notice> Member 2 shutting down<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:02:52 happy5 qdiskd[3562]: <info> Node 2 shutdown<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:02 happy5 qdiskd[3562]: <info> Assuming master role<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 clurgmgrd[4269]: <emerg> #1: Quorum Dissolved<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 openais[3533]: [CMAN ] lost contact with quorum device<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 openais[3533]: [CMAN ] quorum lost, blocking activity<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 ccsd[3493]: Cluster is not quorate.  Refusing connection.<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 ccsd[3493]: Error while processing connect: Connection refused<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 ccsd[3493]: Cluster is not quorate.  Refusing connection.<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 ccsd[3493]: Error while processing connect: Connection refused<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 ccsd[3493]: Invalid descriptor specified (-111).<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 ccsd[3493]: Someone may be attempting something evil.<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 ccsd[3493]: Error while processing get: Invalid request descriptor<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 ccsd[3493]: Invalid descriptor specified (-111).<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 ccsd[3493]: Someone may be attempting something evil.<o:p></o:p></p><p class=MsoPlainText>Jul 23 16:03:03 happy5 ccsd[3493]: Error while processing get: Invalid request descriptor<o:p></o:p></p><p class=MsoPlainText><o:p> </o:p></p><p class=MsoPlainText><?xml version="1.0"?><o:p></o:p></p><p class=MsoPlainText><cluster alias="delta_cluster" config_version="40" name="delta_cluster"><o:p></o:p></p><p class=MsoPlainText>        <fence_daemon post_fail_delay="5" post_join_delay="120"/><o:p></o:p></p><p class=MsoPlainText>        <quorumd interval="5" label="delta_qdisk" min_score="1" tko="6" votes="1"><o:p></o:p></p><p class=MsoPlainText>                <heuristic interval="5" program="ping -t1 -c1 192.168.1.1" score="1"/><o:p></o:p></p><p class=MsoPlainText>        </quorumd><o:p></o:p></p><p class=MsoPlainText>        <clusternodes><o:p></o:p></p><p class=MsoPlainText>                <clusternode name="node1" nodeid="1" votes="1"><o:p></o:p></p><p class=MsoPlainText>                        <fence><o:p></o:p></p><p class=MsoPlainText>                                <method name="1"><o:p></o:p></p><p class=MsoPlainText>                                        <device name="node1"/><o:p></o:p></p><p class=MsoPlainText>                                </method><o:p></o:p></p><p class=MsoPlainText>                        </fence><o:p></o:p></p><p class=MsoPlainText>                </clusternode><o:p></o:p></p><p class=MsoPlainText>                <clusternode name="node2" nodeid="2" votes="1"><o:p></o:p></p><p class=MsoPlainText>                        <fence><o:p></o:p></p><p class=MsoPlainText>                                <method name="1"><o:p></o:p></p><p class=MsoPlainText>                                        <device name="node2"/><o:p></o:p></p><p class=MsoPlainText>                                </method><o:p></o:p></p><p class=MsoPlainText>                        </fence><o:p></o:p></p><p class=MsoPlainText>                </clusternode><o:p></o:p></p><p class=MsoPlainText>        </clusternodes><o:p></o:p></p><p class=MsoPlainText>        <cman expected_votes="3"><o:p></o:p></p><p class=MsoPlainText>                <multicast addr="224.0.0.1" interface="eth0"/><o:p></o:p></p><p class=MsoPlainText>        </cman><o:p></o:p></p><p class=MsoPlainText>        <fencedevices><o:p></o:p></p><p class=MsoPlainText>                <fencedevice agent="fence_manual" name="fence_manual"/><o:p></o:p></p><p class=MsoPlainText>                <fencedevice agent="fence_vmware" ipaddr="bob" login="username" name="node1" passwd="password" port="node1"/><o:p></o:p></p><p class=MsoPlainText>                <fencedevice agent="fence_vmware" ipaddr="bob" login="username" name="node2" passwd="password" port="node2"/><o:p></o:p></p><p class=MsoPlainText>        </fencedevices><o:p></o:p></p><p class=MsoPlainText>        <rm><o:p></o:p></p><p class=MsoPlainText>                <failoverdomains><o:p></o:p></p><p class=MsoPlainText>                        <failoverdomain name="node1" ordered="0" restricted="1"><o:p></o:p></p><p class=MsoPlainText>                                <failoverdomainnode name="node1" priority="1"/><o:p></o:p></p><p class=MsoPlainText>                        </failoverdomain><o:p></o:p></p><p class=MsoPlainText>                        <failoverdomain name="node2" restricted="1"><o:p></o:p></p><p class=MsoPlainText>                                <failoverdomainnode name="node2" priority="1"/><o:p></o:p></p><p class=MsoPlainText>                        </failoverdomain><o:p></o:p></p><p class=MsoPlainText>                        <failoverdomain name="failover_pro-http" restricted="0"><o:p></o:p></p><p class=MsoPlainText>                                <failoverdomainnode name="node1" priority="1"/><o:p></o:p></p><p class=MsoPlainText>                                <failoverdomainnode name="node2" priority="1"/><o:p></o:p></p><p class=MsoPlainText>                        </failoverdomain><o:p></o:p></p><p class=MsoPlainText>                </failoverdomains><o:p></o:p></p><p class=MsoPlainText>             <o:p></o:p></p><p class=MsoPlainText>        </rm><o:p></o:p></p><p class=MsoPlainText>        <totem token="21000"/><o:p></o:p></p><p class=MsoPlainText></cluster><o:p></o:p></p><p class=MsoPlainText><o:p> </o:p></p><p class=MsoPlainText>Thanks,<o:p></o:p></p><p class=MsoPlainText><o:p> </o:p></p><p class=MsoPlainText>Eric <o:p></o:p></p><p class=MsoPlainText><o:p> </o:p></p></div></body></html>