<div dir="ltr">sorry i'm just curious, why you are using drbd if you have a share storage?<br></div><div class="gmail_extra"><br><br><div class="gmail_quote">2013/8/28 Goutam Baul <span dir="ltr"><<a href="mailto:goutam.baul@rp-sg.in" target="_blank">goutam.baul@rp-sg.in</a>></span><br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div link="blue" vlink="purple" lang="EN-US"><div><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"><u></u> <u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"><u></u> <u></u></span></p><p class="MsoNormal" style="margin-left:.25in"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d">>On 2013/8/27 wrote<u></u><u></u></span></p>
<p class="MsoNormal"><span style="color:#1f497d">      </span></p><div><div><div><div class="im"><p class="MsoNormal"><span style="color:#1f497d">></span>Are you using san with emc powerpath?<span style="color:#1f497d"><u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"><u></u> <u></u></span></p></div><p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d">Yes<u></u><u></u></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d"><u></u> <u></u></span></p></div><div class="im"><p class="MsoNormal" style="margin-bottom:12.0pt"><span style="color:#1f497d">></span>drbd service start on boot?<u></u><u></u></p>
</div></div><div class="im"><p class="MsoNormal"><span style="color:#1f497d">></span>start drbd by hand and give the command ls -l <b>dev/drbd/by-res/r0/1 and ls -l </b><br><b><span style="color:#1f497d">></span>dev/drbd/by-res/r0/0</b><u></u><u></u></p>
</div></div><div><p class="MsoNormal" style="margin-bottom:12.0pt"><span style="color:#1f497d"><u></u> <u></u></span></p><p class="MsoNormal" style="margin-bottom:12.0pt"><span style="font-size:11.0pt;font-family:"Calibri","sans-serif";color:#1f497d">It works fine if we do things manually. The only issue comes when we try to run things under rgmanager.<u></u><u></u></span></p>
<div><p class="MsoNormal"><span style="color:#1f497d">>>On </span>2013/8/27 Goutam Baul <span style="color:#1f497d">wrote</span><u></u><u></u></p><div><div class="h5"><div><div><p class="MsoNormal"><span style="color:#1f497d">>></span>Dear List,<u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>></span>We have configured DRBD 8.4.3 (community version) in the sense that we are able to manually  start DRBD at both the nodes, make nodes primary or secondary and <span style="color:#1f497d">>></span>data is getting replicated between the primary and the secondary node. We are doing this for our postfix mail server. The drbd configuration file is<u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>></span>resource r0 {<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>startup {<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>    wfc-timeout 1;<u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>    degr-wfc-timeout 2;<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>  }<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>  volume 0 {<u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>    device    /dev/drbd1;<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>    disk      /dev/emcpowera2;<u></u><u></u></p><p class="MsoNormal">
<span style="color:#1f497d">>></span>    meta-disk /dev/emcpowera5;<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>  }<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>  volume 1 {<u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>    device    /dev/drbd2;<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>    disk      /dev/emcpowera3;<u></u><u></u></p><p class="MsoNormal">
<span style="color:#1f497d">>></span>    meta-disk /dev/emcpowera6;<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>  }<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>  on <a href="http://drmail1.cesc.co.in" target="_blank">drmail1.cesc.co.in</a> {<u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>    address   <a href="http://10.50.4.14:7789" target="_blank">10.50.4.14:7789</a>;<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>  }<u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>  on <a href="http://drbdtest2.cesc.co.in" target="_blank">drbdtest2.cesc.co.in</a> {<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>    address   <a href="http://10.50.81.253:7789" target="_blank">10.50.81.253:7789</a>;<u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>  }<u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>}<u></u><u></u></p><p class="MsoNormal"> <u></u><u></u></p><p class="MsoNormal">
<span style="color:#1f497d">>></span>We want to run postfix mailing system on a RHCS cluster suite for high availability. The mail-store and the mail-queue of postfix will be on the DRBD setup so that <span style="color:#1f497d">>></span>they are replicated from our data center to our disaster recovery site. The cluster.conf is as follows:<u></u><u></u></p>
<p class="MsoNormal"> <u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span><?xml version="1.0"?><u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span><cluster config_version="27" name="dr-mail"><u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>></span>       <fence_daemon clean_start="1" post_join_delay="30"/><u></u><u></u></p><p class="MsoNormal"> <span style="color:#1f497d">>></span>       <clusternodes><u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>                <clusternode name="<a href="http://drmail1.cesc.co.in" target="_blank">drmail1.cesc.co.in</a>" nodeid="1"><u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>                        <fence><u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>                                <method name="Method1_drac"><u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>                                        <device name="fence_drac1"/><u></u><u></u></p><p class="MsoNormal"> <span style="color:#1f497d">>></span>                               </method><u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>></span>                        </fence><u></u><u></u></p><p class="MsoNormal"> <span style="color:#1f497d">>></span>               </clusternode><u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>                <clusternode name="<a href="http://drmail2.cesc.co.in" target="_blank">drmail2.cesc.co.in</a>" nodeid="2"><u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>                        <fence><u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>                                <method name="Method1_drac"><u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>                                        <device name="fence_drac2"/><u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>                                </method><u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>></span>                        </fence><u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>                </clusternode><u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>        </clusternodes><u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>        <cman expected_votes="1" two_node="1"/><u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>        <fencedevices><u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>></span>                <fencedevice agent="fence_drac5" cmd_prompt="admin1-&gt;" ipaddr="10.50.4.22" login="root" module_name="fence_drac1" name="fence_drac1" passwd="calvin" secure="on"/><u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>></span>               <fencedevice agent="fence_drac5" cmd_prompt="admin1-&gt;" ipaddr="10.50.4.23" login="root" module_name="fence_drac2" name="fence_drac2" passwd="calvin" secure="on"/><u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>></span>        </fencedevices><u></u><u></u></p><p class="MsoNormal">  <span style="color:#1f497d">>></span>      <rm><u></u><u></u></p><p class="MsoNormal">
   <span style="color:#1f497d">>></span>             <failoverdomains><u></u><u></u></p><p class="MsoNormal"> <span style="color:#1f497d">>></span>                       <failoverdomain name="dr_mail" nofailback="0" ordered="1" restricted="1"><u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>></span>                               <failoverdomainnode name="<a href="http://drmail1.cesc.co.in" target="_blank">drmail1.cesc.co.in</a>" priority="1"/><u></u><u></u></p>
<p class="MsoNormal"><span style="color:#1f497d">>></span>                                <failoverdomainnode name="<a href="http://drmail2.cesc.co.in" target="_blank">drmail2.cesc.co.in</a>" priority="2"/><u></u><u></u></p>
<p class="MsoNormal">                        </failoverdomain><u></u><u></u></p><p class="MsoNormal"> <span style="color:#1f497d">>></span>               </failoverdomains><u></u><u></u></p><p class="MsoNormal">
 <span style="color:#1f497d">>></span>               <resources><u></u><u></u></p><p class="MsoNormal">  <span style="color:#1f497d">>></span>                     <ip address="10.50.4.20" monitor_link="on" sleeptime="10"/><u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>></span>                       <drbd name="drbd-mail" resource="r0"><u></u><u></u></p><p class="MsoNormal">  <span style="color:#1f497d">>></span>                            <fs device="/dev/drbd/by-res/r0/0" force_unmount="1" fsid="61850" mountpoint="/home" fstype="ext3" name="drbd-mailstore" options="noatime"/><u></u><u></u></p>
<p class="MsoNormal">    <span style="color:#1f497d">>></span>                          <fs device="/dev/drbd/by-res/r0/1" force_unmount="1" fsid="61855" mountpoint="/var/spool/postfix" fstype="ext3" name="drbd-spool" options="noatime"/><u></u><u></u></p>
<p class="MsoNormal">  <span style="color:#1f497d">>></span>                      </drbd><u></u><u></u></p><p class="MsoNormal">  <span style="color:#1f497d">>></span>                      <script file="/etc/init.d/postfix" name="postfix" /><u></u><u></u></p>
<p class="MsoNormal">  <span style="color:#1f497d">>></span>              </resources><u></u><u></u></p><p class="MsoNormal"> <span style="color:#1f497d">>></span>               <service domain="dr_mail" name="mail" recovery="relocate"><u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>></span>                       <ip ref="10.50.4.20"/><u></u><u></u></p><p class="MsoNormal">  <span style="color:#1f497d">>></span>                      <drbd ref="drbd-mail" /><u></u><u></u></p>
<p class="MsoNormal">                        <script ref="postfix" /><u></u><u></u></p><p class="MsoNormal">  <span style="color:#1f497d">>></span>              </service><u></u><u></u></p><p class="MsoNormal">
  <span style="color:#1f497d">>></span>      </rm><u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>> </span></cluster><u></u><u></u></p><p class="MsoNormal"><span style="color:#1f497d">>> </span>If we run this RHCS cluster, we get the error in the log as <u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>> </span><b>Aug 27 17:38:19 drmail1 rgmanager[4695]: drbd not found in /proc/modules. Do you need to modprobe?</b><u></u><u></u></p><p class="MsoNormal"><b> <span style="color:#1f497d">>> </span></b>If we run the RHCS cluster after issuing the modprobe drbd command we get the following message<u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>> </span><b>1: Failure: (127) Device minor not allocated</b><u></u><u></u></p><p class="MsoNormal"><b><span style="color:#1f497d">>> </span>additional info from kernel:</b><u></u><u></u></p>
<p class="MsoNormal"><b><span style="color:#1f497d">>> </span>unknown minor</b><u></u><u></u></p><p class="MsoNormal"><b><span style="color:#1f497d">>> </span>Command 'drbdsetup role 1' terminated with exit code 10</b><u></u><u></u></p>
<p class="MsoNormal"><b><span style="color:#1f497d">>> </span><debug>  DRBD resource r0 already configured</b><u></u><u></u></p><p class="MsoNormal"><b><span style="color:#1f497d">>> </span>DRBD resource r0 already configured</b><u></u><u></u></p>
<p class="MsoNormal"><b><span style="color:#1f497d">>> </span>Start of mail complete</b><u></u><u></u></p><p class="MsoNormal"><b> <span style="color:#1f497d">>> </span></b>But the DRBD service is not starting up and therefore the corresponding devices are not being created. Thus the log file returns the error<u></u><u></u></p>
<p class="MsoNormal"><b><span style="color:#1f497d">>> </span>Aug 27 17:38:33 drmail1 rgmanager[5147]: stop: Could not match /dev/drbd/by-res/r0/1 with a real device</b><u></u><u></u></p><p class="MsoNormal"><b><span style="color:#1f497d">>> </span>Aug 27 17:38:33 drmail1 rgmanager[5166]: stop: Could not match /dev/drbd/by-res/r0/0 with a real device</b><u></u><u></u></p>
<p class="MsoNormal"> <span style="color:#1f497d">>> </span>We have built the DRBD rpm files from the source using rpmbuild and copied the drbd.sh.rhcs and drbd.metadata.rhcs files from the script folder of the source to the <span style="color:#1f497d">>> </span>/usr/share/cluster folder as drbd.sh and drbd.metadata respectively. We are using RHEL 6.1 (64 bit).<u></u><u></u></p>
<p class="MsoNormal">  <u></u><u></u></p></div></div></div></div></div></div></div></div><br>--<br>
Linux-cluster mailing list<br>
<a href="mailto:Linux-cluster@redhat.com">Linux-cluster@redhat.com</a><br>
<a href="https://www.redhat.com/mailman/listinfo/linux-cluster" target="_blank">https://www.redhat.com/mailman/listinfo/linux-cluster</a><br></blockquote></div><br><br clear="all"><br>-- <br>esta es mi vida e me la vivo hasta que dios quiera
</div>