Now is the most strange behavior...<div><br></div><div><a href="http://pastebin.com/ma7sH2tD">http://pastebin.com/ma7sH2tD</a></div><div><br></div><div>When I power on the crash node, the VM start on node 2, where previoulsy has die...</div>
<div><br></div><div><br><br><div class="gmail_quote">2012/7/29 Gilberto Nunes <span dir="ltr"><<a href="mailto:gilberto.nunes32@gmail.com" target="_blank">gilberto.nunes32@gmail.com</a>></span><br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
Here what's happen:<div><br></div><div><a href="http://troll.ws/A2nH35" target="_blank">http://troll.ws/A2nH35</a></div><div><br></div><div><a href="http://troll.ws/A6etIQ" target="_blank">http://troll.ws/A6etIQ</a></div>
<div><br></div><div>On first screen, we see that I can have /dev/VM anymore...</div>
<div>On second, the VM has shutdown state on "alive" node.... :(</div><div><br></div><div>And just happen on feel seconds after the other node die...</div><div><br></div><div>That syslog on "alived" node:</div>

<div><br></div><div><div>/var/log/syslog </div><div>Jul 29 13:23:44 servidor-b task UPID:servidor-b:00000C3E:0000EC40:50156390:qmstart:100:root@pam:: start VM 100: UPID:servidor-b:00000C3E:0000EC40:50156390:qmstart:100:root@pam:</div>

<div>Jul 29 13:23:44 servidor-b pvevm: <root@pam> starting task UPID:servidor-b:00000C3E:0000EC40:50156390:qmstart:100:root@pam:</div><div>Jul 29 13:23:45 servidor-b kernel: device tap100i0 entered promiscuous mode</div>

<div>Jul 29 13:23:45 servidor-b rgmanager[3150]: [pvevm] Task still active, waiting</div><div>Jul 29 13:23:45 servidor-b kernel: vmbr0: port 2(tap100i0) entering forwarding state</div><div>Jul 29 13:23:45 servidor-b kernel: New device tap100i0 does not support netpoll</div>

<div>Jul 29 13:23:45 servidor-b kernel: Disabling netpoll for vmbr0</div><div>Jul 29 13:23:45 servidor-b pvevm: <root@pam> end task UPID:servidor-b:00000C3E:0000EC40:50156390:qmstart:100:root@pam: OK</div><div>Jul 29 13:23:45 servidor-b rgmanager[1787]: Service pvevm:100 started</div>

<div>Jul 29 13:23:55 servidor-b kernel: tap100i0: no IPv6 routers present</div><div>Jul 29 13:24:00 servidor-b ntpd[1252]: Listen normally on 15 tap100i0 fe80::e097:e8ff:feca:a9a6 UDP 123</div><div>Jul 29 13:24:12 servidor-b pmxcfs[1350]: [dcdb] notice: members: 2/1350</div>

<div>Jul 29 13:24:12 servidor-b pmxcfs[1350]: [dcdb] notice: members: 2/1350</div><div>Jul 29 13:24:22 servidor-b rgmanager[3238]: [pvevm] VM 100 is running</div><div>Jul 29 13:24:24 servidor-b kernel: bnx2 0000:07:00.0: eth1: NIC Copper Link is Down</div>

<div>Jul 29 13:24:24 servidor-b kernel: vmbr1: port 1(eth1) entering disabled state</div><div>Jul 29 13:24:25 servidor-b kernel: bnx2 0000:07:00.0: eth1: NIC Copper Link is Up, 100 Mbps full duplex, receive & transmit flow control ON</div>

<div>Jul 29 13:24:25 servidor-b kernel: vmbr1: port 1(eth1) entering forwarding state</div><div>Jul 29 13:24:32 servidor-b kernel: block drbd0: PingAck did not arrive in time.</div><div>Jul 29 13:24:32 servidor-b kernel: block drbd0: peer( Primary -> Unknown ) conn( Connected -> NetworkFailure ) pdsk( UpToDate -> DUnknown ) </div>

<div>Jul 29 13:24:32 servidor-b kernel: block drbd0: new current UUID 9DF628A28D5AF19F:693299C3FBC55B03:F7D75A97A0DFB737:F7D65A97A0DFB737</div><div>Jul 29 13:24:32 servidor-b kernel: block drbd0: asender terminated</div>
<div>
Jul 29 13:24:32 servidor-b kernel: block drbd0: Terminating asender thread</div><div>Jul 29 13:24:32 servidor-b kernel: block drbd0: Connection closed</div><div>Jul 29 13:24:32 servidor-b kernel: block drbd0: conn( NetworkFailure -> Unconnected ) </div>

<div>Jul 29 13:24:32 servidor-b kernel: block drbd0: receiver terminated</div><div>Jul 29 13:24:32 servidor-b kernel: block drbd0: Restarting receiver thread</div><div>Jul 29 13:24:32 servidor-b kernel: block drbd0: receiver (re)started</div>

<div>Jul 29 13:24:32 servidor-b kernel: block drbd0: conn( Unconnected -> WFConnection ) </div><div>Jul 29 13:24:32 servidor-b corosync[1571]:   [TOTEM ] A processor failed, forming new configuration.</div><div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CLM   ] CLM CONFIGURATION CHANGE</div>

<div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CLM   ] New Configuration:</div><div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CLM   ] #011r(0) ip(10.0.0.20) </div><div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CLM   ] Members Left:</div>

<div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CLM   ] #011r(0) ip(10.0.0.10) </div><div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CLM   ] Members Joined:</div><div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CMAN  ] quorum lost, blocking activity</div>

<div>Jul 29 13:24:34 servidor-b corosync[1571]:   [QUORUM] This node is within the non-primary component and will NOT provide any services.</div><div>Jul 29 13:24:34 servidor-b corosync[1571]:   [QUORUM] Members[1]: 2</div>

<div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CLM   ] CLM CONFIGURATION CHANGE</div><div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CLM   ] New Configuration:</div><div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CLM   ] #011r(0) ip(10.0.0.20) </div>

<div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CLM   ] Members Left:</div><div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CLM   ] Members Joined:</div><div>Jul 29 13:24:34 servidor-b corosync[1571]:   [TOTEM ] A processor joined or left the membership and a new membership was formed.</div>

<div>Jul 29 13:24:34 servidor-b pmxcfs[1350]: [status] notice: node lost quorum</div><div>Jul 29 13:24:34 servidor-b dlm_controld[1653]: node_history_cluster_remove no nodeid 1</div><div>Jul 29 13:24:34 servidor-b corosync[1571]:   [CPG   ] chosen downlist: sender r(0) ip(10.0.0.20) ; members(old:2 left:1)</div>

<div>Jul 29 13:24:34 servidor-b corosync[1571]:   [MAIN  ] Completed service synchronization, ready to provide service.</div><div>Jul 29 13:24:34 servidor-b rgmanager[1787]: #1: Quorum Dissolved</div><div><br></div><div>
Message from syslogd@servidor-b at Jul 29 13:24:34 ...</div>
<div> rgmanager[1787]: #1: Quorum Dissolved</div><div>Jul 29 13:24:34 servidor-b kernel: dlm: closing connection to node 1</div><div>Jul 29 13:24:34 servidor-b task UPID:servidor-b:00000CC8:00010015:501563C2:qmshutdown:100:root@pam:: shutdown VM 100: UPID:servidor-b:00000CC8:00010015:501563C2:qmshutdown:100:root@pam:</div>

<div>Jul 29 13:24:34 servidor-b pvevm: <root@pam> starting task UPID:servidor-b:00000CC8:00010015:501563C2:qmshutdown:100:root@pam:</div><div>Jul 29 13:24:35 servidor-b rgmanager[3274]: [pvevm] Task still active, waiting</div>

<div>Jul 29 13:24:37 servidor-b rgmanager[3294]: [pvevm] Task still active, waiting</div><div>Jul 29 13:24:38 servidor-b rgmanager[3314]: [pvevm] Task still active, waiting</div><div>Jul 29 13:24:39 servidor-b rgmanager[3334]: [pvevm] Task still active, waiting</div>

<div>Jul 29 13:24:40 servidor-b rgmanager[3354]: [pvevm] Task still active, waiting</div><div>Jul 29 13:24:41 servidor-b rgmanager[3374]: [pvevm] Task still active, waiting</div><div>Jul 29 13:24:42 servidor-b rgmanager[3394]: [pvevm] Task still active, waiting</div>

<div>Jul 29 13:24:43 servidor-b rgmanager[3419]: [pvevm] Task still active, waiting</div><div>Jul 29 13:24:44 servidor-b kernel: vmbr0: port 2(tap100i0) entering disabled state</div><div>Jul 29 13:24:44 servidor-b kernel: vmbr0: port 2(tap100i0) entering disabled state</div>

<div>Jul 29 13:24:44 servidor-b rgmanager[3446]: [pvevm] Task still active, waiting</div><div>Jul 29 13:24:45 servidor-b pvevm: <root@pam> end task UPID:servidor-b:00000CC8:00010015:501563C2:qmshutdown:100:root@pam: OK</div>
<div><div class="h5">
<div><br></div><br><div class="gmail_quote">2012/7/29 Gilberto Nunes <span dir="ltr"><<a href="mailto:gilberto.nunes32@gmail.com" target="_blank">gilberto.nunes32@gmail.com</a>></span><br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">

Other <span style="font-family:liberation-sans,helvetica,arial,sans-serif">question:</span><div><font face="liberation-sans, helvetica, arial, sans-serif"><br></font></div><div><font face="liberation-sans, helvetica, arial, sans-serif">Do I need run command pvecm expected 1 on both nodes??</font></div>

<div><div>
<div><font face="liberation-sans, helvetica, arial, sans-serif"><br></font><br><div class="gmail_quote">2012/7/29 Gilberto Nunes <span dir="ltr"><<a href="mailto:gilberto.nunes32@gmail.com" target="_blank">gilberto.nunes32@gmail.com</a>></span><br>


<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div>It's seems to me, that <span style="font-family:liberation-sans,helvetica,arial,sans-serif">quorum is already set:</span></div>


<div><span style="font-family:liberation-sans,helvetica,arial,sans-serif"><br>
</span></div><div><span style="font-family:liberation-sans,helvetica,arial,sans-serif"><br></span></div><div>server-a:~# pvecm status</div><div>Version: 6.2.0</div><div>Config Version: 12</div>
<div>Cluster Name: SELB</div><div>Cluster Id: 1158</div><div>Cluster Member: Yes</div><div>Cluster Generation: 204</div><div>Membership state: Cluster-Member</div><div>Nodes: 2</div><div>Expected votes: 1</div><div>Total votes: 2</div>



<div>Node votes: 1</div><div>Quorum: 2  </div><div>Active subsystems: 6</div><div>Flags: </div><div>Ports Bound: 0 177  </div><div>Node name: servidor-a</div><div>Node ID: 1</div><div>Multicast addresses: 239.192.4.138 </div>



<div>Node addresses: 10.0.0.10 </div><div><br></div>May I need other disk to make the <span style="font-family:liberation-sans,helvetica,arial,sans-serif">quorum, right is mentioned on that docs that I send on previously mail??</span><div>



<font face="liberation-sans, helvetica, arial, sans-serif"><br></font></div><div><div><div><font face="liberation-sans, helvetica, arial, sans-serif"><br></font><div class="gmail_quote">2012/7/29 THe_ZiPMaN <span dir="ltr"><<a href="mailto:flavio-pve@zipman.it" target="_blank">flavio-pve@zipman.it</a>></span><br>



<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div>On 07/29/2012 05:55 PM, Gilberto Nunes wrote:<br>
> And to complete my hell, I'm unable to migrate the VM to server-b to<br>
> server-a<br>
><br>
> Executing HA migrate for VM 100 to node servidor-a<br>
> Trying to migrate pvevm:100 to servidor-a...Failure<br>
> TASK ERROR: command 'clusvcadm -M pvevm:100 -m servidor-a' failed: exit<br>
> code 255<br>
<br>
</div>If you have a 2 node cluster you must set the quorum to 1 or the cluster<br>
won't service anything.<br>
<br>
You must set the quorum to 1 by hand<br>
# pvecm expected 1<br>
<br>
What's your cluster status on the 2 nodes?<br>
# pvecm status<br>
<span><font color="#888888"><br>
--<br>
Flavio Visentin<br>
<br>
A computer is like an air conditioner,<br>
it stops working when you open Windows<br>
_______________________________________________<br>
pve-user mailing list<br>
<a href="mailto:pve-user@pve.proxmox.com" target="_blank">pve-user@pve.proxmox.com</a><br>
<a href="http://pve.proxmox.com/cgi-bin/mailman/listinfo/pve-user" target="_blank">http://pve.proxmox.com/cgi-bin/mailman/listinfo/pve-user</a><br>
</font></span></blockquote></div><br><br clear="all"><div><br></div></div></div><div>-- <br>Gilberto Nunes<div><br><br><a href="tel:%2847%29%209676-7530" value="+554796767530" target="_blank">(47) 9676-7530</a></div>
<div>
<p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px;text-indent:0px"></p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">msn: <a href="mailto:gilbertonunesferreira@hotmail.com" target="_blank">gilbertonunesferreira@hotmail.com</a></p>



<p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">msn: <a href="mailto:konnectati@konnectati.com.br" target="_blank">konnectati@konnectati.com.br</a></p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">



Skype: gilberto.nunes36</p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">Skype: konnectati</p><p></p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px;text-indent:0px">



<font face="Arial, Helvetica, sans-serif"><span style="font-size:14px"><br></span></font></p><font size="4"><b><a href="http://www.konnectati.com.br" target="_blank">www.konnectati.com.br</a></b></font><br></div><br>
</div></div>
</blockquote></div><br><br clear="all"><div><br></div>-- <br>Gilberto Nunes<div><br><br><a href="tel:%2847%29%209676-7530" value="+554796767530" target="_blank">(47) 9676-7530</a></div><div>
<p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px;text-indent:0px"></p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">msn: <a href="mailto:gilbertonunesferreira@hotmail.com" target="_blank">gilbertonunesferreira@hotmail.com</a></p>


<p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">msn: <a href="mailto:konnectati@konnectati.com.br" target="_blank">konnectati@konnectati.com.br</a></p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">


Skype: gilberto.nunes36</p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">Skype: konnectati</p><p></p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px;text-indent:0px">


<font face="Arial, Helvetica, sans-serif"><span style="font-size:14px"><br></span></font></p><font size="4"><b><a href="http://www.konnectati.com.br" target="_blank">www.konnectati.com.br</a></b></font><br></div><br>
</div>
</div></div></blockquote></div><br><br clear="all"><div><br></div>-- <br>Gilberto Nunes<div><br><br><a href="tel:%2847%29%209676-7530" value="+554796767530" target="_blank">(47) 9676-7530</a></div><div>
<p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px;text-indent:0px"></p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">msn: <a href="mailto:gilbertonunesferreira@hotmail.com" target="_blank">gilbertonunesferreira@hotmail.com</a></p>

<p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">msn: <a href="mailto:konnectati@konnectati.com.br" target="_blank">konnectati@konnectati.com.br</a></p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">

Skype: gilberto.nunes36</p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">Skype: konnectati</p><p></p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px;text-indent:0px">

<font face="Arial, Helvetica, sans-serif"><span style="font-size:14px"><br></span></font></p><font size="4"><b><a href="http://www.konnectati.com.br" target="_blank">www.konnectati.com.br</a></b></font><br></div><br>
</div></div></div>
</blockquote></div><br><br clear="all"><div><br></div>-- <br>Gilberto Nunes<div><br><br>(47) 9676-7530</div><div>
<p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px;text-indent:0px"></p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">msn: <a href="mailto:gilbertonunesferreira@hotmail.com" target="_blank">gilbertonunesferreira@hotmail.com</a></p>
<p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">msn: <a href="mailto:konnectati@konnectati.com.br" target="_blank">konnectati@konnectati.com.br</a></p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">
Skype: gilberto.nunes36</p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px">Skype: konnectati</p><p></p><p style="margin-top:0px;margin-bottom:0px;margin-left:0px;margin-right:0px;text-indent:0px">
<font face="Arial, Helvetica, sans-serif"><span style="font-size:14px"><br></span></font></p><font size="4"><b><a href="http://www.konnectati.com.br" target="_blank">www.konnectati.com.br</a></b></font><br></div><br>
</div>