<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=us-ascii">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:Consolas;
        panose-1:2 11 6 9 2 2 4 3 2 4;}
@font-face
        {font-family:Monaco;
        panose-1:0 0 0 0 0 0 0 0 0 0;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman",serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:blue;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:purple;
        text-decoration:underline;}
pre
        {mso-style-priority:99;
        mso-style-link:"HTML Vorformatiert Zchn";
        margin:0cm;
        margin-bottom:.0001pt;
        font-size:10.0pt;
        font-family:"Courier New";}
span.HTMLVorformatiertZchn
        {mso-style-name:"HTML Vorformatiert Zchn";
        mso-style-priority:99;
        mso-style-link:"HTML Vorformatiert";
        font-family:Consolas;}
span.E-MailFormatvorlage19
        {mso-style-type:personal-reply;
        font-family:"Arial",sans-serif;
        color:black;
        font-weight:normal;
        font-style:normal;
        text-decoration:none none;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:612.0pt 792.0pt;
        margin:70.85pt 70.85pt 2.0cm 70.85pt;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]-->
</head>
<body lang="DE" link="blue" vlink="purple">
<div class="WordSection1">
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Arial",sans-serif;color:black;mso-fareast-language:EN-US">Hi,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Arial",sans-serif;color:black;mso-fareast-language:EN-US"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt;font-family:"Arial",sans-serif;color:black;mso-fareast-language:EN-US">check your Switchconfig and make sure IGMP Snooping is configured correctly. Had this problem a few month ago.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="mso-fareast-language:EN-US"><o:p> </o:p></span></p>
<p style="FONT-SIZE: 11pt; FONT-FAMILY: Arial"><span style="FONT-SIZE: 11pt"><span style="FONT-FAMILY: Arial"><font size="3" face="Times New Roman"></font><font size="3" face="Times New Roman"></font><br>
Mit freundlichen Grüßen / Best regards<br>
<br>
Kevin Meyer<br>
Projekte<br>
<br>
<br>
Treml & Sturm Datentechnik GmbH<br>
Mühlheimer Straße 209<br>
D-63075 Offenbach am Main<br>
Deutschland/Germany<br>
<br>
Telefon: +49 (0) 69 - 8990820<br>
Telefax: +49 (0) 69 - 89908233<br>
<br>
E-Mail: <a href="mailto:info@treml-sturm.de">info@treml-sturm.de</a><br>
Internet: <a href="http://www.treml-sturm.de/">http://www.treml-sturm.de</a><br>
<br>
Geschäftsführende Gesellschafter:<br>
Johannes Treml und Roland Sturm<br>
Sitz der Gesellschaft: Offenbach am Main<br>
Registergericht: Amtsgericht Offenbach am Main<br>
Registernummer: 5 HRB 10140<br>
USt-ID: DE 182038999<br>
<span style="FONT-FAMILY: Times New Roman"></span><span style="FONT-FAMILY: Arial"></span></span></span></p>
<div>
<div style="border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0cm 0cm 0cm">
<p class="MsoNormal"><b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif">Von:</span></b><span style="font-size:11.0pt;font-family:"Calibri",sans-serif"> pve-user [mailto:pve-user-bounces@pve.proxmox.com]
<b>Im Auftrag von </b>Guy Plunkett<br>
<b>Gesendet:</b> Mittwoch, 17. Februar 2016 12:47<br>
<b>An:</b> PVE User List <pve-user@pve.proxmox.com><br>
<b>Betreff:</b> Re: [PVE-User] Proxmox 4.1 cluster issue<o:p></o:p></span></p>
</div>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<p class="MsoNormal">I’ve just rebuild all my proxmox heads and created a new cluster. No HA.<o:p></o:p></p>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">This was working just fine before upgrading to proxmox 4.1<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">Within 5 minutes adding all 4 systems to the cluster proxmox03 and proxmox01 have dropped from the cluster group.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">I’m seeing the following filling up the logs<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:42:23 proxmox04 corosync[34115]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Retransmit List: 4d7 4d8 4d9 4da 4db 4dc 4dd 4de 4df 4e0 4e1 4e2 4e<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:42:23 proxmox04 corosync[34115]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Retransmit List: 4d7 4d8 4d9 4da 4db 4dc 4dd 4de 4df 4e0 4e1 4e2 4e<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:42:23 proxmox04 corosync[34115]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Retransmit List: 4d7 4d8 4d9 4da 4db 4dc 4dd 4de 4df 4e0 4e1 4e2 4e<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:42:23 proxmox04 corosync[34115]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Retransmit List: 4d7 4d8 4d9 4da 4db 4dc 4dd 4de 4df 4e0 4e1 4e2 4e<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:42:23 proxmox04 corosync[34115]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Retransmit List: 4d7 4d8 4d9 4da 4db 4dc 4dd 4de 4df 4e0 4e1 4e2 4e<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:42:23 proxmox04 corosync[34115]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Retransmit List: 4d7 4d8 4d9 4da 4db 4dc 4dd 4de 4df 4e0 4e1 4e2 4e<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:42:23 proxmox04 corosync[34115]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Retransmit List: 4d7 4d8 4d9 4da 4db 4dc 4dd 4de 4df 4e0 4e1 4e2 4e<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:42:23 proxmox04 corosync[34115]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Retransmit List: 4d7 4d8 4d9 4da 4db 4dc 4dd 4de 4df 4e0 4e1 4e2 4e<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:42:23 proxmox04 corosync[34115]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Retransmit List: 4d7 4d8 4d9 4da 4db 4dc 4dd 4de 4df 4e0 4e1 4e2 4e<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:42:23 proxmox04 corosync[34115]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Retransmit List: 4d7 4d8 4d9 4da 4db 4dc 4dd 4de 4df 4e0 4e1 4e2 4e<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:42:23 proxmox04 corosync[34115]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Retransmit List: 4d7 4d8 4d9 4da 4db 4dc 4dd 4de 4df 4e0 4e1 4e2 4e<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:42:23 proxmox04 corosync[34115]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Retransmit List: 4d7 4d8 4d9 4da 4db 4dc 4dd 4de 4df 4e0 4e1 4e2 4e<o:p></o:p></span></p>
</div>
</div>
<div>
<p class="MsoNormal"><br>
<br>
<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:48 proxmox01 corosync[3195]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[MAIN  ] Completed service synchronization, ready to provide servi<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:54 proxmox01 corosync[3195]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] A new membership (10.240.0.100:220) was formed. Members l<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:54 proxmox01 corosync[3195]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[TOTEM ] Failed to receive the leave message. failed: 3 1<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:54 proxmox01 pmxcfs[3172]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[dcdb] notice: members: 4/3172</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:54 proxmox01 pmxcfs[3172]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[status] notice: members: 4/3172</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:54 proxmox01 pmxcfs[3172]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[status] notice: node lost quorum</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:54 proxmox01 corosync[3195]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[QUORUM] This node is within the non-primary component and will NO<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:54 proxmox01 corosync[3195]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[QUORUM] Members[1]: 4</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:54 proxmox01 corosync[3195]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[MAIN  ] Completed service synchronization, ready to provide servi<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:54 proxmox01 pmxcfs[3172]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#C33720">[dcdb] crit: received write while not quorate - trigger resync<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:54 proxmox01 pmxcfs[3172]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#C33720">[dcdb] crit: leaving CPG group</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:55 proxmox01 pmxcfs[3172]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[dcdb] notice: start cluster connection</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:55 proxmox01 pmxcfs[3172]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[dcdb] notice: members: 4/3172</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 17 11:44:55 proxmox01 pmxcfs[3172]:
</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#00F900">[dcdb] notice: all data is up to date</span><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p></o:p></span></p>
</div>
</div>
<div>
<p class="MsoNormal"><span style="color:#00F900"><br>
<br>
</span><o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div>
<p class="MsoNormal">----<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal">Guy<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<div>
<p class="MsoNormal">On 17 Feb 2016, at 07:23, Thomas Lamprecht <<a href="mailto:t.lamprecht@proxmox.com">t.lamprecht@proxmox.com</a>> wrote:<o:p></o:p></p>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div>
<p class="MsoNormal" style="margin-bottom:12.0pt">Note that /etc/cluster/cluster.conf isn't needed anymore, everything cluster relevant will we read out of /etc/pve/corosync.conf (which looks good as far as I can see).<br>
<br>
You said you upgrade, are you really _really_ sure you did not miss a step (no offense)?<br>
<br>
I assume you rebuild the cluster cleanly with pvecm addnode <...>?<br>
<br>
Can you post also your /etc/hostname and /etc/network/interfaces,<br>
but it seems to be able to connect initially, thus they should be fine...<br>
<br>
<br>
proxmox04 seems to be the problem, as the other can connect just fine.<br>
<br>
Can you post whats happening there with:<br>
$ journalctl -u corosync.service -u pve-cluster.service -b<br>
<br>
So we filter out (possible) irrelevant other logging.<br>
<br>
cheers,<br>
Thomas<o:p></o:p></p>
<div>
<p class="MsoNormal">On 02/16/2016 07:46 PM, Guy Plunkett wrote:<o:p></o:p></p>
</div>
<blockquote style="margin-top:5.0pt;margin-bottom:5.0pt">
<p class="MsoNormal">Hello, <o:p></o:p></p>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">I’ve upgraded my Dell M1000 blade centre to Proxmox 4.1. The upgrade seems to go fine, however I can’t seem to have all 4 nodes connected at once.  It seems to work for a short time then then one node will disappear,  I can SSH to it just
 fine, and have to restart corosync and pve-cluster and it will join again, however shortly later another node will disappear.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">Finally a node crashes and restarts. There is nothing present in the syslogs as to why this node cashed.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">I’ve spent 2 days fighting with this to try and resolve it.  This was working just fine on 3.x.<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">Please can someone help here I’m pulling my hair out trying to get this working, and I don’t have much left!<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal">Cheers,<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal">—Guy<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:32:50 proxmox01 corosync[5747]:  [TOTEM ] A new membership (10.240.0.100:35536) was formed. Members<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:32:50 proxmox01 corosync[5747]:  [QUORUM] Members[3]: 4 3 2<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:32:50 proxmox01 corosync[5747]:  [MAIN  ] Completed service synchronization, ready to provide service.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:32:53 proxmox01 corosync[5747]:  [TOTEM ] A new membership (10.240.0.100:35540) was formed. Members<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:32:53 proxmox01 corosync[5747]:  [QUORUM] Members[3]: 4 3 2<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:32:53 proxmox01 corosync[5747]:  [MAIN  ] Completed service synchronization, ready to provide service.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:32:56 proxmox01 corosync[5747]:  [TOTEM ] A new membership (10.240.0.100:35544) was formed. Members<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:32:56 proxmox01 corosync[5747]:  [QUORUM] Members[3]: 4 3 2<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:32:56 proxmox01 corosync[5747]:  [MAIN  ] Completed service synchronization, ready to provide service.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:32:59 proxmox01 corosync[5747]:  [TOTEM ] A new membership (10.240.0.100:35548) was formed. Members<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:32:59 proxmox01 corosync[5747]:  [QUORUM] Members[3]: 4 3 2<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:32:59 proxmox01 corosync[5747]:  [MAIN  ] Completed service synchronization, ready to provide service.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:33:02 proxmox01 corosync[5747]:  [TOTEM ] A new membership (10.240.0.100:35552) was formed. Members<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:33:02 proxmox01 corosync[5747]:  [QUORUM] Members[3]: 4 3 2<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:33:02 proxmox01 corosync[5747]:  [MAIN  ] Completed service synchronization, ready to provide service.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:33:05 proxmox01 corosync[5747]:  [TOTEM ] A new membership (10.240.0.100:35556) was formed. Members<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:33:05 proxmox01 corosync[5747]:  [QUORUM] Members[3]: 4 3 2<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:33:05 proxmox01 corosync[5747]:  [MAIN  ] Completed service synchronization, ready to provide service.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:33:08 proxmox01 corosync[5747]:  [TOTEM ] A new membership (10.240.0.100:35560) was formed. Members<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:33:08 proxmox01 corosync[5747]:  [QUORUM] Members[3]: 4 3 2<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:33:08 proxmox01 corosync[5747]:  [MAIN  ] Completed service synchronization, ready to provide service.<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:33:11 proxmox01 corosync[5747]:  [TOTEM ] A new membership (10.240.0.100:35564) was formed. Members<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:33:11 proxmox01 corosync[5747]:  [QUORUM] Members[3]: 4 3 2<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:33:11 proxmox01 corosync[5747]:  [MAIN  ] Completed service synchronization, ready to provide service.<o:p></o:p></span></p>
</div>
</div>
<div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:36:45 proxmox01 rsyslogd: [origin software="rsyslogd" swVersion="8.4.2" x-pid="2723" x-info="<a href="http://www.rsyslog.com/">http://www.rsyslog.com</a>"]
 start<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:36:45 proxmox01 systemd-modules-load[999]: Module 'fuse' is builtin<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:36:45 proxmox01 systemd-modules-load[999]: Inserted module 'vhost_net'<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:36:45 proxmox01 hdparm[1031]: Setting parameters of disc: (none).<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">Feb 16 16:36:45 proxmox01 lvm[1280]: 3 logical volume(s) in volume group "pve" now active<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><br>
<br>
<o:p></o:p></span></p>
</div>
</div>
<div>
<p class="MsoNormal"><br>
<br>
<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"># cat /etc/cluster/cluster.conf <o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><?xml version="1.0"?><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><cluster name="Cork-Training" config_version="6"><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  <cman keyfile="/var/lib/pve-cluster/corosync.authkey"><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  </cman><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  <clusternodes><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  <clusternode name="proxmox01" votes="1" nodeid="1"/><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  <clusternode name="proxmox02" votes="1" nodeid="2"/><clusternode name="proxmox03" votes="1" nodeid="3"/><clusternode name="proxmox04" votes="1"
 nodeid="4"/></clusternodes><o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"></cluster><o:p></o:p></span></p>
</div>
</div>
<div>
<p class="MsoNormal"><br>
<br>
<o:p></o:p></p>
</div>
<div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"># cat /etc/pve/corosync.conf <o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">logging {<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  debug: off<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  to_syslog: yes<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">}<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">nodelist {<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  node {<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    name: proxmox04<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    nodeid: 1<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    quorum_votes: 1<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    ring0_addr: proxmox04<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  }<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  node {<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    name: proxmox03<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    nodeid: 2<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    quorum_votes: 1<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    ring0_addr: proxmox03<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  }<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  node {<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    name: proxmox02<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    nodeid: 3<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    quorum_votes: 1<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    ring0_addr: proxmox02<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  }<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  node {<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    name: proxmox01<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    nodeid: 4<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    quorum_votes: 1<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    ring0_addr: proxmox01<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  }<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">}<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">quorum {<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  provider: corosync_votequorum<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">}<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">totem {<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  cluster_name: Cork-Training<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  config_version: 6<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  ip_version: ipv4<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  secauth: on<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  version: 2<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  interface {<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    bindnetaddr: 10.240.0.100<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">    ringnumber: 0<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">  }<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p> </o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914">}<o:p></o:p></span></p>
</div>
<div>
<p class="MsoNormal" style="background:black"><span style="font-size:7.0pt;font-family:"Monaco",serif;color:#29F914"><o:p> </o:p></span></p>
</div>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
<div>
<div>
<p class="MsoNormal">----<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal">Guy<o:p></o:p></p>
</div>
<div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<p class="MsoNormal"><br>
<br>
<br>
<o:p></o:p></p>
<pre>_______________________________________________<o:p></o:p></pre>
<pre>pve-user mailing list<o:p></o:p></pre>
<pre><a href="mailto:pve-user@pve.proxmox.com">pve-user@pve.proxmox.com</a><o:p></o:p></pre>
<pre><a href="http://pve.proxmox.com/cgi-bin/mailman/listinfo/pve-user">http://pve.proxmox.com/cgi-bin/mailman/listinfo/pve-user</a><o:p></o:p></pre>
</blockquote>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
<p class="MsoNormal">_______________________________________________<br>
pve-user mailing list<br>
<a href="mailto:pve-user@pve.proxmox.com">pve-user@pve.proxmox.com</a><br>
<a href="http://pve.proxmox.com/cgi-bin/mailman/listinfo/pve-user">http://pve.proxmox.com/cgi-bin/mailman/listinfo/pve-user</a><o:p></o:p></p>
</div>
</blockquote>
</div>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</div>
</body>
</html>