<div dir="ltr">nb, the data drive is ZFS RAID10<br></div><div class="gmail_extra"><br><div class="gmail_quote">On 17 August 2015 at 12:50, Lindsay Mathieson <span dir="ltr"><<a href="mailto:lindsay.mathieson@gmail.com" target="_blank">lindsay.mathieson@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div><div><div><div><div><div>Still experimenting with ZFS on a new server with proxmox 3.4. Current Setup<br><br></div>BOOT: <br>- Intel SSD 535 - ZFS<br><br></div>Data ZFS: <br></div>- 4 * WD Velocoraptor 600GB Drives<br></div>- SSD for SLOG and Cace<br></div>- ZIL capped at 4GB<br><br></div>It runs ok for a couple of days and then ZFS seems to go nuts. IO delays goes over 50% until I kill the one VM that runs off the ZFS pool.<br clear="all"><div><div><div><div><div><div><div><br><br></div><div>the whole system is then incredibly slow to use - ssh login takes 10-20 seconds. pveperf on the boot disk shows the following:<br><br>CPU BOGOMIPS:      140548.16<br>REGEX/SECOND:      972975<br>HD SIZE:           92.78 GB (rpool/ROOT/pve-1)<br>FSYNCS/SECOND:     10.00<br>DNS EXT:           126.03 ms<br>DNS INT:           22.12 ms (brian.softlog)<br><br></div><div><br>Truly terrible fsync. The data pool is the same. The only cure seems to be a reboot.<br></div><div><br><br></div><div>Server has 64GB RAM and Dual Intel E5-2660<span class="HOEnZb"><font color="#888888"><br></font></span></div><span class="HOEnZb"><font color="#888888"><div><br></div><div>-- <br><div>Lindsay</div>
</div></font></span></div></div></div></div></div></div></div>
</blockquote></div><br><br clear="all"><br>-- <br><div class="gmail_signature">Lindsay</div>
</div>