<html dir="ltr"><head></head><body style="text-align:left; direction:ltr;"><div>On Sun, 2020-06-07 at 19:11 +1000, Phillip Smith wrote:</div><blockquote type="cite" style="margin:0 0 0 .8ex; border-left:2px #729fcf solid;padding-left:1ex"><div dir="ltr"><div dir="auto"><div dir="auto"></div><div class="gmail_quote" dir="auto"><div dir="ltr" class="gmail_attr">On Fri, 5 Jun 2020, 14:06 Sébastien Luttringer, <<a href="mailto:seblu@seblu.net" target="_blank">seblu@seblu.net</a>> wrote:</div><blockquote type="cite" style="margin:0 0 0 .8ex; border-left:2px #729fcf solid;padding-left:1ex">
<br>
Please relax, I've a RAID5 of 6x8TB since years.<br><br></blockquote><div><span class="gmail_default" style="font-family:verdana,sans-serif">Have you had to replace a disk and do a rebuild? </span></div></div></div></div></blockquote><div>Yes, unfortunately it's happen. Most of time it's only bad sectors one drive at a time.</div><div>IIRC the rebuild time was around 20h, depending on the pressure on the RAID.</div><div>I've a timer with a full mdadm check every month, which scan the whole array.</div><div><br></div><div>The most soliciting situation is when I upgrade the disks; I have to run 6 rebuild in a row before reshaping.</div><div><br></div><blockquote type="cite" style="margin:0 0 0 .8ex; border-left:2px #729fcf solid;padding-left:1ex"><div dir="ltr"><div dir="auto"><div class="gmail_quote" dir="auto"><div><span style="font-family: verdana, sans-serif;">It's obviously worse with consumer drives compared to enterprise drives - I'm not sure what Hetzner provision though.</span></div></div></div></div></blockquote><div>Choosing your disk set and a controller chipset are key decisions for sure and depends a lot of what you want to do with your array, but there is a lot of marketing in the last years around differences between disks which is sometimes only minor firmware tweaking or locking (like scterc, which is useful for RAID arrays) .</div><div><br></div><div>On the softraid vs btrfs raid question, my feedback is better with md.</div><div>I had several issues with btrfs raid over years[1].</div><div>Note that btrfs raid56 is not recommended for metadata and there is still a write hole issue[2].</div><div>That said, I've a 6x6TB btrfs RAID5 running well since 1 years and the last disk replacement was smooth.</div><div><br></div><div>Regards,</div><div><br></div><div>[1] <a href="https://lore.kernel.org/linux-btrfs/?q=seblu">https://lore.kernel.org/linux-btrfs/?q=seblu</a></div><div>[2] <a href="https://btrfs.wiki.kernel.org/index.php/RAID56">https://btrfs.wiki.kernel.org/index.php/RAID56</a></div><div></div><div><br></div><div><br></div><div><div style="white-space: normal;"><span><div>Sébastien "Seblu" Luttringer</div><div><br></div></span></div></div></body></html>