<div dir="ltr">My personal preference, after building and maintaining my own for over 10 years.. is..<div><br></div><div>A controller that does JBOD, partition 98-98% of the disks, use linux mdadm software RAID in a raid-5 or 6 configuration.  The reason for this is, if your controller goes bad, you can replace it with pretty much anything and your system will still see your disks.  And with software raid, you can easily expand the array as needed, and tailor the re-sync to your needs.  You can also see details for the various disks since they're not hidden behind a controller (so you can check for bad sectors, read/write errors, etc easily.)</div><div><br></div><div>And typically, XFS since it's easily expandable, and can handle very large volumes.  EXT4 with or without journaling could be a competitor now that it's mature, but I've been expanding my SAN for 10 years, and it wasn't available back then :)</div><div><br></div><div>Then, if you have just 2 machines.. Get (2) 10GBe NICS, and wire them together, with a private subnet.  Then use NFS (which is pretty well supported, provided you need only file-level access).  If you need block level access on your other machines, iSCSI works.  There tends to be more overhead with iSCSI though. Make sure to tune your NFS for the type of files you'll be transferring.</div><div><br></div><div>You could also setup a mini Fiber Channel network SAN, but that's quite a bit more involved.</div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Mon, Jun 15, 2020 at 1:51 PM Grand Rapids Linux Users Group <<a href="mailto:grlug@grlug.org">grlug@grlug.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div style="overflow-wrap: break-word;">I have 2 haswell VBox servers and a thinkcentre Zabbix / MySQL server on my ethernet lan.  Get the fastest switch / nics you can get, and you’ll be fine.<div><br></div><div>-Van<br><div><br><blockquote type="cite"><div>On Jun 15, 2020, at 09:47, Grand Rapids Linux Users Group <<a href="mailto:grlug@grlug.org" target="_blank">grlug@grlug.org</a>> wrote:</div><br><div><div>Building an internal "SAN" four my two dev machines, .. would anyone<br>have input on which protocol to use the best performance?<br><br><span style="white-space:pre-wrap">        </span>* iSCSI or JBOD<br><span style="white-space:pre-wrap">       </span>* NFS<br><span style="white-space:pre-wrap"> </span>* ??<br><br>Thanks!<br><br>-- <br>grlug mailing list<br><a href="mailto:grlug@grlug.org" target="_blank">grlug@grlug.org</a><br><a href="https://shinobu.grlug.org/mailman/listinfo/grlug" target="_blank">https://shinobu.grlug.org/mailman/listinfo/grlug</a><br></div></div></blockquote></div><br></div></div>-- <br>
grlug mailing list<br>
<a href="mailto:grlug@grlug.org" target="_blank">grlug@grlug.org</a><br>
<a href="https://shinobu.grlug.org/mailman/listinfo/grlug" rel="noreferrer" target="_blank">https://shinobu.grlug.org/mailman/listinfo/grlug</a><br>
</blockquote></div>