我已经设置了一个由4 * 2 TB磁盘组成的
Linux软件raid 5级.磁盘阵列是使用64k条带大小创建的,没有其他配置参数.
在初始重建之后,我尝试创建一个文件系统,这个步骤需要很长时间(大约半小时或更长时间).我尝试创建一个xfs和ext3文件系统,都花了很长时间,使用mkfs.ext3我观察到以下行为,这可能会有所帮助:
在初始重建之后,我尝试创建一个文件系统,这个步骤需要很长时间(大约半小时或更长时间).我尝试创建一个xfs和ext3文件系统,都花了很长时间,使用mkfs.ext3我观察到以下行为,这可能会有所帮助:
>写入inode表快速运行直到达到1053(~1秒),然后写入大约50,等待两秒,然后写入下一个50(根据控制台显示)
>当我尝试使用Control C取消操作时,它会在真正取消之前挂起半分钟
单独的磁盘性能非常好,我在每个磁盘上分别运行bonnie,写入/读取值大约为95 / 110MB / s.即使我在每个驱动器上并行运行bonnie,值也只减少了大约10 MB.所以我通常将硬件/ I / O调度排除在问题源之外.
我尝试了stripe_cache_size和readahead大小的不同配置参数但没有成功,但我认为它们与文件系统创建操作无关.
服务器详细信息:
> Linux服务器2.6.35-27-通用#48-Ubuntu SMP x86_64 GNU / Linux
> mdadm – v2.6.7.1
有没有人建议如何进一步调试这个?
解决方法
我同意,它可能与条带对齐有关.根据我的经验,在3 * 2TB RAID-0上创建未对齐的XFS需要大约5分钟,但如果它与条带大小对齐则为~10-15秒.这是一个用于将XFS与256KB条带大小对齐的命令:
mkfs.xfs -l internal,lazy-count=1,sunit=512 -d agsize=64g,sunit=512,swidth=1536 -b size=4096 /dev/vg10/lv00
顺便说一下,在我的情况下条纹宽度是3个单位,对于你有4个驱动器但在raid-5中是相同的.
显然,这也提高了FS性能,因此您最好保持一致.