Amélioration de la vitesse d'écriture mdadm RAID-6

J'ai un mdadm RAID-6 dans mon serveur domestique de disques durs verts WD 5x1 To. La vitesse de lecture est largement suffisante - 268 Mb / s en jj. Mais la vitesse d'écriture n'est que de 37,1 Mb / s. (Les deux testés via dd sur un fichier de 48 Go, la taille de la RAM est de 1 Go, la taille de bloc utilisée dans les tests est de 8 Ko)

Pourriez-vous s'il vous plaît suggérer pourquoi la vitesse d'écriture est si faible et existe-t-il des moyens de l'améliorer? L'utilisation du processeur pendant l'écriture n'est que de 25% (c'est-à-dire la moitié d'un cœur d'Opteron 165) Aucune donnée critique pour l'entreprise et le serveur ne sont sauvegardés par UPS.

mdstat est:

Personalities : [raid6] [raid5] [raid4]
md0 : active raid6 sda1[0] sdd1[4] sde1[3] sdf1[2] sdb1[1]
      2929683456 blocks super 1.2 level 6, 1024k chunk, algorithm 2 [5/5] [UUUUU]
      bitmap: 0/8 pages [0KB], 65536KB chunk

unused devices: <none>

Aucune suggestion?

Des choses comme l'écriture différée, la barrière, le nobh n'ont pas aidé. DD blocksize = 1M, 8M n'a rien changé. On dirait que mdadm lit physiquement les secteurs pour calculer la parité même si cela n'a pas d'importance ... Est-ce correct?

Mise à jour: la dégradation de la vitesse après la modification du cache de bande était en fait parce qu'un disque dur a probablement échoué pendant les tests, bien :-D

Résolu: après avoir augmenté le cache de bande et basculé vers un bitmap externe, mes vitesses sont de 160 Mo / s en écriture, 260 Mo / s en lecture. :-RÉ

Avez-vous essayé de régler / sys / block / mdX / md / stripe_cache_size?

Selon cet article du forum (en norvégien, désolé) "le réglage de ce paramètre est d'autant plus essentiel que vous disposez de plus de disques et d'un système plus rapide":

Sur mon système, j'obtiens les meilleures performances en utilisant la valeur 8192. Si j'utilise la valeur par défaut de 256, les performances d'écriture chutent de 66%.

Citant sa vitesse de comparaison:

Disques: 8xSeagate 2 To LP (5900 tr / min) dans mdadm RAID6 (-n 512) (stripe_size_cache = 8192).

Processeur: Intel X3430 (4 x 2,4 GHz, 8 Go de RAM DDR3 ECC)

Vitesse: 387 Mo / s en écriture séquentielle, 704 Mo / s en lecture séquentielle, 669 recherches aléatoires par seconde.

Mon serveur domestique a presque les mêmes disques que vous, en utilisant RAID 5:

Disques: 4x1,5 To WD Green en RAID 5 (stripe_size_cache = 256 - la valeur par défaut)

Processeur: Intel i7 920 (2,66 GHz, 6 Go de RAM)

Vitesse: 60 Mo / s en écriture séquentielle, 138 Mo / s en lecture séquentielle (selon Bonnie ++)

Il semble donc que les performances d'écriture séquentielle représentent environ 50% des performances de lecture.

Pour quelles performances attendre, le Wiki Raid Linux dit à propos de RAID 5:

Les lectures sont presque similaires aux lectures RAID-0, les écritures peuvent être soit assez coûteuses (nécessitant une lecture avant l'écriture, afin de pouvoir calculer les informations de parité correctes, comme dans les opérations de base de données), soit similaires à RAID-1 écritures (lorsque des écritures séquentielles plus importantes sont effectuées et que la parité peut être calculée directement à partir des autres blocs à écrire).

Et à propos de RAID 6:

Les performances de lecture sont similaires à RAID-5 mais les performances d'écriture sont pires.

essayer

echo 32768 > /sys/block/md0/md/stripe_cache_size

et vérifie ;)