Por um longo tempo, ouvi falar de quão ruim é uma idéia de um grande conjunto (> 5 TB) de RAID-5, simplesmente porque há um alto risco de falha de outra unidade.
O RAID-Z1 conseguiu remediar isso para uma matriz de qualquer tamanho (se você absolutamente precisar de um número, considere 4x2TB ou 5x2TB)? Talvez uma maneira mais segura de replicar novamente os dados que não são tão intensos em todas as unidades?
Respostas:
Mesmo considerando as outras respostas aqui definidas, a saber, que o ZFS funciona apenas com blocos usados reais e não com espaço vazio, sim, ainda é perigoso criar um grande RAIDZ1 vdev. A maioria dos pools acaba com pelo menos 30-50% de utilização, muitos vão até o máximo recomendado de 80% (alguns passam, recomendo que você não faça isso por motivos de desempenho), para que o ZFS lide apenas com blocos usados não é uma grande vitória. Além disso, algumas das outras respostas fazem parecer que uma leitura ruim é o que causa o problema. Isto não é verdade. Um pouco de podridão dentro de um bloco não é o que vai te ferrar aqui, geralmente, é outro disco simplesmente ficando ruim enquanto o resilver do primeiro disco com defeito ainda está acontecendo que o mata .. e em discos de 3 TB em um grande raidz1 pode levar dias, até semanas se transformar novamente em um novo disco, para que sua chance de isso não seja insignificante.
Minha recomendação pessoal aos clientes é nunca usar RAIDZ1 (equivalente a RAID5) com discos> 750 GB, apenas para evitar muito desagradável potencial. Eu estive bem com eles quebrando essa regra por outras razões (o sistema possui um backup em outro lugar, os dados não são tão importantes etc.), mas geralmente faço o possível para usar o RAIDZ2 como uma opção mínima com grandes discos.
Além disso, por várias razões, eu geralmente recomendo não colocar mais de 8 a 12 discos em uma faixa raidz2 ou 11 a 15 discos em uma faixa raidz3. Você deve estar no limite inferior desses intervalos com discos de 3 TB e talvez possa estar bem no limite superior desses intervalos em discos de 1 TB. Que isso ajudará a mantê-lo longe da idéia de que mais discos falharão enquanto um resilver estiver em andamento é apenas uma dessas razões, mas é uma delas.
Se você estiver procurando por algumas regras básicas sãs (editar 10/10/15 - eu escrevi essas regras com apenas discos giratórios em mente - porque elas também são lógicas [por que você faria menos de 3 discos em um raidz1]) faz algum sentido, mesmo para conjuntos SSD, mas todos os conjuntos SSD não eram uma coisa na minha cabeça quando eu escrevi estes):
O RAID-Z é tão ruim quanto o R5, não. É tão bom quanto R1 ou R10, geralmente não.
O RAID-Z está ciente dos pontos em branco nas unidades, onde R5 não está. Portanto, o RAID-Z precisa apenas ler as áreas com dados para recuperar o disco ausente. Além disso, os dados não são necessariamente distribuídos em todos os discos. Um arquivo muito pequeno pode residir em apenas um único disco, com a paridade em outro disco. Por causa disso, o RAID-5 precisará ler exatamente a quantidade de dados que o espaço usado na matriz (se 1mb for usado em uma matriz de 5 TB, uma reconstrução precisará ler apenas 1 mb).
Indo de outra maneira, se a maioria de uma grande matriz estiver cheia, a maioria dos dados precisará ser lida em todos os discos. Comparado com R1 ou R10, onde os dados precisam ser extraídos apenas exatamente de um disco (por disco com falha; se vários discos falharem apenas em situações em que a matriz ainda é recuperável também).
Você se preocupa com o fato de que, a cada operação de leitura de setor, há uma chance de você encontrar um setor que não foi escrito corretamente ou que não é mais legível. Atualmente, para uma unidade típica atualmente em torno de 1x10 ^ -16 (nem todas as unidades são iguais, consulte as especificações de suas unidades para descobrir sua classificação). Isso é incrivelmente pouco frequente, mas ocorre cerca de uma vez a cada 1PB; para uma matriz de 10 TB, há 1% de chance de sua matriz ser brindada e você não a conhecer até tentar recuperá-la.
O ZFS também ajuda a atenuar essa chance, pois a maioria dos setores ilegíveis é perceptível antes de você começar a tentar reconstruir sua matriz. Se você esfregar sua matriz do ZFS regularmente, a operação de depuração detectará esses erros e contorná-los (ou alertará você para que você possa substituir o disco, se é assim que rola). Eles recomendam que você limpe os discos de nível corporativo cerca de uma a quatro vezes por mês; e unidades de nível de consumidor pelo menos uma vez por semana ou mais.
Algumas das vantagens do RAID-Z em relação ao RAID-5 tradicional é que ele não requer hardware especializado e é mais confiável, evitando o furo de gravação RAID-5.
No entanto, o RAID-Z e o RAID-5 não suportam mais de uma falha no disco.
Se você deseja sobreviver à falha de dois discos com o ZFS, pode usar o RAIDZ2 e a falha de três discos RAIDZ3 .