SAN com algumas unidades SSD ou muitos HDDs antiquados?


9

Minha empresa está tentando descobrir que tipo de SAN comprar. Isso é especificamente para servidores de banco de dados que estão se tornando restritos a E / S (o armazenamento é DAS no momento, mas estamos atingindo o limite de um único servidor e também queremos adicionar cluster).

Precisamos de uma solução que produza cerca de 3000 IOPS a longo prazo (atualmente atingimos o pico em torno de 1000 IOPS). A maioria de nossas operações de banco de dados são pequenas leituras / gravações. Com base em discussões com engenheiros da HP e outras pessoas on-line, um HP P2000 com 24 SAS HDs em uma configuração RAID 10 fornecerá pouco menos dessa velocidade por ~ $ 20K. Adicionar controladores e outros itens para criar a SAN nos coloca em torno de nosso orçamento máximo de US $ 30 mil.

Mas online, vejo que muitos SSDs SAS oferecem velocidades de 80.000 IOPS +. Isso é realista de se esperar? Em caso afirmativo, seria realista obter uma SAN de nível de entrada P2000 ou similar e lançar alguns SSDs lá? Nossos bancos de dados são pequenos, apenas um total de TB. Se fizéssemos isso, teríamos o dinheiro restante para comprar uma segunda SAN para espelhamento / failover, o que parece prudente.


3
Eu vou responder isso em breve.
ewwhite

Você pode criar um link para o modelo / tipo de SAN específico que está interessado em usar? Existem muitas advertências que vêm com as matrizes de armazenamento no estilo HP P2000. Como você planeja se conectar? iSCSI? Fibra? SAS?
ewwhite

Além disso, qual plataforma de banco de dados é essa?
ewwhite

Aqui está o modelo que eu estava olhando, apenas com uma configuração de unidade diferente: aventissystems.com/product-p/200385.htm . O DBMS é o SQL Server Standard 2008 R2. Estamos realmente abertos a praticamente qualquer configuração / fornecedor, desde que possamos escalar "de forma barata" no futuro e enquanto mantivermos nosso orçamento modesto.
Beep beep

Quanta capacidade você precisa?
ewwhite

Respostas:


4

Eu posso falar sobre as especificidades do que você está tentando realizar. Honestamente, eu não consideraria um HP P2000 / MSA2000 básico para seu propósito.

Esses dispositivos têm muitas limitações e, do ponto de vista do conjunto de recursos da SAN, nada mais são do que uma caixa de discos. Sem camadas, sem armazenamento em cache inteligente, no máximo 16 discos em um grupo de discos virtuais , recursos baixos de IOPS, suporte ruim a SSD (especialmente na unidade selecionada).

Você precisaria avançar para o HP MSA2040 para ver qualquer benefício de desempenho ou suporte oficial com SSDs. Além disso, você realmente deseja usar o iSCSI?

O DAS pode ser sua melhor opção se você puder tolerar o armazenamento local. O armazenamento flash PCIe estará dentro do seu orçamento, mas a capacidade precisará ser planejada com cuidado.

Você pode elaborar as especificações dos seus servidores reais? Marca / modelo, etc.

Se o armazenamento em cluster for obrigatório, outra opção é executar a unidade HP MSA2040, mas use uma unidade SAS em vez do iSCSI. Isso é menos oneroso que os outros modelos, permite conectar de 4 a 8 servidores, oferece baixa latência e excelente taxa de transferência e ainda pode suportar SSDs. Mesmo com os modelos Fiber ou iSCSI, esta unidade oferece mais flexibilidade do que a que você vinculou.


obrigado! Temos todos os servidores HP, principalmente os HP DL380. As únicas razões pelas quais estávamos considerando o iSCSI é que parecia mais fácil expandir os quatro servidores anteriores (se quiséssemos enviar outros dados do servidor para a SAN) e que era um pouco mais rápido (10 Gb vs. 6 Gb).
Beep beep

Dito isso, vou dar uma olhada no MSA2040 ... não sei por que ele não apareceu no nosso radar antes.
Beep beep

Percebo a confusão ... Se você não planeja expandir além de 4 ou 8 servidores, o SAS funciona muito bem. E não é 10 Gb versus 6 Gb ... é 10 Gb versus uma interface SAS de 12 pistas e 12 Gbps (48 Gbps para o gabinete).
ewwhite

Acabei de ver que o software Remote Snap funciona apenas em iSCSI ou FC ... esperávamos utilizar o snap remoto para espelhar a SAN para recuperação de desastre eventualmente. Ou existe outro processo via SAS que permitiria a mesma capacidade?
Beep beep

@Beepbeep Eu provavelmente usaria um processo de DR diferente. Costumo não confiar na replicação do dispositivo de armazenamento ou no nível da SAN. Mas as versões 10GbE e FC do MSA2040 podem ser mais adequadas para você.
EDhiteite

6

A regra de ouro que eu uso para E / S de disco é:

  • 75 IOPs por eixo para SATA.

  • 150 IOPs por eixo para FC / SAS

  • 1500 IOPs por eixo para SSD.

Assim como as IOPs por matriz, considere também as IOPs por terabyte. Não é incomum acabar com uma taxa de IOP / TB muito ruim se estiver usando SATA + RAID6. Isso pode não parecer muito, mas muitas vezes você acaba com alguém identificando 'espaço livre' em uma matriz e deseja usá-lo. É comum as pessoas comprarem shows e ignorarem Iops, quando na verdade o oposto é verdadeiro na maioria dos sistemas empresariais.

Em seguida, adicione o custo da penalidade de gravação para RAID:

  • 2 para RAID1, RAID1 + 0
  • 4 para RAID5 (ou 4)
  • 6 para RAID6.

A penalidade de gravação pode ser parcialmente atenuada, com grandes caches de gravação e nas circunstâncias certas. Se você tiver muitas E / S de gravação sequencial (como logs de banco de dados), poderá reduzir significativamente essas penalidades de gravação no RAID 5 e 6. Se você pode escrever uma faixa completa (por exemplo, um bloco por eixo), não precisa ler para calcular a paridade.

Suponha um conjunto 8 + 2 RAID 6. Em operação normal para uma única E / S de gravação, você precisa:

  • Leia o bloco 'atualizado'.
  • Leia o primeiro bloco de paridade
  • Leia o segundo bloco de paridade
  • Recompute a paridade.
  • escreva todos os 3. (6 IOs).

Com uma gravação em faixa completa em cache - por exemplo, 8 'pedaços' consecutivos do tamanho da faixa RAID, você pode calcular a paridade em todo o lote, sem precisar de uma leitura. Então você só precisa de 10 gravações - uma para cada dado e duas paridades.

Isso torna sua penalidade de gravação 1.2.

Você também precisa ter em mente que o IO de gravação é fácil de armazenar em cache - não é necessário colocá-lo em disco imediatamente. Ele opera com uma restrição de tempo branda - desde que, em média, suas gravações recebidas não excedam a velocidade do eixo, tudo poderá ser executado na 'velocidade de cache'.

O IO de leitura, por outro lado, sofre uma restrição de tempo difícil - você não pode concluir uma leitura até que os dados sejam buscados. Os algoritmos de cache de leitura e carregamento de cache se tornam importantes nesse ponto - padrões de leitura previsíveis (por exemplo, seqüenciais, como você obteria do backup) podem ser previstos e pré-buscados, mas os padrões de leitura aleatórios não podem.

Para bancos de dados, geralmente sugiro que você assuma que:

  • a maior parte do seu pedido de informação de base de dados é de leitura aleatória. (por exemplo, ruim para acesso aleatório). Se você puder pagar a sobrecarga, o RAID1 + 0 é bom - porque os discos espelhados fornecem duas fontes de leitura.

  • a maior parte do seu IO 'log' é gravação sequencial. (por exemplo, bom para armazenamento em cache e, ao contrário do que muitos DBAs sugerem, você provavelmente deseja RAID50 em vez de RAID10).

A proporção dos dois é difícil, é difícil dizer. Depende do que o DB faz.

Como a E / S de leitura aleatória é o pior caso de armazenamento em cache, é onde o SSD realmente se destaca - muitos fabricantes não se incomodam em armazenar em cache o SSD porque, de qualquer maneira, é a mesma velocidade. Portanto, especialmente para itens como bancos de dados temporários e índices, o SSD oferece um bom retorno sobre o investimento.


Obrigado, somos 100% RAID10 porque estamos focados em bancos de dados.
Beep beep

É comum, mas também é uma falácia. O RAID10 é realmente um desperdício para cargas de trabalho principalmente orientadas para gravação. O RAID5 / RAID6 em cache gravado tem uma penalidade de gravação mais baixa quando você está executando, por exemplo, escrevendo arquivos de diário de banco de dados.
Sobrique

3

Sua análise está bastante correta.

Use alguns HDDs para muitos GBs e muitos HDDs para algumas IOps.
Use alguns SSDs para muitas IOPs e muitos SSDs para alguns GBs

O que é mais importante para você? O espaço é o grande fator de custo para as soluções SSD, já que o preço por GB é muito maior. Se você está falando de um IOPs 4K necessários de um banco de dados de 200 GB, um par de SSDs o levará até lá. Ou uma matriz de 24 discos de 15 mil unidades, deixando muito espaço para armazenamento em massa.

A quantidade de IOps que você realmente obterá desses SSDs varia muito com base na infraestrutura de armazenamento (o ewwhite irá elaborar isso), mas é razoável obter esse tipo de velocidade. Especialmente com o Raid10, onde a paridade não está sendo computada.


Obrigado pelo feedback! É razoável misturar unidades? Ou seja, configurar 4 SSDs para tarefas orientadas para o desempenho e, em seguida, um monte de HDDs para armazenamento em massa?
Beep beep

3
@Beepbeep Sim, mas esteja ciente das vantagens e desvantagens. Muitos Iops consumirão recursos do controlador, o que significa que você não obterá o máximo rendimento sequencial dos HDDs. Muita taxa de transferência sequencial nos HDDs pode impedir a entrada e saída dos SSDs, aumentando a latência devido à contenção do canal. Se isso importa para você, mas em canais diferentes.
sysadmin1138

0

Recentemente, construí um par de servidores de armazenamento para o meu empregador, usando o chassi Dell C2100, executando o FreeBSD 10.1 com doze unidades SATA corporativas Western Digital "SE" de 2 TB e 7200 rpm. As unidades estão em um único pool ZFS, composto por dois dispositivos virtuais RAIDZ-2 de 6 unidades (vdevs). Anexados ao pool, há um par de SSDs Intel DC S3500 supercap protegidos contra perda de energia; eles são usados ​​como SLOG e L2ARC. Ao testar o servidor em iSCSI, consegui atingir 7500-8200 IOPS. Nosso custo total, incluindo discos rígidos, foi de cerca de US $ 2700 por servidor.

No período em que esses sistemas baseados em BSD estão em execução, uma de nossas unidades SAN HP MSA2012i sofreu duas falhas no controlador e nossa outra unidade MSA2012i corrompeu um grande volume NTFS, exigindo 12 horas de tempo de inatividade para reparo.

A Dell e a HP vendem 10% de hardware e 90% prometem suporte que você nunca poderá utilizar.


Isso é verdade ... Parte de mim queria recomendar um servidor HP executando o ZFS (ou um sistema operacional baseado em ZFS), pois teria um desempenho muito melhor do que um MSA / P2000 ... mas eu não queria sair em uma tangente.
ewwhite

Oh, eu não tenho nenhum problema com a HP. A HP e a dell fazem um ótimo hardware de servidor. Geralmente carrega melhor do que alguns gabinetes iStarUSA ou Norco da caixa branca. Mas quando se trata de dispositivos críticos (SAN / NAS é essencial em meu livro), recomendo uma solução com o máximo de transparência possível. Os aparelhos SAN são grandes caixas pretas. Eles funcionam muito bem até que não funcionem, e então você fica acordado.
amigos estão
Ao utilizar nosso site, você reconhece que leu e compreendeu nossa Política de Cookies e nossa Política de Privacidade.
Licensed under cc by-sa 3.0 with attribution required.