QSFP28 - existe algo como um cabo crossover?

Não é possível encontrar nada para isso;)

Construindo um cluster Hyperconvergend como sistema de desenvolvimento. Este é para nós o estado da arte.

Conseguimos 2 máquinas para começar, com um interruptor encomendado para entrar em cerca de 4 semanas. Ambos os servidores têm placas Ethernet de 2x100gb da Mellanox (ConnectX 4)

Ao conectar um cabo diretamente entre eles, recebo um link. Vejo que o link tenta (d) aparecer, mas falhou, a conexão falha imediatamente.

A conexão direta do servidor entre duas placas Ethernet não é suportada pelo QSFP28? Mais alguma coisa que eu deveria estar ciente? Na pior das hipóteses, eu "encaixo" o link de 100g até que o switch chegue.

mellanox

— TomTom
fonte

Respostas:

Não há cabo de manobra crossover de estilo antigo ou o que quer. Cobre passivo funcionando corretamente (você não usa óptica, usa?) O link QSFP deve funcionar independentemente de você alternar o uso sem switch. Você está usando um desses ou é algo de terceiros?

http://www.mellanox.com/products/interconnect/ethernet-direct-attach-copper-cables.php

Consulte o thread Mellanox (sem resposta até o momento).

https://community.mellanox.com/thread/4125

— BaronSamedi1958
fonte

Não, recebi alguns do fs.com - é a primeira vez que vamos ao SFP28. 2 servidores, 2 cabos até agora - ambos não estão se conectando. Os drivers são atuais. O firmware foi corrigido ontem. O cabo em questão é fs.com/products/47096.html

— TomTom

Isso deve ser bom. Talvez exponha isso como um problema de suporte com o fornecedor do servidor. Você já fez muito bonito exatamente o que eu faria ..

— Tom O'Connor

Feito, também entre em contato com a Mellanox.

— TomTom

Confiormed. Eu removi os 2 cabos, conectei os adaptadores Mellanox (QSFP28-> SFP28) e conecte os cabos 10G e pronto, funciona como um encanto (embora com desempenho reduzido). Problema no cabo;)

— TomTom

@TomTom FS.com tem transceptores específicos do fornecedor para os problemas evitar como este - verificação fs.com/c/mellanox-qsfp28-to-qsfp28-3370

— pauska

As portas QSFP28 são todas iguais (assim como SFP, SFP +, ...), não há pinagem MDI vs MDI-X como para par trançado. Portanto, cabos retos não são utilizados. Os DACs têm um crossover integrado, não há com o que se preocupar.

Possivelmente, seu DAC não é compatível com as NICs, algumas são muito exigentes quanto à marca. Também é possível que as NICs não sejam configuradas da mesma forma. Você deve verificar as mensagens do driver sobre o motivo pelo qual o link não aparece.

— Zac67
fonte

Será que as duas placas de rede estão esperando algum tipo de iniciativa uma da outra? IIRC início TP placas ethernet às vezes se comportava como que sem chave, mesmo com um cabo cruzado correto ... talvez esse velho fantasma voltou ....

— rackandboneman

Agradável. É uma merda. Alguma idéia de como desencadear isso? Também vejo o link surgindo e desaparecendo. Então, parece tentar levantar.

— TomTom

@TomTom A NIC informa o link a ser exibido? Ou é apenas a luz do link acendendo e apagando imediatamente depois? Isso pode apenas sinalizar a inserção do SFP - observe o lado oposto para obter uma resposta de link real.

— Zac67

@rackandboneman A situação é um pouco diferente - a autonegociação de 1ª geração foi falha e às vezes não funcionava. Um DAC conhece os parâmetros do link com certeza.

— Zac67

Não, vejo o link inicializando a cada X minutos no Windows. Isso é seguido por um bug engraçado no log de eventos. Vou tentar um curto-circuito - tenho placas de porta dupla, devo poder usar um DAC com uma placa e ela deve aparecer. Permite localizar um cartão com defeito.

— TomTom