Como faço para obter uma TB de dados em um novo servidor da web?

31

Tenho uma TB de arquivos de mídia compactada que preciso acessar um servidor da Web remoto com um pouco de urgência. (do meu escritório)

Nossa taxa de upload é de apenas 500 KB / s, o que sugere aproximadamente 23 dias para o upload.

A nova empresa de hospedagem não aceita unidades por email.

Existe um bom lugar para ir nas principais áreas metropolitanas para pedir emprestado um tubo mais grosso?

transfer data

— Brian Webster
fonte

10

Sei que isso não é uma resposta, ou mesmo particularmente útil, mas se sua nova empresa de hospedagem não estiver disposta a trabalhar com você, será necessário encontrar uma nova empresa de hospedagem. Não aceitar uma unidade de um cliente (por uma taxa, é claro) é bem chato.

— voretaq7

Verifique a minha resposta é uma empresa de armazenamento de dados em Tulsa

— Anagio

Ele tem boas respostas aqui, mas isso não deveria ter sido transferido para o ServerFault?

— Mark Hurd

1

Talvez, mas eu ver serverfault como um lugar para discutir a configuração de hardware e software, que este é o uso de qualquer webmasters têm à sua disposição para alcançar uma tarefa mais composite

— Brian Webster

16

Eu entraria em contato com alguns dos seus data centers locais (hospedagem em rack, provedores de serviços gerenciados, etc.) e veria como alugar um vps ou uma máquina virtual por um dia ou dois. Apenas certifique-se de que eles permitam que você traga um disco para a transferência inicial e que estejam cientes de suas necessidades de largura de banda.

Você também pode apenas perguntar se eles simplesmente o ajudariam com o upload. Eles costumam ser oportunistas, inventivos e podem estar dispostos a acomodá-lo pela chance de obter alguns dos seus negócios.

— InChargeOfIT
fonte

3

Há também uma opção remota de data center: Amazon AWS! Envie para eles os discos rígidos e eles cobram (até a data em que escrevemos) US $ 80 por dispositivo, mais US $ 2,50 por hora de carregamento de dados, mais o que custa para armazenar os dados, desde que estejam na AWS, mais a transferência de dados. Possivelmente não é a opção mais atraente, mas apenas jogá-la lá fora.

Isso é ótimo de saber. Usamos bastante a AWS! Você sabe onde eu posso ler sobre este serviço? É difícil encontrar no Google (pelo menos as palavras-chave que estou usando)

— Brian Webster

1

aws.amazon.com/importexport

— Rich

11

Você pode, se tiver amigos ou funcionários dispostos a ajudá-lo com a conexão doméstica, configurar um torrent para o arquivo grande e configurar seus funcionários / amigos como sementes. É claro que você teria que carregar e copiar o arquivo para todos. Mesmo assim, você pode dividir o arquivo em .rars e fazer com que "equipes" enviem partes (cuidando para que eles não façam o download dos arquivos que não possuem). Multidão de abastecimento ftw!

— luke
fonte

3

Isso seria particularmente eficaz se você tiver amigos que estão na faculdade. Eles não apenas têm acesso a boas conexões universitárias de alta velocidade, como também não seria difícil pedir a alguns amigos em dormitórios diferentes para ajudar no upload.

— Lèse majesté 16/03/2012

7

Encontre um provedor de serviços de Internet regional de propriedade local e traga uma boa unidade externa gorda que possa suportar tudo isso. Entre no escritório com US $ 300 em dinheiro, credenciais para o servidor e um pacote de 12 cervejas. Ore para que eles tenham um uplink de gigabit, porque um máximo de 100mbit levará mais de 24 horas.

Se isso falhar, procure o ponto de troca local na Internet e encontre qualquer AS conectado a ele. Faça realmente bons amigos com alguém local da NANOG. As probabilidades são de que você precisará ser criativo. Tente procurar qualquer co-localização perto de você.

— Jeff Ferland
fonte

2

Esse é o caminho que eu seguiria. A cerveja tende a lubrificar as interações comerciais.

— Evik James

1

Penso que esta é possivelmente a melhor solução para o caminho da menor resistência aqui.

— precisa

5

Se os arquivos forem de texto ou de outra forma compactados, é possível compactá-los antes do upload, o que pode reduzir o tamanho do arquivo em até 90%. Então você pode descompactá-los no servidor.

Você também pode tentar dividir o upload entre vários locais. Cada um deles pode lhe dar a velocidade máxima.

— John Conde
fonte

4

Obtenha uma empresa de hospedagem temporária para a qual você pode enviar sua unidade e, em seguida, transfira do host temporário para o host permanente a uma taxa mais rápida.

— xpda
fonte

3

Ou simplesmente mude para um host da Web que aceite unidades por correio. A maioria dos hosts da web com atendimento decente ao cliente permitirá isso.

— Lèse majesté 15/03/2012

Suponho que a empresa de hospedagem atual tenha sido selecionada por causa do preço ou de outros critérios de longo prazo, e seria mais caro mudar permanentemente.

— Xpda

4

Esses caras estão em Tulsa, que você tem no seu perfil, então, se você estiver na área, ligue para eles ou faça uma visita e deixe que eles saibam sua situação.

http://www.datastorageinc.com/

— Anagio
fonte

3

Eu só quero adicionar às respostas existentes algo que possa melhorar sua transferência depois que você tiver seu disco rígido conectado a um servidor com boa largura de banda.

Eu precisava transferir grandes quantidades de dados várias vezes entre dois servidores Web e, em vez de usar comandos FTP ou WGET comuns para carregar ou baixar os dados, eu estava usando o comando Linux SCP. Você pode encontrar mais informações aqui: http://www.go2linux.org/scp-linux-command-line-copy-files-over-ssh

Você precisará de acesso SSH aos dois servidores e poderá copiar um arquivo ou muitos arquivos recursivamente.

Portanto, se você tiver apenas arquivos grandes em vez de muitos pequenos, acho que ele copiará rápido o suficiente.

A uma taxa de transferência de 11 MB / segundo entre servidores, a transferência duraria cerca de 25 horas.

Boa sorte! ;)

— Alexandru Trandafir Catalin2
fonte

1

Melhor ainda, use rsync se o host de destino suportar. (Muitos fazem.)

— Ilmari Karonen

3

http://aws.amazon.com/importexport/

Envie seu dispositivo para a AWS e eles cuidarão do resto.

— sutil
fonte

"... e eles cuidarão do resto" - não, eles não cuidarão , a menos que seu destino seja a AWS. Caso contrário, eles transferirão apenas os dados para um bucket S3. E você é quem deve obtê-lo do bucket do S3 para o seu destino de armazenamento; nesse caso, é o mesmo que a resposta do xpda.

— Lèse majesté 16/03/2012

2

Ah, com certeza, eu deveria ter comentado como Rich (não estava lá quando eu publiquei) a resposta InChargeOfIt. Como o Hamlin11 mostrou interesse especial na solução da AWS e estava procurando o link para este serviço, eu o publiquei. Um comentário ali teria sido mais apropriado, eu concordo.

— 2113 subietiet

Bem, acho que se você puder editar a resposta para se encaixar nesse comentário e observar que, para destinos que não são da AWS, você só precisará iniciar uma transferência de servidor para servidor posteriormente usando o cachimbo muito grosso da Amazon. seja uma boa resposta.

— Lèse majesté 16/03/2012

1

Se os dados estiverem em seu escritório na conexão lenta, você estará em apuros. Se os dados estiverem no ou no host antigo, você pode tentar uma transferência de servidor para servidor. Usando os canos ISP em vez do cano apertado do escritório.

Se você fizesse isso em pedaços por meio de um wget do ssh, seria muito mais rápido do que enviar uma unidade para instalação. Dito isto, nunca tive que mover mais de 250 GB.

— Brian
fonte

A parte de urgência da pergunta veio de um evento de inatividade catastrófico no "antigo host". Não tínhamos um host de backup quente, mas tínhamos backups recentes localmente.

— Brian Webster

0

Como as outras perguntas sugerem, tudo se resume a encontrar alguém ao seu redor com uma boa conexão.

Um grupo com quem você poderia conversar são administradores de universidades ou faculdades. Apenas certifique-se de que o cara com quem você está conversando esteja autorizado a permitir que você passe tuberculose através dos fios deles, e tenho certeza de que você pode chegar a um acordo.

Muitas faculdades das universidades, por exemplo, a física de partículas, publicam petabytes de dados, portanto essa pode ser outra opção possível.

— Boldewyn
fonte