Perguntas com a marcação «performance»

Gostaríamos de armazenar milhões de arquivos de texto em um sistema de arquivos Linux, com o objetivo de poder compactar e servir uma coleção arbitrária como um serviço. Tentamos outras soluções, como um banco de dados de chave / valor, mas nossos requisitos de simultaneidade e paralelismo tornam a melhor …

15 files  filesystems  performance  ext4 

Estou executando alguns processos pesados ​​de E / S na minha estação de trabalho e recentemente instalado iotoppara monitorá-los. Aqui está uma captura de tela recente: Estou um pouco confuso sobre as leituras na IO>coluna. Isso indica que meu disco está executando com aproximadamente ~ 1500% de atividade de E …

15 performance  io  disk  top 

Eu preciso deduplicar uma lista de palavras grande. Tentei vários comandos e fiz algumas pesquisas aqui e aqui, onde explicam que a maneira mais rápida de desduplicar uma lista de palavras parece estar usando o awk. awk -> O (n)? ordenar -> O (n log n)? No entanto, descobri que …

14 bash  awk  performance  sort 

Estou executando milhares de processos de segundo plano curl em paralelo no seguinte script bash START=$(date +%s) for i in {1..100000} do curl -s "http://some_url_here/"$i > $i.txt& END=$(date +%s) DIFF=$(( $END - $START )) echo "It took $DIFF seconds" done Eu tenho 49Gb Corei7-920 servidor dedicado (não virtual). Eu rastreio …

14 linux  performance  bash  curl  wget 

Meus sistemas Debian Wheezy usam o deadlineagendador. Estou acostumado a usar ionicepara reagendar a prioridade de E / S de trabalhos com uso intensivo de disco em horários de pico, e isso parece ajudar (mas não tenho nenhuma evidência concreta). A página de ionicemanual , a documentação do kernel e …

13 linux  performance 

Por exemplo, bziphá pbzip , uma versão paralela de bzip. Existe alguma ferramenta de paralelização para sortmelhorar o desempenho?

13 performance  sort 

Eu tenho diretório com cca 26 000 arquivos e eu preciso grep em todos esses arquivos. O problema é que eu preciso dele o mais rápido possível, por isso não é ideal criar scripts em que o grep pegue o nome de um arquivo no comando find e grave as …

13 files  grep  performance 

A página de manual diz sobre a barrieropção do ext4: As barreiras de gravação impõem a ordenação adequada de confirmações de diário no disco, tornando os caches voláteis de gravação em disco seguros para uso, com alguma penalidade de desempenho. Se os seus discos estiverem com bateria de uma maneira …

13 hard-disk  performance  ext4  laptop  cache 

Percebi que, quando faço aplicativos pesados ​​de gravação, todo o sistema fica mais lento. Para testar isso, eu executei isso para fazer uma (relativamente) baixa CPU, alta atividade de disco: john -incremental > file_on_SSD Isso distribui dezenas de milhares de strings por segundo para um arquivo no disco do sistema. …

13 kernel  performance  io  ssd 

Eu tenho dois sistemas Linux de núcleo duplo instalados usando cgroups Linux com kernels relativamente recentes; um está executando o Debian Squeeze, o outro Ubuntu 11.04 Natty Narwhal. Eu consegui o balanceamento de carga da CPU com o cgroups trabalhando um pouco melhor no sistema Debian, apesar de seu kernel …

13 linux  performance  cgroups 

Parece que eu logcheck configurado como uma tarefa agendada e sempre que é processo de execução greppelo logcheckocupa cerca de ¼ da minha CPU. Agora, tenho alguns momentos em que preciso da minha capacidade total da CPU e meu sistema consome o mínimo de recursos possível, exceto por processos / …

12 debian  cron  performance  cpu  laptop 

Quando executo o comando TOP, um processo mostra 1208% de uso da CPU e o tempo total de CPU é 81,7% com o modo IRIX ativado. Quando mudo para o modo IRIX desativado, o processo mostra 99% de uso da CPU e o tempo total da CPU do usuário é …

12 performance  cpu  top 

O poderoso straceme decepcionou. Como isso é possível? time foomostra que fooleva alguns segundos para ser executado ("real"), mas usa tempo de CPU insignificante, tanto no espaço do usuário ("usuário") quanto no kernel ("sys"). Para os curiosos, fooé definido abaixo. Portanto, ele passa a maior parte do tempo aguardando algo …

11 performance  time  strace 

O parâmetro swappiness controla a tendência do kernel de mover processos para fora da memória física e para o disco de troca. Qual é a configuração padrão e como configurá-la para melhorar o desempenho geral ?

11 linux  performance  swap 

Estou usando o teste Debian sem problemas por ~ 6 anos (estou atualizando-o regularmente), mas recentemente ele começou a mostrar um comportamento aleatório que pode ser resumido como "Baixo desempenho de E / S que persiste até a reinicialização". O problema é que, repentinamente, todas as leituras e gravações do …

11 linux  performance  io