Despejos de cache do Linux

Observando como o cache VFS em minha máquina Linux se comporta, posso ver que, mesmo quando efetivamente ocioso (a maioria dos outros daemons interrompidos faz interface com a interface desativada), a quantidade de memória livre aumenta gradualmente, implicando que itens estão sendo despejados do cache.

Eu pesquisei bastante no Google, mas não consigo encontrar nenhuma referência sobre como isso é controlado (a menos que seja um efeito colateral do vm_swappiness). Alguém pode me colocar no caminho certo para entender por que os itens estão sendo despejados do cache quando não há demanda por nova alocação de memória?

linux cache vfs

— symcbean
fonte

«Implicando que itens estão sendo despejados do cache» - bem, nesse caso vmstat, mostraria um aumento no tamanho dos caches - são realmente?

— poige

diminuindo com certeza. Sim, eles são (decrescente)

— symcbean

Então, você diz que o aumento de memória livre e o tamanho do cache / buf estão diminuindo ao mesmo tempo, certo?

— poige

Respostas:

a troca afeta apenas se a memória do aplicativo alocada é trocada para liberar espaço para o cache. vfs_cache_pressure é o sysctl que controla o que você está vendo.

— Bratchley
fonte

Nenhuma - controlos vfs_cache_pressure a proporção de metadados vs retenção pagecache (pelo menos de acordo com os documentos que li e as experiências eu correr)

— symcbean

Justo. Pesquisei um pouco mais e, pelo que vejo, tudo está ordenado em uma lista de pedidos da LRU e só foi analisado quando algum limite (artificial ou físico) é atingido ou ultrapassado. Dado isso, eu assumiria que algo ainda está acontecendo (como um thread do kernel acordando ou algo assim). Se é super importante para você descobrir isso, parece que existe um script pré-escrito do systemtap chamado "mmreclaim.stp" que rastreia as recuperações do gerenciador de memória. Eu também tinha certeza de que não seria realmente trocado usando "sar -A".

— Bratchley #

O Linux libera os dados do cache da página usando um processo chamado pdflush

O pdflush é controlado pelos parâmetros de / proc / sys / vm

#/proc/sys/vm/dirty_expire_centisecs
The hundredth of the second after which data will be considered to be expired from the page cache and will be written at the next opportunity.

#/proc/sys/vm/dirty_writeback_centisecs`    
The hundredth of a second after which the pdflush wakes up to write data to disk.

#/proc/sys/vm/vfs_cache_pressure`    
This will reclaim dentries and inodes which are also part of the cache.

Você pode conferir os seguintes tópicos para obter mais informações:

O daemon pdflush
Teoria de operação e ajuste para cargas pesadas de gravação
Linux Cache Memory

— Joe
fonte

Obrigado Joe, no entanto, as 2 primeiras opções estão especificamente relacionadas a dados que precisam ser gravados no sistema de arquivos (ou seja, o buffer de gravação) e não dados que foram lidos e não foram alterados (o buffer de leitura). O vfs_cache_pressure controla a preferência de remoção de metadados do arquivo em relação ao conteúdo do arquivo.

— symcbean

@symcbean Você está correto. A resposta fala mais sobre cache de gravação. O cache de leitura é limpo com base no LRU. No entanto, o Linux usa uma estratégia de duas listas com base na qual o cache de leitura está sendo limpo. Você pode ler mais sobre o Two-List Stragety e como o linux limpa o cache de leitura aqui . Deixe-me saber se isso faz sentido. No seu caso eu supor que, após todos os processos estão parados, estes caches de leitura entrar em lista de inativos e são apagadas

— Joe

obrigado, bom artigo. Alguma idéia de que livro é o capítulo? No entanto, embora explique como uma página específica é priorizada para remoção, ela realmente não explica por que as páginas são removidas quando não há demanda aparente por memória. O que controla o processo "para reduzir o cache e disponibilizar mais RAM para outros usos"? O que é substituí-los por?

— symcbean

@symcbean O despejo de cache funciona imediatamente quando há demanda por memória. No entanto, não faz sentido tê-lo em cache quando ninguém o estiver usando ativamente. Lá, as páginas ativas se tornam páginas inativas e, eventualmente, são despejadas. Suponho que sua pergunta se origine do ponto em que o despejo deve ocorrer somente quando houver demanda por memória. O linux limparia todas as páginas inativas como e quando estiverem disponíveis. Como [observado no artigo] [ jothirams.com/linux-cached-memory/] se tudo estiver ativo, você ficará sem memória e o OOM será chamado.

— 18714 Joe