Executar comando quando um arquivo é alterado

Eu tenho um cenário em que estou carregando arquivos .csv para uma pasta específica, / tmp / data_upload, todos os dias, e os arquivos antigos são substituídos pelo novo.

Preciso executar um script Python depois que os dados forem carregados. Para isso, tenho uma ideia de criar um trabalho cron e monitorar as alterações no arquivo. Tentei usar o inotify, mas não gosto muito do domínio Unix. Como eu posso fazer isso?

Preciso executar o script test.py quando houver uma alteração de data de um arquivo na pasta de upload, por exemplo, / tmp / data_upload.

Você pode precisar de incrond (inotify cron daemon), que monitora as alterações nos arquivos e depois executa os scripts.

O Incrond pode monitorar, adicionar novos arquivos, modificar, excluir e muito mais. Este é um artigo mostra qual incrond de evento pode monitorar com algum exemplo.

Exemplo para o seu caso, você pode criar o arquivo /etc/incron.d/data_uploadcom o conteúdo

/tmp/data_upload IN_CREATE,IN_MODIFY /path/to/test.py 

Você pode usar entr para executar automaticamente o script sempre que um arquivo for alterado, executando ls /tmp/data_upload | entr -p script.pyuma vez na inicialização.

Site do projeto: http://eradman.com/entrproject/

Página do manual online: https://www.systutorials.com/docs/linux/man/1-entr/

O utilitário de linha de comando watchexec( https://crates.io/crates/watchexec ) parece exatamente o que você precisa, embora eu acredite que para instalá-lo, você precisa ter as ferramentas de construção do Rust instaladas em sua máquina, de modo que pode ser uma Empecilho

Minha abordagem geral seria mexer com o findutilitário clássico do Unix . Por exemplo, o comando

find /tmp/upload_data/*.csv -mtime -1 -exec /home/myname/test.py

encontrará todos os .csvarquivos /tmp/upload_dataque foram modificados há menos de um dia e executará o seu, test.pyse houver algum. Obviamente, se o seu test.pyarquivo estiver em outro diretório, você deseja atualizar seu caminho para ele de acordo.

Se você executar seu crontrabalho com mais frequência do que uma vez por dia, poderá usar a mminopção findpara especificar o tempo máximo desde a modificação em minutos. Por exemplo,

find /tmp/upload_data/*.csv -mmin -60 -exec /home/myname/test.py

procurará por .csvarquivos modificados há menos de 60 minutos - útil se o cron executar o trabalho a cada hora.

Dois avisos justos estão em ordem: Primeiro, isso não captura os .csvarquivos que você excluiu totalmente. Você pode querer verificar estes separadamente. Segundo, não tive tempo de testar nada disso. Espere erros de digitação no meu código que você terá que depurar sozinho.