Ver o uso de memória de um script

Ver o uso de memória de um script Ver o uso de memória de um script

Ver o uso de memória de um scriptlink image 10

Aviso: Este post foi traduzido para o português usando um modelo de tradução automática. Por favor, me avise se encontrar algum erro.

Se um script estiver consumindo muita RAM, podemos monitorizá-lo para ver o que está consumindo.

Instalaçãolink image 11

Para poder monitorizá-lo, vamos a instalar memory_profiler. Podemos instalá-lo com Conda

conda install memory_profiler
      

ou com pip

pip install memory_profiler
      

Usolink image 12

Decoradorlink image 13

Podemos colocar um decorador na função que queremos monitorar.

from memory_profiler import profile
      
      @profile
      def minha_funcao():
          pass
      
	
%%writefile memory_profiler_decorator.py
from memory_profiler import profile
@profile
def my_function():
a = [1] * (10 ** 6)
b = [2] * (2 * 10 ** 7)
del b
return a
if __name__ == '__main__':
my_function()
Copy
	
Overwriting memory_profiler_decorator.py

Agora o executamos usando -m memory_profiles memory_profiler_decorator.py

	
!python -m memory_profiler memory_profiler_decorator.py
Copy
	
Filename: memory_profiler_decorator.py
Line # Mem usage Increment Occurrences Line Contents
=============================================================
3 49.5 MiB 49.5 MiB 1 @profile
4 def my_function():
5 57.0 MiB 7.5 MiB 1 a = [1] * (10 ** 6)
6 209.6 MiB 152.6 MiB 1 b = [2] * (2 * 10 ** 7)
7 57.2 MiB -152.4 MiB 1 del b
8 57.2 MiB 0.0 MiB 1 return a

Como vemos, obtemos o uso de memória de cada linha do script.

Uso de memória ao longo do tempolink image 14

Podemos obter um gráfico do uso de memória ao longo do tempo fazendo

mprof run memory_profiler_decorator.py
      mprof plot
      
	
!mprof run memory_profiler_decorator.py
Copy
	
mprof: Sampling memory every 0.1s
running new process
running as a Python program...
Filename: memory_profiler_decorator.py
Line # Mem usage Increment Occurrences Line Contents
=============================================================
3 49.5 MiB 49.5 MiB 1 @profile
4 def my_function():
5 57.0 MiB 7.5 MiB 1 a = [1] * (10 ** 6)
6 209.6 MiB 152.6 MiB 1 b = [2] * (2 * 10 ** 7)
7 57.2 MiB -152.4 MiB 1 del b
8 57.2 MiB 0.0 MiB 1 return a
	
!mprof plot
Copy
	
Using last profile data.
Figure(1260x540)

Ao executá-lo, é criado este gráfico

memory_profiler plot

Continuar lendo

Últimos posts -->

Você viu esses projetos?

Subtify

Subtify Subtify

Gerador de legendas para vídeos no idioma que você desejar. Além disso, coloca uma legenda de cor diferente para cada pessoa

Ver todos os projetos -->

Quer aplicar IA no seu projeto? Entre em contato!

Quer melhorar com essas dicas?

Últimos tips -->

Use isso localmente

Os espaços do Hugging Face nos permitem executar modelos com demos muito simples, mas e se a demo quebrar? Ou se o usuário a deletar? Por isso, criei contêineres docker com alguns espaços interessantes, para poder usá-los localmente, aconteça o que acontecer. Na verdade, se você clicar em qualquer botão de visualização de projeto, ele pode levá-lo a um espaço que não funciona.

Flow edit

Flow edit Flow edit

Edite imagens com este modelo de Flow. Baseado em SD3 ou FLUX, você pode editar qualquer imagem e gerar novas

FLUX.1-RealismLora

FLUX.1-RealismLora FLUX.1-RealismLora
Ver todos os contêineres -->

Quer aplicar IA no seu projeto? Entre em contato!

Você quer treinar seu modelo com esses datasets?

short-jokes-dataset

Dataset com piadas em inglês

opus100

Dataset com traduções de inglês para espanhol

netflix_titles

Dataset com filmes e séries da Netflix

Ver mais datasets -->