日本免费高清视频-国产福利视频导航-黄色在线播放国产-天天操天天操天天操天天操|www.shdianci.com

學無先后，達者為師

網(wǎng)站首頁 編程語言 正文

python?memory_profiler庫生成器和迭代器內存占用的時間分析_python

作者：MAR-Sky ? 更新時間： 2022-08-20 編程語言

不進行計算時，生成器和list空間占用

import time
from memory_profiler import profile
@profile(precision=4)
def list_fun():
	start = time.time()
	total = ([i for i in range(5000000)])
	print('iter_spend_time:',time.time()-start)

@profile(precision=4)
def gent_func():
	gent_start = time.time()
	total = (i for i in range(5000000))

	print('gent_spend_time:',time.time()-gent_start)

iter_fun()
gent_func()

顯示結果的含義：第一列表示已分析代碼的行號，第二列（Mem 使用情況）表示執(zhí)行該行后 Python 解釋器的內存使用情況。第三列（增量）表示當前行相對于最后一行的內存差異。最后一列（行內容）打印已分析的代碼。
分析：在不進行計算的情況下，列表list和迭代器會占用空間，但對于生成器不會占用空間

當需要計算時，list和生成器的花費時間和占用內存

使用sum內置函數(shù)，list和生成器求和10000000個數(shù)據(jù)，list內存占用較大，生成器花費時間大概是list的兩倍

import time
from memory_profiler import profile
@profile(precision=4)
def iter_fun():
	start = time.time()
	total = sum([i for i in range(10000000)])
	print('iter_spend_time:',time.time()-start)
@profile(precision=4)
def gent_func():
	gent_start = time.time()
	total = sum(i for i in range(10000000))

	print('gent_spend_time:',time.time()-gent_start)

iter_fun()
gent_func()

比較分析，如果需要對數(shù)據(jù)進行迭代使用時，生成器方法的耗時較長，但內存使用方面還是較少，因為使用生成器時，內存只存儲每次迭代計算的數(shù)據(jù)。分析原因時個人認為，生成器的迭代計算過程中，在迭代數(shù)據(jù)和計算直接不斷轉換，相比與迭代器對象中先將數(shù)據(jù)全部保存在內存中（雖然占內存，但讀取比再次迭代要快），因此，生成器比較費時間，但占用內存小。

記錄數(shù)據(jù)循環(huán)求和500000個數(shù)據(jù)，迭代器和生成器循環(huán)得到時

總結：幾乎同時完成，迭代器的占用內存較大

import time
from memory_profiler import profile
itery = iter([i for i in range(5000000)])
gent = (i for i in range(5000000))
@profile(precision=4)
def iter_fun():
	start = time.time()
	total= 0
	for item in itery:
		total+=item
	print('iter:',time.time()-start)
@profile(precision=4)
def gent_func():
	gent_start = time.time()
	total = 0
	for item in gent:
		total+=item
	print('gent:',time.time()-gent_start)
iter_fun()
gent_func()

list，迭代器和生成器共同使用sum計算5000000個數(shù)據(jù)時間比較

總結：list+sum和迭代器+sum計算時長差不多，但生成器+sum計算的時長幾乎長一倍，

import time
from memory_profiler import profile
@profile(precision=4)
def list_fun():
	start = time.time()
	print('start!!!')
	list_data = [i for i in range(5000000)]
	total = sum(list_data)
	print('iter_spend_time:',time.time()-start)
@profile(precision=4)
def iter_fun():
	start = time.time()
	total = 0
	total = sum(iter([i for i in range(5000000)]))
	print('total:',total)
	print('iter_spend_time:',time.time()-start)

@profile(precision=4)
def gent_func():
	gent_start = time.time()
	total = sum(i for i in range(5000000))
	print('total:',total)
	print('gent_spend_time:',time.time()-gent_start)
list_fun()
iter_fun()
gent_func()

原文鏈接：https://blog.csdn.net/weixin_43794311/article/details/125462691

欄目分類
最近更新