编程语言
首页 > 编程语言> > python – 深度版本的sys.getsizeof [复制]

python – 深度版本的sys.getsizeof [复制]

作者:互联网

参见英文答案 > how do I measure the memory usage of an object in python?                                    2个
我想计算一个对象使用的内存. sys.getsizeof很棒,但很浅(例如,在列表中调用,它不包括列表元素占用的内存).

我想写一个sys.getsizeof的通用“深层”版本.我理解“深层”的定义有些含糊不清;我很满意definition followed by copy.deepcopy.

这是我的第一次尝试:

def get_deep_sizeof(x, level=0, processed=None):
    if processed is None:
        # we're here only if this function is called by client code, not recursively
        processed = set()
    processed.add(id(x))
    mem = sys.getsizeof(x)
    if isinstance(x, collections.Iterable) and not isinstance(x, str):
        for xx in x:
            if id(xx) in processed:
                continue
            mem += get_deep_sizeof(xx, level+1, processed)
            if isinstance(x, dict):
                mem += get_deep_sizeof(x[xx], level+1, processed)
    return mem

它遇到两个已知问题,以及未知数量未知的问题:

>我不知道如何以捕获所有链接对象的方式遍历通用容器.因此,我迭代使用in,并硬编码字典的情况(包括值,而不仅仅是键).显然,这不适用于像字典这样的其他类.
>我不得不硬编码排除str(这是一个可迭代的,但没有任何其他对象的链接).如果有更多这样的对象,这将会破坏.

我怀疑使用in不是一个好主意,但我不确定还能做什么.

解决方法:

我认为Pympler已经打败了你.

从他们的文件:

>>> from pympler.asizeof import asizeof
>>> obj = [1, 2, (3, 4), 'text']
>>> asizeof(obj)
176

如果您需要特定示例,可以找到asizeof here的源代码.

标签:python,python-3-x,memory,deep-copy
来源: https://codeday.me/bug/20190926/1820178.html