请问大神们Python处理数据遇到memory error怎么办?

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了请问大神们Python处理数据遇到memory error怎么办?相关的知识,希望对你有一定的参考价值。

我已经在64位的4Gubuntu里跑Python了,可是还是memory error,出错的函数是这个:
def trace(node_sequence=[]):
while True:
l = []
i = j = 0
while i < len(node_sequence):
flag = 0
j = 1
while j < len(node_sequence):
if node_sequence[i][len(node_sequence[i])-1] == node_sequence[j][0]:
l = l + [node_sequence[i] + node_sequence[j][1:]]
del node_sequence[j]
flag = 1
else:
j += 1
if i == len(node_sequence):
break
if flag == 0:
l += [node_sequence[i]]
i += 1
if node_sequence == l:
break
node_sequence = l
l = []
for i in node_sequence:
t = []
for j in i:
t += [int(j)]
l += [t]
return l
我要做的事情举例如下:
假设有列表list=[[0, 16], [0, 34], [10, 15], [10, 28], [20, 35], [20, 58], [34, 13], [34, 18], [34, 20]]
用完这个函数之后得到[[0, 16], [0, 34,13], [0, 34,18],[0, 34,20,35],[0, 34,20,58],[10, 15], [10, 28]]
就是相当于如果list[i][1]=list[i][0]的话,就合并这两个元素,并且删掉重复项。
当我list长度达到2000时,语句“ l = l + [node_sequence[i] + node_sequence[j][1:]]”就报错memory error

items = [[0, 16], [0, 34], [10, 15], [10, 28], [20, 35], [20, 58], [34, 13], [34, 18], [34, 20]]
while 1:
    tmps = [(a, b) for a in items for b in items if a[-1] == b[0]]
    if not tmps:
        break
    tmps2 = [(a, b) for a in tmps for b in tmps if a[-1] == b[0]]
    for i in tmps2:
        tmps.remove(i[1])
    for a, b in tmps:
        items.append(a + b[1:])
        if a in items:
            items.remove(a)
        if b in items:
            items.remove(b)
print(items)

你的代码没法看, 直接给你重写了个。

如果items的元素能用元组表示的话,通过元组和集合,能更快点。

参考技术A 代码好凌乱。。。。对其下再贴出了吧。

Python判断图片是不是存在?

请问下各位大神,图片中如果需要判断是否存在的话,应该怎么添加语句?请大神们指点迷津!!
如果存在2.bmp,就去找到4.bmp并且单击
如果不存在2.bmp,则跳过这个找到4.bmp的操作
请问可以实现吗?

time.sleep(3)Pic(dm).大漠找图(0,0,1920,1080,'2.bmp')Pic(dm).大漠找图单击(0, 0, 1920, 1080, '4.bmp')

参考技术A try:except试一下

以上是关于请问大神们Python处理数据遇到memory error怎么办?的主要内容,如果未能解决你的问题,请参考以下文章

大神们,请问一下,如何用java操作实现数据从mysql到sqlite的导入导出

python编程时提示路径中含有空格,请问各路大神怎么处理。

Apache 配置webDav无法提交数据,配置如下,请问各位大神哪里出错了吗?

python大神们都在用的爬虫工具,你知道几个?

html中表格水平和垂直滚动,表头垂直不动,可以水平滚动,大神们请问怎么实现啊?

vmware workstation 虚拟机中的鼠标灵敏度太高了,轻轻一碰,鼠标就乱飞找不到,请问高手大神们如何解决