博客

create-time: 2018-12-18 18:22:02

pickle无法追写？

在一次爬取商品信息的时候，将结果使用pickle 存储，但是在提取的时候，总是只有一条信息。怀疑是不是pickle 无法追写，查看大量信息，包括官网文档，无结果。

>>> import pickle
>>> text = {'a':'b'}
>>> outpath = open(r'G:/text.pickle','ab+')
>>> pickle.dump(text,outpath)
>>> doc = {'123':'456','789':'000'}
>>> pickle.dump(doc,outpath)
>>> outpath.close()
>>> outpath = open(r'G:/text.pickle','rb')
>>> pickle.load(outpath)
{'a': 'b'}

pickle.load()

最后，在一个示例中找到了答案。pickle.load()一次只是导出了一次序列化的源数据，如果有追写，那么需要再次load()

>>> pickle.load(outpath)
{'123': '456', '789': '000'}

只有两个数据，再次load()会发生什么呢？

>>> pickle.load(outpath)
Traceback (most recent call last):
  File "<pyshell#19>", line 1, in <module>
    pickle.load(outpath)
EOFError: Ran out of input

加载了 空文件？ 可能是load() 对文件指针后面没有了数据，才显示加载了空文件。

输出

.pickle

文件全部信息

复原pickle.load(file) 文件。重新打开文件即可。先关闭或不关闭文件都行

>>> outpath.close() # 关闭与否不影响
>>> path =  open(r'G:/text.pickle','rb')  # 重新打开文件
>>> try:
	while True:
		print(pickle.load(path))
except:
	pass

{'a': 'b'}
{'123': '456', '789': '000'}