- html - 出于某种原因,IE8 对我的 Sass 文件中继承的 html5 CSS 不友好?
- JMeter 在响应断言中使用 span 标签的问题
- html - 在 :hover and :active? 上具有不同效果的 CSS 动画
- html - 相对于居中的 html 内容固定的 CSS 重复背景?
我正在为一些数据抓取网页,然后我想将它保存到 ZODB 数据库中。抓取:
STARTING_URL = "https://persoanefizice.otpbank.ro/ro/curs-valutar"
page = requests.get(STARTING_URL)
tree = html.fromstring(page.text)
z = tree.xpath('//tr/td[position()<5]/text()')
抓取是在一个脚本中完成的,保存到数据库中是在另一个脚本中通过调用它来完成的:
datainput.main(pres,nume,val_c,val_v,data_de_azi,'OTP')
当我尝试调用它时出现我的错误。给定以下代码:
STARTING_URL = "https://persoanefizice.otpbank.ro/ro/curs-valutar"
page = requests.get(STARTING_URL)
tree = html.fromstring(page.text)
z = tree.xpath('//tr/td[position()<5]/text()')
contor = 0
while contor < len(z) :
pres = z[contor]
nume = z[contor+1]
val_c = z[contor+2]
val_v = z[contor+3]
# pdb.set_trace()
datainput.main(pres,nume,val_c,val_v,data_de_azi,'OTP')
print z[contor],z[contor+1],z[contor+2],z[contor+3],data_de_azi,'OTP'
contor = contor + 4
我收到此错误消息:
TypeError: can't pickle ElementBase objects
完整回溯:
> datainput.main(pres,nume,val_c,val_v,data_de_azi,'OTP') File "/home/iulian/workspace/Python/Crawler/datainput.py", line 36, in main
> transaction.commit() File "/usr/local/lib/python2.7/dist-packages/transaction/_manager.py", line
> 111, in commit
> return self.get().commit() File "/usr/local/lib/python2.7/dist-packages/transaction/_transaction.py",
> line 280, in commit
> reraise(t, v, tb) File "/usr/local/lib/python2.7/dist-packages/transaction/_transaction.py",
> line 271, in commit
> self._commitResources() File "/usr/local/lib/python2.7/dist-packages/transaction/_transaction.py",
> line 417, in _commitResources
> reraise(t, v, tb) File "/usr/local/lib/python2.7/dist-packages/transaction/_transaction.py",
> line 391, in _commitResources
> rm.commit(self) File "/usr/local/lib/python2.7/dist-packages/ZODB/Connection.py", line 572,
> in commit
> self._commit(transaction) File "/usr/local/lib/python2.7/dist-packages/ZODB/Connection.py", line 628,
> in _commit
> self._store_objects(ObjectWriter(obj), transaction) File "/usr/local/lib/python2.7/dist-packages/ZODB/Connection.py", line 663,
> in _store_objects
> p = writer.serialize(obj) # This calls __getstate__ of obj File "/usr/local/lib/python2.7/dist-packages/ZODB/serialize.py", line 419,
> in serialize
> return self._dump(meta, obj.__getstate__()) File "/usr/local/lib/python2.7/dist-packages/ZODB/serialize.py", line 428,
> in _dump
> self._p.dump(state) File "/usr/lib/python2.7/copy_reg.py", line 70, in _reduce_ex
> raise TypeError, "can't pickle %s objects" % base.__name__ TypeError: can't pickle ElementBase objects
最佳答案
解决我问题的方法是将 z[] 数据转换为字符串,然后再将其保存在这样的变量中:
pres = str(z[contor])
nume = str(z[contor+1])
val_c = str(z[contor+2])
val_v = str(z[contor + 3])
关于python - 类型错误 : cant pickle ElementBase objects,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/33346973/
假设我有一个 A 类和一个派生自 A 的 B 类。我想 pickle/unpickle B 类的一个实例。A 和 B 都定义了 __getstate__/__setstate__ 方法(假设 A
似乎有两种方法可以将指标推向 Graphite /碳, 线路接收器 pickle 接收器 根据文档 http://graphite.readthedocs.org/en/1.0/feeding-car
Perforce命令行有一个特殊的开关-G,它使用python的“pickle”序列化格式可以使输出成为机器可读的。一般来说,实际上是这样吗? 例如,考虑p4 -G diff -duw3 的输出。
如何从 BytesIO 对象写入和读回 pickled 数据? 我尝试过: import io import cPickle as pickle s1 = "foo" bytes_io = io.By
我有两个文件: x.py class BF(object) def __init__(): . . def add(self,z): . . y.py from y
在 post昨天发帖,无意中发现改了__qualname__函数对 pickle 有意想不到的影响.通过运行更多测试,我发现在对函数进行 pickle 时,pickle不像我想的那样工作,改变 __q
为什么 pickle 重用现有的 Python 类“C”而不是从 pickle 字节重建类?有没有一种方法可以在没有副作用的情况下 pickle 和解 pickle ? 这是我的回复 session
我使用 mpi4py 将一些计算拆分到多个过程中。基本上我只是计算一些凸包的体积,这是我使用 tvtk 和 mayavi 创建的。 只有第一个过程导入这些库: ... if rank==0: f
我正在用 pygame 制作一个绘图程序,我想在其中为用户提供一个选项来保存程序的确切状态,然后在稍后重新加载它。在这一点上,我保存了我的全局字典的副本,然后遍历, pickle 每个对象。 pyga
所以,我有一个对象,里面有很多不可 pickle 的东西(pygame 事件、orderedDicts、时钟等),我需要将它保存到磁盘。 事情是,如果我可以让这个东西存储一个有进度的字符串(我只需要一
import pickle variety = ["sweet", "box", "cat"] shape = ["back","spear", "log"] pickleFile = open("
我有一个关于 gensim 的问题。我想知道在保存或加载模型(或多个模型)时是否建议或需要使用 pickle,因为我在 GitHub 上找到了可以使用的脚本。 mymodel = Doc2Vec(do
我正在使用 python3.6/。我使用 protocol=pickle.HIGHEST_PROTOCOL pickle 了我的文件 当我按如下方式加载时: with open('data.sav',
给定一个像这样的任意Pythonic对象: class ExampleObj(object): def __init__(self): self.a = 'a'
简介 我有一本具有以下格式的字典: dict_list = {'S0':[[list of int],[list of int]], 'S1':[[list of int],[list of int]
我想知道这个错误可能意味着什么: PicklingError: Can't pickle : attribute lookup __builtin__.function failed 我理解这与使用多
我对 python 变量持久性有点困惑,在我的代码中,我使用以下代码使模型参数在某些迭代期间持久化 with open('W_Hs_Hu_iter'+str(inx)+'.pickle', 'wb'
当对象通过其属性之一引用自身时,从带有插槽的类中挑选对象的正确方法是什么?这是一个简单的示例,使用我当前的实现,我不确定它是否 100% 正确: import weakref import pickl
我有数千个长 (8640) 整数列表元组。例如: type(l1) tuple len(l1) 2 l1[0][:10] [0, 31, 23, 0, 0, 0, 0, 0, 0, 0] l1[1][
我有一个对象 gui_project,它有一个属性 .namespace,这是一个命名空间字典。 (即从字符串到对象的字典。) (这在类似 IDE 的程序中使用,让用户在 Python shell 中
我是一名优秀的程序员,十分优秀!