我试图用PyMongo将一个文档(本例中是twitter信息)插入到Mongo数据库中。
如下所示,tweets\u listdt[0]与
{
'created_at': u'Sun Aug 03 17:07:24 +0000 2014',
'id': 2704548373,
'name': u'NoSQL',
'text': u'RT @BigdataITJobs: Data Scientist \u2013 Machine learning, Python, Pandas, Statistics @adam_rab in London, United Kingdom http://t.co/pIIJVPCuN8\u2026'
}
但我无法将tweets_listdt[0]保存到我的Mongodb中,而我可以使用后面的一个。
In[529]: tweets_listdt[0] == {'created_at': u'Sun Aug 03 17:07:24 +0000 2014',
'id': 2704548373,
'name': u'NoSQL',
'text': u'RT @BigdataITJobs: Data Scientist \u2013 Machine learning, Python, Pandas, Statistics @adam_rab in London, United Kingdom http://t.co/pIIJVPCuN8\u2026'}
Out[528]: **True**
这个失败了:
In[530]: tweetsdb.save(tweets_listdt[0])
tweetsdb.save({'created_at': u'Sun Aug 03 17:07:24 +0000 2014',
'id': 2704548373,
'name': u'NoSQL',
'text': u'RT @BigdataITJobs: Data Scientist \u2013 Machine learning, Python, Pandas, Statistics @adam_rab in London, United Kingdom http://t.co/pIIJVPCuN8\u2026'})
Traceback (most recent call last):
File "D:\Program Files\Anaconda\lib\site-packages\IPython\core\interactiveshell.py", line 3035, in run_code
exec(code_obj, self.user_global_ns, self.user_ns)
File "<ipython-input-529-b1b81c04d5ad>", line 1, in <module>
tweetsdb.save(tweets_listdt[0])
File "D:\Program Files\Anaconda\lib\site-packages\pymongo\collection.py", line 1903, in save
check_keys, manipulate, write_concern)
File "D:\Program Files\Anaconda\lib\site-packages\pymongo\collection.py", line 430, in _insert
gen(), check_keys, self.codec_options, sock_info)
InvalidDocument: **Cannot encode object: 2704548373**
这个没问题:
In[531]: tweetsdb.save({'created_at': u'Sun Aug 03 17:07:24 +0000 2014',
'id': 2704548373,
'name': u'NoSQL',
'text': u'RT @BigdataITJobs: Data Scientist \u2013 Machine learning, Python, Pandas, Statistics @adam_rab in London, United Kingdom http://t.co/pIIJVPCuN8\u2026'})
Out[530]: **ObjectId('554b38d5c3d89c09688b1149')**
谢谢伯尼。我使用的PyMongo版本是3.0.1。
下面是对id数据类型的检查:
In[36]:type(tweets_listdt[0]['id'])
Out[37]:long
如果我只是使用:
for tweet in tweets_listdt:
tweetsdb.save(tweet)
会发生上述错误。
但如果我再加上这句话,一切都很好:
tweet['id'] = int(tweet['id'])
当我直接指派
tweets_listdtw = {'created_at': u'Sun Aug 03 17:07:24 +0000 2014',
'id': 2704548373,
'name': u'NoSQL',
'text': u'RT @BigdataITJobs: Data Scientist'}
tweetsdb.save(tweets\u listdtw)正在工作,并且
print type(tweets_listdtw['id'])
<type 'numpy.int64'>
又弄糊涂了。。。所以长类型当然是可以的……但是为什么在我把'id'改成int之后,保存就生效了?
你的问题是
numpy.int64
对MongoDB来说是陌生的。我也有同样的问题。解决方案是将有问题的值转换为MongoDB将理解的数据类型,下面是我如何在代码中转换这些有问题的值的示例:
我希望这对你有帮助。
我很喜欢奥兹的回答。要使用python 3对其进行扩展,请执行以下操作:
它对那些嵌套文档有递归,我认为Python3将所有字符串存储为unicode,所以我删除了编码部分。
相关问题 更多 >
编程相关推荐