How to import json file to mongodb using pyspark (or python)?(如何使用pyspark(或python)将json文件导入到MongoDB?)
本文介绍了如何使用pyspark(或python)将json文件导入到MongoDB?的处理方法,对大家解决问题具有一定的参考价值,需要的朋友们下面随着小编来一起学习吧!
问题描述
我尝试在与MongoDB连接pysppark后,使用pyspark将文件中的json导入到MongoDB中,
我使用的是ubuntu,我的文件在(file:/home/user/Downloads/newd/hale.json)我是这样写的(‘home/user/downloads/newd/hale.json’))
import json
from pymongo import MongoClient
client = MongoClient('localhost', 27017)
with open('home/user/Downloads/newdb/hale.json') as f:
file = json.load(f)
JSON
您可以使用集合的方法INSERT_ONE或INSERT_MANY,如果它是在加载Python字典(最初是推荐答案对象)或Python字典(最初是JSON对象)的列表(最初是数组)之后加载JSON文件,则通过加载JSON文件来确定。
#in case of array of dictionaries
client['your_database']['your_collection'].insert_many(file)
#in case of dictionary
client['your_database']['your_collection'].insert_one(file)
这篇关于如何使用pyspark(或python)将json文件导入到MongoDB?的文章就介绍到这了,希望我们推荐的答案对大家有所帮助,也希望大家多多支持编程学习网!
沃梦达教程
本文标题为:如何使用pyspark(或python)将json文件导入到MongoDB?


猜你喜欢
- padding='same' 转换为 PyTorch padding=# 2022-01-01
- 如何将一个类的函数分成多个文件? 2022-01-01
- 分析异常:路径不存在:dbfs:/databricks/python/lib/python3.7/site-packages/sampleFolder/data; 2022-01-01
- python-m http.server 443--使用SSL? 2022-01-01
- 如何在 python3 中将 OrderedDict 转换为常规字典 2022-01-01
- 沿轴计算直方图 2022-01-01
- 使用Heroku上托管的Selenium登录Instagram时,找不到元素';用户名'; 2022-01-01
- python check_output 失败,退出状态为 1,但 Popen 适用于相同的命令 2022-01-01
- pytorch 中的自适应池是如何工作的? 2022-07-12
- 如何在 Python 的元组列表中对每个元组中的第一个值求和? 2022-01-01