草庐IT

4JJavaError

全部标签

python - MongoDB Spark 连接器 py4j.protocol.Py4JJavaError : An error occurred while calling o50. 加载

我以前能够加载这个MongoDB数据库,但现在收到一个我无法弄清楚的错误。以下是我如何开始我的Sparksession:spark=SparkSession.builder\.master("local[*]")\.appName("collab_rec")\.config("spark.mongodb.input.uri","mongodb://127.0.0.1/example.collection")\.config("spark.mongodb.output.uri","mongodb://127.0.0.1/example.collection")\.getOrCreate(

Windows系统运行pyspark报错:Py4JJavaError

运行pyspark时出现以下错误---------------------------------------------------------------------------Py4JJavaErrorTraceback(mostrecentcalllast)~\AppData\Local\Temp/ipykernel_34188/971983411.pyin---->1df_na.show()D:\Autism\python\Anaconda\lib\site-packages\pyspark\sql\dataframe.pyinshow(self,n,truncate,vertica

python - iPython notebook 中的 PySpark 在使用 count() 和 first() 时引发 Py4JJavaError

我在iPythonnotebook(pythonv.3.6)中使用PySpark(v.2.1.0)而不是在我的Mac(Sierra10.12.3Beta)中使用virtualenv。1.我通过在终端中拍摄来启动iPythonnotebook-PYSPARK_PYTHON=python3PYSPARK_DRIVER_PYTHON=ipythonPYSPARK_DRIVER_PYTHON_OPTS="notebook"/Applications/spark-2.1.0-bin-hadoop2.7/bin/pyspark2.将我的文件加载到SparkContext并确保其已加载->>>lin