运行独立 pyspark 时出现 Windows 错误解决办法

 更新时间:2021年12月19日 10:09:25   作者:javaroad  
在本篇文章里小编给大家分享的是一篇关于运行独立 pyspark 时出现 Windows 错误解决办法,对此有需求的方法可以参考下。

我正在尝试在 Anaconda 中导入 pyspark 并运行示例代码。但是,每当我尝试在 Anaconda 中运行代码时,都会收到以下错误消息。

尝试连接到 Java 服务器时发生 ERROR:py4j.java_gateway:An 错误(127.0.0.1:53294)追溯(最近一次调用最近):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 send_command self.socket.sendall(command.encode(“ utf-8”) )) ConnectionResetError:[1]远程主机强行关闭了现有连接

在处理上述异常期间,发生了另一个异常:

追溯(最近一次通话最近):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,第 883 行,在 send_command response = connection.send_command(command)文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\send_command 行中的“ java_gateway.py”,第 1025 行,“发送时出错”,e,proto.ERROR_ON_SEND)py4j.protocol.Py4JNetworkError:发送时出错

在处理上述异常期间,发生了另一个异常:

追溯(最近一次呼叫最近):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,第 827 行,在_get_connection 连接= self.deque.pop() IndexError:从空双端队列弹出

在处理上述异常期间,发生了另一个异常:

追溯(最近一次呼叫最近):在开始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 963 ConnectionRefusedError:[2]无法建立连接,因为目标计算机被主动拒绝尝试连接到 Java 服务器(127.0.0.1:53294)回溯时发生 ERROR:py4j.java_gateway:An 错误(最近一次调用为最新):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 827,在_get_connection connection = self.deque.pop() IndexError :从空双端队列弹出

在处理上述异常期间,发生了另一个异常:

追溯(最近一次呼叫最近):在开始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 963 ConnectionRefusedError:[3]无法建立连接,因为目标计算机被主动拒绝尝试连接到 Java 服务器(127.0.0.1:53294)回溯时发生 ERROR:py4j.java_gateway:An 错误(最近一次调用为最新):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 827,在_get_connection connection = self.deque.pop() IndexError :从空双端队列弹出

在处理上述异常期间,发生了另一个异常:

追溯(最近一次呼叫最近):在开始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”(行 963)ConnectionRefusedError:[4]无法建立连接,因为目标计算机被主动拒绝尝试连接到 Java 服务器(127.0.0.1:53294)回溯时发生 ERROR:py4j.java_gateway:An 错误(最近一次调用为最新):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 827,在_get_connection connection = self.deque.pop() IndexError :从空双端队列弹出

在处理上述异常期间,发生了另一个异常:

追溯(最近一次呼叫最近):在开始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 963 ConnectionRefusedError:[5]无法建立连接,因为目标计算机被主动拒绝尝试连接到 Java 服务器(127.0.0.1:53294)回溯时发生 ERROR:py4j.java_gateway:An 错误(最近一次调用为最新):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 827,在_get_connection connection = self.deque.pop() IndexError :从空双端队列弹出

在处理上述异常期间,发生了另一个异常:

追溯(最近一次呼叫最近):在开始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 963 ConnectionRefusedError:[6]无法建立连接,因为目标计算机被主动拒绝它重新加载了模块:py4j.protocol,pyspark.sql.context,py4j.java_gateway,py4j.compat,pyspark.profiler,pyspark.sql.catalog,pyspark.context,pyspark.sql.group,pyspark.sql.conf,pyspark.sql.readwriter,pyspark.resultiterable,pyspark.sql,pyspark.sql.dataframe,pyspark.traceback_utils,pyspark.cloudpickle,pyspark.rddsampler,pyspark.accumulators,,pyspark.broadcast,pyspark.broadcast,pyspark.broadcast,pyspark.broadcast pyspark.conf,pyspark.serializers,pyspark.files,pyspark.join,pyspark.sql.streaming,pyspark.shuffle,pyspark,py4j.version,pyspark.sql.session,pyspark.sql.column,py4j.finalizer,py4j.java_collections,pyspark.status,pyspark.sql.window,pyspark.sql.utils,pyspark.storagelevel,pyspark.heapq3,py4j.signals,最近的回访()

文件“”,第 1 行,位于 runfile('C:/Users/hlee/Desktop/pyspark.py',wdir ='C:/Users/hlee/Desktop')

到此这篇关于运行独立 pyspark 时出现 Windows 错误解决办法的文章就介绍到这了,更多相关运行独立 pyspark 时出现 Windows 错误内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • Python实现短网址ShortUrl的Hash运算实例讲解

    Python实现短网址ShortUrl的Hash运算实例讲解

    这篇文章主要介绍了Python实现短网址ShortUrl的Hash运算,较为详细的分析了Python短网址运算的算法原理与相关实现技巧,需要的朋友可以参考下
    2015-08-08
  • python读取文本绘制动态速度曲线

    python读取文本绘制动态速度曲线

    这篇文章主要为大家详细介绍了python读取文本绘制动态速度曲线,多图同步显示,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2018-06-06
  • python爬虫租房信息在地图上显示的方法

    python爬虫租房信息在地图上显示的方法

    这篇文章主要介绍了python爬虫租房信息在地图上显示的方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧
    2019-05-05
  • python print无法打印\r的问题及解决

    python print无法打印\r的问题及解决

    这篇文章主要介绍了python print无法打印\r的问题及解决方案,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教
    2023-08-08
  • Python之多线程爬虫抓取网页图片的示例代码

    Python之多线程爬虫抓取网页图片的示例代码

    本篇文章主要介绍了Python之多线程爬虫抓取网页图片的示例代码,小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧
    2018-01-01
  • Python动态强类型解释型语言原理解析

    Python动态强类型解释型语言原理解析

    这篇文章主要介绍了Python动态强类型解释型语言原理解析,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
    2020-03-03
  • Pytorch模型迁移和迁移学习,导入部分模型参数的操作

    Pytorch模型迁移和迁移学习,导入部分模型参数的操作

    这篇文章主要介绍了Pytorch模型迁移和迁移学习,导入部分模型参数的操作,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧
    2021-03-03
  • Python csv文件的读写操作实例详解

    Python csv文件的读写操作实例详解

    这篇文章主要介绍了Python csv文件的读写操作实例详解,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
    2019-11-11
  • flask上传作品之dbm操作的实现

    flask上传作品之dbm操作的实现

    本文主要介绍了flask上传作品之dbm操作的实现,文中通过示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2022-04-04
  • Python中线程的MQ消息队列实现以及消息队列的优点解析

    Python中线程的MQ消息队列实现以及消息队列的优点解析

    消息队列(MQ,Message Queue)在消息数据传输中的保存作用为数据通信提供了保障和实时处理上的便利,这里我们就来看一下Python中线程的MQ消息队列实现以及消息队列的优点解析
    2016-06-06

最新评论