运行独立 pyspark 时出现 Windows 错误解决办法

 更新时间:2021年12月19日 10:09:25   作者:javaroad  
在本篇文章里小编给大家分享的是一篇关于运行独立 pyspark 时出现 Windows 错误解决办法,对此有需求的方法可以参考下。

我正在尝试在 Anaconda 中导入 pyspark 并运行示例代码。但是,每当我尝试在 Anaconda 中运行代码时,都会收到以下错误消息。

尝试连接到 Java 服务器时发生 ERROR:py4j.java_gateway:An 错误(127.0.0.1:53294)追溯(最近一次调用最近):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 send_command self.socket.sendall(command.encode(“ utf-8”) )) ConnectionResetError:[1]远程主机强行关闭了现有连接

在处理上述异常期间,发生了另一个异常:

追溯(最近一次通话最近):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,第 883 行,在 send_command response = connection.send_command(command)文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\send_command 行中的“ java_gateway.py”,第 1025 行,“发送时出错”,e,proto.ERROR_ON_SEND)py4j.protocol.Py4JNetworkError:发送时出错

在处理上述异常期间,发生了另一个异常:

追溯(最近一次呼叫最近):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,第 827 行,在_get_connection 连接= self.deque.pop() IndexError:从空双端队列弹出

在处理上述异常期间,发生了另一个异常:

追溯(最近一次呼叫最近):在开始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 963 ConnectionRefusedError:[2]无法建立连接,因为目标计算机被主动拒绝尝试连接到 Java 服务器(127.0.0.1:53294)回溯时发生 ERROR:py4j.java_gateway:An 错误(最近一次调用为最新):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 827,在_get_connection connection = self.deque.pop() IndexError :从空双端队列弹出

在处理上述异常期间,发生了另一个异常:

追溯(最近一次呼叫最近):在开始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 963 ConnectionRefusedError:[3]无法建立连接,因为目标计算机被主动拒绝尝试连接到 Java 服务器(127.0.0.1:53294)回溯时发生 ERROR:py4j.java_gateway:An 错误(最近一次调用为最新):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 827,在_get_connection connection = self.deque.pop() IndexError :从空双端队列弹出

在处理上述异常期间,发生了另一个异常:

追溯(最近一次呼叫最近):在开始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”(行 963)ConnectionRefusedError:[4]无法建立连接,因为目标计算机被主动拒绝尝试连接到 Java 服务器(127.0.0.1:53294)回溯时发生 ERROR:py4j.java_gateway:An 错误(最近一次调用为最新):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 827,在_get_connection connection = self.deque.pop() IndexError :从空双端队列弹出

在处理上述异常期间,发生了另一个异常:

追溯(最近一次呼叫最近):在开始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 963 ConnectionRefusedError:[5]无法建立连接,因为目标计算机被主动拒绝尝试连接到 Java 服务器(127.0.0.1:53294)回溯时发生 ERROR:py4j.java_gateway:An 错误(最近一次调用为最新):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 827,在_get_connection connection = self.deque.pop() IndexError :从空双端队列弹出

在处理上述异常期间,发生了另一个异常:

追溯(最近一次呼叫最近):在开始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 963 ConnectionRefusedError:[6]无法建立连接,因为目标计算机被主动拒绝它重新加载了模块:py4j.protocol,pyspark.sql.context,py4j.java_gateway,py4j.compat,pyspark.profiler,pyspark.sql.catalog,pyspark.context,pyspark.sql.group,pyspark.sql.conf,pyspark.sql.readwriter,pyspark.resultiterable,pyspark.sql,pyspark.sql.dataframe,pyspark.traceback_utils,pyspark.cloudpickle,pyspark.rddsampler,pyspark.accumulators,,pyspark.broadcast,pyspark.broadcast,pyspark.broadcast,pyspark.broadcast pyspark.conf,pyspark.serializers,pyspark.files,pyspark.join,pyspark.sql.streaming,pyspark.shuffle,pyspark,py4j.version,pyspark.sql.session,pyspark.sql.column,py4j.finalizer,py4j.java_collections,pyspark.status,pyspark.sql.window,pyspark.sql.utils,pyspark.storagelevel,pyspark.heapq3,py4j.signals,最近的回访()

文件“”,第 1 行,位于 runfile('C:/Users/hlee/Desktop/pyspark.py',wdir ='C:/Users/hlee/Desktop')

到此这篇关于运行独立 pyspark 时出现 Windows 错误解决办法的文章就介绍到这了,更多相关运行独立 pyspark 时出现 Windows 错误内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家!

相关文章

  • Flask处理POST请求的教程指南

    Flask处理POST请求的教程指南

    Flask处理POST请求的过程是一个相对直接且灵活的过程,它允许开发者根据需求接收、处理并响应客户端发送的数据,以下是对Flask如何处理POST请求的详细简述,需要的朋友可以参考下
    2024-10-10
  • python如何编写类似nmap的扫描工具

    python如何编写类似nmap的扫描工具

    这篇文章主要介绍了python如何编写类似nmap的扫描工具,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
    2020-11-11
  • Python实现本地缓存的几种方法小结

    Python实现本地缓存的几种方法小结

    缓存是一种常见的技术,用于存储重复请求的结果,Python 作为一种灵活的编程语言,提供了多种实现本地缓存的方法,本文将探讨 Python 中实现本地缓存的几种策略,并提供具体的代码示例,感兴趣的小伙伴跟着小编一起来看看吧
    2024-07-07
  • 深度学习环境配置之Anaconda安装和pip源方式

    深度学习环境配置之Anaconda安装和pip源方式

    这篇文章主要介绍了深度学习环境配置之Anaconda安装和pip源方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教
    2024-02-02
  • Python使用post及get方式提交数据的实例

    Python使用post及get方式提交数据的实例

    今天小编就为大家分享一篇关于Python使用post及get方式提交数据的实例,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧
    2019-01-01
  • python读取测试数据的多种方式

    python读取测试数据的多种方式

    本文主要介绍了python读取测试数据的多种方式,文中通过示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2021-08-08
  • Python中报错 “TypeError: ‘list‘ object is not callable”问题及解决

    Python中报错 “TypeError: ‘list‘ object is&n

    这篇文章主要介绍了Python中报错 “TypeError: ‘list‘ object is not callable”问题及解决方案,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教
    2023-09-09
  • python简单贪吃蛇开发

    python简单贪吃蛇开发

    这篇文章主要为大家详细介绍了python简单贪吃蛇开发,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2019-01-01
  • Python简单计算数组元素平均值的方法示例

    Python简单计算数组元素平均值的方法示例

    这篇文章主要介绍了Python简单计算数组元素平均值的方法,涉及Python简单数组遍历与数学运算相关操作技巧,需要的朋友可以参考下
    2017-12-12
  • python中f字符串f-string用法详解

    python中f字符串f-string用法详解

    f-string用大括号{}表示被替换字段,其中直接填入替换内容,本文给大家介绍python中f字符串f-string用法详解,感兴趣的朋友一起看看吧
    2023-10-10

最新评论