運行獨立 pyspark 時出現(xiàn) Windows 錯誤解決辦法
我正在嘗試在 Anaconda 中導入 pyspark 并運行示例代碼。但是,每當我嘗試在 Anaconda 中運行代碼時,都會收到以下錯誤消息。
嘗試連接到 Java 服務器時發(fā)生 ERROR:py4j.java_gateway:An 錯誤(127.0.0.1:53294)追溯(最近一次調用最近):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 send_command self.socket.sendall(command.encode(“ utf-8”) )) ConnectionResetError:[1]遠程主機強行關閉了現(xiàn)有連接
在處理上述異常期間,發(fā)生了另一個異常:
追溯(最近一次通話最近):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,第 883 行,在 send_command response = connection.send_command(command)文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\send_command 行中的“ java_gateway.py”,第 1025 行,“發(fā)送時出錯”,e,proto.ERROR_ON_SEND)py4j.protocol.Py4JNetworkError:發(fā)送時出錯
在處理上述異常期間,發(fā)生了另一個異常:
追溯(最近一次呼叫最近):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,第 827 行,在_get_connection 連接= self.deque.pop() IndexError:從空雙端隊列彈出
在處理上述異常期間,發(fā)生了另一個異常:
追溯(最近一次呼叫最近):在開始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 963 ConnectionRefusedError:[2]無法建立連接,因為目標計算機被主動拒絕嘗試連接到 Java 服務器(127.0.0.1:53294)回溯時發(fā)生 ERROR:py4j.java_gateway:An 錯誤(最近一次調用為最新):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 827,在_get_connection connection = self.deque.pop() IndexError :從空雙端隊列彈出
在處理上述異常期間,發(fā)生了另一個異常:
追溯(最近一次呼叫最近):在開始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 963 ConnectionRefusedError:[3]無法建立連接,因為目標計算機被主動拒絕嘗試連接到 Java 服務器(127.0.0.1:53294)回溯時發(fā)生 ERROR:py4j.java_gateway:An 錯誤(最近一次調用為最新):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 827,在_get_connection connection = self.deque.pop() IndexError :從空雙端隊列彈出
在處理上述異常期間,發(fā)生了另一個異常:
追溯(最近一次呼叫最近):在開始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”(行 963)ConnectionRefusedError:[4]無法建立連接,因為目標計算機被主動拒絕嘗試連接到 Java 服務器(127.0.0.1:53294)回溯時發(fā)生 ERROR:py4j.java_gateway:An 錯誤(最近一次調用為最新):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 827,在_get_connection connection = self.deque.pop() IndexError :從空雙端隊列彈出
在處理上述異常期間,發(fā)生了另一個異常:
追溯(最近一次呼叫最近):在開始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 963 ConnectionRefusedError:[5]無法建立連接,因為目標計算機被主動拒絕嘗試連接到 Java 服務器(127.0.0.1:53294)回溯時發(fā)生 ERROR:py4j.java_gateway:An 錯誤(最近一次調用為最新):文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 827,在_get_connection connection = self.deque.pop() IndexError :從空雙端隊列彈出
在處理上述異常期間,發(fā)生了另一個異常:
追溯(最近一次呼叫最近):在開始 self.socket.connect((self.address,self.port))中的文件“ C:\ spark\python\lib\py4j-0.10.3-src.zip\py4j\java_gateway.py”,行 963 ConnectionRefusedError:[6]無法建立連接,因為目標計算機被主動拒絕它重新加載了模塊:py4j.protocol,pyspark.sql.context,py4j.java_gateway,py4j.compat,pyspark.profiler,pyspark.sql.catalog,pyspark.context,pyspark.sql.group,pyspark.sql.conf,pyspark.sql.readwriter,pyspark.resultiterable,pyspark.sql,pyspark.sql.dataframe,pyspark.traceback_utils,pyspark.cloudpickle,pyspark.rddsampler,pyspark.accumulators,,pyspark.broadcast,pyspark.broadcast,pyspark.broadcast,pyspark.broadcast pyspark.conf,pyspark.serializers,pyspark.files,pyspark.join,pyspark.sql.streaming,pyspark.shuffle,pyspark,py4j.version,pyspark.sql.session,pyspark.sql.column,py4j.finalizer,py4j.java_collections,pyspark.status,pyspark.sql.window,pyspark.sql.utils,pyspark.storagelevel,pyspark.heapq3,py4j.signals,最近的回訪()
文件“”,第 1 行,位于 runfile('C:/Users/hlee/Desktop/pyspark.py',wdir ='C:/Users/hlee/Desktop')
到此這篇關于運行獨立 pyspark 時出現(xiàn) Windows 錯誤解決辦法的文章就介紹到這了,更多相關運行獨立 pyspark 時出現(xiàn) Windows 錯誤內容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持腳本之家!
相關文章
Python實現(xiàn)短網址ShortUrl的Hash運算實例講解
這篇文章主要介紹了Python實現(xiàn)短網址ShortUrl的Hash運算,較為詳細的分析了Python短網址運算的算法原理與相關實現(xiàn)技巧,需要的朋友可以參考下2015-08-08Python中線程的MQ消息隊列實現(xiàn)以及消息隊列的優(yōu)點解析
消息隊列(MQ,Message Queue)在消息數據傳輸中的保存作用為數據通信提供了保障和實時處理上的便利,這里我們就來看一下Python中線程的MQ消息隊列實現(xiàn)以及消息隊列的優(yōu)點解析2016-06-06