pycharm編寫spark程序,導入pyspark包的3中實現(xiàn)方法
一種方法:
File --> Default Setting --> 選中Project Interpreter中的一個python版本-->點擊右邊鋸齒形圖標(設(shè)置)-->選擇more-->選擇剛才選中的那個python版本-->點擊最下方編輯(也就是增加到這個python版本下)-->點擊➕-->選中spark安裝目錄下的python目錄-->一路OK。
再次在python文件中寫入如下
from pyspark import SparkConf
如果上一種不管用,則采用下一種。
With PySpark package (Spark 2.2.0 and later)
另一種操作方法:
1.Go to File -> Settings -> Project Interpreter
2.Click on install button and search for PySpark
第三種方法(需要先下載spark安裝包):
下載spark安裝包,將spark主目錄中python目錄中的pyspark目錄拷貝到
/Library/Frameworks/Python.framework/Versions/3.5/lib/python3.5/site-packages
目錄中,在pycharm中
from pyspark import SparkContext
成功,可以愉快的用python編寫spark程序了。。。。
相關(guān)文章
Flask框架學習筆記之表單基礎(chǔ)介紹與表單提交方式
這篇文章主要介紹了Flask框架學習筆記之表單基礎(chǔ)介紹與表單提交方式,結(jié)合實例形式分析了flask框架中表單的基本功能、定義、用法及表單提交的get、post方式使用技巧,需要的朋友可以參考下2019-08-08Python實現(xiàn)批量繪制遙感影像數(shù)據(jù)的直方圖
這篇文章主要為大家詳細介紹了如何基于Python中g(shù)dal模塊,實現(xiàn)對大量柵格圖像批量繪制直方圖,文中的示例代碼講解詳細,感興趣的小伙伴可以了解一下2023-02-02