当前位置: 首页 > 图灵资讯 > 技术篇> spark (python远程开发调试)

spark (python远程开发调试)

来源:图灵教育
时间:2023-05-30 09:31:53

2.1 pycharm远程开发调试

  • 2.1.1 python版本一致

#所有版本都保持3.6.6#root cd /usr/local/python3//bin/pip3 list备注:[python模块的导入顺序是syss.path可以添加到syss中.path。当前目录->PYTHONPATH->安装目录,因此设置了PYTHONPATH,在这里自动引入模块安装。]#检查 /etc/profile Pyspark是否导入Pyspark? py4j

  • 2.2.2 pycharm配置

deployment配置tolstolst->Deployment->Configuration

spark (python远程开发调试)_python

spark (python远程开发调试)_spark_02

集成远程sdk

Setting->Project Interpreter

spark (python远程开发调试)_spark_03

Run configuration

spark (python远程开发调试)_pycharm_04

spark (python远程开发调试)_Deployment_05

pyspark本地介绍 py4j [本地开发调试需要]

spark (python远程开发调试)_开发调试_06