Docker_pyspark 源码
建立基础容器 docker build -t pyspark。 此容器未安装GraphFrames软件包。 安装它的简单技巧如下所示 使用图框构建容器 使用以下方法将bash外壳放入容器中 docker run -it --rm --gpus all -v FOLDER_PATH / data /:/ mnt / pyspark / -w / mnt / pyspark / pyspark_graphframes:latest 通过指定所需的软件包来运行pyspark,迫使其下载它们 pyspark-打包graphframes:graphframes:0.6.0-spark2.3-s_2.
文件列表
Docker_pyspark-master.zip
(预估有个9文件)
Docker_pyspark-master
graphframes-0.6.0-spark2.3-s_2.11.jar
343KB
Dockerfile
3KB
scala-reflect-2.11.0.jar
4.22MB
README.md
988B
scala-logging-slf4j_2.11-2.1.2.jar
24KB
slf4j-api-1.7.7.jar
29KB
data
run_pyspark.py
2KB
Train.csv
11.1MB
暂无评论