没有合适的资源？快使用搜索试试~ 我知道了~

文库首页开发技术其它docker-spark-cluster：在Docker容器上运行的Spark集群设置

docker-spark-cluster：在Docker容器上运行的Spark集群设置

共16个文件

sh：5个

xml：4个

dockerfile：2个

docker

scala

big-data

spark

hadoop

需积分: 10 1 下载量 163 浏览量 2021-02-05 23:29:26 上传评论收藏 8KB ZIP 举报

温馨提示

docker-spark-cluster：在Docker容器上运行的Spark集群设置

资源推荐

资源详情

资源评论

spark-standalone-cluster-on-docker：通过在Docker上使用JupyterLab接口构建自己的集群，学习Scala，Python（PySpark）和R（SparkR）中的Apache Spark

spark-standalone-cluster-on-docker：通过在Docker上使用JupyterLab接口构建自己的集群，学习Scala，Python（PySpark）和R（SparkR）中的Apache Spark

Spark-HDFS：在多个VM上运行的Docker容器集群，执行SQL Batch和Streaming脚本

火花HDFS 在多个VM上运行的Docker容器集群，执行SQL Batch和Streaming脚本

docker-spark-cluster:适用于测试环境的简单Spark独立集群

带有Docker和docker-compose的Spark集群一般的一个适合您的测试环境的简单Spark独立集群。泊坞窗-为您的Spark开发环境编写远离您的解决方案。 Docker compose将创建以下容器：容器 IP地址火花大师 10.5.0.2 火花工人1 10.5.0.3 spark-worker-2 10.5.0.4 火花工人3 10.5.0.5 安装以下

cluster-api-provider-docker:使用Docker容器作为基础提供程序的Cluster API Provider实现。本地更改集群API！

:warning: 旧版存储库。当前代码已移动该存储库仅接受错误修复。所有新开发都在存储库中完成。群集API提供程序Docker（CAPD） CAPD是使用Docker的Cluster API项目的基础结构提供程序的参考实现。这是运行群集API管理群集所需的三个组件之一。有关完整概述，请参阅提供的文档，该文档使用CAPD作为示例基础结构提供程序。 CAPD目标成为基础结构提供程

ansible-kubernetes集群：在Kubernetes集群上部署Kubernetes，JupyterHub，Jupyter Enterprise Gateway和Spark的Ansible角色

在Kubernetes上运行Spark可以利用其动态资源调度和自我修复特性，使得Spark应用更易于管理和扩展。这个Ansible角色的主要目标就是将上述组件集成到一个自动化流程中，包括： 1. **部署Kubernetes集群**：使用...

DigitRecognizer:基于多层感知器分类器的Spark数字识别应用

建立Hadoop / Spark集群如果您是第一次运行该应用程序，则需要构建集群的Docker映像： ./build-images.sh 然后，使用以下命令启动Hadoop集群： ./start-cluster.sh 一旦集群运行，您将在主容器中运行bash shell。...

Spark环境搭建——on yarn集群模式

本篇博客，Alice为大家带来关于...注意：不需要集群，因为把Spark程序提交给YARN运行本质上是把字节码给YARN集群上的JVM运行，但是得有一个东西帮我去把任务提交上个YARN，所以需要一个单机版的Spark，里面的有spark-sh

Cluster视频分布式必备工具教程

6. **Docker**：Docker提供了一种标准化的容器化方式，将视频处理应用及其依赖打包，方便在不同环境下快速部署和扩展。 7. **FFmpeg**：FFmpeg是一个强大的开源命令行工具，用于视频、音频的转换、剪辑和格式转换。...

贪心算法---最短路径(Dijkstra算法)---一场说走就走的旅行

#include<bits/stdc++.h> using namespace std; const int N=100;//城市的个数可修改 const int INF=1e7;//初始化无穷大为10000000 int mp[100][100];//,dist[N],p[N],n,m;//n为城市的个数，m为城市间路线的条数 int dist[N],p[N],n,m; bool f...

wlan n/ac waveform gen

wlan n/ac waveform gen

收起资源包目录

docker-spark-cluster-master.zip （16个子文件）

docker-spark-cluster-master

spark

config

yarn-site.xml 1KB

workers 18B

shellrc 489B

mapred-site.xml 1KB

core-site.xml 526B

hadoop-env.sh 121B

sparkcmd.sh 567B

hdfs-site.xml 632B

Dockerfile 2KB

build.sh 99B

cluster.sh 2KB

quick 261B

.gitignore 37B

README.md 2KB

scalabase

Dockerfile 740B

build.sh 28B

共 16 条

评论收藏

内容反馈

资源评论

资源反馈

评论星级较低，若资源使用遇到问题可联系上传者，3个工作日内问题未解决可申请退款~

易行健

粉丝: 40

上传资源快速赚钱

我的内容管理展开

我的资源快来上传第一个资源

我的收益

登录查看自己的收益

我的积分登录查看自己的积分

我的C币登录后查看C币余额

我的收藏

我的下载

下载帮助

前往需求广场，查看用户热搜

docker-spark-cluster：在Docker容器上运行的Spark集群设置

spark-standalone-cluster-on-docker：通过在Docker上使用JupyterLab接口构建自己的集群，学习Scala，Python（PySpark）和R（SparkR）中的Apache Spark

Spark-HDFS：在多个VM上运行的Docker容器集群，执行SQL Batch和Streaming脚本

docker-spark-cluster:适用于测试环境的简单Spark独立集群

cluster-api-provider-docker:使用Docker容器作为基础提供程序的Cluster API Provider实现。 本地更改集群API！

docker-mesos-spark-shell:用于在Mesos集群上创建Spark Shell的Docker映像

基于docker的Spark高可靠集群搭建

spark_cluster_by_docker

docker-spark

spark-cluster-docker

搭建spark环境

spark-scala-jupyter：Jupyter笔记本服务器，准备在远程Spark主服务器上运行带有Scala内核的Spark

spark-essentials:Rock with scala的Rock the JVM Spark Essentials课程的官方存储库

领科云基于Mesos和Docker的企业移动应用实践分享

【hadoop&spark】资源

spark-optimization:Rock with Scala的Rock the JVM Spark Optimization官方库

docker-hdp-spark:带有 Hortonworks HDP 2.1 和 Apache Spark 1.3.0 的 Docker 容器

spark_docker：用于本地部署和测试的Spark Docker容器

eventstore-cluster-docker-compose:Docker构成事件存储​​集群的内部Docker网络设置

docker-spark-job-server:包含 Spark 作业服务器的 Docker 容器

docker_rabbitmq_cluster:显示如何设置在容器中运行的 RabbitMQ 服务器集群的示例

Spark集群环境搭建.md

Spark环境搭建

spark集群部署

Spark运行架构

mesos-spark:在 mesos 集群上运行 spark 作业

ansible-kubernetes集群：在Kubernetes集群上部署Kubernetes，JupyterHub，Jupyter Enterprise Gateway和Spark的Ansible角色

DigitRecognizer:基于多层感知器分类器的Spark数字识别应用

Spark环境搭建——on yarn集群模式

Cluster视频分布式必备工具教程

贪心算法---最短路径(Dijkstra算法)---一场说走就走的旅行

wlan n/ac waveform gen

最新资源

cluster-api-provider-docker:使用Docker容器作为基础提供程序的Cluster API Provider实现。本地更改集群API！

eventstore-cluster-docker-compose:Docker构成事件存储集群的内部Docker网络设置