概述 大数据数据仓库是基于HIVE构建的数据仓库,分布文件系统为HDFS,资源管理为Yarn,计算引擎主要包括MapReduce/Tez/Sp
概述 TenC Spark 目前支持的 Spark 2.2.0 on K8S 的 Fork 已经不再维护了,目前社区 3.0.0(SNAPSHOT) 对于 K8S 的支持已经比较稳定了,而且提供了像 Hadoop ConfigMap 和 Secret 的配置和
概述 目前 TenC Spark 存在多版本 Spark 共存的问题,如何合理更新和管理是非常重要的。 弹性计算平台 SCR TenC Spark 2.2 Spark 2.3及以上 PySpark py2和py3 运行方式 Spark Operator spark-submit DONE SCR 提供
概述 本文是笔者在前司建设的基于Kubernetes构建的弹性计算平台集成Spark的相关使用文档,我们是国内最早基于Kubernetes运行
概述 TenC Spark 是我司根据 Spark 以及 Kubernetes 还有 Spark Operator 的使用情况需改的版本,本文简要说明一下使用的问题,虽然跟原生的 Spark 有一定区别,版本也有一定的差异了,但是不影
概述 本文是笔者在前司建设的基于Kubernetes构建的弹性计算平台集成Spark的相关使用文档,我们是国内最早基于Kubernetes运行