概述 在 Kubernetes 里,Resource 也叫资源,实际上是 Kubernetes API 里的一个 Endpoint 类型,比如内置的 Pod,也是一种资源类型。Custom Resources 自定义资源是在 Kubernetes 的默认配
概述 要在弹性计算平台上提交 PySpark 任务,首先需要认识一下提交任务时候的镜像文件。 默认提供的镜像是基于 Spark Master 分支上的最新代码。由于即将发布的 Spark 3.0 在镜像
概述 对比 Kyuubi 和 ThriftServer 工作原理。 对比 为什么要有 Spark Thrift Server? 按作业的生命周期维度分类,我们可以简单的将 Spark 任务简单的分为两种,常驻类型和非常驻类型
概述 新用户在 Linode 是有些优惠活动的,国内推荐新加坡、东京的服务器,也推荐使用官方的 linode-cli 来操作服务器,跟 aws-cli 类似。 创建主机 下面是通过命令行创建 Linode 主机的
概述 下面列举一些比较常用的 Linux 查看系统信息的命令。 系统 1 2 3 4 5 6 7 8 9 10 11 12 13 14 # 查看内核/操作系统/CPU信息 uname -a # 查看CPU信息 cat /proc/cpuinfo # 查
概述 针对一些非常长的命令,无论是 ps -ef 还是 ps aux 都是有可能被截断的,本文主要讲解一下如何避免这样的情况。 ps命令 针对一些容器的启动命令,常见的场