概述 作为服务端编程的程序员,尤其是大量用到存储,或者是存储系统的管理人员,应该要对服务器的磁盘保持关于性能的最基本的思考和测试的习惯。 操作 下
概述 不管是作为大数据平台,做基础架构还是做数据开发的同学,不免都会与运维同学有些冲突,甚至如果你想调研一个新的技术或者框架的时候,限制还很多
概述 近期需要接入公司内部的 CAS 服务,但是因为公司内的测试环境不太丝滑,为了可以在本地进行一些测试,因此考虑在本地部署一套 CAS 的服务,以此作为验证
概述 安装 ES/Logstash/Kibana 下载 ES,注意版本,测试期间最好将 ES 和 Kibana 和 Logstash 保持一致的版本。然后启动 ES。 1 2 3 4 5 6 7 8 9 10 11 12 # 下载脚本 wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.3.0.zip sha1sum elasticsearch-5.3.0.zip unzip elasticsearch-5.3.0.zip cd elasticsearch-5.3.0/ # 运行
概述 资源调度 国内市面上的专用的大数据离线计算产品,一般都是采用 Hadoop 集群托管的方式,此类型的产品,大部分都是基于 YARN 来资源调度的。 国外已经有云厂商
一句话概括HBase HBase 是一个分布式的、可伸缩的数据存储,其支持行级别的数据更新,快速查询和行级事务(不支持多行事务)。相比 Hive,Hive