冷热数据分离的目的
1、ES集群异构，机器硬件资源配置不一，有高性能CPU和SSD存储集群，也有大容量的机械磁盘集群，比如我们的场景就是存放冷数据的集群，服务器都是多年前买的一批满配的4T Dell R70，但是新扩容的热节点机器均为DELL 高性能SSD磁盘和CPU的R740机...
2年前 (2020-06-27) 5426℃
8喜欢
impala的产生背景和应用场景
Impala由cloudera公司主导开发的大数据实时查询分析工具，宣称比原来基于MapReduce的HiveSQL查询速度提升3~90倍，且更加灵活易用。提供类SQL的查询语句，能够查询存储在HDFS、Kudu、HBase（实际生产环境中不用）...
3年前 (2019-08-20) 6471℃
23喜欢
什么是storm
Apache Storm是一个分布式实时大数据处理系统。Storm设计用于在容错和水平可扩展方法中处理大量数据。它是一个流数据框架，具有较高的吞吐率和较低的延迟。Storm是无状态的，它通过Apache ZooKeeper 管理分布式环境和集群状态。部署和开发S...
3年前 (2019-05-04) 4660℃
4喜欢
CCA介绍
Cloudera Certified Associate(CCA认证)是Cloudera面向初中级 Hadoop技术人员推出的认证考试。由于Cloudera的Hadoop发行版是目前 使用最广泛的版本，Cloudera的认证也因此被广泛承认。能够获得这类 证书对于技术...
4年前 (2019-02-26) 10678℃
9喜欢
CDH 安全
hadoop的HDFS和mapreduce均缺乏相应的安全机制，比如在HDFS中，用户只要知道某个block的blockID，便可以绕过NameNode直接从DataNode上读取该block，用户可以向任意DataNode上写block；在MapReduce中，用...
4年前 (2019-02-04) 9551℃
2喜欢
CDH和CM简介
什么是CDH
CDH（Cloudera’s Distribution Including Apache Hadoop）是Hadoop发行版的一种，是一套目前比较完整的、充分测试的Hadoop及其相关项目的发行版。CDH的基础组件均基于apache license...
4年前 (2019-02-04) 34401℃
35喜欢
前言
前两天，一台xenserver 服务器在扩容内存重启后无法远程登陆，还好可以通过idrac远程连接，但是xenserver的急救模式和centos进入方式略有不同，这里简单记录一下xenserver进入急救模式的方法。
进入急救模式
（1）服务器启动的时候，进入到菜单引导页...
4年前 (2019-01-04) 3414℃
1喜欢
Codis 介绍
简介
Codis 是一个分布式 Redis 解决方案, 对于上层的应用来说, 连接到 Codis Proxy 和连接原生的 Redis Server 没有显著区别 (有一些命令不支持), 上层应用可以像使用单机的 Redis 一样使用, Codis 底层会处理请...
4年前 (2018-11-14) 4749℃
3喜欢
需求
我们需要监控交换机warn以上级别的日志，只要有warn及以上级别的日志输入，就需要发送报警给运维，我们使用的监控平台是zabbix，所以监控就需要使用zabbix来实现，下面是配置方法，供各位参考。
交换机配置
交换机启动日志收集，配置日志信息发送到日志主机
info-c...
4年前 (2018-10-30) 10584℃
3喜欢
Harbor 介绍
Harbor 是企业级的docker镜像开源解决方案，由vmware公司开发。作为一个企业私有的registry服务器，harbor提供了更好的性能和安全，提升用户使用registry构建和运行环境传输镜像的效率。Harbor支持安装在多个registry节点...
4年前 (2018-10-15) 4498℃
2喜欢
