Apache Kylin的CDH部署

Apache Kylin

Apache Kylin是一个开源的分布式分析引擎,最初由eBay开发贡献至开源社区。它提供Hadoop之上的SQL查询接口及多维分析(MOLAP)能力以支持大规模数据,能够处理TB乃至PB级别的分析任务,能够在亚秒级查询巨大的Hive表,并支持高并发。

Kylin的安装

需要预先部署CDH集群,并在kylin官网下载Kylin的安装包
环境如下:

  • CDH 5.10.0
  • apache-kylin-1.6.0-cdh5.7-bin

下载并解压到opt目录下

1
2
tar zvxf apache-kylin-1.6.0-cdh5.7-bin.tar -C /opt
mv /opt/apache-kylin-1.6.0-cdh5.7-bin /opt/kylin-1.6.0
阅读更多

ESXi部署CDH集群

ESXi部署CDH集群机器Clone和网络配置(CentOS 6)

初步配置系统环境并克隆多台Slave,其中网络部分要单独配置如下:

1
2
3
4
5
6
7
8
9
// vi /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
TYPE=Ethernet
ONBOOT=yes
NM_CONTROLLED=no
BOOTPROTO=static
IPADDR=10.1.18.240 //240-244
NETMASK=255.255.255.0
GATEWAY=10.1.18.254

同时,需要为每一节点改为自定义的hostname如下:

1
2
3
// vi /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=hadoop00 //hadoop00-04
阅读更多