1.1 修改系统配置 [root@node16 security]# vim /etc/security/limits.conf * soft nofile 65536 * hard nofile 65536 * soft nproc 2048 * hard nproc 4096 [root@node16 security]# vim /etc/sysctl.conf vm.max_map_
以一个三台机器(storm01:192.168.3.250,storm02:192.168.3.251,storm03:192.168.3.252)的kafka集群部署为例。 详细步骤: kafka集群依赖Zookeeper集群,首先要保证Zookeeper集群正常运行。 1. 解压 tar zxvf kafka_2.9.2-0.8.1.1.tgz; mv kafka_2.9.2-0.8.1.1
完成《大数据组件安装环境准备》章节操作。 1 yum 安装 1.1 安装 zookeeper yum install zookeeper 1.2 修改配置文件 cd /usr/lib/zookeeper/conf mv zoo_sample.cfg zoo.cfg vim zoo.cfg dataDir=/var/lib/zookeeper/data //data 文件,自定义,需要自己
(1)mapred-site.xml <property> <name>mapreduce.framework.name</name> <value>yarn</value> </property> (2)yarn-site.xml <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_s
大数据基本环境。 Zookeeper 集群正常运行。 2. 安装 将storm解压到/opt目录下。(master) tar zxvf apache-storm-0.9.4.tar.gz mv apache-storm-0.9.4 storm 修改 conf/storm.yaml 配置文件,如参考资料。(master) 将配置好的安装文件同步到其他的slave01、slave02节点上。(mas
采用最简配置进行安装。 1. yum 安装 1.1 安装组件 yum install hadoop-hdfs-namenode # 在将要运行 NameNode 的节点上安装。 yum install hadoop-hdfs-datanode # 在将要运行 DataNode 的节点上安装。 1.2 修改配置文件 使用 yum 安装的 cdh 版本 hdfs 配置文件在 /etc/hadoop/
2. 主从安装 redis解压到/opt目录下 tar zxvf redis-2.8.17.tar.gz 编译 make 安装 make install 修改配置文件 redis.conf port 12002 //(将原来端口号6379改为12002) dir /redisData/12002 //(指定持久化位置) 启动redis red
1.1 前置条件 完成《大数据组件安装环境准备》章节操作。 完成《HDFS安装》章节操作。 完成《Zookeeper 安装》章节操作。 1.2 安装组件 yum install hbase hbase-master hbase-regionserver –y #在每台机器上安装 hbase-master 和 hbase-regionserver,按需安装即可,需要启动该进程则安装。 1.3 修
1.1 运行命令 # cd /home/wlj # wget http://downloads.mongodb.org/linux/mongodb-linux-x86_64-rhel70-3.2.12.tgz?_ga=1.28205556.912007513.1487138979 # tar -zxvf mongodb-linux-x86_64-rhel70-3.2.12.gz # mv mong
HAWQ安装方式之RPM包安装
集群规划为3个节点,每个节点的ip、主机名和部署的组件分配如下: ip 主机名 组件 192.168.117.51 Goblin_01 NameNode、Hive、ResourceManager、impala 192.168.117.52 Goblin_02 DataNode、SSNameNode、NodeManager、impala 192.168.117.53 Goblin_03 DataNo
yum install hive
//下载mysql5.5的安装包。这里下载的是: MySQL-5.5.39-2.el6.x86_64.rpm-bundle.tar //解压mysql5.5的安装包 tar –xvf MySQL-5.5.39-2.el6.x86_64.rpm-bundle.tar 注意的是要切换的root用户,使用su root切换用户,解压之后就是出现了好多的rpm文件,在这些文件中我们要安装的就是下面的3个:
1.1 环境准备 准备3台主机,添加pgxl用户并设置用户密码,下载源码(下载链接),编译安装,配置pgxl用户在三台物理节点之间免密。以下操作1)~5)在所有机器上运行。 1.1.1 机器与服务对应关系 IP 主机名 安装服务 192.168.129.100 Master gtm 192.168.129.102 Slave01 datanode,coordinator,gtm_proxy 192
书籍 FuelPHP Introduction (Hayakawa Seiji, in Japanese) FuelPHP Guide (v1.5.1) (Nitin Reddy Katkam) Learning FuelPHP for Effective PHP Development (Ross Tweedie) - 评介 教学 FuelPHP crash course (UCF) FuelP