202112-16 Redis Cluster 集群搭建你会吗 三台机器201、202、203,每台机器装两个redis实例,构建rediscluster集群。1.安装添加redis-cluster目录,将redis压缩包拷贝到该目录下,解压压缩包。解压完后,将文件夹redis-5.0.3重命名为redis1。[root@test201redis-cluster]#mvredis-5.0.3redis1需要在redis1目录下使用make命令进行编译。[root@test201redis-cluster]#cdredis1[root@test201redis1]#make然后再执行cp命令拷贝另一份redis2。删... 继续阅读 >
202109-17 浅谈实时计算框架Flink集群搭建与运行机制 目录一、Flink概述1.1、基础简介1.2、应用场景二、环境部署2.1、安装包管理2.2、集群配置2.3、启动与停止2.4、Web界面三、开发入门案例3.1、数据脚本3.2、引入基础依赖3.3、读取文件数据3.4、读取端口数据四、运行机制4.1、FlinkClient4.2、JobManager4.3、TaskManager五、源代码地址一、Flink概述1.1、基础简介主要特性包括:批流一体化、精密的状态管理、事件时间支持以及精确一次的状态一致性保障等。Flink不仅可以运行在包括YA... 继续阅读 >
202011-17 Hadoop3.2.0集群搭建常见注意事项 一端口变化3.2.0版本中namenode页面端口是9870,datanode管理端口是8088,所以需要开放这两个端口还给web页面访问二butthereisnoYARN_RESOURCEMANAGER_USERdefined.Abortingoperationhadoop-env.sh中不光需要配置java-home,还需要声明下面这些用户变量,不然无法启动:exportJAVA_HOME=/usr/local/jdk/jdk1.8.0_191exportHDFS_NAMENODE_USER=rootexportHDFS_DATANODE_USER=rootexportHDFS_SECONDARYNAMENODE_USER=rootexpo... 继续阅读 >
202011-11 Kafka多节点分布式集群搭建实现过程详解 上一篇分享了单节点伪分布式集群搭建方法,本篇来分享一下多节点分布式集群搭建方法。多节点分布式集群结构如下图所示:为了方便查阅,本篇将和上一篇一样从零开始一步一步进行集群搭建。一、安装Jdk具体安装步骤可参考linux安装jdk。二、安装与配置zookeeper下载地址:https://www-us.apache.org/dist/zookeeper/stable/下载二进制压缩包zookeeper-3.4.14.tar.gz,然后上传到linux服务器指定目录下,本次上传目录... 继续阅读 >
202011-11 Kafka单节点伪分布式集群搭建实现过程详解 Kafka集群搭建分为单节点的伪分布式集群和多节点的分布式集群两种,首先来看一下单节点伪分布式集群安装。单节点伪分布式集群是指集群由一台ZooKeeper服务器和一台Kafkabroker服务器组成,如下图所示:为了搭建单节点Kafka集群,需要依次安装如下软件:安装Java-->安装ZooKeeper-->安装Kafka。一、安装Java可以参考linux安装jdk,来进行安装二、安装ZooKeeper下载地址:https://www-us.apache.org/dist/zookeeper/st... 继续阅读 >
202010-08 Docker+K8S 集群环境搭建及分布式应用部署 1.安装dockeryuminstalldocker#启动服务systemctlstartdocker.servicesystemctlenabledocker.service#测试dockerversion2.安装etcdyuminstalletcd-y#启动etcdsystemctlstartetcdsystemctlenableetcd#输入如下命令查看etcd健康状况etcdctl-Chttp://localhost:2379cluster-health#安装Kubernetesyuminstallkubernetes-y安装好后,编辑文件/etc/kubernetes/apiserver,将KUBE_ADMISSION_CONTROL后面的Serv... 继续阅读 >