1. 程式人生 > >Zookeeper 叢集搭建--單機偽分散式叢集

Zookeeper 叢集搭建--單機偽分散式叢集

一. zk叢集,主從節點,心跳機制(選舉模式)

二、Zookeeper叢集搭建注意點

1、配置資料檔案 myid 1/2/3 對應 server.1/2/3

2、通過./zkCli.sh -server [ip]:[port] 檢測叢集是否配置成功

三、單機環境搭建叢集

1、拷貝另外兩個zk

拷貝Zookeeper到zookeeper-3.4.13_2

cp zookeeper-3.4.13 zookeeper-3.4.13_2 -rf

拷貝Zookeeper到zookeeper-3.4.13_3

cp zookeeper-3.4.13 zookeeper-3.4.13_3 -rf

2、在第一個Zookeeper中修改zoo.cfg檔案

vi zoo.cfg

增加

server.1=127.0.0.1:2888:3888
server.2=127.0.0.1:2889:3889
server.3=127.0.0.1:2890:3890

 

注意:如果是埠中為開放這些介面,請配置安全策略進行開發。如阿里雲上配置安全策略

埠號為2181

然後在/usr/local/zookeeper-3.4.13/dataDir路徑下建立myid檔案,裡面的內容為1

同理在第二個和第三個Zookeeper中修改

server.1=127.0.0.1:2888:3888
server.2=127.0.0.1:2889:3889
server.3=127.0.0.1:2890:3890

埠分別為2182和2183

dataDir和dataLogDir分別改成對應資料夾路徑

在對應的dataDir建立myid檔案,內容分別為2和3。

然後分別啟動三個Zookeeper。

3. 連線

./zkCli.sh -server localhost:2181

同理

./zkCli.sh -server localhost:2182

在2181建立資料

然後連線2182 

./zkCli.sh -server localhost:2182

2182的埠下也有data資料

同理2183的埠下也有data資料

這樣單機環境偽分散式叢集建立完畢。

相關推薦

Zookeeper 叢集搭建--單機分散式叢集

一. zk叢集,主從節點,心跳機制(選舉模式) 二、Zookeeper叢集搭建注意點 1、配置資料檔案 myid 1/2/3 對應 server.1/2/3 2、通過./zkCli.sh -server [ip]:[port] 檢測叢集是否配置成功 三、單機環境搭建叢集 1、拷貝另外兩個zk

Hadoop單機/分散式叢集搭建(新手向)

此文已由作者朱笑笑授權網易雲社群釋出。 歡迎訪問網易雲社群,瞭解更多網易技術產品運營經驗。 本文主要參照官網的安裝步驟實現了Hadoop偽分散式叢集的搭建,希望能夠為初識Hadoop的小夥伴帶來借鑑意義。 環境: (1)系統環境:CentOS 7.3.1611 64位 (2)J

搭建hadoop分散式叢集環境過程中遇見的問題總結

1、網路配置問題: 在centos7中配置網路環境後,本機(win10系統)與虛擬機器centos7網路不通(本機可以ping通虛擬機器,但是虛擬機器ping不通本機); 解決方式: 方式1:檢視本機win10系統的防火牆是否關閉,若沒有,直接關閉win10系統的防火牆即可; 方式2

hadoop叢集環境搭建分散式叢集環境搭建

搭建叢集的模式有三種 1.偽分散式:在一臺伺服器上,啟動多個執行緒分別代表多個角色(因為角色在叢集中使用程序表現的) 2.完全分散式:在多臺伺服器上,每臺伺服器啟動不同角色的程序,多臺伺服器構成叢集 node01:NameNode node02:

hadoop叢集搭建分散式和完全分散式

## Hadoop叢集搭建 一、軟體及環境準備 安裝JDK 查詢是否安裝jdk: rpm -qa |grep java 如果安裝版本小於1.7,解除安裝該版本 rpm -e 軟體包 將上傳好的jdk解壓並配置環境變數

【HDFS篇】搭建hadoop分散式叢集

所謂偽分散式,就是單機模擬多臺伺服器搭建的過程。只是每個角色都是以程序的方式啟動。 基本流程如下: 一,作業系統環境 依賴軟體ssh,jdk 環境的配置 java_home 免金鑰 時間同步 hosts,hostname 二,hadoop部署

億級Web系統搭建——單機分散式叢集

導讀】徐漢彬曾在阿里巴巴和騰訊從事4年多的技術研發工作,負責過日請求量過億的Web系統升級與重構,目前在小滿科技創業,從事SaaS服務技術建設。  大規模流量的網站架構,從來都是慢慢“成長”而來。而這個過程中,會遇到很多問題,在不斷解決問題的過程中,Web系統變得越來越

搭建真正的zookeeper叢集 搭建zookeeper分散式叢集

  搭建zookeeper偽分散式叢集 zookeeper是Hadop Ecosystem中非常重要的元件,它的主要功能是為分散式系統提供一致性協調服務, 提供的功能包括配置維護,域名服務,分散式同步和組服務。 zookeeper的目標就是封裝好複雜易出錯的關鍵服務,將簡單易用的介面和效能高

redis單機分散式叢集搭建

    繼上一篇redis單機伺服器搭建成功之後,按如下方式進行叢集搭建。    搭建一個最小的叢集需要6臺機器(由節點投票機制決定至少需要3臺主節點,另外為了高可用每個主節點至少要備一個從節點,所以總共需要6個節點。這裡6個節點全部設在一臺機上,通過埠號來分別。實現偽分散式

Kafka 單機分散式叢集搭建

  感覺自己越來越像個運維了,真的是所有的分散式的中介軟體基本都搭建了一遍   不得了了。 好 廢話少說 , 還是來走Kafka 吧 , 經歷了Rocket MQ , Kafka 的搭建真的是簡單的不知道多少倍 , RocketMQ  實在 是太麻煩了。 還是老方

zookeeper分散式叢集搭建(centOS7)

zookeeper版本:zookeeper-3.4.10.tar.gz 下載好zookeeper之後,放到/usr/local目錄下 1.建立zookeeper目錄,並在zookeeper目錄下,建立三個資料夾,分別為server1,server2,serv

Zookeeper分散式叢集環境搭建過程

前言 ZooKeeper是一個分散式的,開放原始碼的分散式應用程式協調服務,目前很多架構都基於它來實現配置維護、域名服務、分散式同步、組服務等等。 ZooKeeper的基本運轉流程: 1.選舉Leader 2.同步資料 3.選舉Leader過程中演算法

搭建zookeeper分散式叢集

偽分散式叢集的意思就是在同一臺機子上部署多個zookeeoer,但是他們的埠不一樣。 1.安裝zookeeper 到/usr/local 2.cd /usr/local/zookeeper 3.cd conf 4.vim zoo.cfg 在最下面新增如下內容 server.1=192.168.

Hadoop單機分散式叢集搭建(十分詳細)

原文地址:http://blog.csdn.net/dr_guo/article/details/50886667 下面我就一邊搭建一邊寫怎麼搭建Hadoop偽分佈模式。 1.下載jdk並安裝 去官網下就可以了,下完之後把檔案移到/o

大資料之Hadoop學習(環境配置)——Hadoop分散式叢集搭建

title: Hadoop偽分散式叢集搭建 date: 2018-11-14 15:17:20 tags: Hadoop categories: 大資料 點選檢視我的部落格: Josonlee’s Blog 文章目錄 前言準備 偽分

hadoop分散式叢集搭建

叢集配置: jdk1.8.0_161 hadoop-2.6.1 linux系統環境:Centos6.5 建立普通使用者  dummy  Hadoop偽分散式叢集搭建: 為普通使用者新增sudo許可權: 設定之前必須得安裝sudo,先su  輸入密碼進入root使用者

分散式叢集搭建

在B站找的搭建Hadoop的視訊,以下是步驟 感覺很簡練,有一篇部落格講的更加詳細 1.準備好jar包和Hadoop包 相容情況如下: hadoop版本>=2.7:要求Java 7(openjdk/oracle) hadoop版本<=2.6:要求Java 6(open

Ubuntu16.04環境下搭建Hadoop3.0.3分散式叢集

    最近剛好趕上雙11騰訊促銷,於是搶購了一個8核16G記憶體的雲伺服器,加上業務上需要用到hadoop,hive,於是想搭建搭建一個hadoop分散式叢集,但是限於自己手頭上伺服器數量不多,因此打算先搭建一個hadoop偽分散式叢集。   首先介紹一下我的安裝

hadoop初識 - 搭建分散式叢集(CentOS6.5)

關於hadoop模式三種的瞭解,請自行百度瞭解,此文只說明偽分散式的搭建 前提:jdk(hadoop是有java語言完成的,必須有jdk支援) 可以參考我的經驗  --- > Linux-CentOS-6.5下配置JDK 一、準備工作 1、下載hadoop

叢集與簡單完全分散式叢集搭建

 我是在root許可權下搭建的流程比較簡單                                            1.簡單單機Hadoop叢集(偽分散式)搭建流程 下載 JDK 與Hadoop壓縮包,將檔案傳入linux系統中 解壓配置環境: ①首先