1. 程式人生 > >Kylin實踐(三)--跨叢集元資料遷移

Kylin實踐(三)--跨叢集元資料遷移

Kylin跨叢集元資料遷移第一步:在待遷移叢集上備份元資料,命令如下:$KYLIN_HOME/bin/metastore.sh backup看到如下提示時即為備份成功:metadata store backed up to /opt/kylin/apache-kylin-2.1.0-bin-hbase1x/meta_backups/meta_2018_06_08_14_59_47在提示的目錄下即可看到已經備份好的元資料。第二步:將元資料上傳到新叢集指定目錄下,如:/data/ kylin_metadata第三步,將元資料上傳至HBASE中,方式一:$KYLIN_HOME/bin/kylin.sh org.apache.kylin.common.persistence.ResourceTool
upload /data/kylin_metadata/meta_2018_06_08_10_39_26/方式二:$KYLIN_HOME/bin/metastore.sh restore /data/kylin_metadata/meta_2018_06_08_10_39_26/第四步,在Web UI上單擊System頁面的“Reload Metadata”按鈕以重新載入元資料。補充:元資料遷移不包括實際的資料,遷移過來以後,需要建立和原叢集一致的資料庫和資料表,然後重建cube後才可以查詢。

相關推薦

Kylin實踐--叢集資料遷移

Kylin跨叢集元資料遷移第一步:在待遷移叢集上備份元資料,命令如下:$KYLIN_HOME/bin/metastore.sh backup看到如下提示時即為備份成功:metadata store backed up to /opt/kylin/apache-kylin-2.

【MVC】.NET實踐—對資料庫的資料進行刪除與修改

在主介面新增修改和刪除的超連結(Index.cshtml) <table id="tbList"> <tr> <th>id&l

探索SQL Server資料:索引資料

背景 在第一篇中我介紹瞭如何訪問元資料,元資料為什麼在資料庫裡面,以及如何使用元資料。介紹瞭如何查出各種資料庫物件的在資料庫裡面的名字。第二篇,我選擇了觸發器的主題,因為它是一個能提供很好例子的資料庫物件,並且在這個物件中能夠提出問題和解決問題。 本篇我將會介紹元資料中的索引,不僅僅是因為它們本身很重要,更

RocketMQ叢集部署實踐

全篇參照–《MyRocketMQ叢集部署實戰-雙master-雙slave-同步雙寫-非同步刷盤(7臺機器) - tantexian的部落格空間 - 開源中國社群》 本文是筆者在參考上文實踐過程中的理解和擴充 符號“【】”中

基於Docker的微服務架構的企業級服務叢集實踐——API Gateway的使用

使用API Gateway處理微服務請求轉發、合併 前面兩篇Docker微服務的服務發現以及Docker微服務的服務間通訊機制。主要介紹瞭如何解決微服務的服務發現和通訊問題。 在微服務的架構體系中,為了減少服務間的耦合,在劃分服務間的限界上下文的時候。會盡量

disconf實踐基於XML的分布式配置文件管理,自動reload

blog exce conf redis 信息 exceptio res pan ram 上一篇介紹了基於xml的非自動reload的分布式配置文件管理,這一篇介紹自動reload的方式(基於disconf實踐二)。 1. 修改RedisConfig.java 1 pa

Asp.Net Core WebAPI入門整理域處理

使用 所有 ble 允許 需要 public cors 項目 listitem 一、Core WebAPI中的跨域處理 1.在使用WebAPI項目的時候基本上都會用到跨域處理 2.Core WebAPI的項目中自帶了跨域Cors的處理,不需要單獨添加程序包 3.使用方

Linux多線程實踐線程的基本屬性設置API

ets evel 內核 system 範圍 ack jsb sig 溢出 POSIX 線程庫定義了線程屬性對象 pthread_attr_t ,它封裝了線程的創建者能夠訪問和改動的線程屬性。主要包含例如以下屬性: 1. 作用域(scope) 2. 棧尺寸(s

Kotlin學習與實踐 fun 函數

意義 element 中間 類的方法 int prefix cal save tor 通過例子來學習如何高效的在Kotlin中定義使用函數。 1、命名參數、默認參數、頂層函數、擴展函數 * 展示幾種創建集合類的方法和擴展的簡單操作集合類的方法 fun createColl

PYTHON字典 祖 列表嘗試應用

插入元素 嘗試 想要 可用 .so 輸入 添加內容 控制 劃線 1、 使用 join 方法將下劃線添加到列表的每一個元素拼接成字符串,li = [‘alex‘, ‘eric‘, ‘rain‘] li = [‘boom‘, ‘TNT‘, ‘zhadan‘] dayin

Git工程開發實踐——Git常用操作

file 歷史信息 ima 同步 其它 最新版本 指定 對象 revert Git工程開發實踐(三)——Git常用操作 一、Git倉庫操作 1、Git倉庫創建 git init在當前目錄中初始化Git倉庫git init [project-name]創建一個新目錄並初始化倉

服務化改造實踐 | Dubbo + Zipkin

next 另一個 興趣 hit scrip dep -bash find exception 隨著業務的發展,應用的規模不斷的擴大,傳統的應用架構無法滿足訴求,服務化架構改造勢在必行,以 Dubbo 為代表的分布式服務框架成為了服務化改造架構中的基石。隨著微服務理念逐漸被大

java基礎學python--------列表,

 列表:相當於java中的list用法 下標用法與python中的字串相似也可以用-1等負數來表示 也可以使用*重複用法 可以使用in關鍵字用法 也可以求長度:len(list) for迴圈可以遍歷表內元素 列表的方法: 賦值與java中相似,python中可以用切片的方式給

mllib實踐之LinearRegression實踐libsvm方式整合網際網路上多個例項

package mllib; import org.apache.spark.{ SparkConf, SparkContext } import org.apache.spark.ml.linalg.Vectors import org.apache.spark.mllib.regress

python學習字典、組、字串 語法基礎與常用操作

元組,也算是一個list,但是元組不能修改,比如定義一個數據庫的連線資訊,定義之後不能被修改。用()括號表示,用逗號隔開,比如:mysql=(‘192.168.xx.xxx’,’root’,’123456’) 操作 :count、index count操作:計算元素出現的次數

python入門學習筆記——切片、

4.操作列表 4.1遍歷整個列表:for name = ['x','y','z'] for x in name: (in後面是可迭代物件‚不要忘記:ƒ迴圈內容要縮排,縮排是靈魂)          &

【百度】大型網站的HTTPS實踐——HTTPS對效能的影響

HTTPS在保護使用者隱私,防止流量劫持方面發揮著非常關鍵的作用,但與此同時,HTTPS也會降低使用者訪問速度,增加網站伺服器的計算資源消耗。本文主要介紹HTTPS對效能的影響。 HTTPS對訪問速度的影響 在介紹速度優化策略之前,先來看下HTTPS對速度有什麼影響。影響主要來自兩方面:協議互動所增加的網

Service Worker學習與實踐——訊息推送

在上一篇文章Service Worker學習與實踐(二)——PWA簡介中,已經講到PWA的起源,優勢與劣勢,並通過一個簡單的例子說明了如何在桌面端和移動端將一個PWA安裝到桌面上,這篇文章,將通過一個例子闡述如何使用Service Worker的訊息推送功能,並配合PWA技術,帶來原生應用般的訊息推送體驗。

流式大資料計算實踐2----Hadoop叢集和Zookeeper

一、前言 1、上一文搭建好了Hadoop單機模式,這一文繼續搭建Hadoop叢集 二、搭建Hadoop叢集 1、根據上文的流程得到兩臺單機模式的機器,並保證兩臺單機模式正常啟動,記得第二臺機器core-site.xml內的fs.defaultFS引數值要改成本機的來啟動,啟動完畢後再改回來 2、清空資

EFK 配置geo-ip落地實踐經緯度資料查詢及格式化輸出

經過之前的工作,目前已經完成了資料地圖的資料格式化和錄入記錄,目前我們的資料地圖專案已經進行到最後階段,所以現在需要一個介面,進行格式化資料並輸出,其中需要用到Elasticsearch的全文檢索,檢索出資料後,使用php介面格式化資料輸出 一、全文檢索 搜尋條件(時間,空間) 輸出結果(使用者