1. 程式人生 > >全網最詳細Apache Kylin1.5安裝(單節點)和測試案例 ---> 現在看來 kylin 需要 安裝到Hadoop Master 節點上

全網最詳細Apache Kylin1.5安裝(單節點)和測試案例 ---> 現在看來 kylin 需要 安裝到Hadoop Master 節點上

5. 主機規劃
IP                Host                    安裝軟體                 程序
172.16.101.55 sht-sgmhadoopnn-01   apache-kylin-1.5.1-HBase1.1.3-bin.tar.gz RunJar
 
6. 新增hive_dependency和KYLIN_HOME環境變數
[[email protected] ~]# vi /etc/profile
export JAVA_HOME=/usr/Java/jdk1.7.0_67-cloudera
export CLASSPATH=.:$JAVA_HOME/jre/lib/rt.jar:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

export HADOOP_HOME=/Hadoop/hadoop
export HBASE_HOME=/hadoop/hbase
export ZOOKEEPER_HOME=/hadoop/zookeeper

export HIVE_HOME=/hadoop/hive
export hive_dependency=/hadoop/hive/conf:/hadoop/hive/lib/*:/hadoop/hive/hcatalog/share/hcatalog/hive-hcatalog-core-2.0.0.jar                                    

export KYLIN_HOME=/hadoop/kylin

export PATH=.:$HADOOP_HOME/bin:$JAVA_HOME/bin:$ZOOKEEPER_HOME/bin:$HBASE_HOME/bin:$HIVE_HOME/bin:$KYLIN_HOME/bin:$PATH

"/etc/profile" 99L, 2592C written
 [[email protected] ~]# source /etc/profile


7.同步/etc/profile到叢集其他節點,生效


 8.下載安裝配置kylin
# 在sht-sgmhadoopnn-01上執行以下命令
[[email protected] ~]# cd /hadoop
[[email protected]

hadoop]# wget https://dist.apache.org/repos/dist/release/kylin/apache-kylin-1.5.2.1/apache-kylin-1.5.2.1-HBase1.x-bin.tar.gz
[[email protected] hadoop]# tar -zxvf apache-kylin-1.5.1-HBase1.1.3-bin.tar.gz 
[[email protected] hadoop]# ln -s /hadoop/apache-kylin-1.5.2.1-bin /hadoop/kylin

[[email protected] hadoop]# vi /hadoop/kylin/bin/kylin.sh

export KYLIN_HOME=/hadoop/kylin # 改成絕對路徑
export HBASE_CLASSPATH_PREFIX=${tomcat_root}/bin/bootstrap.jar:${tomcat_root}/bin/tomcat-juli.jar:${tomcat_root}/lib/*:$hive_dependency:$HBASE_CLASSPATH_PREFIX  #在路徑中新增$hive_dependency


 9.修改kylin.properties
[[email protected] conf]# vi $KYLIN_HOME/conf/kylin.properties
######修改
# List of web servers in use, this enables one web server instance to sync up with other servers.
kylin.rest.servers=sht-sgmhadoopnn-01:7070
######新增
kylin.job.jar=$KYLIN_HOME/lib/kylin-job-1.5.2.1.jar
kylin.coprocessor.local.jar=$KYLIN_HOME /lib/kylin-coprocessor-1.5.2.1.jar


10.啟動kylin
 [[email protected] kylin]#  $KYLIN_HOME/bin/kylin.sh  start
.........
.........
KYLIN_DEBUG_SETTINGS is not set, will not enable remote debuging
KYLIN_LD_LIBRARY_SETTINGS is not set, Usually it's okay unless you want to specify your own native path
A new Kylin instance is started by root, stop it using "kylin.sh stop"
Please visit http://:7070/kylin

You can check the log at /hadoop/kylin/logs/kylin.log

###http://172.16.101.55:7070/kylin   賬號: ADMIN    密碼:KYLIN


 
11.檢查kylin是否啟動成功
[[email protected] kylin]# netstat -nlp |grep 7070
tcp        0      0 0.0.0.0:7070                0.0.0.0:*                   LISTEN      30939/java         
 [[email protected] kylin]#


 12.匯入官網測試案例
[[email protected] kylin]# $KYLIN_HOME/bin/kylin.sh stop
[[email protected] kylin]# $KYLIN_HOME/bin/sample.sh
[[email protected] kylin]# $KYLIN_HOME/bin/kylin.sh  start
1>.選中'kylin_sales_cube'示例立方體,點選'Actions'->'Build',選擇一個截止日期,本試驗中選擇的是'2016-01-10'
(具體小時,分,秒隨便選,因為最終hive sql的語句類似     WHERE (KYLIN_SALES.PART_DT >= '2012-01-01' AND KYLIN_SALES.PART_DT < '2016-01-10');)

2>.在'Monitor'標籤中通過重新整理頁面檢查進度條,直到100%

3>.在'Insight'標籤中執行下面的SQL查詢:
select part_dt, sum(price) as total_selled, count(distinct seller_id) as sellers from kylin_sales group by part_dt order by part_dt;
###耗時2.87s
4>.在hive中執行同一個SQL查詢,驗證kylin的查詢結果(會開啟MapReduce Job計算)
###耗時65.205s
查詢執行和結果如圖所示

Build成功後,hive中建立了3+n個表,如圖所示(3個官網案例hive表,n個build的hive表)
 

Build成功後,hbase中建立了1+n個表,如圖所示(1個元資料表,n個build的hbase表)

 

相關推薦

全網詳細Apache Kylin1.5安裝(節點)測試案例 ---> 現在看來 kylin 需要 安裝Hadoop Master 節點

5. 主機規劃IP                Host                    安裝軟體                 程序172.16.101.55 sht-sgmhadoopnn-01   apache-kylin-1.5.1-HBase1.

全網詳細的一個超級好用的命令列工具【Cmder】的安裝之後的一些配置(圖文詳解)

    不多說,直接上乾貨! 1、修改命令提示符λ為$    首先,我們看到    進入解壓後的cmder的目錄,進入vendor,開啟init.bat檔案。   修改第15行的程式碼 @prompt $E[1;32;40m$P$S

全網詳細的基於Ubuntu14.04/16.04 + Anaconda2 / Anaconda3 + Python2.7/3.4/3.5/3.6安裝Tensorflow詳細步驟(圖文)(博主推薦)

  不多說,直接上乾貨! 前言   建議參照最新的tensorflow安裝步驟(Linux,官方網站經常訪問不是很穩定,所以給了一個github的地址):          https://github.com/tensorflow/tensorflow/blob/master/t

notecase的下載與安裝全網詳細)(圖文詳解)

博客 交流 微信公眾號 str ID 程序輸入點 個人學習 無法 slc   不多說,直接上幹貨!   notecase是什麽?   一個按照樹狀結構來組織文檔內容的筆記管理程序 1、雙擊

全網詳細的CentOS7裏安裝MySQL時出現No package mysql-server available錯誤的解決辦法(圖文詳解)

shell clear database 機器 AI rest secure can removing     不多說,直接上幹貨! 直接yum install mysql的話會報錯,原因在於yum安裝庫裏沒有直接可以用的安裝包,此時需要用到Mar

全網詳細的Windows裏下載與安裝Sublime Text *(圖文詳解)

博客 software 微信公眾 分析 研究 挖掘 wid 公眾 info   不多說,直接上幹貨! 前言     這是代碼編程軟件,可以性感編程自己代碼,有著非常豐富的插件,界面整潔清爽。第一次使用可能不習慣,當你使用一段時間之後,你就會

全網詳細的如何在谷歌瀏覽器里正確下載並安裝Postman【一款功能強大的網頁除錯與傳送網頁HTTP請求的Chrome外掛】(圖文詳解)

     不多說,直接上乾貨!     想必,玩過Java Web的你,肯定是對於http post和get等請求測試的過程記憶猶新吧。     Postman的安裝方法分好幾種,主要分為兩種安裝模式介紹:       (1)chrome瀏覽器postman 外掛安裝  【本

全網詳細的一個超級好用的命令列工具【Cmder】的下載與安裝(圖文詳解)

    不多說,直接上乾貨!         下載的時候,有兩個版本,分別是mini與full版;唯一的差別在於有沒有內建msysgit工具,這是Git for Windows的標準配備;全安裝版 cmder 自帶了 msysgit, 壓縮包 23M, 除了 git 本身這個命令之外, 裡面

全網詳細的一篇Composer安裝tp5教程

我自己的安裝過程(Win10): 一、Composer安裝過程 (1)本來想用傻瓜式安裝: Composer-Setup.exe,但是報錯: (2)於是改用手動安裝:先配置PHP的環境變數,我用的是XAMPP,所以把F:\xampp\php路徑配置

全網詳細的Ceph14.2.5叢集部署及配置檔案詳解,快來看看吧! -- <2>

部署Ceph叢集 Ceph版本選擇 Ceph版本來源介紹 Ceph 社群最新版本是 14,而 Ceph 12 是市面用的最廣的穩定版本。 第一個 Ceph 版本是 0.1 ,要回溯到 2008 年 1 月。多年來,版本號方案一直沒變,直到 2015 年 4 月 0.94.1 ( Hammer 的第一個修正版)

全網詳細的跑python2.7時出現from mysql import connector ImportError: No module named mysql的問題解決辦法(圖文詳解)

領域 conda load 機器學習 同時 精華 center mod con     不多說,直接上幹貨! C:\Users\lenovo>pip install mysql-connector-python-rf==2.1.3 Col

Disconf 學習系列之全網詳細的最新穩定Disconf 搭建部署(基於Ubuntu14.04 / 16.04)(圖文詳解)

class 6.0 conf ubuntu14 穩定 div ubun 搭建 學習   不多說直接上幹貨! https://www.cnblogs.com/wuxiaofeng/p/6882596.html (ubuntu16.04) https

Disconf 學習系列之全網詳細的最新穩定Disconf 搭建部署(基於Windows7 / 8 / 10)(圖文詳解)

分享 study str www windows 最新 1.8 環境 text   不多說,直接上幹貨! 工作環境以及安裝依賴軟件 Zookeeper-3.4.8 Disconf 2.6.36 Nginx 1.9.9(見如下博文的phpstu

大數據之---Hive全網詳細的編譯tar及部署終極篇

大數據 Hive 1、軟件環境RHEL6角色jdkhadoop-2.8.1.tar.gz apache-maven-3.3.9 mysql-5.1xx.xx.xx.xx ip地址NNhadoop01xx.xx.xx.xx ip地址DNhadoop02xx.xx.xx.xx ip地址DNhadoop0

全網詳細Hadoop HA集群啟動後,兩個namenode都是standby的解決辦法(圖文詳解)

config bubuko 測試 IE oop per ali col 學到老   不多說,直接上幹貨! 解決辦法   因為,如下,我的Hadoop HA集群。

全網詳細Hadoop HA集群啟動後,兩個namenode都是active的解決辦法(圖文詳解)

oop 精神 問題 python shell enter 深度 In 智能 不多說,直接上幹貨!     這個問題,跟     是大同小異。    歡迎大家,加入我的微信公眾號:大數據躺過的坑

全網詳細的再次或多次格式化導致namenode的ClusterIDdatanode的ClusterID之間不一致的問題解決辦法(圖文詳解)

rwx log bsp 挖掘 fail tro listener 大數 www.     不多說,直接上幹貨!   java.io.IOException: Incompatible clusterIDs in /opt/modules/ha

全網詳細的啟動或格式化zkfc時出現java.net.NoRouteToHostException: No route to host ... Will not attempt to authenticate using SASL (unknown error)錯誤的解決辦法(圖文詳解)

手機 TP 關註 fail AS hadoop .net ror cep     不多說,直接上幹貨! 解決辦法:     每臺機器都,先執行,sudo chkconfig ipta

全網詳細的zkfc啟動以後,幾秒鐘以後自動關閉問題的解決辦法(圖文詳解)

qq群 spa 同時 CA 研究 圖文 ogg bigdata 火墻   不多說,直接上幹貨! 問題詳情   情況描述如題所示,zkfc啟動以後,幾秒鐘以後自動關閉。 解決辦法:   1、檢查下每臺機

全網詳細的HBase啟動以後,HMaster進程啟動了,幾秒鐘以後自動關閉問題的解決辦法(圖文詳解)

圖片 png 刪除 sunny lan 技術 領域 regions pre     不多說,直接上幹貨!  問題詳情   情況描述如題所示,hbase啟動以後,HMaster進程啟動了,幾秒鐘以後自動關閉,但是HRegionServer進程正常運