CDH5.9 離線安裝或者升級spark2.x詳細步驟
Step1
安裝spark需要兩個檔案,一個是csd檔案,一個是parcel檔案。
我安裝的是2.1 Release2版本,後面兩列分別是這個兩個檔案的地址。
進入parcel的連結地址,如下圖:
我的系統是centos6,所以下載el6對應的兩個檔案,如果是centos7,就下載el7對應的檔案即可。
把劃紅線的三個檔案都下載下來。
Step2
選擇需要安裝的spark版本之前,需要安裝spark需要的一些軟體和軟體版本的要求。具體地址:
Step3
登入到Cloudera Manager的主機,把下載的檔案分別放到對應的資料夾。
csd檔案放到csd資料夾,其他的檔案放到parcel-repo資料夾。
預設是/opt/cloudera/csd和/opt/cloudera/parcel-repo
Step4
修改檔案的許可權,分別把owner和group修改成cloudera-scm,讀寫許可權改成644
Step5
service cloudera-scm-server restart
用上面的命令重啟。
Step6
登入到Cloudera Manager的管理平臺,進入parcel介面,這時候就可以看到你要安裝的spark了。
開始分配主機,直到啟用。
Step7
新增Spark服務到叢集。
相關推薦
CDH5.9 離線安裝或者升級spark2.x詳細步驟
Step1安裝spark需要兩個檔案,一個是csd檔案,一個是parcel檔案。我安裝的是2.1 Release2版本,後面兩列分別是這個兩個檔案的地址。進入parcel的連結地址,如下圖:我的系統是centos6,所以下載el6對應的兩個檔案,如果是centos7,就下載e
CDH5.11 離線安裝或者升級spark2.x詳細步驟
簡介: 在我的CDH5.11叢集中,預設安裝的spark是1.6版本,這裡需要將其升級為spark2.x版本。經查閱官方文件,發現spark1.6和2.x是可以並行安裝的,也就是說可以不用刪除預設的1.6版本,可以直接安裝2.x版本,它們各自用的埠也是不一樣的。我嘗試了安裝
Nessus離線安裝及升級插件
家庭 clas 服務 軟件 update 專業 ddb 內網 用戶賬號 最近做客戶的內網主機漏洞掃描,申請了一臺內網主機做掃描服務器,安裝Nessus。由於客戶嚴格限制內網主機不能開通外網訪問權限,折騰了一下Nessus離線激活和離線更新漏洞插件,詳細過程截圖記錄。 一、安
CentOS yum安裝或者升級GCC到4.8
之前一直沒怎麼用C++11,最近的專案都開始使用,但是Centos使用yum工具安裝GCC的版本是4.4.7,因此需要升級才行。在網上查了一些資料,成功搞定環境,怕以後忘記了難找,因此記錄下來。1、下載原始檔,並安裝:wget http://people.centos.org
clusterProfiler安裝或者升級中出現的版本問題
1、之前按照官網的流程,如下,安裝了該包並載入DOSE之後一直提示裝不上enrich plot: ## try http:// if https:// URLs are not supported source("https://bioconductor.org/biocL
ubuntu離線安裝命令 升級16.04LTS後引起的Vbox啟動錯誤之解決
為了安裝genymotion 在ubunbtu16.04上,必須安裝virtualbox 1.離線安裝命令,與安裝報錯,有依賴關係不能解決 辦法 sudo dpkg -i virtualbox-5.0_5.0.2-102096~Ubuntu~trusty_amd64.de
CDH5.11離線安裝手冊(賊詳細)
安裝環境JDK版本:1.8linux版本:CentOS7CDH版本:5.11.1叢集這裡我使用虛擬機器搭建了三臺叢集,一臺Master,兩臺Slave角色IPMaster192.168.17.200Slave1192.168.17.201Slave2192.168.17.20
centos7 rpm安裝或者升級mysql5.7
升級mysql: 在安裝mysql之前先確認先前是否安裝了mysql,如有就刪除: - --To list Old MySql yum list installed | grep -i mysql --解除安裝舊版本的mysql(To remove Old
CDH 5.10.0 on CentOS6.9 離線安裝
關於CDH和ClouderaManager CDH (Cloudera's Distribution, includingApache Hadoop),是Hadoop眾多分支中的一種,由Cloudera維護,基於穩定版本的Apache Hadoop構建
CentOS 7.x安裝MySQL 5.6的詳細步驟、基本配置及相關說明
MySQL安裝包內自帶了一個安裝指令碼,此處以mysql-5.6.42-linux-glibc2.12-x86_64.tar.gz為例。 這裡使用的作業系統為CentOS-7-x86_64-Minimal-1810,執行前需要安裝依賴: yum install perl autoco
Linux 下安裝 Elasticsearch5.6.x 詳細步驟以及踩坑解決方案
簡介 網上有各種ES版本的安裝步驟和問題解決方案,但是在安裝過程中還是遇到了許多問題,那麼今天來整理一份詳細的安裝過程以及碰到的問題和心得;有什麼不對的和問題希望大家留言一起討論。 jdk至少需要在1.8.0_73以上版本。 linux的核心版本需要在2.6以上(我用的
Ubuntu 9.10安裝minigui1.6.10 GPL詳細記錄
MiniGUI 技術白皮書 for V2.0.4/1.6.10 [PDF]:該文件描述了 MiniGUI V2.0.4/1.6.10 的技術特性。 Datasheet for MiniGUI V2.0.4/1.6.10 [PDF]:該文件對 MiniGUI V2.0.4/1.6.10 產品功能特性進行了詳盡的
kylin2.1.0+cdh5.10.1+安裝部署+官方測試例子詳細教程
CDH環境下kylin的安裝教程 1.軟體版本介紹: cdh5.10.1 Kylin: 2.1.0 2.環境檢查 環境中需要啟動的角色: Hive Metastore Server yarn的JobHistory Server 3.正式安裝 3.1 kylin2.
Android 開發之Windows環境下Android Studio安裝和使用教程(圖文詳細步驟)
9.png 虛擬機 jdk版本 編寫 clip 開發平臺 集成開發 arc 電腦安裝 鑒於谷歌最新推出的Android Studio備受開發者的推崇,所以也跟著體驗一下。 一、介紹Android Studio Android Studio 是一個Android
Windows和Linux系統下,虛擬環境安裝的全面說明和詳細步驟
虛擬環境的建立和使用 用途: 1、在同一臺電腦安裝同一個包的不同版本 2、記錄專案所用的所有的包的版本,方便部署。 如何使用: 1、建立虛擬環境 mkvirtualenv 虛擬環境名 -p python程式(版本)建立好的虛擬環境放置在~/.virtualenvs/虛擬環境名 目錄中 2、
Linux-CentOS7下安裝Elasticsearch6.3.0超詳細步驟
檢測是否安裝了Elasticsearch ps aux|grep elasticsearch 1、安裝JDK Elastic 需要 Java 8 環境 安裝JDK具體操作,請點選連結 2、下載Elasticsearch wget https://artifacts.elast
安卓學習筆記 -- (安裝環境) Android Studio安裝配置、環境搭建詳細步驟及基本使用 Android Studio和SDK官方開發工具下載 Android Studio教程從入門到精通 Android開發-之第一個程式:HelloWorld!
1、下載Android Studio安裝配置、環境搭建詳細步驟及基本使用 https://www.cnblogs.com/yanglh6-jyx/p/Android_AS_Configuration.html https://blog.csdn.net/k491022087/ar
EC2-linux系統安裝和配置jdk1.8詳細步驟
最近一直在找伺服器...經過同學推薦,我註冊了亞馬遜...免費使用一年...具體的大家百度就好..接下來正文了.... 伺服器我建立好了以後,首先下載linux版本的jdk1.8 我這裡的版本是1.8.0_171的... 第一步:附上下載地址 點我下載jdk
centos 7 安裝二進制mysql 詳細步驟
lease not class gtid err 成功 修改 can del 1 下載地址:https://cdn.mysql.com//Downloads/MySQL-5.7/mysql-5.7.24-linux-glibc2.12-x86_64.tar.gz 復制這個鏈
Windows下安裝mysql-5.7.16詳細步驟
還記得第一次裝解壓版的mysql時,雖然有別人寫好的步驟,但還是折騰了一個星期,翻了別人無數部落格才裝好。最近重新裝了系統,剛才裝mysql,一次性,不到五分鐘就裝好了。寫個部落格紀念一下。 我的作業系統是win7 64位,用的是mysql-5.7.16解壓版,下面詳細說下步驟: 目錄