2. 程式人生 > >大數據之---官方文檔使用大全終極篇----持續更新中

大數據之---官方文檔使用大全終極篇----持續更新中

阿新 • • 發佈：2018-05-17
大數據 Hadoop

HDFS web訪問 50070YARN web管理 8088HistoryServer web管理 19888Zookeeper 服務端口 2181Hive 服務端口 10000Kafka 服務端口 9092azkaban web界面 8443Hbase web界面 16010，60010Spark web界面 8080Spark URL 7077? ? ?

默認端口

hadoop 官方網站 hadoop.apache.org http://hadoop.apache.org/docs/
spark 官方網站 spark.apache.org http://spark.apache.org/documentation.html
Kafka 官方網站 ? ?
Hbase 官方網站 ? ?
Zookeeper 官方網站 ? ?
sqoop 官方網站 ? ?
? 官方網站 ? ?
? 官方網站 ? ?

?

官方網站

hadoop.apache.org

?

查詢官方文檔

登陸官網? --->選擇版本--->選擇左邊大標題選擇相關文檔

http://hadoop.apache.org/? -----> 選擇Documentation ----> Release2.8.3(選擇自己合適的版本)

Apache > Hadoop > Apache Hadoop 2.8.3--->Configuration--->core-default.xml

參考官方文檔code-default.xml配置我們自己的code-site.xml文件

打開的code-default.xml搜索相關的配置項參數關鍵字

參考官方文檔配置hadoop相關內容 ---官方配置文檔3列對應

name???? value???? description

配置core-site文件

<configuration>
??? <property>
??????? <name>fs.defaultFS</name>
??????? <value>hdfs://localhost:9000</value>
??? </property>


</configuration>

配置hdfs-site.xml:

<configuration>
??? <property>
??????? <name>dfs.replication</name>
??????? <value>1</value>
??? </property>
</configuration>

大數據之---官方文檔使用大全終極篇----持續更新中

相關推薦

大數據之---官方文檔使用大全終極篇----持續更新中

大數據 Hadoop HDFS web訪問 50070YARN web管理 8088HistoryServer web管理 19888Zookeeper 服務端口 2181Hive 服務端口 10000Kafka 服務端口 9092azkaban web界面 8443Hbase web界面 16010

大數據之---hadoop常用命令大全終極篇

大數據 Hadoop 軟件環境 RHEL6.8 hadoop2.8.1 apache-maven-3.3.9findbugs-1.3.9 protobuf-2.5.0.tar.gz jdk-8u45(操作環境root安裝啟動的hadoop)hadoop fs == hdfs dfs 將文件上傳至ha

大數據之---hadoop問題排查匯總終極篇---持續更新中

大數據 Hadoop 1、軟件環境 RHEL6 角色 jdk-8u45hadoop-2.8.1.tar.gz ? sshxx.xx.xx.xx ip地址 NN hadoop1xx.xx.xx.xx ip地址 DN hadoop2xx.xx.xx.xx ip地址 DN hadoop3xx.xx.xx.x

第二期：關於十大數據相關問答匯總，關註持續更新中哦~

大數據NO.1 學大數據如何零基礎入門？ 答：學習任何東西都一樣，一開始就是一道坎，我很喜歡看書，特別是容易入門的書。對於大數據，我的具體研究方向是大規模數據的機器學習應用，所以首先要掌握以下基本概念。微積分（求導，極值，極限）線性代數（矩陣表示、矩陣計算、特征根、特征向量）概率論+統計（很多數據分析建模基於

iOS Threading編程指南 官方文檔翻譯第一篇（序言）

線程安全 loop 在線 os x 多線程 lib 翻譯 threads read 序言 ? Thread是能夠使多個code paths 在同一個APP內並發運行的幾種技術之一。雖然新的技術為並發運行提供了先進、高效的工具（例如operation 對象和GCD）,但是O

自學it18大數據筆記-第三階段Scala-day03——會持續更新……

day01 com 活動 教學 http cal 感謝 小夥伴 mage 寫在最前：轉行大數據領域，沒報班，自學試試，能堅持下來以後就好好做這行，不能就……！準備從現有這套it18掌的視屏殘本開始……自學是痛苦的，發博客和大家分享下學習成果——也是監督自己，督促自己堅持學下

自學it18大數據筆記-第三階段Spark-day03——會持續更新……

大數據 sca png 準備 park tor 技術 spa ges 寫在最前：轉行大數據領域，沒報班，自學試試，能堅持下來以後就好好做這行，不能就……！準備從現有這套it18掌的視屏殘本開始……自學是痛苦的，發博客和大家分享下學習成果——也是監督自己，督促自己堅持學下去。

自學it18大數據筆記-第三階段Spark-day07——會持續更新……

color orm sca style .com 活動 更新 交流 資料 寫在最前：轉行大數據領域，沒報班，自學試試，能堅持下來以後就好好做這行，不能就……！準備從現有這套it18掌的視屏殘本開始……自學是痛苦的，發博客和大家分享下學習成果——也是監督自己，督促自己堅持學下

自學it18大數據筆記-第三階段Spark-day11——會持續更新……

大數據 cnblogs -1 http 不能 筆記 學習 自己 src 寫在最前：轉行大數據領域，沒報班，自學試試，能堅持下來以後就好好做這行，不能就……！準備從現有這套it18掌的視屏殘本開始……自學是痛苦的，發博客和大家分享下學習成果——也是監督自己，督促自己堅持學下去

自動化運維之Ansible概述及Ansible部署|（持續更新中）

nss red hat 優秀 分發 程序 paramik and gho 統一 Ansible概述 由於互聯網的快速發展導致產品更新換代速度逐漸加快，運維人員每天都要進行大量的維護操作，仍舊按照傳統方式進行維護使得工作效率低下。這時，部署自動化運維就可以盡可能安全，高效地完

Pandas 10分鐘入門----缺失數據的處理（官方文檔註釋版三）

class ble 布爾 code 刪除索引 date method ren 插值 在日常我們獲取的數據中，經常會出現數據缺失的情況。對數據缺失的處理，有多種處理的方法：插值填補、平均值填補方法很多。這裏不具體討論用哪種方式去插補這些數據，而只是談談如何使用panda

《Spark Python API 官方文檔中文版》 之 pyspark.sql (一)

開始 clear sorted 緩存 news 數據 sch json 大數 摘要：在Spark開發中，由於需要用Python實現，發現API與Scala的略有不同，而Python API的中文資料相對很少。每次去查英文版API的說明相對比較慢，還是中文版比較容易get到所

大數據之---hadoop偽分布式部署(HDFS)全網終極篇

偽分布式部 hadoop 1、軟件環境RHEL6 jdk-8u45 hadoop-2.8.1.tar.gz ssh xx.xx.xx.xx ip地址 hadoop1 xx.xx.xx.xx ip地址 hadoop2 xx.xx.xx.xx ip地址 hadoop3 xx.xx.xx.xx ip地址 h

大數據之---Hive全網最詳細的編譯tar及部署終極篇

大數據 Hive 1、軟件環境RHEL6角色jdkhadoop-2.8.1.tar.gz apache-maven-3.3.9 mysql-5.1xx.xx.xx.xx ip地址NNhadoop01xx.xx.xx.xx ip地址DNhadoop02xx.xx.xx.xx ip地址DNhadoop0

sanic官方文檔解析之logging和request Data

技術分享 沒有 type int con bsp conf 保留 level 1,sanic的logging: Sanic允許有做不同類型的日誌(通過的日誌,錯誤的日誌),在基於Python3的日誌API接口請求,你必須具備基本的Python3的日誌知識,在你如果想創建一

sanic官方文檔解析之Response和Cookie

讀取 圖片 每一個 HERE .html 信息 c中 edi rec 1,Sanic的返回的響應體 使用Sanic中的response模塊去創建響應對象 返回文本response.text文本(直接字符串就ok) 返回html文件,直接response.htm

sanic官方文檔解析之路由

運行 指定 str 不用 image 請求方法 路徑 收發消息 什麽 1,路由,路由相當於一個網址的地址,來確定網址的位置和唯一性 當http://server.url/被允許訪問服務器,當最後的"/"通過路由匹配到了業務邏輯處理的函數,將會返回一個json對象 Sani

sanic官方文檔解析之藍圖

tar serve 技術分享 ket 結束 部分 output 方法 1.3 1,藍圖(Blueprints) 藍圖可用於子路由的應用,代替增加路由的存在,藍圖的定義和增加路由的方法相似,靈活的在應用中註冊,並且可插拔的方式. 尤其是在大型應用中使用藍圖的時候在你邏

sanic官方文檔解析之Custom Protocols(自定義協議)和Socket(網絡套接字)

t對象 class back main times bin num urn 錯誤處理 1,Custom Protocol:自定義協議 溫馨提示:自定義協議是一個高級用法,大多數的讀者不需要用到此功能 通過特殊的自定義協議,你可以改變sanic的協議,自定義協議需要繼承子

sanic官方文檔解析之websocket(網絡套接字)和handle decorators(處理程序裝飾器)

test decorator 方法 實例化 con tco nic max cor 1,websocket(網絡套接字) 在websocket上Sanic提供了一種簡單使用的抽象化,來設置websocket(網絡套接字) from sanic import Sanic