從零開始搭建大資料平臺系列之（0）——目錄彙總

阿新 • • 發佈：2019-01-08

寫在前面

看了許多別人寫的技術系列博文，也想把自己所學系統歸納一下，正好現在打算從零開始搭建一個大資料平臺，就把自己的所學所獲系統整理一下，寫成從零開始搭建大資料平臺系列，歡迎轉載。

以下是本系列博文的目錄。

寫在前面看了許多別人寫的技術系列博文，也想把自己所學系統歸納一下，正好現在打算從零開始搭建一個大資料平臺，就把自己的所學所獲系統整理一下，寫成從零開始搭建大資料平臺系列，歡迎轉載。以下是本系列博文的目錄。目錄 6. Oozie 平臺搭建

從零開始搭建大資料平臺系列之（1）——環境準備

1、機器準備（1）物理機配置處理器：Intel® Core™ i7 處理器記憶體：8.00GB 系統型別：64 位作業系統，基於 x64 的處理器作業系統：Windows 10 專業版（2）磁碟陣列常用磁碟陣列型別：RAID 0，RAID 1，RAI

從零開始搭建大資料平臺系列之（2.1）—— Apache Hadoop 2.x 偽分散式環境搭建

JDK 版本：jdk 1.7.0_67 Apache Hadoop 版本：Hadoop 2.5.0 1、安裝目錄準備 ~]$ cd /opt/ opt]$ sudo mkdir /opt/modules opt]$ sudo chown beifeng:b

從零開始搭建hadoop分散式叢集環境：（一）新建hadoop使用者以及使用者組

搭建hadoop叢集環境不僅master和slaves安裝的hadoop路徑要完全一樣，也要求使用者和組也要完全一致。因此第一步就是新建使用者以及使用者組。對於新手來言，新建使用者使用者組，並賦予適當的許可權無疑是最大的問題。下面請跟隨我來新建使用者以及使用者組

【原創】從零開始搭建Electron+Vue+Webpack專案框架（五）預載入和Electron自動更新

導航：（一）Electron跑起來（二）從零搭建Vue全家桶+webpack專案框架（三）Electron+Vue+Webpack，聯合除錯整個專案（四）Electron配置潤色（五）預載入及自動更新（六）構建、釋出整個專案（包括client和web）（未完待續）摘要：到目前為止，我們的專案已經具備了PC

【原創】從零開始搭建Electron+Vue+Webpack專案框架（六）Electron打包，同時構建客戶端和web端

導航：（一）Electron跑起來（二）從零搭建Vue全家桶+webpack專案框架（三）Electron+Vue+Webpack，聯合除錯整個專案（四）Electron配置潤色（五）預載入及自動更新（六）構建、釋出整個專案（包括client和web）摘要：整個專案就剩最後一哆嗦了，但僅僅是當作demo模

大資料架構師：如何從零基礎搭建大資料hadoop生態圈

從年初起，幾家國際大廠的開發者大會，無論是微軟Build、Facebook F8還是稍後的Google I/O，莫不把“AI優先”的大旗扯上雲霄。如果這一波AI大潮只是空喊幾句口號，空提幾個戰略，空有幾家炙手可熱的創業公司，那當然成不了什麼大氣候。但風浪之下，我們看到的卻是，Google一線的各大業

從零開始搭建物聯網平臺（7）：使用Vue編寫前端頁面

摘要： Vue我也是剛開始學的，看了兩天的文件就開始著手做這件事了，所以對vue瞭解不太深入，沒有能力說的的太詳細萬一是錯誤的不就誤導別人了，所以只對幾個相對來說比較主要的點說明一下。搭建開發環境：老生常談的話題！首先自然是要安裝nodejs，這個直接去官網下載安裝即可，再使用命令n

從零開始搭建物聯網平臺（6）：訊息的持久化

遇到的問題：查看了EMQ文件發現並不提供訊息的持久化功能，MQTT協議是按照裝置一直線上設計的，資料都是儲存在記憶體裡的，但是考慮到使用者上傳感測器資料不可能接收了就扔掉，那樣就沒法檢視歷史資料了，所以使用者上傳的訊息必須要能夠儲存下來，以便檢視歷史資料，這樣一來持久化功能就需要我們自己來實現

從零開始搭建物聯網平臺（5）：搭建後臺服務(一）

資料庫的設計：後臺使用Django web框架實現，Django和python怎麼用就不介紹了，東西太多了，看完下面的這些部落格就可以了，差不多就夠了https://www.cnblogs.com/wupeiqi/articles/4938499.html 資料庫設計： &

從零開始搭建物聯網平臺（4）：訂閱系統主題獲取裝置上下線訊息

$SYS-系統主題先來看一段EMQ對於系統主題的介紹：EMQ 訊息伺服器週期性釋出自身執行狀態、MQTT 協議統計、客戶端上下線狀態到 $SYS/ 開頭系統主題。$SYS 主題路徑以 “$SYS/brokers/{node}/” 開頭，’${node}’ 是 Erlang

從零開始學習大資料（乾貨）

Java：大家都知道Java的方向有JavaSE、JavaEE、JavaME，學習大資料要學習那個方向呢? 只需要學習Java的標準版JavaSE就可以了，像Servlet、JSP、Tomcat、Struct、Spring、Hibernate，Mybites都是Java

寫給初學大資料的你，從零開始學習大資料開發的完整學習路線

最近很多人都想學習大資料開發，但是卻不知道如何開始學習，今天專門整理了一份針對大資料初學者的大資料開發學習路線。下面分十個章節來說明大資料開發要學習的內容：網際網路科技發展蓬勃興起，人工智慧時代來臨，抓住下一個風口。為幫助那些往想網際網路方向轉行想學習，卻因為時間不夠，資源不足而放棄的人。我自

如何從零開始搭建高效能直播平臺

直播無疑是當前網際網路時代最炙手可熱的話題，這個話題尤其在創業中更為常見，直播已經成為網路營銷的一種趨勢，它帶給了人們更多真實的一面。近期，本人負責落地公司直播平臺的架構與設計，期間使用過一些商業與開源解決方案，也踩過不少坑。目前該平臺已經無故障執行一年多，經過了各種線上環境

從零開始搭建物聯網平臺（1）：開篇

前言：讀大學的時候學的是物聯網工程，大概是在大二的時候開始接觸微控制器，那時候特喜歡搗鼓那些東西，就覺得特別酷有極客範。還記得第一次做物聯網相關的是一個遠端控制的開關，第一次調通的時候真的很興奮，啥也沒幹就掛在那用手機控制繼電器聽咔嗒咔噠的聲音，現在想想真的好小兒科，明明

從零開始搭建一個規範的vue-cli 3.0項目

默認中新註意等待 ted http val origin 完成後在這一集我們將講到如何從安裝vue-cli開始，到新建一個本地項目，再到vscode中關於eslint的配置，以及本地項目關聯公司遠程項目的基本操作。一，初始化本地項目 1，首先，全局安裝v

從零開始學Kotlin-類和對象（5）

int 文件中 cls 間接 main dcl this 調用定義類從零開始學Kotlin基礎篇系列文章定義一個類定義一個類，使用關鍵字class聲明，後面跟類名（不使用new） class demo5 {//定義一個類，使用關鍵字class聲明，後面跟類名

前端之路從零開始——第二週第四天筆記（background）

目錄 1.background-color背景色的詳解 2.background-image背景圖的詳解 3.background-repeat背景重複的詳解 4.background-attachment背景是否滾動的設定 5.background-position背景定位的詳解

從零開始學微信小程式開發（一）

從我學習開發小程式到現在，已經有好幾款上線了。雖然都是一些益智類的小程式，不難，但是也從裡面學到了一些知識。 1.準備工作首先需要去官網註冊一個小程式的帳號。註冊好賬號以後，就可以設定補充小程式的資訊

大資料平臺效能測試（phrase1）

前一個月，一直在和師兄做實驗室的一個專案，沒有時間更新。現把第一階段結果附上，希望能夠幫到更多做類似事情的朋友。本次測試我們使用TPCDS標準進行。第一階段我們主要測試hive&kudu匯入資料速度以及impala+hive和impala+kudu

從零開始搭建大資料平臺系列之（0）——目錄彙總

寫在前面

目錄

相關推薦