大資料學習第一天——VMware安裝
一.下載VMware,安裝
二.新建虛擬機器
1.FIle--》new virtual machine
後面進入硬體資源分配,其中cpu給1個,記憶體至少給1G,網絡卡的選擇如下圖:
2.啟動虛擬機器
使用者 :hadoop/hadoop
root/hadoop
相關推薦
大資料學習第一天——VMware安裝
一.下載VMware,安裝 二.新建虛擬機器 1.FIle--》new virtual machine 後面進入硬體資源分配,其中cpu給1個,記憶體至少給1G,網絡卡的選擇如下圖: 2.啟動虛擬機器 使用者 :
大資料學習第一天——linux常用命令(三)
三 檔案操作 1建立檔案 touch somefile.txt 建立一個空檔案somefile.txt > 重定向操作符 echo "woshiwoa"> some.txt 將woshiwoa寫入到some.txt 檔案中,如果檔案不存在則會創建出來 echo "www.ba
大資料學習第一天
1.spark入門 閱讀《spark快速大資料分析》這本書,總共11章 ,每天閱讀一章左右,大概花兩週時間就可以看完了。 在windows和linux上分別部署開發環境和測試、生產環境。 1.1 開發環境 (1)idea開發 在windows上用idea 部署scal
大資料學習第一天 Linux篇
1.Linux的安裝 在Windows平臺上安裝Vmware虛擬機器,然後在虛擬機器上安裝Linux。 安裝步驟詳見Linux安裝文件。 2.Linux的網路配置 2.1檢
大資料學習第一課:虛擬機器安裝配置
本章主要內容 VirtualBox下安裝CentOS7 Minimal版本Minimal版本Centos7靜態IP網路設定ssh免密登入設定 我們現在身處資料時代,大資料和人工智慧已經逐漸滲透到我們的生活中了。這麼好的一個時代豈能錯過,所以希望大家能在這裡學到一些知識。
大資料學習之路-Centos6安裝python3.5
Centos 6.8安裝python3.5.2 因為學習所需,需要用到python3.x的環境,目前Linux系統預設的版本都是python2.x的,還有一些自帶的工具需要用到python2.6版本,所以要求的是python3 和 python2 共存,pip2 和** pip3共存,如何安裝
大資料學習第二天——shell程式設計
2.1 基本格式 程式碼寫在普通文字檔案中,通常以 .sh為字尾名 vi hello.sh #!/bin/bash ## 表示用哪一種shell解析器來解析執行我們的這個指令碼程式 echo "hello world"  
大資料學習第二天——yum練習
一 jdk安裝 yum list | grep jdk 安裝jdk-1.8.0版本 yum -y install java-1.8.0-openjdk* 安裝後,執行java -version 配置環境變數 使用vim /etc/profile 編輯profile檔案 輸入
大資料學習第二天
2. 部署spark 和 hadoop Hadoop2.9.2+Spark2.4.0完全分散式叢集搭建過程 主要參考了這一篇https://blog.csdn.net/guoyu931206/article/details/84795385?tdsourcetag=s_pc
大資料學習第二天 Linux篇
1.虛擬機器的克隆 具體步驟參考這位仁兄:https://blog.csdn.net/CSDNOfWK/article/details/78442187 克隆完成之後,還需要對克隆後的機子進行必要的網路配置。 比如配置它的IP 步驟參考上一篇部落格 配置後容易出現一個小問題
記錄我的大資料學習之旅 ---01.使用VMware安裝CentOs7
前言 從2017年初開始接觸大資料,從一無所知,到慢慢探索,到最後能夠獨立開發大資料專案。為此,趁著專案空閒的時間,分享與記錄一下我的大資料學習之旅。 一.準備資料,下載CentOs 二.新建虛擬機器
大資料學習——Hadoop第一天
1.1 什麼是HADOOP HADOOP是apache旗下的一套開源軟體平臺 HADOOP提供的功能:利用伺服器叢集,根據使用者的自定義業務邏輯,對海量資料進行分散式處理 HADOOP的核心元件有 HDFS(分散式檔案系統) YARN(運算資源排程系統) MAPR
大資料學習第2天----------------linux 安裝mysql 出現安裝依賴問題解決(centos7)
問題:安裝mysql過程中出現的依賴 [[email protected] mysql-5.7.16]# rpm -ivh mysql-community-devel-5.7.16-1.el7.x86_64.rpm warning: mysql-community
高等數學-學習演算法/人工智慧/大資料的第一步
第1章 課程介紹 對課程涉及到的內容作簡要概述,通過課程介紹,更好的瞭解課程與如何學習課程。 1-1 導學 第2章 集合與運算 講解最基本最常用到的集合的概念和運演算法則,並由此引出鄰域和區間的概念。
大資料學習之路94-kafka叢集安裝
解壓 Kafka 安裝包 修改配置檔案 config/server.properties vi server.properties broker.id=0 //為依次增長的:0、1、2、3、4,叢集中唯一id log.dirs=/kafkaData/logs // Kafka
教你如何學習演算法/人工智慧/大資料的第一步
高等數學-學習演算法/人工智慧/大資料的第一步 第1章 課程介紹 對課程涉及到的內容作簡要概述,通過課程介紹,更好的瞭解課程與如何學習課程。 1-1 導學 第2章 集合與運算 講解最基本最常用到的集合的概念和運演算法則,並由此引出鄰域和區間的概念。
大資料學習——yum練習安裝mysql
1. 安裝mysql 伺服器端: yum install mysql-server yum install mysql-devel 2. 安裝mysql客戶端: yum install mysql 3. 啟動mysql服務: ser
大資料學習——yum安裝tomcat
https://www.cnblogs.com/jtlgb/p/5726161.html 安裝tomcat6 yum install tomcat6 tomcat6-webapps tomcat6-admin-webapps 啟動tomcat6 servi
大資料學習初級入門教程(一) —— Hadoop 2.x 的安裝、啟動和測試
大資料最基礎的就是資料的儲存和計算,而 Hadoop 就是為儲存和計算而生,是最基礎的大資料處理工具。這篇簡單寫寫 Hadoop 2.x 的安裝,啟動和測試。 一、準備環境 大資料環境的部署,一般都是叢集,機器數量為奇數,這裡以 5 臺機器為例,作業系統為 CentOS 6.9_x64;
大資料學習——redis安裝
用原始碼工程來編譯安裝 1/ 到官網下載最新stable版 2/ 解壓原始碼並進入目錄 tar -zxvf redis-2.8.19.tar.gz -C ./redis-src/ 3/ make 如果報錯提示缺少gcc,則安裝gcc : yu