大資料學習——redis安裝
用原始碼工程來編譯安裝
1/ 到官網下載最新stable版
2/ 解壓原始碼並進入目錄 tar -zxvf redis-2.8.19.tar.gz -C ./redis-src/
3/ make
如果報錯提示缺少gcc,則安裝gcc : yum install -y gcc
如果報錯提示:Newer version of jemalloc required
則在make時加引數:make MALLOC=libc
4/ 安裝redis,指定安裝目錄,如 /usr/local/redis
make PREFIX=/usr/local/redis install
6/ 拷貝一份配置檔案到安裝目錄下
切換到原始碼目錄,裡面有一份配置檔案 redis.conf,然後將其拷貝到安裝路徑下
cp redis.conf /usr/local/redis/
7/ 啟動redis
cd /usr/local/redis
bin/redis-server redis.conf
相關推薦
大資料學習——redis安裝
用原始碼工程來編譯安裝 1/ 到官網下載最新stable版 2/ 解壓原始碼並進入目錄 tar -zxvf redis-2.8.19.tar.gz -C ./redis-src/ 3/ make 如果報錯提示缺少gcc,則安裝gcc : yu
學習筆記:從0開始學習大資料-17.Redis安裝及使用
Redis 是一個高效能的key-value資料庫。 redis的出現,很大程度補償了memcached這類key/value儲存的不足,在部 分場合可以對關係資料庫起到很好的補充作用。 1. 下載 wget http://download.redis.io/releases/redis-5
大資料學習——yum安裝tomcat
https://www.cnblogs.com/jtlgb/p/5726161.html 安裝tomcat6 yum install tomcat6 tomcat6-webapps tomcat6-admin-webapps 啟動tomcat6 servi
大資料學習之路94-kafka叢集安裝
解壓 Kafka 安裝包 修改配置檔案 config/server.properties vi server.properties broker.id=0 //為依次增長的:0、1、2、3、4,叢集中唯一id log.dirs=/kafkaData/logs // Kafka
大資料學習之路103-redis的分片代理
哨兵的出現是為了實現主節點的HA,那麼從節點會不會出現問題呢? 假如所有的讀取操作都在從節點6380上,那麼6380節點就會很累,而6381節點就會很清閒。 這個時候就需要負載均衡,我們這裡的負載均衡需要通過代理伺服器來實現。我們可以將需要訪問的從節點的位置配置在代理伺服器上。
大資料學習之路102-redis的哨兵機制
哨兵的HA會通過修改配置檔案來實現主節點的切換。 只有主節點有寫許可權,從節點只能讀。 我們接下來實驗一下: 首先我們將redis的三個埠的服務啟動起來: 然後我們啟動哨兵: 接下來我們強制將主節點關掉,看哨兵會做什麼事? 我們可以看到此時的
大資料學習之路101-redis的持久化詳解及主從複製
接下來我們配置一下主從結構的星型模型: 首先將配置檔案複製3份, 然後修改主節點的配置檔案: 首先關閉RDB: 然後關閉AOF: 修改第二個配置檔案: 先修改埠,他不能和主節點的埠衝突: 為了區分是哪個節點打的日誌,我們還需要
大資料學習第一天——VMware安裝
一.下載VMware,安裝 二.新建虛擬機器 1.FIle--》new virtual machine 後面進入硬體資源分配,其中cpu給1個,記憶體至少給1G,網絡卡的選擇如下圖: 2.啟動虛擬機器 使用者 :
大資料學習之路-Centos6安裝python3.5
Centos 6.8安裝python3.5.2 因為學習所需,需要用到python3.x的環境,目前Linux系統預設的版本都是python2.x的,還有一些自帶的工具需要用到python2.6版本,所以要求的是python3 和 python2 共存,pip2 和** pip3共存,如何安裝
學習筆記:從0開始學習大資料-18.kettle安裝使用
Kettle是一款國外開源的ETL工具,純java編寫,可以在Windows、Linux、Unix上執行,資料抽取高效穩定。 Kettle 中文名稱叫水壺,該專案的主程式設計師MATT 希望把各種資料放到一個壺裡,然後以一種指定的格式流出。 Kettle這個ETL工具集,它允許你管理來自不同資料庫的
學習筆記:從0開始學習大資料-16. kafka安裝及使用
kafka是訊息處理服務的開源軟體,高效高可用。可以作為大資料收集的工具或資料的管道。 1. 下載 http://kafka.apache.org/downloads 根據scala版本,我下載的是Scala 2.12 - kafka_2.12-2.1.0.tgz (as
學習筆記:從0開始學習大資料-15. Flume安裝及使用
上節測試了spark 程式設計,spark sql ,spark streaming 等都測試可用了,接下來是資料來源的收集,Flume的安裝使用,其實很簡單,但作為完整,也寫個記錄筆記 1.下載 wget http://archive.cloudera.com/cd
學習筆記:從0開始學習大資料-12. spark安裝部署
為了教學方便,考慮ALL IN ONE,一臺虛擬機器構建整個實訓環境,因此是偽分散式搭建spark 環境: hadoop2.6.0-cdh5.15.1 jdk1.8 centos7 64位 1. 安裝scala環境 版本是scala-2.12.7,官網下載
學習筆記:從0開始學習大資料-11. sqoop安裝部署
環境:centos7 已安裝java和hadoop 1.下載 wget http://archive.cloudera.com/cdh5/cdh/5/sqoop2-1.99.5-cdh5.16.0.tar.gz 2.解壓 tar -zxvf sqoop2-1.99.5-cdh5.16.0.t
學習筆記:從0開始學習大資料-10. hive安裝部署
1. 下載 wget http://archive.cloudera.com/cdh5/cdh/5/hive-1.1.0-cdh5.15.1.tar.gz 2.解壓 tar -zxvf hive-1.1.0-cdh5.15.1.tar.gz 3. hive的元資料(如表名,列
學習筆記:從0開始學習大資料-6.hbase安裝
環境:centos7 jdk1.8.0 hadoop2.6.0已安裝好了,單機偽分散式 1.下載hbase安裝檔案 wget http://archive-primary.cloudera.com/cdh5/cdh/5/hbase-1.2.0-cdh5.16.0.tar.gz
學習筆記:從0開始學習大資料-3.Eclipse安裝
一直使用Visual Studio 開發.net程式,大資料需要使用java 在linux環境,需要使用Eclipse ide環境,安裝過程如下 1.下載 http://download.eclipse.org/eclipse/downloads/
學習筆記:從0開始學習大資料-2.hadoop安裝
在膝上型電腦安裝學習環境,採用all in one的偽分散式,所有都在一臺電腦部署。 1.下載 hadoop wget http://archive-primary.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.16.0.tar.gz 2. 解壓&n
學習筆記:從0開始學習大資料-1.centos7安裝
其實開始學習有些時間了,但因為中途轉搞雲端計算openstak和中央認證系統cas,這兩個都投入實用後,才有了時間又拿起大資料的學習,為了完整有個學習記錄,方便自己和網友,就從頭開始寫筆記吧。 因為一直都用ubuntu,現在看的幾本大資料的書都是centos平臺環境實驗的,那就用centos吧,
大資料學習——yum練習安裝mysql
1. 安裝mysql 伺服器端: yum install mysql-server yum install mysql-devel 2. 安裝mysql客戶端: yum install mysql 3. 啟動mysql服務: ser