1. 程式人生 > >使用者行為日誌分析概述

使用者行為日誌分析概述

使用者行為日誌分析:Nginx,Ajax

日誌資料內容:

 1,訪問的系統屬性:作業系統,瀏覽器等等

 2.點選的url,從哪個url跳轉過來,頁面停留時間

 3.訪問資訊:session_id,訪問ip等

日誌分析的意義:

  1.網站的眼睛

  2.網站的神經

  3.網站的大腦

離線資料處理:

  1.資料採集

     Flume:將web日誌寫到HDFS

  2.資料清洗:

      髒資料:Spark,Hive,MapReduce

     清洗完資料可以放在HDFS上

  3.資料處理

     按照我們的需求進行相應業務統計和分析

  4.處理結果入庫

      結果存放在RDBMS,NoSQl

  6.資料視覺化展示

        

功能實現:

   1.資料實現

   2.資料視覺化:一副圖片最偉大的價值莫過於它能夠使得我們實際看到的比我們期望看到的內容更加豐富

資料視覺化常用框架:HUE

                                Zeppelin

                                echarts

                                highcharts

                                D3.js