Spark

比特幣暴漲太蹊蹺,有人已清倉轉戰A股

比特幣期貨收漲8%,為2018年11月中旬以來首次重新收於5000美元關口上方。據外媒報道,有新的大買家入市。 媒體援引數字貨幣公司BCB集團總裁薩迪的話報道稱,一筆總值約1億美元、分散在三

A股“區塊鏈概念股”持續大漲的原因……

3月30日,國家網際網路資訊辦公室公開發布第一批共197個區塊鏈資訊服務名稱及備案編號,包括百度、金山、騰訊、京東、螞蟻金服等企業旗下區塊鏈產品均在列。涉及到的A股上市公司達到了14家之多,包括海聯金匯、易見

SparkSQL執行時引數優化

近期接手了不少大資料表任務排程補資料的工作,補數時發現資源消耗異常的大且執行速度卻不怎麼給力. 發現根本原因在於sparkSQL配置有諸多問題,解決後總結出來就當拋磚引玉了.

Spark學習(三)——Stage和寬窄依賴

指父RDD的每一個分割槽最多被一個子RDD的分割槽所用,表現為一個父RDD的分割槽對應於一個子RDD的分割槽,和兩個父RDD的分割槽對應於一個子RDD 的分割槽。圖中,map/filter和union屬於第一類

萬億茅臺,A股市場的“價值之錨”

3月28日晚間,貴州茅臺釋出18年年報,公司全年營收771.99億,同比增長26.43%,歸屬淨利潤達到352.04億,同比增長30%。另茅臺計劃每10股派發現金紅利145.39元,分紅比例一如既往地超過了50

Spark+Hbase 億級流量分析實戰( PV/UV )

作為一個百億級的流量實時分析統計系統怎麼能沒有PV /UV 這兩經典的超級瑪麗亞指標呢,話說五百年前它倆可是鼻祖,咳咳...,不好意思沒忍住,迴歸正文, 大豬 在上一篇已經介紹了 小巧高效能ETL程式設計與實

這家新三板最賺錢的體育公司擬借殼A股上市!

健身培訓有望迎來第一股。 投資界(ID:pedaily2012)3月27日訊息,A股上市公司山鼎設計近期釋出公告顯示,公司正在籌劃以發行股份及支付現金方式收購資產的事項,本次收購的標的資產為賽普健身(武漢)股份有

Spark streaming消費Kafka的正確姿勢

前言 在遊戲專案中,需要對每天千萬級的遊戲評論資訊進行詞頻統計,在生產者一端,我們將資料按照每天的拉取時間存入了Kafka當中,而在消費者一端,我們利用了spark streaming從kafka中不斷拉取

拐點真的來了!從大公司年度業績看家居產業變革

【編者按】家居行業的變革早已顯露端倪,但唯有各大公司的財務資料能夠讓企業徹底相信這種變化。家居產業拐點已至,想要回到過去的高速增長,就要改變運營邏輯。 本文發於第一傢俱網,作者木子魚;經億歐編輯,

Spark Core

Spark Core DAG概念 有向無環圖 Spark會根據使用者提交的計算邏輯中的RDD的轉換(變換方法)和動作(action方法)來生成RDD之間的依賴關係,同時這個計算鏈也就生成了邏輯

1717238819.5637