HDFS 01 - HDFS是什麼?它的適用場景有哪些?它的架構是什麼?
[TOC] # 1、HDFS 是什麼 ## 1.1 簡單介紹 在現代的企業環境中,單機容量太小,無法儲存海量的資料,這時候就需要多機器儲存。 —— 統一管理分佈在叢集上的檔案,這樣的系統就稱為分散式檔案系統。 HDFS(Hadoop Distributed File System,Hadoop
[TOC] # 1、HDFS 是什麼 ## 1.1 簡單介紹 在現代的企業環境中,單機容量太小,無法儲存海量的資料,這時候就需要多機器儲存。 —— 統一管理分佈在叢集上的檔案,這樣的系統就稱為分散式檔案系統。 HDFS(Hadoop Distributed File System,Hadoop
在面試中,候選人經常會被問到,你在專案裡用到過哪些設計模式?對此,你可以按本文給出的步驟,系統地通過工廠模式展示自己在設計思想方面的能力。 1 通過工廠模式遮蔽建立細節 工廠模式(Factory Meth
仿照上篇博文對於混淆矩陣、ROC和AUC指標的探討,本文簡要討論機器學習二分類問題中的混淆矩陣、PR以及AP評估指標;實際上,(ROC,AUC)與(PR,AP)指標對具有某種相似性。 ####按照循序漸進的原則,依次討論混淆矩陣、PR和AP: 設定一個機器學習問題情境:給定一些腫瘤患者樣本,構建一個分類模
> 傳說古代有一隻四角四足的怪獸:名叫`夕`。因冬天大雪導致夕沒東西吃,所以夕經常到附近的村裡找吃的,因其身體龐大、脾氣暴躁、凶猛異常,給村民帶來了很大的災難。 > > 後來有一位聰明的孩子,他叫做`年`,教給大家除掉“夕”的方法:用爆竹,輕則趕走它,重則傷它。每年`臘月三十`,夕都會來村裡,村名就`守著夜`
時間過的真快,假期就這麼結束了,今年因為疫情,情況有些特殊,很多人都要留在原地過年吧?太難了,但是就算回家了是不是還有更多難關在等著你呢? 一年未歸,回家見到父母、嬌妻、兒女,你是如何面對他們的呢? 帶著著這個問題… 一起來看看王大拿回家後,都發生了什麼吧? 春節回家的你,是將如何應對呢?? > 這是
首先祝大家新年快樂,身體健康,萬事如意。 一般來說一個系統最先出現瓶頸的點很可能是資料庫。比如我們的生產系統併發量很高在跑一段時間後,資料庫中某些表的資料量會越來越大。海量的資料會嚴重影響資料庫的讀寫效能。 這個時候我們會開始優化系統,一般會經過這麼幾個過程: 1. 找出SQL慢查詢,針對
# 01.大學學計算機應該選哪個專業呢? 系列文章目錄:入門之前:大學本科計算機專業入門之前所需瞭解的一系列文章 ## 專業篇 縱觀各大高校,許多大學開設了大量不同的計算機專業:電腦科學與技術、軟體工程、網路空間安全、物聯網工程等等,這一定讓人感到困惱,會提出一個大大的問號:**我學計算機專業,到底
一個查詢語句經過哪些步驟 這次我們從MySQL的整體架構來講SQL的執行過程,如下圖: 在整體分為兩部分Server和引擎層,這裡引擎層我使用InnoDB去代替,引擎層的設計是外掛形式的,可以任意替代,接下來我們開始介紹每個元件的作用: Server層 聯結器:聯結器負責跟客戶端建立連線、獲取許可權、維持
## 前言 作為一名 Java 語言的使用者,學習 JVM 有助於解決程式執行過程中出現的問題、寫出效能更高的程式碼。 可以說:學好 JVM 是成為中高階 Java 工程師的必經之路。 有感於從未整理歸納 JVM 相關的知識,所以打算寫一系列 JVM 相關的文章,以加深鞏固習得成果,為後續遺忘提供快速找回
## 0 論抽象——前言 故事要從一個看起來非常簡單的功能開始: ``` 請計算兩個數的和。 ``` 如果你對Python很熟悉,你一定會覺得:“哇!這太簡單了!”,然後寫出以下程式碼: ``` Python def Plus(lhs, rhs): return lhs + rhs ```
# 文章首發於個人部落格 [shuyi.tech](shuyi.tech),歡迎訪問更多有趣有價值的文章。 訪問者模式,重點在於訪問者二字。說到訪問,我們腦海中必定會想起新聞訪談,兩個人面對面坐在一起。從字面上的意思理解:其實就相當於被訪問者(某個公眾人物)把訪問者(記者)當成了外人,不想你隨便動。你想
利用IHttpClientFactory可以無縫建立HttpClient例項,避免手動管理它們的生命週期。 當使用ASP.Net Core開發應用程式時,可能經常需要通過HttpClient呼叫WebAPI的方法以檢查終結點是否正常工作。要實現這一點,通常需要例項化HttpClient並使用該例項來呼叫你的方
任何計算機儲存資料,都需要**字符集**,因為計算機儲存的資料其實都是二進位制編碼,將一個個字元,對映到對應的二進位制編碼的這個對映就是字元編碼(字符集)。這些字元如何排序呢?決定字元排序的規則就是**排序規則**。 # 檢視內建字符集與比較規則 通過`show charset;`命令,可以檢視所有的字符
[toc] *** ## 1. 臨界區保護 臨界區是僅允許一個執行緒訪問的共享資源。它可以是一個具體的硬體裝置,也可以是一個變數、一個緩衝區。多個執行緒必須互斥的對他們進行訪問 ### 1.1 方法一:關閉系統排程保護臨界區 禁止排程 ``` /* 排程器商鎖,上鎖後不再切換到其他執行緒,僅響應中斷 */