其他

資料排程元件:基於Azkaban協調時序任務執行

# 一、Azkaban概述 ## 1、任務時序 在資料服務的業務場景中,很常見的業務流程就是日誌檔案經過大資料分析,再向業務輸出結果資料;在該過程中會有很多工需要執行,並且很難精準把握任務執行的結束時間,但是又希望整個任務鏈儘快結束釋放資源。 ![](https://img2020.cnblogs.co

Redis實戰篇(二)基於Bitmap實現使用者簽到功能

很多應用上都有使用者簽到的功能,尤其是配合積分系統一起使用。現在有以下需求: 1. 簽到1天得1積分,連續簽到2天得2積分,3天得3積分,3天以上均得3積分等。 2. 如果連續簽到中斷,則重置計數,每月重置計數。 3. 顯示使用者某月的簽到次數和首次簽到時間。 4. 在日曆控制元件上展示使用者每月簽到,可以切

【秒懂音視訊開發】12_播放WAV

對於WAV檔案來說,可以直接使用*ffplay*命令播放,而且不用像PCM那樣增加額外的引數。因為WAV的檔案頭中已經包含了相關的音訊引數資訊。 ```shell ffplay in.wav ``` 接下來演示一下如何使用SDL播放WAV檔案。 ## 初始化子系統 ```cpp // 初始化Audio

(原創)在Linux上安裝執行Python3(CentOS7為例)

在win10上開發好的python專案要部署在Linux上要面對的問題:怎麼在Linux上跑py檔案呢? 以Lunix CentOS7.x平臺為例,CentOS系統上自帶的已有python2.x 的版本,使用命令可以檢視。 但我們需要python3.x 的主流版本,此時建議不要刪除原有的python2 ,而

走進docker-聊聊docker網路

容器網路概念 首先了解下linux的網路構成概念 名稱空間: Linux在網路棧中引入網路名稱空間,將獨立的網路協議棧隔離到不同的命令空間中,彼此間無法通訊;Docker利用這一特性,實現不容器間的網路隔離。 Veth裝置對:實現不同名稱空間通訊 Iptables/Netfilter: Ipt

比Django官方實現更好的分頁元件+Bootstrap整合

## 前言 Django全家桶自帶的分頁元件只能說能滿足分頁這個功能,但是沒那麼好用就是了 #### Django的分頁效果 ![](https://upload-images.jianshu.io/upload_images/8869373-73cfb4a57d038070.png?imageMogr

臥槽,線上資料刪錯了,差點被老闆開除

前言 無論是開發、測試,還是DBA,都難免會涉及到資料庫的操作,比如:建立某張表,新增某個欄位、新增資料、更新資料、刪除資料、查詢資料等等。 正常情況下還好,但如果操作資料庫時出現失誤,比如: 刪除訂單資料時where條件寫錯了,導致多刪了很多使用者訂單。 更新會員有效時間時,一次性把所有會員的有效時間都更

Java中的IO流 - 入門篇

前言 大家好啊,我是湯圓,今天給大家帶來的是《Java中的IO流-入門篇》,希望對大家有幫助,謝謝   由於Java的IO類有很多,這就導致我剛開始學的時候,感覺很亂,每次用到都是上網搜,結果每次用完就忘; 後來沉下心去看書學習,才明白都是有規律的; 這裡先做個簡單的介紹,作為入門級教程,後面還有很

Hibernate的Dao層通用設計

hibernate作為一款優秀的資料庫持久化框架,在現實的運用中是非常廣泛的。它的出現讓不熟悉sql語法的程式設計師能開發資料庫連線層成為一種可能,但是理想與現實永遠是有差距的。開發過程中如果只使用hql進行操作,並且表之間的關聯配置很複雜的話,這將成為一種噩夢。還好我們偉大的hibernate支援原生的sq

[原始碼解析] 並行分散式框架 Celery 之 worker 啟動 (1)

# [原始碼解析] 並行分散式框架 Celery 之 worker 啟動 (1) [toc] ## 0x00 摘要 Celery是一個簡單、靈活且可靠的,處理大量訊息的分散式系統,專注於實時處理的非同步任務佇列,同時也支援任務排程。Celery 是呼叫其Worker 元件來完成具體任務處理。 ```s

微信小程式--簡約風部落格小程式(基於雲開發 - 全開源)

### 微信小程式--簡約風部落格小程式(基於雲開發 - 全開源) 專案啟動純屬突發奇想,想看看部落格小程式,例如**wehalo**部落格小程式,但是感覺自建平臺還要浪費自己的伺服器算力,還沒有訪問量,省省吧。 本著白嫖的精神,用**NodeJS**完成了爬蟲,小程式雲開發也用免費的伺服器,完成了該開源

cookie跨域那些事兒

一個請求從發出到返回,需要瀏覽器和服務端的協調配合。瀏覽器要把自己的請求引數帶給服務端,服務端校驗引數之後,除了返回資料,也可能會順便把請求是否快取,cookie等資訊告訴瀏覽器。當請求是跨域請求的時候,這個過程還要複雜一些。接下來咱們就看看跨域會有什麼問題,又需要前後端進行怎樣的配合。 ### 普通跨域

談談對IOC及DI的理解與思考

# 一、前言 在實際的開發過程中,我們經常會遇到這樣的情況,在進行除錯分析問題的時候,經常需要記錄日誌資訊,這時可以採用輸出到控制檯。 因此,我們通常會定義一個日誌類,來實現輸出日誌。 定義一個生成驗證的邏輯處理方法, ```c# public class Logger {

0.52681803703308