1. 程式人生 > >通過SQL腳本導入數據到不同數據庫避免重復導入三種方式

通過SQL腳本導入數據到不同數據庫避免重復導入三種方式

數據 否則 ont bsp 連接 test logs eight 項目

前言

無論何種語言,一旦看見代碼中有重復性的代碼則想到封裝來復用,在SQL同樣如此,若我們沒有界面來維護而且需要經常進行的操作,我們會寫腳本避免下次又得重新寫一遍,但是這其中就涉及到一個問題,這個問題我開始也沒太在意,直到某時某刻,老大看到我寫的腳本後笑著問了一句,你的腳本可否重復執行,我懵逼了,很顯然不能,如果不能避免這種情況發生,比如進行插入操作,當下次其他同事來執行其腳本時可能會插入重復數據,如果是在線上那就傻逼了,所以老大又給我上了一課,從此之後每次寫腳本都加邏輯判斷,是的,也就是可重復執行。接下來講講最近項目中遇到的場景。

話題引入

在國民成年人體質測試中需要計算成年年紀且體側年齡為20-59歲,若當前日期未超過成年人出生日期則歲數減一,否則不減,例如一個成年人出生日期為1991-11-01,此時該成年人的體側年齡為25歲,若為1991-10-01則體側年齡為26歲,此為第一步。第二步則是分組,每個年齡階段的人測試的項目不一樣,即需要根據年齡進行分組,在體側文檔中分為3組,一組為男性20-39歲,一組為女性20-39,最後一組不分男女為40-59。最後我們需要做的是根據不同的年齡階段和性別進行分組。我們建立如下表。

技術分享

技術分享

由上我們可以看出有20-39歲的男性,也有20-39歲的女性。也有40-59歲的男性等,關鍵在於我們怎麽利用SQL根據國民成年人體質測試文檔計算出上述成年人的實際年齡呢。

SELECT  Id ,
        DATEDIFF(YEAR, Birthday, GETDATE()) AS age ,
        Name
FROM    dbo.t1

技術分享

看到上述查詢明顯不正確,未到出生日期的人年齡並未減掉1,此時我們可以利用DATEPART函數,第一個參數指定為dayofyear,此參數表明指定日期到在這一年的天數,例如我們想要獲取當前已經過了多少天。

SELECT
DATEPART(dayofyear, GETDATE())

技術分享

SELECT DATEPART(dayofyear, 2017-12-31)

技術分享

我們通過出生日期的天數和當前日期的天數,若大於當前日期天數則說明生日還未到,否則減掉1。

SELECT  Id ,
        DATEDIFF(YEAR, Birthday, GETDATE())
        - CASE WHEN DATEPART(DAYOFYEAR, Birthday) > DATEPART(DAYOFYEAR,
                                                             
GETDATE()) THEN 1 ELSE 0 END Age , Name FROM dbo.t1

技術分享

此時我們完成了年齡階段的區分,下面我們再插入到另外一個數據庫它test2中。 這裏我能想到的是兩種種方式,若還有其他歡迎補充。

LEFT JOIN ....IS NULL

我們利用左連接來進行插入,同時若重復的話則另外需要插入的表主鍵必定不為NULL,所以我們外加NULL判斷則可以去除重復插入問題。

INSERT  INTO test2.dbo.t2
        ( UserId ,
          Birthday ,
          Gender ,
          Name
        )
        SELECT  t1.Id ,
                t1.Birthday ,
                t1.Gender ,
                t1.Name
        FROM    dbo.t1 AS t1
                LEFT JOIN test2.dbo.t2 AS t2 ON t1.Id = t2.UserId
        WHERE   t2.Id IS NULL  

技術分享

當再次執行時則返回受影響行數為0

技術分享

NOT EXISTS/NOT IN

INSERT  INTO test2.dbo.t2
        ( UserId ,
          Birthday ,
          Gender ,
          Name
        )
        SELECT  t1.Id ,
                t1.Birthday ,
                t1.Gender ,
                t1.Name
        FROM    dbo.t1 AS t1  
        WHERE NOT EXISTS(SELECT t2.UserId
                    FROM test2.dbo.t2 t2
                   WHERE t2.UserId = t1.Id)
INSERT  INTO test2.dbo.t2
        ( UserId ,
          Birthday ,
          Gender ,
          Name
        )
        SELECT  t1.Id ,
                t1.Birthday ,
                t1.Gender ,
                t1.Name
        FROM    dbo.t1 AS t1  
        WHERE t1.Id NOT in (SELECT t2.UserId
                    FROM test2.dbo.t2 t2
                   WHERE t2.UserId = t1.Id)

總結

本節我們講述了利用寫SQL腳本避免重復插入問題,同時來講述了如何根據出生日期查詢實際年齡。

通過SQL腳本導入數據到不同數據庫避免重復導入三種方式