1. 程式人生 > >dubbo負載均衡策略及對應原始碼分析

dubbo負載均衡策略及對應原始碼分析

在叢集負載均衡時,Dubbo 提供了多種均衡策略,預設為 random 隨機呼叫。我們還可以擴充套件自己的負責均衡策略,前提是你已經從一個小白變成了大牛,嘻嘻

1、Random LoadBalance

1.1 隨機,按權重設定隨機概率。

1.2 在一個截面上碰撞的概率高,但呼叫量越大分佈越均勻,而且按概率使用權重後也比較均勻,有利於動態調整提供者權重。

1.3 原始碼分析

package com.alibaba.dubbo.rpc.cluster.loadbalance;

import java.util.List;
import java.util.Random;

import com.alibaba.dubbo.common.URL;
import com.alibaba.dubbo.rpc.Invocation;
import com.alibaba.dubbo.rpc.Invoker;

/**
 * random load balance.
 *
 * @author qianlei
 * @author william.liangf
 */
public class RandomLoadBalance extends AbstractLoadBalance {

public static final String NAME = "random";

private final Random random = new Random();

 protected <T> Invoker<T> doSelect(List<Invoker<T>> invokers, URL url, Invocation    invocation) {
    int length = invokers.size(); // 總個數
    int totalWeight = 0; // 總權重
    boolean sameWeight = true; // 權重是否都一樣
    for (int i = 0; i < length; i++) {
        int weight = getWeight(invokers.get(i), invocation);
        totalWeight += weight; // 累計總權重
        if (sameWeight && i > 0
                && weight != getWeight(invokers.get(i - 1), invocation)) {
            sameWeight = false; // 計算所有權重是否一樣
        }
    }
    if (totalWeight > 0 && ! sameWeight) {
        // 如果權重不相同且權重大於0則按總權重數隨機
        int offset = random.nextInt(totalWeight);
        // 並確定隨機值落在哪個片斷上
        for (int i = 0; i < length; i++) {
            offset -= getWeight(invokers.get(i), invocation);
            if (offset < 0) {
                return invokers.get(i);
            }
        }
    }
    // 如果權重相同或權重為0則均等隨機
    return invokers.get(random.nextInt(length));
}

}

說明:從原始碼可以看出隨機負載均衡的策略分為兩種情況

a. 如果總權重大於0並且權重不相同,就生成一個1~totalWeight(總權重數)的隨機數,然後再把隨機數和所有的權重值一一相減得到一個新的隨機數,直到隨機 數小於0,那麼此時訪問的伺服器就是使得隨機數小於0的權重所在的機器

b. 如果權重相同或者總權重數為0,就生成一個1~length(權重的總個數)的隨機數,此時所訪問的機器就是這個隨機數對應的權重所在的機器

2、RoundRobin LoadBalance

2.1 輪循,按公約後的權重設定輪循比率。

2.2 存在慢的提供者累積請求的問題,比如:第二臺機器很慢,但沒掛,當請求調到第二臺時就卡在那,久而久之,所有請求都卡在調到第二臺上。

2.3 原始碼分析

package com.alibaba.dubbo.rpc.cluster.loadbalance;

import java.util.ArrayList;
import java.util.List;
import java.util.concurrent.ConcurrentHashMap;
import java.util.concurrent.ConcurrentMap;

import com.alibaba.dubbo.common.URL;
import com.alibaba.dubbo.common.utils.AtomicPositiveInteger;
import com.alibaba.dubbo.rpc.Invocation;
import com.alibaba.dubbo.rpc.Invoker;

 /**
* Round robin load balance.
*
* @author qian.lei
* @author william.liangf
*/
public class RoundRobinLoadBalance extends AbstractLoadBalance {

public static final String NAME = "roundrobin"; 

private final ConcurrentMap<String, AtomicPositiveInteger> sequences = new ConcurrentHashMap<String, AtomicPositiveInteger>();

private final ConcurrentMap<String, AtomicPositiveInteger> weightSequences = new ConcurrentHashMap<String, AtomicPositiveInteger>();

protected <T> Invoker<T> doSelect(List<Invoker<T>> invokers, URL url, Invocation invocation) {
    String key = invokers.get(0).getUrl().getServiceKey() + "." + invocation.getMethodName();
    int length = invokers.size(); // 總個數
    int maxWeight = 0; // 最大權重
    int minWeight = Integer.MAX_VALUE; // 最小權重
    for (int i = 0; i < length; i++) {
        int weight = getWeight(invokers.get(i), invocation);
        maxWeight = Math.max(maxWeight, weight); // 累計最大權重
        minWeight = Math.min(minWeight, weight); // 累計最小權重
    }
    if (maxWeight > 0 && minWeight < maxWeight) { // 權重不一樣
        AtomicPositiveInteger weightSequence = weightSequences.get(key);
        if (weightSequence == null) {
            weightSequences.putIfAbsent(key, new AtomicPositiveInteger());
            weightSequence = weightSequences.get(key);
        }
        int currentWeight = weightSequence.getAndIncrement() % maxWeight;
        List<Invoker<T>> weightInvokers = new ArrayList<Invoker<T>>();
        for (Invoker<T> invoker : invokers) { // 篩選權重大於當前權重基數的Invoker
            if (getWeight(invoker, invocation) > currentWeight) {
                weightInvokers.add(invoker);
            }
        }
        int weightLength = weightInvokers.size();
        if (weightLength == 1) {
            return weightInvokers.get(0);
        } else if (weightLength > 1) {
            invokers = weightInvokers;
            length = invokers.size();
        }
    }
    AtomicPositiveInteger sequence = sequences.get(key);
    if (sequence == null) {
        sequences.putIfAbsent(key, new AtomicPositiveInteger());
        sequence = sequences.get(key);
    }
    // 取模輪循
    return invokers.get(sequence.getAndIncrement() % length);
}

}

說明:從原始碼可以看出輪循負載均衡的演算法是:

a. 如果權重不一樣時,獲取一個當前的權重基數,然後從權重集合中篩選權重大於當前權重基數的集合,如果篩選出的集合的長度為1,此時所訪問的機器就是集合裡面的權重對應的機器

b. 如果權重一樣時就取模輪循

3、LeastActive LoadBalance

3.1 最少活躍呼叫數,相同活躍數的隨機,活躍數指呼叫前後計數差(呼叫前的時刻減去響應後的時刻的值)。

3.2 使慢的提供者收到更少請求,因為越慢的提供者的呼叫前後計數差會越大

3.3 對應的原始碼

package com.alibaba.dubbo.rpc.cluster.loadbalance;

import java.util.List;
import java.util.Random;

import com.alibaba.dubbo.common.Constants;
import com.alibaba.dubbo.common.URL;
import com.alibaba.dubbo.rpc.Invocation;
import com.alibaba.dubbo.rpc.Invoker;
import com.alibaba.dubbo.rpc.RpcStatus;

/**
* LeastActiveLoadBalance
* 
* @author william.liangf
*/
public class LeastActiveLoadBalance extends AbstractLoadBalance {

public static final String NAME = "leastactive";

private final Random random = new Random();

protected <T> Invoker<T> doSelect(List<Invoker<T>> invokers, URL url, Invocation invocation) {
    int length = invokers.size(); // 總個數
    int leastActive = -1; // 最小的活躍數
    int leastCount = 0; // 相同最小活躍數的個數
    int[] leastIndexs = new int[length]; // 相同最小活躍數的下標
    int totalWeight = 0; // 總權重
    int firstWeight = 0; // 第一個權重,用於於計算是否相同
    boolean sameWeight = true; // 是否所有權重相同
    for (int i = 0; i < length; i++) {
        Invoker<T> invoker = invokers.get(i);
        int active = RpcStatus.getStatus(invoker.getUrl(), invocation.getMethodName()).getActive(); // 活躍數
        int weight = invoker.getUrl().getMethodParameter(invocation.getMethodName(), Constants.WEIGHT_KEY, Constants.DEFAULT_WEIGHT); // 權重
        if (leastActive == -1 || active < leastActive) { // 發現更小的活躍數,重新開始
            leastActive = active; // 記錄最小活躍數
            leastCount = 1; // 重新統計相同最小活躍數的個數
            leastIndexs[0] = i; // 重新記錄最小活躍數下標
            totalWeight = weight; // 重新累計總權重
            firstWeight = weight; // 記錄第一個權重
            sameWeight = true; // 還原權重相同標識
        } else if (active == leastActive) { // 累計相同最小的活躍數
            leastIndexs[leastCount ++] = i; // 累計相同最小活躍數下標
            totalWeight += weight; // 累計總權重
            // 判斷所有權重是否一樣
            if (sameWeight && i > 0 
                    && weight != firstWeight) {
                sameWeight = false;
            }
        }
    }
    // assert(leastCount > 0)
    if (leastCount == 1) {
        // 如果只有一個最小則直接返回
        return invokers.get(leastIndexs[0]);
    }
    if (! sameWeight && totalWeight > 0) {
        // 如果權重不相同且權重大於0則按總權重數隨機
        int offsetWeight = random.nextInt(totalWeight);
        // 並確定隨機值落在哪個片斷上
        for (int i = 0; i < leastCount; i++) {
            int leastIndex = leastIndexs[i];
            offsetWeight -= getWeight(invokers.get(leastIndex), invocation);
            if (offsetWeight <= 0)
                return invokers.get(leastIndex);
        }
    }
    // 如果權重相同或權重為0則均等隨機
    return invokers.get(leastIndexs[random.nextInt(leastCount)]);
}
}

說明:原始碼裡面的註釋已經很清晰了,大致的意思就是活躍數越小的的機器分配到的請求越多

4、ConsistentHash LoadBalance

4.1 一致性 Hash,相同引數的請求總是發到同一提供者。

4.2 當某一臺提供者掛時,原本發往該提供者的請求,基於虛擬節點,平攤到其它提供者,不會引起劇烈變動。

4.3 預設只對第一個引數 Hash,如果要修改,請配置 <dubbo:parameter key="hash.arguments" value="0,1" />

4.4 預設用 160 份虛擬節點,如果要修改,請配置 <dubbo:parameter key="hash.nodes" value="320" />

4.5 原始碼分析暫時還沒有弄懂,後面弄懂了再補充進來,有興趣的小夥伴可以自己去看一下原始碼,然後一起交流一下心得

如果想免費學習Java工程化、高效能及分散式、深入淺出。微服務、Spring,MyBatis,Netty原始碼分析的朋友可以加我的Java進階群:478030634,群裡有阿里大牛直播講解技術,以及Java大型網際網路技術的視訊免費分享給大家。

5、dubbo官方的文件的負載均衡配置示例

服務端服務級別

<dubbo:service interface="..." loadbalance="roundrobin" />

客戶端服務級別

<dubbo:reference interface="..." loadbalance="roundrobin" />

服務端方法級別

  <dubbo:service interface="...">
  <dubbo:method name="..." loadbalance="roundrobin"/>
  </dubbo:service>

客戶端方法級別

  <dubbo:reference interface="...">
  <dubbo:method name="..." loadbalance="roundrobin"/>
  </dubbo:reference>