Redis一致性Hash詳解

一、一致性Hash的概念

一致性Hash是一種分佈式哈希算法,在處理緩存、負載均衡等場景中被廣泛應用。它的核心思想是將每個節點映射到一個虛擬的哈希環上,將數據通過哈希算法計算得出的哈希值映射到環上,然後按照順時針方向開始查找離這個哈希值最近的節點,數據就被路由到該節點上。

然而,如果向哈希環中加入或刪除了一個節點,這將導致所有節點的哈希值的映射位置也會發生變化,從而影響所有數據的哈希值的映射位置,這時候需要重新分佈數據,即需要一致性Hash。


class ConsistentHash {
    private SortedMap circle = new TreeMap();
    private HashFunction hashFunction;

    public ConsistentHash(HashFunction hashFunction, List nodes, int replicaNum) {
        this.hashFunction = hashFunction;
        for (String node : nodes) {
            addNode(node, replicaNum);
        }
    }

    public void addNode(String node, int replicaNum) {
        for (int i = 0; i < replicaNum; i++) {
            circle.put(hashFunction.hash(node + i), node);
        }
    }

    public void removeNode(String node, int replicaNum) {
        for (int i = 0; i < replicaNum; i++) {
            circle.remove(hashFunction.hash(node + i));
        }
    }

    public String get(Object key) {
        if (circle.isEmpty()) {
            return null;
        }
        long hash = hashFunction.hash((String) key);
        if (!circle.containsKey(hash)) {
            SortedMap tailMap = circle.tailMap(hash);
            hash = tailMap.isEmpty() ? circle.firstKey() : tailMap.firstKey();
        }
        return circle.get(hash);
    }
}

interface HashFunction {
    long hash(String key);
}

class SimpleHashFunction implements HashFunction {
    private static final long MASK = 0xFFFFFFFFL;

    @Override
    public long hash(String key) {
        long hash = 0;
        for (int i = 0; i < key.length(); i++) {
            hash = (hash << 7) ^ key.charAt(i);
        }
        return hash & MASK;
    }
}

二、Redis一致性Hash的應用

Redis一致性Hash是Redis用於處理分佈式緩存的一種分佈式哈希算法,其應用場景主要包括多機部署,節點的動態增減等。它將在哈希環上的節點分散到多台機器上存儲數據,這樣每個節點可以集中精力處理數據的操作,而在數據的路由過程中,被路由到某個節點上的數據可以快速定位到對應的機器節點中。


public class RedisCluster {

    private static final String CACHE_KEY_PREFIX = "CACHE_KEY";

    private Map nodes = new HashMap();

    private ConsistentHash consistentHash;

    public RedisCluster(HashFunction hashFunction, List nodes, int replicaNum) {
        this.consistentHash = new ConsistentHash(hashFunction, nodes, replicaNum);
        for (String node : nodes) {
            Jedis jedis = new Jedis(node.split(":")[0], Integer.parseInt(node.split(":")[1]));
            this.nodes.put(node, jedis);
        }
    }

    public String set(String key, String value) {
        String node = consistentHash.get(CACHE_KEY_PREFIX + key);
        Jedis jedis = nodes.get(node);
        return jedis.set(CACHE_KEY_PREFIX + key, value);
    }

    public String get(String key) {
        String node = consistentHash.get(CACHE_KEY_PREFIX + key);
        Jedis jedis = nodes.get(node);
        return jedis.get(CACHE_KEY_PREFIX + key);
    }

    public void removeNode(String node) {
        nodes.remove(node);
        consistentHash.removeNode(node, 64);
    }

    public void addNode(String node) {
        Jedis jedis = new Jedis(node.split(":")[0], Integer.parseInt(node.split(":")[1]));
        nodes.put(node, jedis);
        consistentHash.addNode(node, 64);
    }
}

三、Redis一致性Hash的優缺點

Redis一致性Hash的優點在於:

  • 高可用性:通過對數據進行分片,能夠避免單點故障和性能瓶頸。
  • 數據擴展性:Redis一致性Hash的節點很容易添加或刪除,使得數據擴展變得異常簡單。

Redis一致性Hash的缺點在於:

  • 非真正的負載均衡:當數據集合比較小或節點數比較多時,可能會導致數據分佈不均勻,從而使得出現熱點。
  • 節點過少:當節點過少時,容易出現節點性能不均的情況。

原創文章,作者:小藍,如若轉載,請註明出處:https://www.506064.com/zh-hk/n/204482.html

(0)
打賞 微信掃一掃 微信掃一掃 支付寶掃一掃 支付寶掃一掃
小藍的頭像小藍
上一篇 2024-12-07 12:17
下一篇 2024-12-07 12:17

相關推薦

  • 在CentOS上安裝Redis

    Redis是一款非關係型數據庫,它支持多種數據結構,包括字符串、哈希、列表、集合、有序集合等。Redis運行內存內並且支持數據持久化,它還可以應用於緩存、消息隊列等場景。本文將介紹…

    編程 2025-04-28
  • 解析spring.redis.cluster.max-redirects參數

    本文將圍繞spring.redis.cluster.max-redirects參數進行詳細闡述,從多個方面解讀它的意義與作用,並給出相應的代碼示例。 一、基礎概念 在介紹sprin…

    編程 2025-04-27
  • C++ 0xff hash值是多少

    解答:在C++中,0xff是一個16進制數,其對應的十進制值是255。因此,C++ 0xff的hash值是255。 一、什麼是哈希值 哈希值是一種特殊的數據結構,它是將任意長度的消…

    編程 2025-04-27
  • Redis Bitmap用法介紹

    Redis是一款高性能的內存數據庫,支持多種數據類型,其中之一便是bitmap。Redis bitmap(位圖)是一種用二進制位來表示元素是否在集合中的數據結構。由於使用了二進制位…

    編程 2025-04-27
  • 神經網絡代碼詳解

    神經網絡作為一種人工智能技術,被廣泛應用於語音識別、圖像識別、自然語言處理等領域。而神經網絡的模型編寫,離不開代碼。本文將從多個方面詳細闡述神經網絡模型編寫的代碼技術。 一、神經網…

    編程 2025-04-25
  • Linux sync詳解

    一、sync概述 sync是Linux中一個非常重要的命令,它可以將文件系統緩存中的內容,強制寫入磁盤中。在執行sync之前,所有的文件系統更新將不會立即寫入磁盤,而是先緩存在內存…

    編程 2025-04-25
  • Python輸入輸出詳解

    一、文件讀寫 Python中文件的讀寫操作是必不可少的基本技能之一。讀寫文件分別使用open()函數中的’r’和’w’參數,讀取文件…

    編程 2025-04-25
  • nginx與apache應用開發詳解

    一、概述 nginx和apache都是常見的web服務器。nginx是一個高性能的反向代理web服務器,將負載均衡和緩存集成在了一起,可以動靜分離。apache是一個可擴展的web…

    編程 2025-04-25
  • Linux修改文件名命令詳解

    在Linux系統中,修改文件名是一個很常見的操作。Linux提供了多種方式來修改文件名,這篇文章將介紹Linux修改文件名的詳細操作。 一、mv命令 mv命令是Linux下的常用命…

    編程 2025-04-25
  • git config user.name的詳解

    一、為什麼要使用git config user.name? git是一個非常流行的分佈式版本控制系統,很多程序員都會用到它。在使用git commit提交代碼時,需要記錄commi…

    編程 2025-04-25

發表回復

登錄後才能評論