背景
在單進程的系統中,當存在多個線程可以同時改變某個變量(可變共享變量)時娘侍,就需要對變量或代碼塊做同步向族,使其在修改這種變量時能夠線性執(zhí)行消除并發(fā)修改變量。
而同步的本質是通過鎖來實現的驶冒。為了實現多個線程在一個時刻同一個代碼塊只能有一個線程可執(zhí)行,那么需要在某個地方做個標記韵卤,這個標記必須每個線程都能看到骗污,當標記不存在時可以設置該標記,其余后續(xù)線程發(fā)現已經有標記了則等待擁有標記的線程結束同步代碼塊取消標記后再去嘗試設置標記沈条。這個標記可以理解為鎖需忿。
不同地方實現鎖的方式也不一樣,只要能滿足所有線程都能看得到標記即可拍鲤。如 Java 中 synchronize 是在對象頭設置標記贴谎,Lock 接口的實現類基本上都只是某一個 volitile 修飾的 int 型變量其保證每個線程都能擁有對該 int 的可見性和原子修改汞扎,linux 內核中也是利用互斥量或信號量等內存數據做標記季稳。
除了利用內存數據做鎖其實任何互斥的都能做鎖(只考慮互斥情況),如流水表中流水號與時間結合做冪等校驗可以看作是一個不會釋放的鎖澈魄,或者使用某個文件是否存在作為鎖等景鼠。只需要滿足在對標記進行修改能保證原子性和內存可見性即可。
概念
1 什么是分布式?
分布式的 CAP 理論告訴我們:
任何一個分布式系統都無法同時滿足一致性(Consistency)铛漓、可用性(Availability)和分區(qū)容錯性(Partition tolerance)溯香,最多只能同時滿足兩項。
目前很多大型網站及應用都是分布式部署的浓恶,分布式場景中的數據一致性問題一直是一個比較重要的話題玫坛。基于 CAP理論包晰,很多系統在設計之初就要對這三者做出取舍湿镀。在互聯網領域的絕大多數的場景中,都需要犧牲強一致性來換取系統的高可用性伐憾,系統往往只需要保證最終一致性勉痴。
場景
分布式場景
此處主要指集群模式下,多個相同服務同時開啟.
在許多的場景中树肃,我們?yōu)榱吮WC數據的最終一致性蒸矛,需要很多的技術方案來支持,比如分布式事務胸嘴、分布式鎖等雏掠。很多時候我們需要保證一個方法在同一時間內只能被同一個線程執(zhí)行。在單機環(huán)境中劣像,通過 Java 提供的并發(fā) API 我們可以解決磁玉,但是在分布式環(huán)境下,就沒有那么簡單啦驾讲。
??● 分布式與單機情況下最大的不同在于其不是多線程而是多進程蚊伞。
??● 多線程由于可以共享堆內存,因此可以簡單的采取內存作為標記存儲位置吮铭。而進程之間甚至可能都不在同一臺物理機上时迫,因此需要將標記存儲在一個所有進程都能看到的地方。
什么是分布式鎖谓晌?
??● 當在分布式模型下掠拳,數據只有一份(或有限制),此時需要利用鎖的技術控制某一時刻修改數據的進程數纸肉。
??● 與單機模式下的鎖不僅需要保證進程可見溺欧,還需要考慮進程與鎖之間的網絡問題。(我覺得分布式情況下之所以問題變得復雜柏肪,主要就是需要考慮到網絡的延時和不可靠姐刁。。烦味。一個大坑)
??● 分布式鎖還是可以將標記存在內存聂使,只是該內存不是某個進程分配的內存而是公共內存如 Redis、Memcache。至于利用數據庫柏靶、文件等做鎖與單機的實現是一樣的弃理,只要保證標記能互斥就行。
2 我們需要怎樣的分布式鎖屎蜓?
可以保證在分布式部署的應用集群中痘昌,同一個方法在同一時間只能被一臺機器上的一個線程執(zhí)行。
這把鎖要是一把可重入鎖(避免死鎖)
這把鎖最好是一把阻塞鎖(根據業(yè)務需求考慮要不要這條)
這把鎖最好是一把公平鎖(根據業(yè)務需求考慮要不要這條)
有高可用的獲取鎖和釋放鎖功能
獲取鎖和釋放鎖的性能要好
代碼實現
public interface IDistributedLock
? ? {
? ? ? ? ILockResult Lock(string resourceKey);
? ? ? ? ILockResult Lock(string resourceKey, TimeSpan expiryTime);
? ? ? ? ILockResult Lock(string resourceKey, TimeSpan expiryTime, TimeSpan waitTime, TimeSpan retryTime);
? ? ? ? ILockResult Lock(string resourceKey, TimeSpan expiryTime, TimeSpan waitTime, TimeSpan retryTime, CancellationToken cancellationToken);
? ? ? ? Task<ILockResult> LockAsync(string resourceKey);
? ? ? ? Task<ILockResult> LockAsync(string resourceKey, TimeSpan expiryTime);
? ? ? ? Task<ILockResult> LockAsync(string resourceKey, TimeSpan expiryTime, TimeSpan waitTime, TimeSpan retryTime);
? ? ? ? Task<ILockResult> LockAsync(string resourceKey, TimeSpan expiryTime, TimeSpan waitTime, TimeSpan retryTime, CancellationToken cancellationToken);
? ? }
? ? public interface ILockResult : IDisposable
? ? {
? ? ? ? string LockId { get; }
? ? ? ? bool IsAcquired { get; }
? ? ? ? int ExtendCount { get; }
? ? }
class EndPoint:RedLock.RedisLockEndPoint
? ? {
? ? ? ? private readonly string _connectionString;
? ? ? ? public EndPoint(string connectionString)
? ? ? ? {
? ? ? ? ? ? _connectionString = connectionString;
? ? ? ? ? ? //139.196.40.252,password=xstudio,defaultDatabase=9
? ? ? ? ? ? var connection = connectionString.Split(',');
? ? ? ? ? ? var dict = new Dictionary<string, string>();
? ? ? ? ? ? foreach (var item in connection)
? ? ? ? ? ? {
? ? ? ? ? ? ? ? var keypar = item.Split('=');
? ? ? ? ? ? ? ? if (keypar.Length>1)
? ? ? ? ? ? ? ? {
? ? ? ? ? ? ? ? ? ? dict[keypar[0]] = keypar[1];
? ? ? ? ? ? ? ? }
? ? ? ? ? ? }
? ? ? ? ? ? this.EndPoint = new System.Net.DnsEndPoint(connection[0], 6379);
? ? ? ? ? ? if (dict.TryGetValue("password", out string password))
? ? ? ? ? ? {
? ? ? ? ? ? ? ? this.Password = password;
? ? ? ? ? ? }
? ? ? ? ? ? if (dict.TryGetValue("defaultDatabase", out string defaultDatabase) && int.TryParse(defaultDatabase,out int database))
? ? ? ? ? ? {
? ? ? ? ? ? ? ? RedisDatabase = database;
? ? ? ? ? ? }
? ? ? ? }
? ? }
[Export(typeof(IDistributedLock))]
? ? class InnerLock : IDistributedLock
? ? {
? ? ? ? private static Lazy<RedLock.RedisLockFactory> _factory;
? ? ? ? static InnerLock()
? ? ? ? {
? ? ? ? ? ? _factory = new Lazy<RedisLockFactory>(() => new RedisLockFactory(new EndPoint(ConfigurationManager.AppSettings["Redis"])), System.Threading.LazyThreadSafetyMode.ExecutionAndPublication);
? ? ? ? }
? ? ? ? public ILockResult Lock(string resourceKey)
? ? ? ? {
? ? ? ? ? ? return new LockResult(_factory.Value.Create(resourceKey, TimeSpan.FromDays(1)));
? ? ? ? }
? ? ? ? public ILockResult Lock(string resourceKey, TimeSpan expiryTime)
? ? ? ? {
? ? ? ? ? ? return new LockResult(_factory.Value.Create(resourceKey, expiryTime));
? ? ? ? }
? ? ? ? public ILockResult Lock(string resourceKey, TimeSpan expiryTime, TimeSpan waitTime, TimeSpan retryTime)
? ? ? ? {
? ? ? ? ? ? return new LockResult(_factory.Value.Create(resourceKey, expiryTime, waitTime, retryTime));
? ? ? ? }
? ? ? ? public ILockResult Lock(string resourceKey, TimeSpan expiryTime, TimeSpan waitTime, TimeSpan retryTime, CancellationToken cancellationToken)
? ? ? ? {
? ? ? ? ? ? return new LockResult(_factory.Value.Create(resourceKey, expiryTime, waitTime, retryTime, cancellationToken));
? ? ? ? }
? ? ? ? public async Task<ILockResult> LockAsync(string resourceKey)
? ? ? ? {
? ? ? ? ? ? var result = await _factory.Value.CreateAsync(resourceKey, TimeSpan.FromDays(1));
? ? ? ? ? ? return new LockResult(result);
? ? ? ? }
? ? ? ? public async Task<ILockResult> LockAsync(string resourceKey, TimeSpan expiryTime)
? ? ? ? {
? ? ? ? ? ? var result = await _factory.Value.CreateAsync(resourceKey, expiryTime);
? ? ? ? ? ? return new LockResult(result);
? ? ? ? }
? ? ? ? public async Task<ILockResult> LockAsync(string resourceKey, TimeSpan expiryTime, TimeSpan waitTime, TimeSpan retryTime)
? ? ? ? {
? ? ? ? ? ? var result = await _factory.Value.CreateAsync(resourceKey, expiryTime, waitTime, retryTime);
? ? ? ? ? ? return new LockResult(result);
? ? ? ? }
? ? ? ? public async Task<ILockResult> LockAsync(string resourceKey, TimeSpan expiryTime, TimeSpan waitTime, TimeSpan retryTime, CancellationToken cancellationToken)
? ? ? ? {
? ? ? ? ? ? var result = await _factory.Value.CreateAsync(resourceKey, expiryTime, waitTime, retryTime, cancellationToken);
? ? ? ? ? ? return new LockResult(result);
? ? ? ? }
? ? }
? ? class LockResult : ILockResult
? ? {
? ? ? ? private IRedisLock _lock;
? ? ? ? public LockResult(IRedisLock redisLock)
? ? ? ? {
? ? ? ? ? ? _lock = redisLock;
? ? ? ? }
? ? ? ? public string LockId => _lock.LockId;
? ? ? ? public bool IsAcquired => _lock.IsAcquired;
? ? ? ? public int ExtendCount => _lock.ExtendCount;
? ? ? ? public void Dispose()
? ? ? ? {
? ? ? ? ? ? _lock.Dispose();
? ? ? ? }
? ? }
開源地址
https://github.com/samcook/RedLock.net
https://github.com/StackExchange/StackExchange.Redis/