百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

python 中使用redis实现分布式锁和看门狗

off999 2024-11-04 13:16 19 浏览 0 评论

锁是什么?

编程中的锁是控制不同线程之间访问共享资源的一种实现,需要实现互斥,来防止彼此干扰,来保证数据一致性。

门 和 锁的比喻

人是不同的线程,卫生间是共享资源
你在上洗手间的时候肯定要把门锁上吧,这就是加锁,只要你在里面,这个卫生间就被锁了,只有你出来之后别人才能用。想象一下如果卫生间的门没有锁会是什么样?

应用场景

使用分布式锁的目的,无外乎就是保证同一时间只有一个客户端可以对共享资源进行操作。

根据锁的用途还可以细分为以下两类

  1. 允许多个客户端操作共享资源
  2. 这种情况下,对共享资源的操作一定是幂等性操作,无论你操作多少次都不会出现不同结果。在这里使用锁,无外乎就是为了避免重复操作共享资源从而提高效率。
  3. 只允许一个客户端操作共享资源
  4. 这种情况下,对共享资源的操作一般是非幂等性操作。在这种情况下,如果出现多个客户端操作共享资源,就可能意味着数据不一致,数据丢失。

怎么实现?

  1. 加锁
  2. 释放锁
  3. 锁的延续(看门狗)

不要着急,下面我们开始的实现它,以下我们会使用redis实现分布式锁和看门狗机制。

以下是使用Python实现Redis分布式锁并支持看门狗的示例代码:

```python
import time
import threading
import redis

class RedisLock:
    def __init__(self, client, lock_key, acquire_timeout=10, expire_time=10):
        self.client = client
        self.lock_key = lock_key
        self.acquire_timeout = acquire_timeout
        self.expire_time = expire_time
        self.lock_value = None

    def acquire(self):
        start_time = time.time()
        while time.time() - start_time < self.acquire_timeout:
            if self.client.set(self.lock_key, 1, ex=self.expire_time, nx=True):
                self.lock_value = 1
                return True
            time.sleep(0.001)
        return False

    def release(self):
        if self.lock_value:
            self.client.delete(self.lock_key)
            self.lock_value = None

class RedisLockWithWatchdog:
    def __init__(self, client, lock_key, acquire_timeout=10, expire_time=10, watchdog_interval=5):
        self.lock = RedisLock(client, lock_key, acquire_timeout, expire_time)
        self.watchdog_interval = watchdog_interval
        self.watchdog_thread = None
        self.stop_watchdog = threading.Event()

    def acquire(self):
        if self.lock.acquire():
            self.start_watchdog()
            return True
        return False

    def release(self):
        self.stop_watchdog.set()
        self.lock.release()

    def watchdog(self):
        while not self.stop_watchdog.wait(self.watchdog_interval):
            self.renew_lock()

    def start_watchdog(self):
        self.watchdog_thread = threading.Thread(target=self.watchdog)
        self.watchdog_thread.start()

    def renew_lock(self):
        if self.lock.lock_value:
            self.lock.client.expire(self.lock.lock_key, self.lock.expire_time)

# 使用示例
client = redis.Redis()
lock = RedisLockWithWatchdog(client, 'mylock')

if lock.acquire():
    try:
        # 在锁内部执行需要保护的操作
        print("Got the lock!")
        time.sleep(5)
    finally:
        lock.release()
```

在代码中,`RedisLock`类用于实现基本的Redis分布式锁,`RedisLockWithWatchdog`类

相关推荐

还不会deepseek部署到本地?这篇教程手把手教会你

一、为什么要把DeepSeek部署到本地?新手必看的前置知识近期很多读者在后台询问AI工具本地部署的问题,今天以国产优质模型DeepSeek为例,手把手教你实现本地化部署。本地部署有三大优势:数据隐私...

推荐个超实用的Python标准库pathlib,玩转路径操作

pathlib学习Python时,尤其是在进行文件操作和数据处理时,经常会处理路径问题。最常用和常见的是os.path模块,它将路径当做字符串进行处理,如果使用不当可能导致难以察觉的错误,而且...

python中文件读写操作最佳实践——使用 os.path 进行路径操作

在Python中处理文件路径时,使用os.path模块比直接使用字符串拼接更加安全、可靠且跨平台。下面我将详细解释为什么以及如何使用os.path进行路径操作。为什么不应该使用字符串拼接?#不推荐的...

Python如何获取当前文件所在目录的完整路径

在编程的过程中,我们常常会遇到需要获取当前文件所在目录完整路径的需求。那具体该怎么做呢?这是在众多开发者群体中备受关注的一个问题,就像在问答平台上“/questions/3430372/how-d...

python编程之神经网络篇(python的神经网络编程)

#头条创作挑战赛#神经网络发展到今天大致经历了2次兴起和2次衰落,1943年心理学家McCulloch(麦卡洛克)和数学家Pitts(皮茨)参考生物神经系统的工作原理,首次提出建立了MP神经元模型。其...

详解Python整数类型的按位运算(在python中整数)

在Python编程中,按位运算是直接对整数的二进制位进行操作的底层运算,虽然不如逻辑运算常见,但在处理位掩码、状态标志、底层算法优化等场景中至关重要。本文将从基础概念到高级应用,全面解析Python整...

强化学习的改进只是「噪音」?最新预警:冷静看待推理模型进展

机器之心报道编辑:蛋酱、+0「推理」已成为语言模型的下一个主要前沿领域,近期学术界和工业界都取得了突飞猛进的进展。在探索的过程中,一个核心的议题是:对于模型推理性能的提升来说,什么有效?什么无效?De...

了解python3新特性-3(python3介绍)

以下是Python3的其他一些特性:改进了asyncio.run():Python3.7中对asyncio.run()函数进行了改进,可以方便地处理异步任务异常。新增了typing....

python GIL全局解释器锁原理、功能及应用示例

GIL(GlobalInterpreterLock)是Python解释器中的一个机制,它是一把全局锁,用于在同一时间内限制只有一个线程执行Python字节码。以下是GIL的原理、功能以及5个示例:...

python3-运算符优先级(python语言运算符优先级)

#挑战30天在头条写日记#Python运算符优先级以下列出了从最高到最低优先级的所有运算符,相同单元格内的运算符具有相同优先级。运算符均指二元运算,除非特别指出。相同单元格内的运算符从左至右分组...

如何在 Python 中使用 Notion API?

如何在Python中使用NotionAPI并自动编辑数据库。设置NotionAPI和数据库首先,让我们在Notion板中创建一个完整的页面数据库。在本文中,我使用了一个来自我的一个数据库的真实示...

一文了解 Python 的临时文件模块(python tmpfile)

Python的Tempfile模块是用于创建临时文件和文件夹的标准库。当我们需要临时存储数据时,可以创建临时文件,这些文件位于单独的目录中,该目录因操作系统而异,并且这些文件的名称是唯一的。在...

一文带您精通Python 集合(Set):8个不可不知的技巧及示例

在Python中,集合(Set)与列表(List)、字典(Dict)、元组(Tuple)一起构成了基本的数据结构。集合以其独特的无序性和元素唯一性,在处理数据时具有独特的优势。然而,很多人对集合的...

数据类型的&quot;变形记&quot;:解锁Python数据处理效率的关键钥匙

在日常编程中,数据就像流动的河水,而数据类型就是塑造河道的模具。当我们从用户输入、文件读取或网络请求中获取数据时,往往需要像侦探一样验证它们的真实身份,再像魔术师一样将它们转换成需要的形态。这就是数据...

大学 Python 程序设计实验报告:基于组合数据类型

一、实验目的编写Python程序,实现对简单文本的处理,掌握列表、元组、字典等组合类型的应用。二、实验要求掌握字符串的输入和输出。掌握使用切片的方式访问字符串中的值。掌握常见的字符串内建函数的应用。...

取消回复欢迎 发表评论: