百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

Python使用Redis实现排行榜介绍(python redis操作)

off999 2024-11-04 13:17 16 浏览 0 评论

软件开发过程中经常遇到产品的排行榜需求。例文章浏览量排行榜、文章点赞排行榜、图书销量Top50排行榜、粉丝Top100排行榜、用户积分排行榜等。排行榜前期可以使用的产品用户激励,后期可以使用在产品内容推荐、数据统计、广告营销方面。

排行榜一般对数据实效性要求很高。太低的数据实效性可能达不到对用户的激励作用。今天为大家介绍我们借助Redis的高并发高性能和Redis的zset有序集合特性实现排行榜的高负载和高实时性。

1、Python Redis安装

#mac redis安装
brew install redis

#python redis安装
pip install redis

#python redis官方文档
https://redis.readthedocs.io/en/latest/commands.html#core-commands

2、Redis ZADD增加成员(移除冗余数据)

import redis

"""
@author 312每天一个短知识
@desc Redis排行榜类
@date 2022-04-28 23:48:12
"""
class RedisRank:
	
	"""
	排行榜最大记录数
	"""
	MAX_COUNT = 3

	"""
	@author 312每天一个短知识
	@desc 初始化构造函数 
	@date 2022-04-28 23:48:12
	"""
	def __init__(self):
		self._conn = redis.StrictRedis(host='127.0.0.1', port=6379, db=0)

	"""
	@author 312每天一个短知识
	@desc 新增一条记录 
	@date 2022-04-28 23:48:12
	"""
	def zadd(self, key, member, score):
		res = self._conn.zadd(key, {member: score})
		total = self._conn.zcard(key)
                #set集合中数据超过阈值移动阈值外的成员保证Redis内存使用量和服务稳定性
		if self.MAX_COUNT < total:
			self._conn.zremrangebyrank(key, 0, total - self.MAX_COUNT - 1)
		return res

	"""
	@author 312每天一个短知识
	@desc 移除集合里冗余的数据 
	@date 2022-04-28 23:48:12
	"""
	def zremrangebyrank(self, key, start, stop):
		return self._conn.zremrangebyrank(key, start, stop)

	"""
	@author 312每天一个短知识
	@desc 求集合记录总数 
	@date 2022-04-28 23:48:12
	"""
	def zcard(self, key):
		return self._conn.zcard(key)

3、Redis ZINCRBY增量成员score

import redis

"""
@author 312每天一个短知识
@desc Redis排行榜类
@date 2022-04-28 23:48:12
"""
class RedisRank:
	
	"""
	排行榜最大记录数
	"""
	MAX_COUNT = 3

	"""
	@author 312每天一个短知识
	@desc 初始化构造函数 
	@date 2022-04-28 23:48:12
	"""
	def __init__(self):
		self._conn = redis.StrictRedis(host='127.0.0.1', port=6379, db=0)
  
	"""
	@author 312每天一个短知识
	@desc 增量集合成员score值 
	@date 2022-04-28 23:48:12
	"""
	def zincrby(self, key, member, score):
		return self._conn.zincrby(key, score, member)

4、Redis ZREVRANGE从高到低score排序

import redis

"""
@author 312每天一个短知识
@desc Redis排行榜类
@date 2022-04-28 23:48:12
"""
class RedisRank:
	
	"""
	排行榜最大记录数
	"""
	MAX_COUNT = 3

	"""
	@author 312每天一个短知识
	@desc 初始化构造函数 
	@date 2022-04-28 23:48:12
	"""
	def __init__(self):
		self._conn = redis.StrictRedis(host='127.0.0.1', port=6379, db=0)
	
	"""
	@author 312每天一个短知识
	@desc 从高到低排行set数据 
	@date 2022-04-28 23:48:12
	"""
	def zrevrange(self, key, min, max):
		return self._conn.zrevrange(key, min, max, withscores=True)

5、Python Redis业务代码

#导入模块并实例化类
from rank import RedisRank
rrank  = RedisRank()

#测试set rank数据
rrank.zadd("t2", 'a1', 10)
rrank.zadd("t2", 'a2', 8)
rrank.zadd("t2", 'a3', 15)
rrank.zadd("t2", 'a4', 12)
rrank.zadd("t2", 'a5', 20)
rrank.zadd("t2", 'a6', 11)
rrank.zadd("t2", 'a7', 17)
rrank.zadd("t2", 'a8', 19)

#增量set成员score
rrank.zincrby("t2", 'a8', 5.0)

#set集合排行榜
setrank = rrank.zrevrange("t2", 0, -1)
for member, score in setrank:
        print(member, score)
        
执行结果:
b'a8' 24.0
b'a5' 20.0
b'a7' 17.0

6、总结

    • 业务代码在ZADD时考虑排行的数据量一般都很大,所以增加了set集合总数超过阈值移除阈值外的集合成员的逻辑。一方面节约Redis内存使用量,另一方面提升服务稳定性(排行榜的数据不与业务数据量的增加而增长)。
    • zadd时间复杂度O(k*log(n))k为添加成员个数。n为当前成员个数。zrevrange时间复杂度O(log(n)+k)k为要获取的成员个数,n为当前成员个数。从Redis命令时间复杂度看增加阈值限制set集合的成员个数对时间复杂度很有价值。

大家如果有更好的排行榜处理方式可以评论沟通。


感谢大家的评论、点赞、分享、关注。。。

相关推荐

Python 数据分析——利用Pandas进行分组统计

话说天下大势,分久必合,合久必分。数据分析也是如此,我们经常要对数据进行分组与聚合,以对不同组的数据进行深入解读。本章将介绍如何利用Pandas中的GroupBy操作函数来完成数据的分组、聚合以及统计...

python数据分析:介绍pandas库的数据类型Series和DataFrame

安装pandaspipinstallpandas-ihttps://mirrors.aliyun.com/pypi/simple/使用pandas直接导入即可importpandasas...

使用DataFrame计算两列的总和和最大值_[python]

【如果对您有用,请关注并转发,谢谢~~】最近在处理气象类相关数据的空间计算,在做综合性计算的时候,DataFrame针对每列的统计求和、最大值等较为方便,对某行的两列或多列数据进行求和与最大值等的简便...

8-Python内置函数

Python提供了丰富的内置函数,这些函数可以直接使用而无需导入任何模块。以下是一些常用的内置函数及其示例:1-print()1-1-说明输出指定的信息到控制台。1-2-例子2-len()2-1-说...

Python中函数式编程函数: reduce()函数

Python中的reduce()函数是一个强大的工具,它通过连续地将指定的函数应用于序列(如列表)来对序列(如列表)执行累积操作。它是functools模块的一部分,这意味着您需要在使用它之...

万万没想到,除了香农计划,Python3.11竟还有这么多性能提升

众所周知,Python3.11版本带来了较大的性能提升,但是,它具体在哪些方面上得到了优化呢?除了著名的“香农计划”外,它还包含哪些与性能相关的优化呢?本文将带你一探究竟!作者:BeshrKay...

最全python3.11版12类75个内置函数大全

获取全部内置函数:importbuiltins#导入模块yc=[]#异常属性nc=[]#不可调用fn=[]#内置函数defll(ty=builtins):...

软件测试笔试题

测试工程师岗位,3-5年,10-14k1.我司有一款产品,类似TeamViewer,向日葵,mstsc,QQ远程控制产品,一个PC客户端产品,请设想一下测试要点。并写出2.写出常用的SQL语句8条,l...

备战各大互联网巨头公司招聘会,最全Python面试大全,共300题

前言众所周知,越是顶尖的互联网公司在面试这一part的要求就越高,需要你有很好的技术功底、项目经验、一份漂亮的简历,当然还有避免不了的笔试过关。对于Python的工程师来说,全面掌握好有关Python...

经典 SQL 数据库笔试题及答案整理

马上又是金三银四啦,有蛮多小伙伴在跳槽找工作,但对于年限稍短的软件测试工程师,难免会需要进行笔试,而在笔试中,基本都会碰到一道关于数据库的大题,今天这篇文章呢,就收录了下最近学员反馈上来的一些数据库笔...

用Python开发日常小软件,让生活与工作更高效!附实例代码

引言:Python如何让生活更轻松?在数字化时代,编程早已不是程序员的专属技能。Python凭借其简洁易学的特点,成为普通人提升效率、解决日常问题的得力工具。无论是自动化重复任务、处理数据,还是开发个...

太牛了!102个Python实战项目被我扒到了!建议收藏!

挖到宝了!整整102个Python实战项目合集,从基础语法到高阶应用全覆盖,附完整源码+数据集,手把手带你从代码小白变身实战大神!这波羊毛不薅真的亏到哭!超全项目库,学练一站式搞定这份资...

Python中的并发编程

1.Python对并发编程的支持多线程:threading,利用CPU和IO可以同时执行的原理,让CPU不会干巴巴等待IO完成。多进程:multiprocessing,利用多核CPU...

Python 也有内存泄漏?

1.背景前段时间接手了一个边缘视觉识别的项目,大功能已经开发的差不多了,主要是需要是优化一些性能问题。其中比较突出的内存泄漏的问题,而且不止一处,有些比较有代表性,可以总结一下。为了更好地可视化内存...

python爬虫之多线程threading、多进程、协程aiohttp批量下载图片

一、单线程常规下载常规单线程执行脚本爬取壁纸图片,只爬取一页的图片。importdatetimeimportreimportrequestsfrombs4importBeautifu...

取消回复欢迎 发表评论: