摘要:背景在平時的維護中,經(jīng)常會遇到要統(tǒng)計某個前綴的有多少,在請求比較多的中,會直接導(dǎo)致阻塞。可以采用的方式進行增量迭代,查詢使用減少交互,提高效率。
1.背景
在平時的維護中,經(jīng)常會遇到要統(tǒng)計某個前綴的key有多少,在請求比較多的redis中,keys * 會直接導(dǎo)致阻塞。
可以采用scan的方式進行增量迭代,查詢使用pipeline減少交互,提高效率。
優(yōu)點:
提供鍵空間的遍歷操作,支持游標(biāo),復(fù)雜度O(1), 整體遍歷一遍只需要O(N);
提供結(jié)果模式匹配;
支持一次返回的數(shù)據(jù)條數(shù)設(shè)置,但僅僅是個hints,有時候返回的會多;
弱狀態(tài),所有狀態(tài)只需要客戶端需要維護一個游標(biāo);
缺點:
無法提供完整的快照遍歷,也就是中間如果有數(shù)據(jù)修改,可能有些涉及改動的數(shù)據(jù)遍歷不到;
每次返回的數(shù)據(jù)條數(shù)不一定,極度依賴內(nèi)部實現(xiàn);
返回的數(shù)據(jù)可能有重復(fù),應(yīng)用層必須能夠處理重入邏輯;
python中有一個封裝的函數(shù)scan_iter--查看所有元素--迭代器
腳本內(nèi)容:
#!/usr/bin/env python # -*- coding: UTF-8 -*- #作用:統(tǒng)計某個前綴key的個數(shù),并將其輸入到文件 #使用方法:python scan_redis.py apus* 100 __author__ = "lcl" import sys import redis import os pool=redis.ConnectionPool(host="192.168.225.128",port=6379,db=0) r = redis.StrictRedis(connection_pool=pool) #掃描匹配值,通過sys.argv傳參 match = sys.argv[1] #每次匹配數(shù)量 count = sys.argv[2] #print match #print count #總數(shù)量 total = 0 #掃描到的key輸出到文件 path = os.getcwd() #掃描到的key輸出的文件 txt = path+"/keys.txt" f = open(txt,"w") for key in r.scan_iter(match = match,count = count): # f.write("%s %s" % (key," ")) f.write(key+" ") total = total+1 f.close print "匹配: %s 的數(shù)量為:%d " % (match,total)
文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請注明本文地址:http://m.specialneedsforspecialkids.com/yun/41550.html
摘要:單線程執(zhí)行命令。文件描述符事件。內(nèi)部原因不合理使用或數(shù)據(jù)結(jié)構(gòu)可能由此導(dǎo)致慢查詢等飽和是單線程,只會使用單個持久化阻塞操作產(chǎn)生阻塞,對硬盤的操作產(chǎn)生阻塞或?qū)懖僮髯枞取?nèi)存達到時執(zhí)行內(nèi)存溢出控制策略。 最近在看《Redis開發(fā)與運維》,把自己學(xué)會的知識點記錄下來,畢竟好記性不如爛筆頭。 一.Redis是什么。 Redis是一個Key-Value的NoSQL數(shù)據(jù)庫. 二.Redis的特點。...
摘要:異步事件處理本項目涉及到多種異步事件的處理。即是的粉絲,是的關(guān)注對象。模式定義優(yōu)缺點推事件觸發(fā)后廣播給所有粉絲。具體來說,推模式就是事件觸發(fā)后產(chǎn)生,觸發(fā)事件的用戶下所有粉絲的實現(xiàn)中都存入該的。 項目源代碼已托管在 Github,歡迎 Star、Fork。 Q & A 問答社區(qū) QA 是一個基于 B/S 架構(gòu)而設(shè)計開發(fā)的社區(qū)網(wǎng)站。 showImg(https://segmentfault...
閱讀 2754·2021-11-19 09:40
閱讀 5321·2021-09-27 14:10
閱讀 2108·2021-09-04 16:45
閱讀 1480·2021-07-25 21:37
閱讀 3003·2019-08-30 10:57
閱讀 2988·2019-08-28 17:59
閱讀 1062·2019-08-26 13:46
閱讀 1414·2019-08-26 13:27