建站
咨詢
售后
建站咨詢
新聞中心
近年來，在軟件開發(fā)過程中，Redis數(shù)據(jù)庫已經(jīng)成為業(yè)界首選。它可以實現(xiàn)高效的內(nèi)存存儲，支持跨平臺，而且它的讀寫性能極其出色，能夠加快系統(tǒng)的處理速度，提升應(yīng)用的用戶體驗。
成都創(chuàng)新互聯(lián)主要從事做網(wǎng)站、成都網(wǎng)站設(shè)計、網(wǎng)頁設(shè)計、企業(yè)做網(wǎng)站、公司建網(wǎng)站等業(yè)務(wù)。立足成都服務(wù)霍城,十載網(wǎng)站建設(shè)經(jīng)驗,價格優(yōu)惠、服務(wù)專業(yè),歡迎來電咨詢建站服務(wù):18982081108
但是，當業(yè)務(wù)存儲大量數(shù)據(jù)時，單次導(dǎo)入到Redis數(shù)據(jù)庫的數(shù)據(jù)量不能超過一定限度，大規(guī)模的數(shù)據(jù)遷移會成為一個非常重要的難點。如果數(shù)據(jù)量較大，一次性導(dǎo)入到Redis數(shù)據(jù)庫可能會失敗，這時候就需要將數(shù)據(jù)遷移量分為若干次，分步遷移至Redis數(shù)據(jù)庫，從而使大規(guī)模的數(shù)據(jù)遷移變得更加容易。
實現(xiàn)這一目標，需要分兩步實施：第一步從數(shù)據(jù)源獲取大量數(shù)據(jù)；第二步將數(shù)據(jù)分段導(dǎo)入至Redis數(shù)據(jù)庫。
第一步，從MySQL數(shù)據(jù)庫讀取大量數(shù)據(jù)：
conn = mysql.connector.connect(host=”,port=3306,database=’mydb’,user=”,password=”)
cursor = conn.cursor()
sql = ‘select * from table1’
cursor.execute(sql)
results = cursor.fetchall()
conn.close()
第二步，將數(shù)據(jù)分段導(dǎo)入至Redis數(shù)據(jù)庫：
import redis
import JSON
# 連接Redis數(shù)據(jù)庫
r = redis.Redis(host=’localhost’,port=6379,db=1)
# 設(shè)置每次提取1000條數(shù)據(jù)
n = 1000
# 設(shè)置初始變量
m = 0
l = n
while m
new_results = results[m:l]
#將數(shù)據(jù)轉(zhuǎn)換為json格式
json_data = json.dumps(new_results)
#將json格式的數(shù)據(jù)寫入Redis
r.set(‘people_data’,json_data)
#讓m的值等于l的值
m = l
#讓l的值加上n的值
l = l+n
通過上面的代碼，可以實現(xiàn)大規(guī)模的批量遷移數(shù)據(jù)至Redis數(shù)據(jù)庫的功能。
創(chuàng)新互聯(lián)網(wǎng)絡(luò)推廣網(wǎng)站建設(shè)，網(wǎng)站設(shè)計，網(wǎng)站建設(shè)公司，網(wǎng)站制作，網(wǎng)頁設(shè)計，1500元定制網(wǎng)站優(yōu)化全包，先排名后付費，已為上千家服務(wù)，聯(lián)系電話：13518219792
網(wǎng)頁名稱：大規(guī)模批量遷移數(shù)據(jù)至Redis數(shù)據(jù)庫（批量遷移數(shù)據(jù)到redis）
網(wǎng)站網(wǎng)址：http://m.5511xx.com/article/cdsppjg.html
