當(dāng)業(yè)務(wù)需要大量去連接redis或者h(yuǎn)base的時(shí)候,大量的連接會(huì)造成socket的大量占用,導(dǎo)致的結(jié)果就是服務(wù)器沒有更多的端口去分配,這種情況下的最好解決方案就是實(shí)現(xiàn)客戶端連接的單例模式,保持連接永遠(yuǎn)是同一個(gè)。說到這,可能大家沒有經(jīng)歷過,如果在每秒鐘插入4000條數(shù)據(jù)的話,這個(gè)現(xiàn)象就非常明顯了。下面就實(shí)現(xiàn)下python實(shí)現(xiàn)操作redis+hbase單例模式,有很多改進(jìn)之處,根據(jù)自己業(yè)務(wù)進(jìn)行調(diào)整,可以通過打印實(shí)例的ID進(jìn)行驗(yàn)證:

創(chuàng)新互聯(lián)公司長期為千余家客戶提供的網(wǎng)站建設(shè)服務(wù),團(tuán)隊(duì)從業(yè)經(jīng)驗(yàn)10年,關(guān)注不同地域、不同群體,并針對(duì)不同對(duì)象提供差異化的產(chǎn)品和服務(wù);打造開放共贏平臺(tái),與合作伙伴共同營造健康的互聯(lián)網(wǎng)生態(tài)環(huán)境。為南宮企業(yè)提供專業(yè)的網(wǎng)站建設(shè)、成都網(wǎng)站建設(shè),南宮網(wǎng)站改版等技術(shù)服務(wù)。擁有10多年豐富建站經(jīng)驗(yàn)和眾多成功案例,為您定制開發(fā)。
import happybase
import redis
class _RedisMgrSingleton(type):
'''redis的單例'''
def __init__(self, name, bases, dict):
super(_RedisMgrSingleton, self).__init__(name, bases, dict)
self._instance = {}
def __call__(self, host,port,db):
if not self._instance.has_key((host,port,db)):
self._instance[(host,port,db)] = super(_RedisMgrSingleton, self).__call__(host,port,db)
return self._instance[(host,port,db )]
class HbaseSingleton(type):
'''hbase的單例'''
def __init__(self, name, bases, dict):
super(HbaseSingleton, self).__init__(name, bases, dict)
self._instance = {}
def __call__(self, host,table):
if not self._instance.has_key((host,table)):
self._instance[(host,table)] = super(HbaseSingleton, self).__call__(host,table)
return self._instance[(host,table)]
class RedisMgr:
"redis操作專用類"
def __init__(self,host,port,db,max_connections=3):
"eg: host '192.168.2.184' port 6379 db 14"
self.host=host
self.port=port
self.db=db
self.conn=redis.Redis(connection_pool= redis.ConnectionPool(host=host,port=port,db=db,max_connections=max_connections))
def run_redis_fun(self,funname,*args):
fun=getattr(self.conn,funname)
print args
return fun(*args)
def pipe(self):
return self.conn.pipeline(transaction=False)
__metaclass__ = _RedisMgrSingleton #元類實(shí)現(xiàn)單例
class HbaseOperate(object):
def __init__(self,host,table):
self.host = host
self.table = table
self.conn = happybase.Connection(self.host)
self.table = self.conn.table(self.table)
def run(self,fun,*args):
# result =self.table.row(*args)
funname = getattr(self.table,fun)
return funname(*args)
def cells(self,column,info,version):
return self.table.cells(column,info,versions=version)
__metaclass__ = HbaseSingleton #元類實(shí)現(xiàn)單例
conn = HbaseOperate('xxx.xx.11.8',"history_visitor_product")
result = conn.cells('chenhuachao','info:visiotr',3)
print result
print "第一次",id(conn)
conn1 = HbaseOperate('xxx.xxx.11.8',"history_visitor_product")
result1= conn1.cells('chenhuachao','info:visiotr',6)
print result1
print "第二次",id(conn1)
#output
['test10', 'test9', 'test97']
第一次 38014896
['test10', 'test9', 'test97', 'test17', 'test1345\n']
第二次 38014896
文章題目:python實(shí)現(xiàn)redis客戶端單例+hbase客戶端單例
標(biāo)題網(wǎng)址:http://chinadenli.net/article12/gdgcdc.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供企業(yè)建站、外貿(mào)網(wǎng)站建設(shè)、動(dòng)態(tài)網(wǎng)站、網(wǎng)站維護(hù)、App開發(fā)、品牌網(wǎng)站建設(shè)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)