當業(yè)務需要大量去連接redis或者hbase的時候,大量的連接會造成socket的大量占用,導致的結果就是服務器沒有更多的端口去分配,這種情況下的最好解決方案就是實現(xiàn)客戶端連接的單例模式,保持連接永遠是同一個。說到這,可能大家沒有經(jīng)歷過,如果在每秒鐘插入4000條數(shù)據(jù)的話,這個現(xiàn)象就非常明顯了。下面就實現(xiàn)下python實現(xiàn)操作redis+hbase單例模式,有很多改進之處,根據(jù)自己業(yè)務進行調(diào)整,可以通過打印實例的ID進行驗證:

import happybase
import redis
class _RedisMgrSingleton(type):
'''redis的單例'''
def __init__(self, name, bases, dict):
super(_RedisMgrSingleton, self).__init__(name, bases, dict)
self._instance = {}
def __call__(self, host,port,db):
if not self._instance.has_key((host,port,db)):
self._instance[(host,port,db)] = super(_RedisMgrSingleton, self).__call__(host,port,db)
return self._instance[(host,port,db )]
class HbaseSingleton(type):
'''hbase的單例'''
def __init__(self, name, bases, dict):
super(HbaseSingleton, self).__init__(name, bases, dict)
self._instance = {}
def __call__(self, host,table):
if not self._instance.has_key((host,table)):
self._instance[(host,table)] = super(HbaseSingleton, self).__call__(host,table)
return self._instance[(host,table)]
class RedisMgr:
"redis操作專用類"
def __init__(self,host,port,db,max_connections=3):
"eg: host '192.168.2.184' port 6379 db 14"
self.host=host
self.port=port
self.db=db
self.conn=redis.Redis(connection_pool= redis.ConnectionPool(host=host,port=port,db=db,max_connections=max_connections))
def run_redis_fun(self,funname,*args):
fun=getattr(self.conn,funname)
print args
return fun(*args)
def pipe(self):
return self.conn.pipeline(transaction=False)
__metaclass__ = _RedisMgrSingleton #元類實現(xiàn)單例
class HbaseOperate(object):
def __init__(self,host,table):
self.host = host
self.table = table
self.conn = happybase.Connection(self.host)
self.table = self.conn.table(self.table)
def run(self,fun,*args):
# result =self.table.row(*args)
funname = getattr(self.table,fun)
return funname(*args)
def cells(self,column,info,version):
return self.table.cells(column,info,versions=version)
__metaclass__ = HbaseSingleton #元類實現(xiàn)單例
conn = HbaseOperate('xxx.xx.11.8',"history_visitor_product")
result = conn.cells('chenhuachao','info:visiotr',3)
print result
print "第一次",id(conn)
conn1 = HbaseOperate('xxx.xxx.11.8',"history_visitor_product")
result1= conn1.cells('chenhuachao','info:visiotr',6)
print result1
print "第二次",id(conn1)
#output
['test10', 'test9', 'test97']
第一次 38014896
['test10', 'test9', 'test97', 'test17', 'test1345\n']
第二次 38014896另外有需要云服務器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應用場景需求。
網(wǎng)頁題目:python實現(xiàn)redis客戶端單例+hbase客戶端單例-創(chuàng)新互聯(lián)
當前路徑:http://chinadenli.net/article16/cdojgg.html
成都網(wǎng)站建設公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站設計公司、用戶體驗、全網(wǎng)營銷推廣、品牌網(wǎng)站建設、移動網(wǎng)站建設、品牌網(wǎng)站制作
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容