這篇文章主要講解了python一次性封裝多條sql語句的實現(xiàn)方法,內(nèi)容清晰明了,對此有興趣的小伙伴可以學習一下,相信大家閱讀完之后會有幫助。

python封裝利用begin end執(zhí)行多條sql
因為業(yè)務需求,優(yōu)化模型運行時間。考慮到sql語句每一次執(zhí)行都要建立連接,查詢,獲取數(shù)據(jù)耗時過多。就想到將sql一起提交上去運行,能夠節(jié)省很多時間。原本1.6-2.5秒耗時的sql語句經(jīng)過修改后時間降到0.3-0.6秒,感覺性能提升挺好的。
當然還有一種想法,如果有python框架的orm可能會更快,相比來說耗時基本看不到了吧,這只是我的猜想,僅僅為了優(yōu)化一個模型寫一個框架的話 代碼可能需要改的比較多,自我感覺付出和收獲不一定會成正比,當然以后有時間可以試試。
這次優(yōu)化基本代碼邏輯沒有動,利用了begin end進行sql整合。
公司用的是oracle,之前沒用過但是感覺和mysql基本類似,如果是mysql的話該方法也可用
sql_str = ‘begin\n'
sql_str += ‘這里時需要執(zhí)行的sql語句'
sql_str += ‘\ncommit;end;'
中間sql有多少條無所謂,看了一下運行時間感覺 我的一千行sql耗時 幾乎就是這一千行里面耗時最長那個時間。是異步完成還是什么這個就不是很清楚了,主要是一次建立連接,省去網(wǎng)絡傳輸數(shù)據(jù)和請求數(shù)據(jù)庫的過程
網(wǎng)上好多begin end都是在可視化工具中的sql執(zhí)行的,并不能在command中執(zhí)行,這就意味中我們代碼中封裝的語句沒有卵用,還好沒放棄當時就研究了一下找到了解決辦法
在end 提交一下就ok了,如果在command中運行一直未結(jié)束的話加一個 / 斜線就ok了
本次內(nèi)容就此結(jié)束,下面是一些題外話。
在說一個其中遇到的問題吧,在進行sql封裝后,其中很多表都很亂,約束很亂 而且邏輯并不嚴謹,但是模型正在運行還不讓動 那只能按照這個規(guī)則來了
ORA 00001 違反唯一約束條件 其中出現(xiàn)了這個問題,意思就是唯一約束重復了,因為模型輸入問題,處理出來的結(jié)果之前可能剛插入到數(shù)據(jù)庫中(也就是 上面的sql_str 出現(xiàn)了兩天相同的insert),這個東西很簡單,加一個set判斷一下就行,但是到這之后,一個bug就跳出來了,這個腳本計算的是因子重要度,結(jié)果預測可能每次都不相同,有些數(shù)據(jù)很小的可能就當成0扔進去了,所以我需要做的是將 相同數(shù)據(jù)的情況下插入較為重要的因子重要度(也無需要 ),這樣的話簡簡單單的set就不行了,但是也不難 用來一下字典
importance_map = {}
實現(xiàn)創(chuàng)建好字典
if feature in importance_map:
if importance_map[feature] < importance:
sql_str +=‘***************‘'' 這里就是insert語句了
else:
continue
else:
importance_map[feature] = importance另外有需要云服務器可以了解下創(chuàng)新互聯(lián)scvps.cn,海內(nèi)外云服務器15元起步,三天無理由+7*72小時售后在線,公司持有idc許可證,提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢,專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應用場景需求。
網(wǎng)頁題目:python一次性封裝多條sql語句的實現(xiàn)方法-創(chuàng)新互聯(lián)
文章出自:http://chinadenli.net/article30/spppo.html
成都網(wǎng)站建設公司_創(chuàng)新互聯(lián),為您提供標簽優(yōu)化、營銷型網(wǎng)站建設、App設計、搜索引擎優(yōu)化、網(wǎng)站導航、手機網(wǎng)站建設
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容