數(shù)據(jù)庫的讀寫壓力太大了，請(qǐng)問有什么方法

這要根據(jù)是讀壓力大還是寫壓力大分別考慮。

創(chuàng)新互聯(lián)公司主要業(yè)務(wù)有網(wǎng)站營(yíng)銷策劃、網(wǎng)站設(shè)計(jì)、成都網(wǎng)站設(shè)計(jì)、微信公眾號(hào)開發(fā)、重慶小程序開發(fā)、成都h5網(wǎng)站建設(shè)、程序開發(fā)等業(yè)務(wù)。一次合作終身朋友，是我們奉行的宗旨；我們不僅僅把客戶當(dāng)客戶，還把客戶視為我們的合作伙伴，在開展業(yè)務(wù)的過程中，公司還積累了豐富的行業(yè)經(jīng)驗(yàn)、全網(wǎng)營(yíng)銷推廣資源和合作伙伴關(guān)系資源，并逐漸建立起規(guī)范的客戶服務(wù)和保障體系。 

讀壓力也要看，是單個(gè)表單個(gè)記錄的查詢壓力太頻繁，還是多個(gè)表多行記錄的統(tǒng)計(jì)計(jì)算壓力大。

通常你可以考慮mysql當(dāng)中，一個(gè)master用于寫入，多個(gè)slave用于查詢。

單行記錄的查詢還可以結(jié)合memcached這樣的緩存。

這些都需要根據(jù)經(jīng)驗(yàn)，規(guī)劃好整個(gè)系統(tǒng)的架構(gòu)模式，并不斷進(jìn)行調(diào)整和優(yōu)化。

mysql數(shù)據(jù)庫表太大查詢慢優(yōu)化的幾種方法

優(yōu)化方案：

主從同步+讀寫分離：

這個(gè)表在有設(shè)備條件的情況下，讀寫分離，這樣能減少很多壓力，而且數(shù)據(jù)穩(wěn)定性也能提高

縱向分表：

根據(jù)原則，每個(gè)表最多不要超過5個(gè)索引，縱向拆分字段，將部分字段拆到一個(gè)新表

通常我們按以下原則進(jìn)行垂直拆分:（先區(qū)分這個(gè)表中的冷熱數(shù)據(jù)字段）

把不常用的字段單獨(dú)放在一張表;

把text，blob等大字段拆分出來放在附表中;

經(jīng)常組合查詢的列放在一張表中;

缺點(diǎn)是：很多邏輯需要重寫，帶來很大的工作量。

利用表分區(qū)：

這個(gè)是推薦的一個(gè)解決方案，不會(huì)帶來重寫邏輯等，可以根據(jù)時(shí)間來進(jìn)行表分區(qū)，相當(dāng)于在同一個(gè)磁盤上，表的數(shù)據(jù)存在不同的文件夾內(nèi)，能夠極大的提高查詢速度。

橫向分表：

1000W條數(shù)據(jù)不少的，會(huì)帶來一些運(yùn)維壓力，備份的時(shí)候，單表備份所需時(shí)間會(huì)很長(zhǎng)，所以可以根據(jù)服務(wù)器硬件條件進(jìn)行水平分表，每個(gè)表有多少數(shù)據(jù)為準(zhǔn)。

如何優(yōu)化mysql寫入速

單機(jī)MySQL數(shù)據(jù)庫的優(yōu)化

一、服務(wù)器硬件對(duì)MySQL性能的影響

①磁盤尋道能力 （磁盤I/O），我們現(xiàn)在上的都是SAS15000轉(zhuǎn)的硬盤。MySQL每秒鐘都在進(jìn)行大量、復(fù)雜的查詢操作，對(duì)磁盤的讀寫量可想而知。所以，通常認(rèn)為磁 盤I/O是制約MySQL性能的最大因素之一，對(duì)于日均訪 問量在100萬PV以上的Discuz!論壇，由于磁盤I/O的制約，MySQL的性能會(huì)非常低下！解決這一制約因素可以考慮以下幾種解決方案： 使用RAID1+0磁盤陣列，注意不要嘗試使用RAID-5，MySQL在RAID-5磁盤陣列上的效率不會(huì)像你期待的那樣快。

②CPU 對(duì)于MySQL應(yīng)用，推薦使用DELL R710，E5620 @2.40GHz（4 core）* 2 ，我現(xiàn)在比較喜歡DELL R710，也在用其作Linuxakg 虛擬化應(yīng)用；

③物理內(nèi)存對(duì)于一臺(tái)使用MySQL的Database Server來說，服務(wù)器內(nèi)存建議不要小于2GB，推薦使用4GB以上的物理內(nèi)存，不過內(nèi)存對(duì)于現(xiàn)在的服務(wù)器而言可以說是一個(gè)可以忽略的問題，工作中遇到高端服務(wù)器基本上內(nèi)存都超過了32G。

我們工作中用得比較多的數(shù)據(jù)庫服務(wù)器是HP DL580G5和DELL R710，穩(wěn)定性和性能都不錯(cuò)；特別是DELL R710，我發(fā)現(xiàn)許多同行都是采用它作數(shù)據(jù)庫的服務(wù)器，所以重點(diǎn)推薦下。

二、MySQL的線上安裝我建議采取編譯安裝的方法，這樣性能上有較大提升，服務(wù)器系統(tǒng)我建議用64bit的Centos5.5，源碼包的編譯參數(shù)會(huì)默 認(rèn)以Debgu模式生成二進(jìn)制代碼，而Debug模式給MySQL帶來的性能損失是比較大的，所以當(dāng)我們編譯準(zhǔn)備安裝的產(chǎn)品代碼時(shí)，一定不要忘記使用“— without-debug”參數(shù)禁用Debug模式。而如果把—with-mysqld-ldflags和—with-client-ldflags二 個(gè)編譯參數(shù)設(shè)置為—all-static的話，可以告訴編譯器以靜態(tài)方式編譯和編譯結(jié)果代碼得到最高的性能。使用靜態(tài)編譯和使用動(dòng)態(tài)編譯的代碼相比，性能 差距可能會(huì)達(dá)到5%至10%之多。我參考了簡(jiǎn)朝陽先生的編譯參數(shù)，特列如下，供大家參考

./configure –prefix=/usr/local/mysql –without-debug –without-bench –enable-thread-safe-client –enable-assembler –enable-profiling –with-mysqld-ldflags=-all-static –with-client-ldflags=-all-static –with-charset=latin1 –with-extra-charset=utf8,gbk –with-innodb –with-csv-storage-engine –with-federated-storage-engine –with-mysqld-user=mysql –without-我是怎么了ded-server –with-server-suffix=-community –with-unix-socket-path=/usr/local/mysql/sock/mysql.sock

三、MySQL自身因素當(dāng)解決了上述服務(wù)器硬件制約因素后，讓我們看看MySQL自身的優(yōu)化是如何操作的。對(duì) MySQL自身的優(yōu)化主要是對(duì)其配置文件my.cnf中的各項(xiàng)參數(shù)進(jìn)行優(yōu)化調(diào)整。下面介紹一些對(duì)性能影響較大的參數(shù)。

下面，根據(jù)以上硬件配置結(jié)合一份已經(jīng)優(yōu)化好的my.cnf進(jìn)行說明：

#vim /etc/my.cnf

以下只列出my.cnf文件中[mysqld]段落中的內(nèi)容，其他段落內(nèi)容對(duì)MySQL運(yùn)行性能影響甚微，因而姑且忽略。

[mysqld]

port = 3306

serverid = 1

socket = /tmp/mysql.sock

skip-locking

#避免MySQL的外部鎖定，減少出錯(cuò)幾率增強(qiáng)穩(wěn)定性。

skip-name-resolve

#禁止MySQL對(duì)外部連接進(jìn)行DNS解析，使用這一選項(xiàng)可以消除MySQL進(jìn)行DNS解析的時(shí)間。但需要注意，如果開啟該選項(xiàng)，則所有遠(yuǎn)程主機(jī)連接授權(quán)都要使用IP地址方式，否則MySQL將無法正常處理連接請(qǐng)求！

back_log = 384

#back_log參數(shù)的值指出在MySQL暫時(shí)停止響應(yīng)新請(qǐng)求之前的短時(shí)間內(nèi)多少個(gè)請(qǐng)求可以被存在堆棧中。 如果系統(tǒng)在一個(gè)短時(shí)間內(nèi)有很多連接，則需要增大該參數(shù)的值，該參數(shù)值指定到來的TCP/IP連接的偵聽隊(duì)列的大小。不同的操作系統(tǒng)在這個(gè)隊(duì)列大小上有它自 己的限制。 試圖設(shè)定back_log高于你的操作系統(tǒng)的限制將是無效的。默認(rèn)值為50。對(duì)于Linux系統(tǒng)推薦設(shè)置為小于512的整數(shù)。

key_buffer_size = 384M

#key_buffer_size指定用于索引的緩沖區(qū)大小，增加它可得到更好的索引處理性能。對(duì)于內(nèi)存在4GB左右的服務(wù)器該參數(shù)可設(shè)置為256M或384M。注意：該參數(shù)值設(shè)置的過大反而會(huì)是服務(wù)器整體效率降低！

max_allowed_packet = 4M

thread_stack = 256K

table_cache = 614K

sort_buffer_size = 6M

#查詢排序時(shí)所能使用的緩沖區(qū)大小。注意：該參數(shù)對(duì)應(yīng)的分配內(nèi)存是每連接獨(dú)占，如果有100個(gè)連接，那么實(shí)際分配的總共排序緩沖區(qū)大小為100 × 6 ＝ 600MB。所以，對(duì)于內(nèi)存在4GB左右的服務(wù)器推薦設(shè)置為6-8M。

read_buffer_size = 4M

#讀查詢操作所能使用的緩沖區(qū)大小。和sort_buffer_size一樣，該參數(shù)對(duì)應(yīng)的分配內(nèi)存也是每連接獨(dú)享。

join_buffer_size = 8M

#聯(lián)合查詢操作所能使用的緩沖區(qū)大小，和sort_buffer_size一樣，該參數(shù)對(duì)應(yīng)的分配內(nèi)存也是每連接獨(dú)享。

myisam_sort_buffer_size = 64M

table_cache = 512

thread_cache_size = 64

query_cache_size = 64M

#指定MySQL查詢緩沖區(qū)的大小。可以通過在MySQL控制臺(tái)觀察，如果Qcache_lowmem_prunes的值非常大，則表明經(jīng)常出現(xiàn)緩沖不 夠 的情況；如果Qcache_hits的值非常大，則表明查詢緩沖使用非常頻繁，如果該值較小反而會(huì)影響效率，那么可以考慮不用查詢緩 沖；Qcache_free_blocks，如果該值非常大，則表明緩沖區(qū)中碎片很多。

tmp_table_size = 256M

max_connections = 768

#指定MySQL允許的最大連接進(jìn)程數(shù)。如果在訪問論壇時(shí)經(jīng)常出現(xiàn)Too Many Connections的錯(cuò)誤提 示，則需要增大該參數(shù)值。

max_connect_errors = 1000

wait_timeout = 10

#指定一個(gè)請(qǐng)求的最大連接時(shí)間，對(duì)于4GB左右內(nèi)存的服務(wù)器可以設(shè)置為5-10。

thread_concurrency = 8

#該參數(shù)取值為服務(wù)器邏輯CPU數(shù)量*2，在本例中，服務(wù)器有2顆物理CPU，而每顆物理CPU又支持H.T超線程，所以實(shí)際取值為4*2=8；這個(gè)目前也是雙四核主流服務(wù)器配置。

skip-networking

#開啟該選項(xiàng)可以徹底關(guān)閉MySQL的TCP/IP連接方式，如果WEB服務(wù)器是以遠(yuǎn)程連接的方式訪問MySQL數(shù)據(jù)庫服務(wù)器則不要開啟該選項(xiàng)！否則將無法正常連接！

table_cache=1024

#物理內(nèi)存越大，設(shè)置就越大。默認(rèn)為2402,調(diào)到512-1024最佳

innodb_additional_mem_pool_size=4M

#默認(rèn)為2M

innodb_flush_log_at_trx_commit=1

#設(shè)置為0就是等到innodb_log_buffer_size列隊(duì)滿后再統(tǒng)一儲(chǔ)存，默認(rèn)為1

innodb_log_buffer_size=2M

#默認(rèn)為1M

innodb_thread_concurrency=8

#你的服務(wù)器CPU有幾個(gè)就設(shè)置為幾，建議用默認(rèn)一般為8

key_buffer_size=256M

#默認(rèn)為218，調(diào)到128最佳

tmp_table_size=64M

#默認(rèn)為16M，調(diào)到64-256最掛

read_buffer_size=4M

#默認(rèn)為64K

read_rnd_buffer_size=16M

#默認(rèn)為256K

sort_buffer_size=32M

#默認(rèn)為256K

thread_cache_size=120

#默認(rèn)為60

query_cache_size=32M

※值得注意的是：

很多情況需要具體情況具體分析

一、如果Key_reads太大，則應(yīng)該把my.cnf中Key_buffer_size變大，保持Key_reads/Key_read_requests至少1/100以上，越小越好。

二、如果Qcache_lowmem_prunes很大，就要增加Query_cache_size的值。

很多時(shí)候我們發(fā)現(xiàn)，通過參數(shù)設(shè)置進(jìn)行性能優(yōu)化所帶來的性能提升，可能并不如許多人想象的那樣產(chǎn)生質(zhì)的飛躍，除非是之前的設(shè)置存在嚴(yán)重不合理的情況。我們 不能將性能調(diào)優(yōu)完全依托于通過DBA在數(shù)據(jù)庫上線后進(jìn)行的參數(shù)調(diào)整，而應(yīng)該在系統(tǒng)設(shè)計(jì)和開發(fā)階段就盡可能減少性能問題。

【51CTO獨(dú)家特稿】如果單MySQL的優(yōu)化始終還是頂不住壓力時(shí)，這個(gè)時(shí)候我們就必須考慮MySQL的高可用架構(gòu)（很多同學(xué)也愛說成是MySQL集群）了，目前可行的方案有：

一、MySQL Cluster

優(yōu)勢(shì)：可用性非常高，性能非常好。每份數(shù)據(jù)至少可在不同主機(jī)存一份拷貝，且冗余數(shù)據(jù)拷貝實(shí)時(shí)同步。但它的維護(hù)非常復(fù)雜，存在部分Bug，目前還不適合比較核心的線上系統(tǒng)，所以這個(gè)我不推薦。

二、DRBD磁盤網(wǎng)絡(luò)鏡像方案

優(yōu)勢(shì)：軟件功能強(qiáng)大，數(shù)據(jù)可在底層快設(shè)備級(jí)別跨物理主機(jī)鏡像，且可根據(jù)性能和可靠性要求配置不同級(jí)別的同步。IO操作保持順序，可滿足數(shù)據(jù)庫對(duì)數(shù)據(jù)一致 性的苛刻要求。但非分布式文件系統(tǒng)環(huán)境無法支持鏡像數(shù)據(jù)同時(shí)可見，性能和可靠性兩者相互矛盾，無法適用于性能和可靠性要求都比較苛刻的環(huán)境，維護(hù)成本高于 MySQL Replication。另外，DRBD也是官方推薦的可用于MySQL高可用方案之一，所以這個(gè)大家可根據(jù)實(shí)際環(huán)境來考慮是否部署。

三、MySQL Replication

在實(shí)際應(yīng)用場(chǎng)景中，MySQL Replication是使用最為廣泛的一種提高系統(tǒng)擴(kuò)展性的設(shè)計(jì)手段。眾多的MySQL使用者通過Replication功能提升系統(tǒng)的擴(kuò)展性后，通過 簡(jiǎn)單的增加價(jià)格低廉的硬件設(shè)備成倍 甚至成數(shù)量級(jí)地提高了原有系統(tǒng)的性能，是廣大MySQL中低端使用者非常喜歡的功能之一，也是許多MySQL使用者選擇MySQL最為重要的原因。

比較常規(guī)的MySQL Replication架構(gòu)也有好幾種，這里分別簡(jiǎn)單說明下

MySQL Replication架構(gòu)一：常規(guī)復(fù)制架構(gòu)--Master-slaves，是由一個(gè)Master復(fù)制到一個(gè)或多個(gè)Salve的架構(gòu)模式，主要用于讀壓力大的應(yīng)用數(shù)據(jù)庫端廉價(jià)擴(kuò)展解決方案，讀寫分離，Master主要負(fù)責(zé)寫方面的壓力。

MySQL Replication架構(gòu)二：級(jí)聯(lián)復(fù)制架構(gòu)，即Master-Slaves-Slaves,這個(gè)也是為了防止Slaves的讀壓力過大，而配置一層二級(jí) Slaves，很容易解決Master端因?yàn)楦綄賡lave太多而成為瓶勁的風(fēng)險(xiǎn)。

MySQL Replication架構(gòu)三：Dual Master與級(jí)聯(lián)復(fù)制結(jié)合架構(gòu)，即Master-Master-Slaves，最大的好處是既可以避免主Master的寫操作受到Slave集群的復(fù)制帶來的影響，而且保證了主Master的單點(diǎn)故障。

以上就是比較常見的MySQL replication架構(gòu)方案，大家可根據(jù)自己公司的具體環(huán)境來設(shè)計(jì) ，Mysql 負(fù)載均衡可考慮用LVS或Haproxy來做，高可用HA軟件我推薦Heartbeat。

MySQL Replication的不足：如果Master主機(jī)硬件故障無法恢復(fù)，則可能造成部分未傳送到slave端的數(shù)據(jù)丟失。所以大家應(yīng)該根據(jù)自己目前的網(wǎng)絡(luò) 規(guī)劃，選擇自己合理的Mysql架構(gòu)方案，跟自己的MySQL DBA和程序員多溝涌，多備份（備份我至少會(huì)做到本地和異地雙備份），多測(cè)試，數(shù)據(jù)的事是最大的事，出不得半點(diǎn)差錯(cuò)，切記切記。

數(shù)據(jù)庫高并發(fā)寫入，怎么降低數(shù)據(jù)庫的壓力？

主要通過架構(gòu)設(shè)計(jì)來減少高并發(fā)對(duì)數(shù)據(jù)庫的壓力；

比如 在數(shù)據(jù)庫和應(yīng)用程序之間，增加 DAL層，通過代理，連接池等，保證數(shù)據(jù)庫與業(yè)務(wù)程序由一定的緩沖和關(guān)系梳理；

在數(shù)據(jù)庫前面，加一個(gè)緩存層，讓大部分?jǐn)?shù)據(jù)訪問，都直接在緩存層獲取數(shù)據(jù)，不用訪問到后端的MySQL數(shù)據(jù)庫；

分享文章：mysql寫壓力怎么解決,數(shù)據(jù)庫寫壓力大如何解決
URL標(biāo)題：http://chinadenli.net/article33/dsgphps.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供建站公司、搜索引擎優(yōu)化、做網(wǎng)站、App設(shè)計(jì)、域名注冊(cè)、外貿(mào)建站

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來源： 創(chuàng)新互聯(lián)