如何實現(xiàn)linux負載均衡集群文件同步?

你可以使用rsync.他是基于文件同步的.但是如果是數(shù)據(jù)庫類型的要求高的話你可以使用drdb來同步..drdb是基于塊同步

創(chuàng)新互聯(lián)堅持“要么做到，要么別承諾”的工作理念，服務領(lǐng)域包括：成都做網(wǎng)站、成都網(wǎng)站制作、企業(yè)官網(wǎng)、英文網(wǎng)站、手機端網(wǎng)站、網(wǎng)站推廣等服務，滿足客戶于互聯(lián)網(wǎng)時代的師宗網(wǎng)站設計、移動媒體設計的需求，幫助企業(yè)找到有效的互聯(lián)網(wǎng)解決方案。努力成為您成熟可靠的網(wǎng)絡建設合作伙伴！

如何實現(xiàn)Linux多臺服務器間的文件雙向同步

Linux自帶了ntp服務 -- /etc/init.d/ntpd，這個服務不僅可以設置讓本機和某臺/某些機器做時間同步，他本身還可以扮演一個time server的角色，讓其他機器和他同步時間。

配置文件就是/etc/ntp.conf。

為了測試，設置讓node2 -- 192.168.1.102和node1 -- 192.168.1.101做時間同步。第一步，node1做time server，node1本身不和其他機器時間同步，就是取本地時間。所以，先把node1機器的時間調(diào)準了：

[root@node1 ~]date -s 08/03/2011

[root@node1 ~]date -s 11:12:00

[root@node1 ~]clock -w[root@node1 ~]hwclock --systohc

后兩個命令是把設置的時間寫到硬件時間中去（也就是CMOS里面的時間）。

第二步，然后將node1配置成一個time server，修改/etc/ntp.conf，[root@node1 ~]vi /etc/ntp.conf其他的配置不怎么需要改，只需要關(guān)注restrict的配置：

1. 注釋掉原來的restrict default ignore這一行，這一行本身是不響應任何的ntp更新請求，其實也就是禁用了本機的ntp server的功能，所以需要注釋掉。

Linux集群常用指令

姓名：張昊楠? ?學號：21021210691

存儲NAS 文件操作

df -h查看空間使用情況

警惕超大 nohup.out

ls? ?當前路徑下的文件列表

pwd? 查看當前路徑

cd? ? 進入某個文件夾

任務提交

任務提交前

qhost--查看集群負載狀態(tài)

qsub / qsub-sge.pl--提交任務

qstat--查看任務狀態(tài)

qdel / qmod--任務控制

任務查看

qhost -j---列出所有用戶在每個節(jié)點上的任務

qhost -q---列出每個節(jié)點上每個隊列的任務數(shù)

qhost -u username---列出某個用戶在每個節(jié)點上的任務

提交命令

qsub -cwd -q queue.q test.sh

qsub-sge.pl --maxproc 50 --resource vf=5G --queue queue.q test.sh

任務查看2

qstat -u username---查看某個用戶的任務

qstat -u *,---查看所有用戶的任務

qstat –j jobs_ID---查看某個任務的詳細信息

查看.e和.o文件

.e：錯誤信息

.o：標準輸出

任務控制

qdel jobID---刪除某個任務

qdel -u username---刪除某個用戶的所有任務

qmod -s jobID--掛起某個任務

qmod -us jobID---繼續(xù)運行某個掛起的任務

按任務占用內(nèi)存大小選擇相應的隊列

查看隊列 qstat -g c

QUEUE

PE.q--并行

cloud.q--云平臺

general.q--96G節(jié)點

middle.q--96G節(jié)點

great.q--大內(nèi)存節(jié)點

plus.q--大內(nèi)存節(jié)點

single.q--Trinity組裝

single._p.q---Trinity組裝（占用內(nèi)存較大）

Linux集群使用命令

存儲NAS 文件操作

df -h查看空間使用情況

警惕超大 nohup.out

任務提交

任務提交前

qhost--查看集群負載狀態(tài)

qsub / qsub-sge.pl--提交任務

qstat--查看任務狀態(tài)

qdel / qmod--任務控制

任務查看

qhost -j---列出所有用戶在每個節(jié)點上的任務

qhost -q---列出每個節(jié)點上每個隊列的任務數(shù)

qhost -u username---列出某個用戶在每個節(jié)點上的任務

提交命令

qsub -cwd -q queue.q test.sh

qsub-sge.pl --maxproc 50 --resource vf=5G --queue queue.q test.sh

任務查看2

qstat -u username---查看某個用戶的任務

qstat -u *,---查看所有用戶的任務

qstat –j jobs_ID---查看某個任務的詳細信息

查看.e和.o文件

.e：錯誤信息

.o：標準輸出

任務控制

qdel jobID---刪除某個任務

qdel -u username---刪除某個用戶的所有任務

qmod -s jobID--掛起某個任務

qmod -us jobID---繼續(xù)運行某個掛起的任務

按任務占用內(nèi)存大小選擇相應的隊列

查看隊列 qstat -g c

QUEUE

PE.q--并行

cloud.q--云平臺

general.q--96G節(jié)點

middle.q--96G節(jié)點

great.q--大內(nèi)存節(jié)點

plus.q--大內(nèi)存節(jié)點

single.q--Trinity組裝

single._p.q---Trinity組裝（占用內(nèi)存較大）

TOP監(jiān)視

編輯于 2017-04-21

Linux集群系統(tǒng)時間同步

環(huán)境準備：

要做到服務器集群的時間同步，集群中各臺機器的時區(qū)必須相同的，我們在國內(nèi)就使用中國時區(qū)，如果你的機器的時區(qū)不是"Asia/Shanghai"，需要修改時區(qū)

CentOS 中時區(qū)是以文件形式存在，當前正在使用的時區(qū)文件位于

/etc/localtime ，其他時區(qū)文件則位于 /usr/share/zoneinfo 下，中國時區(qū)的文件全路徑是 /usr/share/zoneinfo/Asia/Shanghai

要更改時區(qū)，直接使用如下命令就OK

需要使用 tzselect 命令去生成時區(qū)文件，生成好的時區(qū)文件就在/usr/share/zoneinfo 目錄下，具體步驟去下：

使用 date -s 命令來修改系統(tǒng)時間

讓集群所有的服務器的時間同步，就用遠程連接工具連接所有服務器，然后在所有的服務器中同時執(zhí)行 date -s 命令設置時間，然后在所有的服務器中執(zhí)行 hwclock -w 命令即可

美國標準技術(shù)院時間服務器：time.nist.gov（192.43.244.18）

上海交通大學網(wǎng)絡中心NTP服務器地址：ntp.sjtu.edu.cn（202.120.2.101）

中國國家授時中心服務器地址：cn.pool.ntp.org（210.72.145.44）

若以上提供的網(wǎng)絡時間服務器不可用，請自行上網(wǎng)尋找可用的網(wǎng)絡時間服務器

1 使用命令： crontab -e

2 然后往里加入一行內(nèi)容

上面的配置表示，每隔十分鐘從 202.120.2.101 該時間服務器同步一次時間。

3 保存退出

以上兩步操作可以讓node01這個服務器每隔10分鐘去指定的服務器同步時間，如果需要讓集群中的所有服務器(hadoop01-hadoop04)時間同步，那么每臺服務器都要做以上兩步操作。

node01的IP為192.168.21.101，讓它作為時間服務器，192.168.21.0局域網(wǎng)內(nèi)的所有服務器都向它同步時間，而node01這臺時間服務器本身，向外網(wǎng)時間服務器同步時間(比如中國國家授時中心服務器)

我用node01

我去掉了所有的默認注釋，對其中的修改寫了自己的注釋，沒有寫注釋的是默認配置

因為ntpd服務開啟之后，就不能手動同步時間了，那么為什么要先手動同步時間呢？

當server(中國國家授時中心服務器)與client(node01)之間的時間誤差過大時（可能是1000秒），node01去同步時間可能對系統(tǒng)和應用帶來不可預知的問題，node01將停止時間同步！所以如果發(fā)現(xiàn)node01啟動之后時間并不進行同步時，應該考慮到可能是時間差過大引起的，此時需要先手動進行時間同步！

看到紅色框中的內(nèi)容，表示連接和監(jiān)聽已正確

這里的前4行就是我們配置的4個中國國家授時中心的服務器的信息

最后一行就是本地時間服務的信息

下面對每個列的意義進行說明：

同樣，服務啟動后需要等待5-10分鐘才能看到這個正常的信息

到這里，我們局域網(wǎng)內(nèi)的時間服務器node01就已經(jīng)配置完畢了

文件內(nèi)容如下：

同樣，沒有寫注釋的都是默認的配置

原因同(5)

到這里，利用局域網(wǎng)內(nèi)一臺時間服務器來同步整個集群時間的全部配置就已經(jīng)完成

說明：若以上提供的網(wǎng)絡時間服務器不可用，請自行上網(wǎng)尋找可用的網(wǎng)絡時間服務器，另外需要關(guān)閉各服務器的防火墻，才能進行時間同步

參考文章：

內(nèi)網(wǎng)環(huán)境NTP服務及時間同步(CentOS6.x)配置和部署

配置NTP服務ntpd/ntp.conf（搭建Hadoop集群可參考）

新聞標題：linux集群命令同步,同步 linux
文章分享：http://chinadenli.net/article26/dsijicg.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供網(wǎng)站改版、微信公眾號、動態(tài)網(wǎng)站、網(wǎng)站維護、ChatGPT、App設計

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)