一套代碼如何同步到多個伺服器-九游会j9娱乐平台
a. 一套代碼如何部署多台伺服器有什麼同步工具么
rsync 1
介紹下偶們現在用的：
gogs 搭的 git 伺服器，按上 push 鉤子 -> jenkins 持續集成，自動化構建並做基礎測試 -> 通過 rsync 部署到伺服器上
b. 如何讓多台伺服器實現數據同步
如何讓所有伺服器之間數據同步
1、採用高可用sureha軟體鏡像型，一台主伺服器，一台備伺服器，通過網線實時將數據備份，實現伺服器雙機互備的功能，此方式保證多台伺服器之間數據的一致性。
2、採用高可用sureha雙機熱備共享型。一台主伺服器，一台備伺服器，鏈接一台存儲，將數據放到存儲裡面，實現數據的共享。此方式保證多台伺服器之間數據的一致性。
3、可實現伺服器虛擬化，把所有的伺服器物理資源都整理成一個大的資源池，數據都存放在磁碟陣列上面，所有應用系統都通過調用磁碟陣列裡面的數據，此方式保證多台伺服器之間數據的一致性。
不管技術怎麼實現，在伺服器方面還是需要人為的進行操作和監督，伺服器同步也成為不可缺少的一部分。所以海騰數據的伺服器的硬體要求和機房的線路穩定是保障以上實現的關鍵。參考海騰數據伺服器租用
伺服器數據同步
c. 兩台伺服器的數據同步如何實現
1.安裝centos7.0yum install ssh 安裝ssh協議yum install rsync （rsync是一個遠程數據同步工具，可通過lan/wan快速同步多台主機間的文件）service sshd restart 啟動服務任務
.介紹
現在的網站隨著訪問量的增加,單一伺服器無法承擔巨大的訪問量,有沒有什麼方便快捷的方式解決這個問題呢,答案是」有」!
比如建立伺服器群,進行均衡負載.
但是如果要解決像電信網通這樣的互訪問題(中國網民的悲哀..),這個解決辦法就無能為力了!
要解決這個問題最方便快捷的方式就是建立鏡像網站!由訪問者自己選擇適合自己網路的速度最快的網站!這樣即可以解決線路問題,又可以解決訪問量問題!
2.網站同步的數據分類
網站數據基本分為兩類:
一類是文件,比如html,asp,php等網頁文件,或者rar,zip,rm,avi等可下載文件!
要實現他們的同步很簡單,用ftp同步軟體就可以了!至於哪幾個我會在後面做詳細介紹.
一類是資料庫數據文件,比如mysql,sqlserver等等!
資料庫同步的方法也很多,最簡單的辦法只是將資料庫目錄同步一下就ok了!
在後面我也會做詳細講解!
3.網站文件的同步
在這里用到的主要工具就是ftp,網站文件同步分兩種情況,一種是本地到遠程,一種是遠程到遠程(fxp)!第一種不用說了,第二種遠程到遠程即fxp,支持它的軟體也很多,但是真正適合多網站同步鏡像的卻不多!
下面我介紹幾個我認為不錯的軟體!
1.首先我要推薦的是國產的ftp軟體」網路傳神」,功能非常強大,特別是在網站的同步鏡像方面,可惜的是,這款非常經典的軟體已經不再更新了,最後更新時間是2003年3月,最後一個版本是3.12!雖然如此還是非常好用的!下面是一段官方的簡介:
網路傳神完全吸收了cuteftp和updatanow的全部功能，並且增加了其他軟體沒有的多項功能：支持網站互傳；支持網站同步(updatanow)；支持後台上傳(多線程上傳多個文件)；可同時打開多個站點；多站點計劃上傳功能，支持鏡像站點；支持宏操作支持計劃操作；支持文件高級比較上傳；支持目錄隱藏過濾（為用forntpage作主頁的朋友帶來福音）；伺服器自動識別功能；資源管理器瀏覽方式；可以自定義命令；支持rfc959標准具有更好的穩定性；完備的信息返回機制及錯誤監控機制完整的中文幫助。
2.第二款是由reget同一開發公司製作的專用於網站同步的軟體」websynchronizer」,用這款軟體,你才會體驗到網站同步的方便快捷,簡單容易.最新版本是1.3.62,網上能找到xx的最後版本是1.1版!下面是一段簡介:
檔案同步化工具-websynchronizer，由知名續傳軟體reget之軟體出版公司所推出，是網站同步化、檔案鏡像、檔案備份的絕佳工具，可以執行下列主要工作：1)本機資料夾及遠程資料夾的同步化；2)兩台遠程計算機中的資料夾同步化；3)兩個本機資料之同步化。
3.其他還有一些軟體如同步快梭(autosyncftp),也能實現簡單的網站同步,不過,這款軟體非常不穩定,而且2001年就已經停止開發.所以,不用考慮了!還有上次有朋友提到的sitemirro,由於網上找不到可以用的版本,所以沒有辦法測試!
網路傳神網站同步鏡像使用傻瓜指南
上次在網路技術版已經發過一個簡單的使用方法介紹,如果嫌我羅嗦(o(>_<)o),大家可以參考那篇文章:
http://bbs.et8.net/bbs/showthread.php?t=650129
第一次運行網路傳神的時候,它會讓你選擇」完全模式」和」啟動模式」,要使用網站同步必須選擇」完全模式」.
進入主界面:你會發現這個軟體非常像flashget,要使用網站同步功能,點擊軟體左下角的」ftp客戶端」.
現在你要做的就是添加你的鏡像母站和需要鏡像的網站:文件->站點管理,在裡面添加你需要同步的幾個的ftp伺服器,下面我將介紹具體設置(主要是鏡像母站的設置)
母站設置最重要的地方就是」比較目錄(網站同步)」:
1.拖動傳送
就是手動拖動傳送時候的傳送方式,非拖動方式不受影響,因為母站的更新基本上是從本地目錄進行的,所以建議這里選擇第二項」只上傳不同的文件」,鏡像站點這里可以忽略
2.磁碟比較設置
這個功能非常有用,可以通過文件長度和文件日期進行文件差異對比.
你還可以設置本地目錄過濾和伺服器目錄過濾,非常靈活!
好了,添加好母站和鏡像站之後,我們來設置同步:
如果是添加鏡像站,則會跳出下面的母站選擇窗口:
設置好多個鏡像站點之後,返回主界面就可以進行網站同步了:
注意事項：
一般不要改動鏡像站點前面的「對鉤」標志，因為鏡像站點同步的原理是「根據主站點的同步信息更新鏡像站點」，如果景象站點沒有更新那麼必須將該鏡像站點單獨同步。
注意一般應該「選項窗口」-〉「ftp客戶端」-〉「計劃」中的「最大連接個數」和「最大線程個數」一般不要改動保持為「1」。
如果同步時某個站點出錯同步沒有完全完成只需按「計劃」窗口中的按鈕單獨執行某個站點的傳送即可。
再介紹一下網站鏡像同步中必要的功能,定時同步,這樣你就只要做好母站的更新,其他的讓網路傳神幫你完成:
點擊設置:
進入網路傳神的選項設置窗口,選中ftp客戶端中的定時同步
定時下載：在指定的時段內下載文件。
定時上傳：在指定的時段內用網站同步的方法進行上傳。
開始時間：如果要使用定時方式必須設置此項，在設置的時間中會自動開始所有設置為計劃的站點。
停止時間：如果設置此項則當系統時間大於停止時間時自動停止所有設置為計劃的站點。
注意：定時上傳種沒有「停止時間」選項，網站同步完成後會自動停止，同時網站同步同一時間只能運行一次。
網路傳神還有很多為便於同步鏡像設置的功能,大家實際使用中去體會吧!
websynchronizer網站同步鏡像使用傻瓜指南
websynchronizer功能非常強大,不單單是網站同步,還可以進行本地目錄同步,本地到遠程同步,功能方面遠勝過傳神,不過,國內好像沒有漢化版,對於一些對英文感冒的朋友用起來會不太舒服,希望ccf里的漢化高手能將他中文化!
開始運行程序,老外的軟體就是智能,一打開這個軟體就會有一個同步向導跳出來!
在這里,你也看出來了吧,這個軟體只支持兩個目錄間的同步.不過,我們可以創建多個項目來解決這個問題!具體我在後面介紹!這里,我們來看看如何建立兩個遠程目錄的同步!
選擇第二項,進入下一個選擇框:
網站同步當然是選擇第一項了!再進入下一步,要你選擇同步的第一個伺服器,建議在這里serverslist,先編輯好需要同步的幾個ftp
同步方式設置說明:
第一項的意思是:上傳下載所有改變的文件
第二項的意思是:不改變文件夾內容,只下載新的文件
點擊下一步進行第二個伺服器設置,方法和第一個一樣!
設置完成後,你還可以修改任務名稱!
我覺得這點就是這個軟體非常優秀的地方,以任務的方式進行管理.非常方便!
ok,現在我們就可以看到他的主界面了!
還有一點要提,他的計劃任務更能也很強大,在這里我就不再多說了!用過才知道他的強大!
有朋友會說,我要進行兩個以上的網站同步怎麼辦?
很簡單,再多建幾個任務就可以了,要鏡像多少網站都沒有問題!
這個軟體的網站同步鏡像可以非常靈活,比如可以本地-遠程,然後再遠程-遠程!或者本地-遠程1,本地-遠程2,遠程1-遠程2,任何情形下的同步都可以完成!
資料庫同步操作指南
說完了文件同步,我們再來探討一下資料庫同步!
這里我主要教大家兩種最常用的資料庫的同步方法!
mysql
mysql數據同步主要有三種方式:
1.利用mysql自身的資料庫同步功能
2.利用mysql資料庫的特性(資料庫存在固頂目錄,並且以文件形式存儲),進行資料庫目錄同步以達到數據同步目的
3.利用專用的mysql資料庫同步軟體
1.利用mysql自身的資料庫同步功能(下面參考自網上的文章,寫的非常詳細了)
mysql從3.23.15版本以後提供資料庫復制功能。利用該功能可以實現兩個資料庫同步，主從模式，互相備份模式的功能.
資料庫同步復制功能的設置都在mysql的設置文件中體現。mysql的配置文件（一般是my.cnf），在unix環境下在/etc/mysql/my.cnf或者在mysql用戶的home目錄下的my.cnf。
windows環境中，如果c:根目錄下有my.cnf文件則取該配置文件。當運行mysql的winmysqladmin.exe工具時候，該工具會把c:根目錄下的my.cnf命名為mycnf.bak。並在winnt目錄下創建my.ini。mysql伺服器啟動時候會讀該配置文件。所以可以把my.cnf中的內容拷貝到my.ini文件中，用my.ini文件作為mysql伺服器的配置文件。
設置方法：
設置範例環境：
操作系統：window2000professional
mysql：4.0.4-beta-max-nt-log
aip:10.10.10.22
bip:10.10.10.53
a:設置
1.增加一個用戶最為同步的用戶帳號：
grantfileon*.*tobackup@'10.10.10.53'identifiedby『1234』
2.增加一個資料庫作為同步資料庫：
createdatabasebackup
b:設置
1.增加一個用戶最為同步的用戶帳號：
grantfileon*.*tobackup@'10.10.10.22'identifiedby『1234』
2.增加一個資料庫作為同步資料庫：
createdatabasebackup
主從模式：a->b
a為master
修改amysql的my.ini文件。在mysqld配置項中加入下面配置：
server-id=1
log-bin
#設置需要記錄log可以設置log-bin=c:mysqlbakmysqllog設置日誌文件的目錄，
#其中mysqllog是日誌文件的名稱，mysql將建立不同擴展名，文件名為mysqllog的幾個日誌文件。
binlog-do-db=backup#指定需要日誌的資料庫
重起資料庫服務。
用showmasterstatus命令看日誌情況。
b為slave
修改bmysql的my.ini文件。在mysqld配置項中加入下面配置：
server-id=2
master-host=10.10.10.22
master-user=backup#同步用戶帳號
master-password=1234
master-port=3306
master-connect-retry=60預設重試間隔60秒
replicate-do-db=backup告訴slave只做backup資料庫的更新
重起資料庫
用showslavestatus看同步配置情況。
注意：由於設置了slave的配置信息，mysql在資料庫目錄下生成master.info
所以如有要修改相關slave的配置要先刪除該文件。否則修改的配置不能生效。
雙機互備模式。
如果在a加入slave設置，在b加入master設置，則可以做b->a的同步。
在a的配置文件中mysqld配置項加入以下設置：
master-host=10.10.10.53
master-user=backup
master-password=1234
replicate-do-db=backup
master-connect-retry=10
在b的配置文件中mysqld配置項加入以下設置：
log-bin=c:mysqllogmysqllog
binlog-do-db=backup
注意：當有錯誤產生時*.err日誌文件。同步的線程退出，當糾正錯誤後要讓同步機制進行工作，運行slavestart
重起ab機器，則可以實現雙向的熱備。
測試：
向b批量插入大數據量表aa（1872000）條
a資料庫每秒鍾可以更新2500條數據。
2.資料庫目錄同步,方法和文件同步一樣,設置好需要同步的兩個資料庫目錄就可以了!
缺點很明顯,數據同步只能單向進行,可以作為備份方案
3.用專用的mysql同步軟體進行同步
這方面的軟體有sqlbalance和myreplicator,優點是方便直觀,還有很多爭強功能!
缺點和2一樣,只能單項同步!
當然你也可以修改鏡像網站的程序為提交數據到母資料庫,讀取則在當前鏡像下的數據,不過,修改起來麻煩!普通用戶修改也非常難!呵呵,大家了解一下就可以!給大家一個思路!有能力的朋友可以試試阿!
4.關於mysql論壇的數據同步
由於數據來源的不可控制(不好表達),論壇數據是實時的,而且還要考慮來自鏡像論壇的數據,如何實現鏡像論壇與母論壇數據同步呢?
用1中介紹的mysql自帶的資料庫同步功能互相備份模式就可以實現的!
不過,具體的應用我沒有測試!穩定性不敢保證!
有能力的朋友推薦用下面這種思路來同步,相對來說減少點效率,但能減少發生的錯誤!
比如鏡像論壇數據同步:
1.母論壇和鏡像論壇的數據全寫在母論壇資料庫里,主從模式,讀取只在本地讀取,這個需要修改程序!
2.每次寫數據,都同時提交到兩個資料庫中,安全,但是效率很差,也得修改程序!
mssql
mssql數據同步利用資料庫復制技術實現數據同步更新(來自網路,也是非常完美的教程)
復制的概念
復制是將一組數據從一個數據源拷貝到多個數據源的技術，是將一份數據發布到多個存儲站點上的有效方式。使用復制技術，用戶可以將一份數據發布到多台伺服器上，從而使不同的伺服器用戶都可以在許可權的許可的范圍內共享這份數據。復制技術可以確保分布在不同地點的數據自動同步更新，從而保證數據的一致性。
sql復制的基本元素包括
出版伺服器、訂閱伺服器、分發伺服器、出版物、文章
sql復制的工作原理
sqlserver主要採用出版物、訂閱的方式來處理復制。源數據所在的伺服器是出版伺服器，負責發表數據。出版伺服器把要發表的數據的所有改變情況的拷貝復制到分發伺服器，分發伺服器包含有一個分發資料庫，可接收數據的所有改變，並保存這些改變，再把這些改變分發給訂閱伺服器
sqlserver復制技術類型
sqlserver提供了三種復制技術，分別是：
1、快照復制（呆會我們就使用這個）
2、事務復制
3、合並復制
只要把上面這些概念弄清楚了那麼對復制也就有了一定的理解。接下來我們就一步一步來實現復制的步驟。
第一先來配置出版伺服器
(1)選中指定[伺服器]節點
(2)從[工具]下拉菜單的[復制]子菜單中選擇[發布、訂閱伺服器和分發]命令
(3)系統彈出一個對話框點[下一步]然後看著提示一直操作到完成。
(4)當完成了出版伺服器的設置以後系統會為該伺服器的樹形結構中添加一個復制監視器。同時也生成一個分發資料庫(distribution)
第二創建出版物
(1)選中指定的伺服器
(2)從[工具]菜單的[復制]子菜單中選擇[創建和管理發布]命令。此時系統會彈出一個對話框
(3)選擇要創建出版物的資料庫，然後單擊[創建發布]
(4)在[創建發布向導]的提示對話框中單擊[下一步]系統就會彈出一個對話框。對話框上的內容是復制的三個類型。我們現在選第一個也就是默認的快照發布(其他兩個大家可以去看看幫助)
(5)單擊[下一步]系統要求指定可以訂閱該發布的資料庫伺服器類型，sqlserver允許在不同的資料庫如oracle或access之間進行數據復制。但是在這里我們選擇運行"sqlserver2000"的資料庫伺服器
(6)單擊[下一步]系統就彈出一個定義文章的對話框也就是選擇要出版的表
(7)然後[下一步]直到操作完成。當完成出版物的創建後創建出版物的資料庫也就變成了一個共享資料庫。
第三設計訂閱
(1)選中指定的訂閱伺服器
(2)從[工具]下拉菜單中選擇[復制]子菜單的[請求訂閱]
(3)按照單擊[下一步]操作直到系統會提示檢查sqlserver代理服務的運行狀態，執行復制操作的前提條件是sqlserver代理服務必須已經啟動。
(4)單擊[完成]。完成訂閱操作。
完成上面的步驟其實復制也就是成功了。但是如何來知道復制是否成功了呢？這里可以通過這種方法來快速看是否成功。展開出版伺服器下面的復制——發布內容——右鍵發布內容——屬性——擊活——狀態然後點立即運行代理程序接著點代理程序屬性擊活調度把調度設置為每一天發生，每一分鍾，在0：00：00和23：59：59之間。接下來就是判斷復制是否成功了打開c:/programfiles/microsoftsqlserver/mssql/repldata/unc/xiaowangzi_database_database下面看是不是有一些以時間做為文件名的文件夾差不多一分中就產生一個。要是你還不信的話就打開你的資料庫看在訂閱的伺服器的指定訂閱資料庫下看是不是看到了你剛才所發布的表—
一個手工同步的方案
--定時同步伺服器上的數據
--例子:
--測試環境,sqlserver2000,遠程伺服器名:xz,用戶名為:sa,無密碼,測試資料庫:test
--伺服器上的表(查詢分析器連接到伺服器上創建)
createtable[user](idintprimarykey,numbervarchar(4),namevarchar(10))
go
--以下在區域網(本機操作)
--本機的表,state說明:null表示新增記錄,1表示修改過的記錄,0表示無變化的記錄
ifexists(select*fromdbo.sysobjectswhereid=object_id(n'[user]')andobjectproperty(id,n'isusertable')=1)
droptable[user]
go
createtable[user](idintidentity(1,1),numbervarchar(4),namevarchar(10),statebit)
go
--創建觸發器,維護state欄位的值
createtriggert_stateon[user]
afterupdate
as
update[user]setstate=1
from[user]ajoininsertedbona.id=b.id
wherea.stateisnotnull
go
--為了方便同步處理,創建鏈接伺服器到要同步的伺服器
--這里的遠程伺服器名為:xz,用戶名為:sa,無密碼
ifexists(select1frommaster..sysserverswheresrvname='srv_lnk')
execsp_dropserver'srv_lnk','droplogins'
go
execsp_addlinkedserver'srv_lnk','','sqloledb','xz'
execsp_addlinkedsrvlogin'srv_lnk','false',null,'sa'
go
--創建同步處理的存儲過程
ifexists(select*fromdbo.sysobjectswhereid=object_id(n'[dbo].[p_synchro]')andobjectproperty(id,n'isprocere')=1)
dropprocere[dbo].[p_synchro]
go
createprocp_synchro
as
--setxact_aborton
--啟動遠程伺服器的msdtc服務
--execmaster..xp_cmdshell'isql/s"xz"/u"sa"/p""/q"execmaster..xp_cmdshell''netstartmsdtc'',no_output"',no_output
--啟動本機的msdtc服務
--execmaster..xp_cmdshell'netstartmsdtc',no_output
--進行分布事務處理,如果表用標識列做主鍵,用下面的方法
--begindistributedtransaction
--同步刪除的數據
deletefromsrv_lnk.test.dbo.[user]
whereidnotin(selectidfrom[user])
--同步新增的數據
insertintosrv_lnk.test.dbo.[user]
selectid,number,namefrom[user]wherestateisnull
--同步修改的數據
updatesrv_lnk.test.dbo.[user]set
number=b.number,name=b.name
fromsrv_lnk.test.dbo.[user]a
join[user]bona.id=b.id
whereb.state=1
--同步後更新本機的標志
update[user]setstate=0whereisnull(state,1)=1
--committran
go
--創建作業,定時執行數據同步的存儲過程
ifexists(select1frommsdb..sysjobswherename='數據處理')
executemsdb.dbo.sp_delete_job@job_name='數據處理'
execmsdb..sp_add_job@job_name='數據處理'
--創建作業步驟
declare@sqlvarchar(800),@dbnamevarchar(250)
select@sql='execp_synchro'--數據處理的命令
,@dbname=db_name()--執行數據處理的資料庫名
execmsdb..sp_add_jobstep@job_name='數據處理',
@step_name='數據同步',
@subsystem='tsql',
@database_name=@dbname,
@command=@sql,
@retry_attempts=5,--重試次數
@retry_interval=5--重試間隔
--創建調度
execmsdb..sp_add_jobschele@job_name='數據處理',
@name='時間安排',
@freq_type=4,--每天
@freq_interval=1,--每天執行一次
@active_start_time=00000--0點執行
go
e. 怎麼實現兩台伺服器的mysql數據同步
可以通過程序實現。
功能如下：
一、通過程序實時監控被監控的資料庫的數據變動情況。
二、數據同步程序，當監控數據發生變化變更時，另一台伺服器資料庫將進行同步更新數據。
任何編程語言都可以實現。具體編程方法得看你自身資料庫的情況而編寫了。