—— 解決方案 ——
|
Oracle goldengate復(fù)制數(shù)據(jù)解決方案1. 產(chǎn)品介紹:OracleGolden Gate軟件是一種基于日志的結(jié)構(gòu)化數(shù)據(jù)復(fù)制備份軟件,它通過解析源數(shù)據(jù)庫在線日志或歸檔日志獲得數(shù)據(jù)的增量變化,再將這些變化應(yīng)用到目標(biāo)數(shù)據(jù)庫,從而實(shí)現(xiàn)源數(shù)據(jù)庫與目標(biāo)數(shù)據(jù)庫同步。Oracle Golden Gate可以在異構(gòu)的IT基礎(chǔ)結(jié)構(gòu)(包括幾乎所有常用操作系統(tǒng)平臺和數(shù)據(jù)庫平臺)之間實(shí)現(xiàn)大量數(shù)據(jù)亞秒一級的實(shí)時(shí)復(fù)制,從而在可以在應(yīng)急系統(tǒng)、在線報(bào)表、實(shí)時(shí)數(shù)據(jù)倉庫供應(yīng)、交易跟蹤、數(shù)據(jù)同步、集中/分發(fā)、容災(zāi)、數(shù)據(jù)庫升級和移植、雙業(yè)務(wù)中心等多個(gè)場景下應(yīng)用。同時(shí),Oracle Golden Gate可以實(shí)現(xiàn)一對一、廣播(一對多)、聚合(多對一)、雙向、點(diǎn)對點(diǎn)、級聯(lián)等多種靈活的拓?fù)浣Y(jié)構(gòu)。 2. 軟件特性 OGG的特性: (1)對生產(chǎn)系統(tǒng)影響。簩(shí)時(shí)讀取交易日志,以低資源占用實(shí)現(xiàn)大交易量數(shù)據(jù)實(shí)時(shí)復(fù)制 (2)以交易為單位復(fù)制,保證交易一致性:只同步已提交的數(shù)據(jù) (3)高性能 · 智能的交易重組和操作合并 · 使用數(shù)據(jù)庫本地接口訪問 · 并行處理體系 (4)靈活的拓?fù)浣Y(jié)構(gòu):支持一對一、一對多、多對一、多對多和雙向復(fù)制等 (5)支持?jǐn)?shù)據(jù)過濾和轉(zhuǎn)換 · 可以自定義基于表和行的過濾規(guī)則. · 可以對實(shí)時(shí)數(shù)據(jù)執(zhí)行靈活影射和變換. (6)提供數(shù)據(jù)壓縮和加密:降低傳輸所需帶寬,提高傳輸安全性. 3. Oracle Golden Gate支持的異構(gòu)環(huán)境 4.Oracle Golden Gate工作原理 Ogg進(jìn)程: (1)Manager進(jìn)程是GoldenGate的控制進(jìn)程,運(yùn)行在源端和目標(biāo)端上。它主要作用有以下幾個(gè)方面:啟動(dòng)、監(jiān)控、重啟Goldengate的其他進(jìn)程,報(bào)告錯(cuò)誤及事件,分配數(shù)據(jù)存儲空間,發(fā)布閥值報(bào)告等。在目標(biāo)端和源端有且只有一個(gè)manager進(jìn)程 (2)Extract運(yùn)行在數(shù)據(jù)庫源端,負(fù)責(zé)從源端數(shù)據(jù)表或者日志中捕獲數(shù)據(jù)。Extract的作用可以按照階段來劃分為: 初始時(shí)間裝載階段:在初始數(shù)據(jù)裝載階段,Extract進(jìn)程直接從源端的數(shù)據(jù)表中抽取數(shù)據(jù) 同步變化捕獲階段:初始數(shù)據(jù)同步完成以后,Extract進(jìn)程負(fù)責(zé)捕獲源端數(shù)據(jù)的變化(DML和DDL) (3)Data Pump進(jìn)程運(yùn)行在數(shù)據(jù)庫源端,其作用是將源端產(chǎn)生的本地trail文件,把trail以數(shù)據(jù)塊的形式通過TCP/IP 協(xié)議發(fā)送到目標(biāo)端,這通常也是推薦的方式。pump進(jìn)程本質(zhì)是extract進(jìn)程的一種特殊形式,如果不使用trail文件,那么extract進(jìn)程在抽 取完數(shù)據(jù)以后,直接投遞到目標(biāo)端,生成遠(yuǎn)程trail文件。 (4)Collector進(jìn)程與Data Pump進(jìn)程對應(yīng) 的叫Server Collector進(jìn)程,這個(gè)進(jìn)程不需要引起我的關(guān)注,因?yàn)樵趯?shí)際操作過程中,無需我們對其進(jìn)行任何配置,所以對我們來說它是透明的。它運(yùn)行在目標(biāo)端,其 任務(wù)就是把Extract/Pump投遞過來的數(shù)據(jù)重新組裝成遠(yuǎn)程ttrail文件。 (5)Replicat進(jìn)程,通常我們也把它叫做應(yīng)用進(jìn)程。運(yùn)行在目標(biāo)端,是數(shù)據(jù)傳遞的最后一站,負(fù)責(zé)讀取目標(biāo)端trail文件中的內(nèi)容,并將其解析為DML或 DDL語句,然后應(yīng)用到目標(biāo)數(shù)據(jù)庫中。 關(guān)于OGG的Trail文件: (1)為了更有效、更安全的把數(shù)據(jù)庫事務(wù)信息從源端投遞到目標(biāo)端。GoldenGate引進(jìn)trail文件的概念。前面提到extract抽取完數(shù)據(jù)以 后 Goldengate會(huì)將抽取的事務(wù)信息轉(zhuǎn)化為一種GoldenGate專有格式的文件。然后pump負(fù)責(zé)把源端的trail文件投遞到目標(biāo)端,所以源、 目標(biāo)兩端都會(huì)存在這種文件。 (2)trail文件存在的目的旨在防止單點(diǎn)故障,將事務(wù)信息持久化,并且使用checkpoint機(jī)制來記錄其讀寫位置,如果故障發(fā)生,則數(shù)據(jù)可以根據(jù)checkpoint記錄的位置來重傳 。
|