去年協(xié)助客戶某云化項目(將部分老舊的Oracle數(shù)據(jù)庫(Uinx + 9i)遷移至Linux + MySQL 5.7),其中部分數(shù)據(jù)庫使用導(dǎo)出導(dǎo)入的方式可以搞定(數(shù)據(jù)量小、可停機時間長),但是其中部分數(shù)據(jù)庫遷移要求盡量停機時間短,數(shù)據(jù)質(zhì)量要求高, 割接當晚需要驗證目標端及源端的數(shù)據(jù)一致,故針對這部分數(shù)據(jù)庫遷移選擇使用GoldenGate作為同步工具來實現(xiàn)。
在源端配置GoldenGate的時候,使用add trandata為需要同步的表添加表級附加日志,檢查輸出日志發(fā)現(xiàn)部分表報錯 OGG-00706 && ORA-02257,添加附加日志不成功。
通過MOS搜索相關(guān)文檔得知,該報錯只發(fā)生在Oracle 9i 且沒有主鍵的情況下為超過33列的表添加表級附加日志時會出現(xiàn)報錯(參考Doc ID 1357001.1 ,Doc ID 1357001.1)),從MOS上得知該報錯解決的辦法也很簡單,只需要將原來的添加一個supplemental log group 拆分成多個日志組,一個日志組包含33個列,剩余列放在另一個日志組,如下:
處理過程中發(fā)現(xiàn)這些業(yè)務(wù)表的列設(shè)計的非常多,甚至大大超過了33列,上百個或者幾百個列,而且是有很多表都存在這個情況,如下圖查詢所示(T001表為建立的測試表),顯示很多表列的個數(shù)已經(jīng)超過了100個,在GoldenGate同步的時候如果每一張表都手工來處理實在是費時費力,效率太低。
于是想辦法通過拆分表的列,用SQL來拼接添加附加日志的腳本,經(jīng)過一番折騰過后,最終成品如下圖所示,當然最后可以用shell腳本循環(huán)跑一下需要的表,就可以全部輕松搞定:
附拆分column腳本:
▼▼▼
Set line 32767 pages 0
set long 99999999
set feedback off
set heading off
--set wrap off
set tab off
set trimspool on
set trimout on
set termout off
col ddl for a300
Select alter table || Owner || . || Table_Name ||
add supplemental log group || Table_Name || _ || Max_Id || ( ||
Column_Name || ) always; As Ddl
From (Select Owner,
Table_Name,
Substr(Column_Name, 1, Length(Column_Name) - 1) As Column_Name,
Max(Col_Id) As Max_Id
From (Select Owner,
Table_Name,
Ceil(Column_Id / 30) As Col_Id,
Replace(Replace(Replace(To_Char(Xmlagg(Xmlelement(e, Column_Name, ,).Extract(//text()) Order By Column_Id)
.Getclobval()),
Chr(13),
),
Chr(10),
),
Chr(9),
) As Column_Name
From Dba_Tab_Columns
Where Table_Name = T001
And Owner = PERFSTAT
Group By Owner, Table_Name, Ceil(Column_Id / 30)
Order By 3)
Group By Owner, Table_Name, Column_Name
Order By 4);
更多精彩干貨分享
點擊下方名片關(guān)注
IT那活兒
文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請注明本文地址:http://www.ezyhdfw.cn/yun/129833.html
集成安裝之Oracle12C補丁升級數(shù)據(jù)字典更新報錯處理 img{ display:block; margin:0 auto !important; width:100%; } body{ width:75%; ...
摘要:摘要徒手寫錯誤監(jiān)控。為什么用定時器呢,因為在單頁應(yīng)用中,路由的切換和地址欄的變化是無法被監(jiān)控的,我確實沒有想到特別好的辦法來監(jiān)控,所以用了這種方式,如果有人有更好的辦法,請給我留言,謝謝。 摘要: 徒手寫JS錯誤監(jiān)控。 作者:一步一個腳印一個坑 原文:搭建前端監(jiān)控系統(tǒng)(二)JS錯誤監(jiān)控篇 Fundebug經(jīng)授權(quán)轉(zhuǎn)載,版權(quán)歸原作者所有。 背景:市面上的監(jiān)控系統(tǒng)有很多,大多收費,對于...
閱讀 1456·2023-01-11 13:20
閱讀 1811·2023-01-11 13:20
閱讀 1262·2023-01-11 13:20
閱讀 2003·2023-01-11 13:20
閱讀 4224·2023-01-11 13:20
閱讀 2877·2023-01-11 13:20
閱讀 1483·2023-01-11 13:20
閱讀 3805·2023-01-11 13:20