Ora2Pg的使用

IT那活兒發(fā)布于2023-01-11 13:20 / 970人閱讀

Ora2Pg的使用

Ora2Pg簡介

Ora2Pg 是一個免費工具，用于將 Oracle 或者 MySQL 數(shù)據(jù)庫遷移到 PostgreSQL。它通過連接 Oracle 數(shù)據(jù)庫，執(zhí)行自動掃描并且提取數(shù)據(jù)庫的結(jié)構(gòu)和數(shù)據(jù)，然后生成相應(yīng)的 SQL 腳本。這些腳本可以用于將數(shù)據(jù)庫結(jié)構(gòu)和數(shù)據(jù)導(dǎo)入 PostgreSQL 之中。

Ora2Pg 可以用于各種場景，小到 Oracle 數(shù)據(jù)庫的反向工程，大到大型企業(yè)數(shù)據(jù)庫遷移，或者簡單地將一些 Oracle 數(shù)據(jù)復(fù)制到 PostgreSQL 數(shù)據(jù)庫。它非常簡單易用，甚至不需要任何 Oracle 數(shù)據(jù)庫的相關(guān)知識，只需要提供連接到 Oracle 數(shù)據(jù)庫的配置參數(shù)。

Ora2Pg 由一個 Perl 腳本（ora2pg）以及一個 Perl 模塊（Ora2Pg.pm）組成，唯一需要做的事情就是修改它的配置文件 ora2pg.conf，設(shè)置連接 Oracle 數(shù)據(jù)庫的 DSN 和一個可選的模式名稱。完成之后，只需要設(shè)置導(dǎo)出的類型：
TABLE（包括約束）、VIEW、MVIEW、TABLESPACE、SEQUENCE、INDEXES、TRIGGER、GRANT、FUNCTION、PROCEDURE、PACKAGE、PARTITION、TYPE、INSERT 或 COPY、FDW、QUERY、KETTLE 以及 SYNONYM。

默認情況下，Ora2Pg 導(dǎo)出一個文件，可以通過 psql 客戶端將文件加載到 PostgreSQL 數(shù)據(jù)庫；但是也可以在配置文件中設(shè)置一個數(shù)據(jù)庫的 DSN，直接導(dǎo)入 PostgreSQL 數(shù)據(jù)庫。通過 ora2pg.conf 中的配置選項，可以控制導(dǎo)出的內(nèi)容和方式。

下面介紹ora2pg是如何遷移表數(shù)據(jù)的：

1. 安裝依賴包

要求：perl版本5.8以上

# yum install perl-DBI perl-DBD-Pg perl-ExtUtils-MakeMaker gcc

# wget http://search.cpan.org/CPAN/authors/id/P/PY/PYTHIAN/DBD-Oracle-1.74.tar.gz

# tar -zxvf DBD-Oracle-1.74.tar.gz

# cd DBD-Oracle-1.74

# source /home/oracle/.bash_profile

# perl Makefile.PL -l

# make

# make install

2. 安裝 ora2pg包

下載地址：
https://sourceforge.net/projects/ora2pg/files/?source=navbar

解壓文件

# tar -jxvf ora2pg-22.1.tar.bz2

# cd ora2pg-22.1

# perl Makefile.PL

# make

# make install

默認安裝在/usr/local/bin/目錄下

3. 編輯配置文件

# vi ora2pg_tab_1.conf

ORACLE_HOME /u01/app/oracle/product/11.2.0/dbhome_1

ORACLE_DSN dbi:Oracle:host=x.x.x.x;sid=PROD;port=xxx

ORACLE_USER xxxxxxx

ORACLE_PWD xxxx

LOGFILE /tmp/test.log

USER_GRANTS 0

SCHEMA xxxx

EXPORT_SCHEMA 0

#TYPE TABLE

PARALLEL_TABLES 4

JOBS 4

PG_NUMERIC_TYPE 0

PG_INTEGER_TYPE 1

DEFAULT_NUMERIC float

SKIP fkeys pkeys ukeys indexes checks

NLS_LANG AMERICAN_AMERICA.UTF8

OUTPUT output.sql

LIMIT 100000

PG_DSN dbi:Pg:dbname=xxxx;host=x.x.x.x;port=xxx

PG_USER xxx

PG_PWD xxxxxx

PG_SCHEMA xxx

LOG_ON_ERROR 0

BLOB_LIMIT 100

TRUNCATE_TABLE 1

DISABLE_SEQUENCE 1

PG_VERSION 12

EMPTY_LOB_NULL

ORA_INITIAL_COMMAND

IMPORT imp_tab_1.conf

CREATE_SCHEMA 1

COMPILE_SCHEMA 0

debug 1

# vi imp_tab_1.conf

allow tablename

4. 執(zhí)行導(dǎo)入

# nohup ora2pg -t COPY -c /data/ora2pg/huang/ora2pg_tab_1.conf -T /tmp/huang &

5. 查看導(dǎo)入日志

# tail -111f /tmp/test.log

可以看到當(dāng)前導(dǎo)入速度

導(dǎo)入完成，可以看到平均速度

注意事項：

遷移數(shù)據(jù)之前一定要確保源端和目標端的表名、表結(jié)構(gòu)都完全一致，否則導(dǎo)入會失敗。
開并行需謹慎，需要根據(jù)機器CPU的當(dāng)前使用情況來確定。如果只導(dǎo)入單表，可以將PARALLEL_TABLES參數(shù)為調(diào)整為1。
配置文件中的用戶需要對表有相關(guān)使用權(quán)限，建議導(dǎo)數(shù)時使用高權(quán)限用戶。
TRUNCATE_TABLE參數(shù)會清空目標端表中現(xiàn)有數(shù)據(jù)，需要根據(jù)實際情況謹慎使用。