Active DataGuard ve Golden Gate ile Yüksek Kullanılabilirlik Çözümleri

... konulu sunumlar: "Active DataGuard ve Golden Gate ile Yüksek Kullanılabilirlik Çözümleri"— Sunum transkripti:

1 Active DataGuard ve Golden Gate ile Yüksek Kullanılabilirlik Çözümleri
Emrah Uysal Veritabanı Danışmanı

2 Yüksek Kullanılabilirlik Neden Önemli ?
İşletmeniz 7 x 24 x 365 online olmalı. Kritik uygulamalarınız, sunucularınız ve verileriniz kullanılamaz hale geldiğinde, bütün işiniz tehlikeye girebilir. Milyonlarca liralık zararlar ve gelir kayıpları.

3 Sistemleriniz Neden Kesintiye Uğruyor ?
İşletim sisteminin çökmesi Sistem üzerinde çalışan yazılımın çökmesi Depolama alanının bozulması Sunucudaki Fiziksel Problemler Elektrik Kesintileri Planlı çalışmalar nedeniyle servis kesintileri (Patch, Upgrade) Veritabanı performans sorunları Ve onlarca neden ...

4 Oracle Yüksek Kullanılabilirlik Teknolojileri
Real Application Clusters (RAC) Veritabanını birden çok sunucuda ölçeklendirerek sürekli ve kesintisiz çalışma imkanı sunar. Active Data Guard İkincil Veritabanıyla kaynak kullanımı optimizasyonu sağlar ve felaket yönetimi sunar. Golden Gate Gerçek zamanlı veri replikasyonu ile iş yükünüzü dağıtmanıza imkan tanır.

5 Oracle Active Data Guard

6 Active Data Guard Nedir ?
Felaket yönetimi için en hızlı ve güvenli çözüm. Sıfır zaman kayıp ile gerçek zamanlı veri replikasyonu. Standby Veritabanına hızlı switch opsiyonu. Bozulan veri bloklarına bütünleşik veri koruma mekanizması. Standby veritabanına “read-only” erişim imkanı.

7 Physical Standby Database
Geleneksel Yöntemler Idle Failover Server Production Database Physical Standby Database Log Shipping Fiziksel standby veritabanınız sorgulara açık olamaz. Sadece yedekte bekletebilir ve bir problem olduğunda devreye alabilirsiniz. Boş bekleyen bir veritabanı için maliyetli bir çözümdür.

8 Active Dataguard ile Yeni Yaklaşım
Standby veritabanınızı “read-only” açarak, raporlama veritabanı olarak kullanabilirsiniz. Amacınıza göre kopyalama yöntemleri belirleyebilirsiniz: Fiziksel Standby Veritabanı : Arşiv geridönüş loglarının işlenmesi. Veri ve zaman kaybı olmadan felaket durumlarında kurtarma imkanı sunar. Mantıksal Standby Veritabanı: Logların Sql cümleciklerine dönüştürülerek işlenmesi. Yedekleme işlerini ve raporlama işlerini üstlendikleri için performans artışı sağlar.

9 Çalışma Prensibi Eş zamanlı yada gecikmeli replikasyon seçenekleri sunar. Sunucular aynı İşletim Sistemi platformuna ve aynı Veritabanı versiyonu’na sahip olmalıdır. Veritabanları kesinlikle enterprise edition olmalıdır. Active DataGuard, Enterprise edition lisansına ek olarak ayrı lisanslanmaktadır.

10 Kurulum 1 SQL> ALTER DATABASE FORCE LOGGING;
SQL> alter database add standby logfile '/u01/app/oracle/oradata/EDUCATE/srl01.log' size ; SQL> alter system set log_archive_config='dg_config=(educate,educated)'; alter system set log_archive_dest_2='service=orclsby1 async valid_for=(online_logfile,primary_role) db_unique_name=orclsby1'; TNS ve LİSTENER Servisleri yaratılır $ cp orapwdEDUCATE orapwdeducated initeducated.ora DB_NAME=educated Dump Directoryleri yaratılır.

11 Kurulum 2 $ export ORACLE_SID=educated $ sqlplus '/as sysdba'
SQL> startup nomount $ export ORACLE_SID=EDUCATE $ rman target / RMAN> connect auxiliary RMAN > run { allocate channel prmy1 type disk; allocate channel prmy2 type disk; allocate channel prmy3 type disk; allocate channel prmy4 type disk; allocate auxiliary channel stby type disk; duplicate target database for standby from active database spfile parameter_value_convert 'educate','educated' set db_unique_name='educated'

12 Kurulum 3 set db_file_name_convert='/u01/app/oracle/oradata/EDUCATE/','/u01/app11g/oracle/oradata/educated/' set log_file_name_convert='/u01/app/oracle/oradata/EDUCATE/','/u01/app11g/oracle/oradata/educated/' set control_files='/u01/app11g/oracle/oradata/educated/educated.ctl' set log_archive_max_processes='5' set fal_client='educated' set fal_server='educate' set standby_file_management='AUTO' set log_archive_config='dg_config=(educate,educated)' set log_archive_dest_1='service=educate ASYNC valid_for=(ONLINE_LOGFILE,PRIMARY_ROLE) db_unique_name=educate' set log_archive_dest_2='service=educated async valid_for=(online_logfile,primary_role) db_unique_name=educated' ; } $ export ORACLE_SID=EDUCATE

13 Kurulum 4 SQL> SELECT sequence#, first_time, next_time
FROM v$archived_log ORDER BY sequence#; SQL> alter system switch logfile; $ export ORACLE_SID=educated $ sqlplus "/as sysdba" SQL> alter database recover managed standby database using current logfile disconnect; SQL> shutdown immediate; SQL> startup mount; SQL> alter database open read only; SQL> ALTER DATABASE RECOVER MANAGED STANDBY DATABASE CANCEL; SQL> ALTER DATABASE RECOVER MANAGED STANDBY DATABASE USING CURRENT LOGFILE DISCONNECT;

14 Monitoring SQL> select value from v$dataguard_stats where name='apply lag'; VALUE +00 00:00:01 SQL> select value from v$dataguard_stats where name='transport lag'; +00 00:00:00 SQL> select database_role from v$database; SQL> select name from v$database; SQL> select db_unique_name from v$database;

15 Snapshot Standby Standby veritabanı bu yeni özellikle, canlı veritabanın birebir kopyası olan bir test ortamına kolayca dönüstürülebilir. Standby veritabanı ( ‘physical standby database ’ ) geçici bir süreligine okuma-yazmalara açılarak test amaçlı kullanılabilir, bu süre zarfında Canlı veritabanından gönderilen islem log ları (redo log) –uygulanmaksızın- kabul edilir. Test bitiminde yedek veritabanı eski haline ve fonksiyonuna dönerek kaldıgı yerden Canlı veritabanını takip etmeye devam eder.Bu özellik gerçekten daha önceleri en çok ihtiyaç duruyulan konulardan biri idi.11G ile bu özellik kullanıcılardan gelen talepler doğrultusunda eklenmiştir. Kullanım için Data Guard Broker(DB Broker)’ı aktif etmemiz gerekmektedir.

16 DataGuard Broker(DGMGRL)
~]$ export ORACLE_SID=EDUCATE ~]$ sqlplus "/as sysdba" SQL> show parameter dg_broker_start; NAME TYPE VALUE dg_broker_start boolean FALSE Eğer parametre değeri false ise Primary ve secondary tarafta bu parametre değerlerini enable etmemiz gerekmektedir. SQL> ALTER SYSTEM SET dg_broker_start = true; ~]$ export ORACLE_SID=educated SQL> show parameter dg_broker_start

17 DataGuard Broker(DGMGRL)
admin]$ cat listener.ora # listener.ora Network Configuration File: /u01/app11g/oracle/product/11.2.0/db_1/network/admin/listener.ora # Generated by Oracle configuration tools. SID_LIST_LISTENER = (SID_LIST = (SID_DESC = (SID_NAME = PLSExtProc) (ORACLE_HOME = /u01/app/oracle/product/10.2.0/db_1) (PROGRAM = extproc) ) (GLOBAL_DBNAME = educated) (ORACLE_HOME = /u01/app11g/oracle/product/11.2.0/db_1) (SID_NAME = educated) (GLOBAL_DBNAME = educated_DGMGRL) (GLOBAL_DBNAME = EDUCATE_DGMGRL) (SID_NAME = EDUCATE) LISTENER = (DESCRIPTION_LIST = (DESCRIPTION = (ADDRESS = (PROTOCOL = IPC)(KEY = EXTPROC1)) (ADDRESS = (PROTOCOL = TCP)(HOST = rac1.localdomain)(PORT = 1521)) ADR_BASE_LISTENER = /u01/app11g/oracle

18 DataGuard Broker(DGMGRL)
admin]$ dgmgrl DGMGRL> connect sys/oracle DGMGRL> show configuration ORA-16532: Data Guard broker configuration does not exist Configuration details cannot be determined by DGMGRL DGMGRL> create configuration 'DGConfig1' as > primary database is 'educate' > connect identifier is educate; Configuration "DGConfig1" created with primary database "educate« Configuration - DGConfig1 Protection Mode: MaxPerformance Databases: educate - Primary database Fast-Start Failover: DISABLED Configuration Status: DISABLED

19 DataGuard Broker(DGMGRL)
DGMGRL> add database 'educated' as > connect identifier is educated; DGMGRL> show configuration Configuration - DGConfig1 Protection Mode: MaxPerformance Databases: educate - Primary database educated - Physical standby database Fast-Start Failover: DISABLED Configuration Status: DISABLED DGMGRL> enable configuration SUCCESS

20 SWITCHOVER DGMGRL> switchover to educated;
Şu anda geçiş işlemi yapılıyor. Lütfen bekleyin... Yeni birincil veritabanı "orclsby1" açılıyor... İşlem, "educate" anının "EDUCATE" veritabanında kapatılmasını gerektiriyor. "educate" anı kapatılıyor... ORA-01109: veritabanı açık değil Veritabanı kullanıma kapatıldı. ORACLE anı kapatıldı. İşlem, "educate" anının "EDUCATE" veritabanında başlatılmasını gerektiriyor. "educate" anı başlatılıyor... ORACLE anı başlatıldı. Veritabanı kullanıma açıldı. Veritabanı açıldı. Geçiş başarılı oldu. Yeni birincil: "educated"

21 SNAPSHOT STANDBY [oracle@rac1 ~]$ export ORACLE_SID=EDUCATE
admin]$ dgmgrl DGMGRL> connect sys/oracle DGMGRL> convert database orclsby1 to snapshot standby; ~]$ export ORACLE_SID=educated ~]$ sqlplus "/as sysdba" SQL> select status from v$instance; STATUS OPEN SQL> select open_mode from v$database; OPEN_MODE READ WRITE

22 SNAPSHOT STANDBY [oracle@rac1 ~]$ export ORACLE_SID=EDUCATE
admin]$ dgmgrl DGMGRL> connect sys/oracle DGMGRL> convert database orclsby1 to physical standby; ~]$ export ORACLE_SID=educated ~]$ sqlplus "/as sysdba" SQL> select status from v$instance; STATUS MOUNTED SQL> select open_mode from v$database; OPEN_MODE SQL> alter database open read only;

23 AUTOMATIC BLOCK RECOVERY
SQL> select dbms_rowid.ROWID_BLOCK_NUMBER(rowid) from emp; DBMS_ROWID.ROWID_BLOCK_NUMBER(ROWID) 188 dd if=/dev/null of=/u02/oradata/apex/monitor_data01.dbf bs=8192 conv=notrunc seek=188 << EOF CORRUPT corrupt CORRUPT corrupt CORRUPT corrupt CORRUPT corrupt CORRUPT corrupt EOF ~]$ /u01/oracle/scripts> ./corrupt.sh 0+0 records in 0+0 records out SQL> alter system flush buffer_cache; System altered. SQL> select * from monitor.emp; select * from monitor.emp * ERROR at line 1: ORA-01578: ORACLE data block corrupted (file # 5, block # 188) ORA-01110: data file 5: '/u02/oradata/educate/monitor_data01.dbf'

24 AUTOMATIC BLOCK RECOVERY
Automatic Block Recovery Standby üzerinden Canlı veritabanına doğru yapılır. Corrupt block relative dba: 0x018005da (file 5, block 188) Fractured block found during user buffer read Data in bad block: type: 6 format: 2 rdba: 0x018005da last change scn: 0x b3ebf seq: 0x2 flg: 0x04 spare1: 0x0 spare2: 0x0 spare3: 0x0 consistency value in tail: 0x check value in block header: 0x1b14 computed block checksum: 0xb2a8 Reading datafile '/u01/oracle/testdr01.dbf' for corruption at rdba: 0x018005da (file 5, block 188) Reread (file 5, block 188) found same corrupt data Requesting Auto BMR for (file# 5, block# 188) Waiting Auto BMR response for (file# 5, block# 188) Auto BMR successful

25 DELAY TIME Max Performans için Canlı ve Standby veritabanları arasına delay time koymak mümkündür. SQL> ALTER SYSTEM SET LOG_ARCHIVE_DEST_2='SERVICE=standby DELAY=180'; ~]$ export ORACLE_SID=EDUCATE admin]$ dgmgrl DGMGRL> EDIT DATABASE educate SET PROPERTY DelayMins='180'; DGMGRL> EDIT DATABASE educated SET PROPERTY DelayMins='180';

26 Oracle Golden Gate

27 İşlem Bazlı Veri Yönetimi - TDM
Gerçek zamanlı: Saniyeden daha kısa sürede veri replikasyonu. Heterojen: Farklı veritabanları ve platformlar arasında veri iletimi. Güvenli: Sistem/network kesintilerine bakmaksızın “commit” verilmiş bütün kayıtların hedef veritabanına işlenmesi. Yüksek performans: Sadece değişen verilerin sn’den daha kısa sürede replikasyonu ile minimum kaynak tüketimi. Yüksek süreklilik : Kesintisiz versiyon yükseltme, migrasyon ve gerçek zamanlı raporlama

28 Nasıl Çalışıyor ? Capture: İşlem loglarına bakarak sadece commit edilmiş kayıtları alır. Trail: Değişmiş verileri platforma bağlı olmadan taşınabilir şekilde sıralar. Pump: Trail dosyalarını hedef sunucuya gönderir. Route: Sıkıştırılmış ve şifrelenmiş veri Delivery: Verileri hedef sistemin sql komutlarını kullanarak iletir.

29 İşinizi Garantiye Alın
Dilerseniz bütün veritabanınızı, dilerseniz spesifik tablo ve şemalarınızın taşımasını gerçekleştirebilirsiniz. “Auto-commit” ile sadece değişen kayıtlarınızı yüksek hızda hedef veritabanınıza gönderebilirsiniz. Gerçek zamanlı güncellenenen hedef veritabanınızı “read-write” modda kullanarak iş yükünüzü dağıtabilirsiniz. Oracle, MS Sql Server, DB2 ve Mysql desteğiyle dilediğiniz platformlarda veri senkronizasyonu yapabilirsiniz. Upgrade / Patch işlemlerinizi sıfır kesinti ile gerçekleştirebilirsiniz.

30 KURULUM 1

31 KURULUM 2

32 KURULUM 3

33 KURULUM 4 [root@FOBSTST01 /]# mkdir /ggs
/]# chown oracle:oinstall /ggs ggs]# ls V zip ggs]# chown oracle:oinstall V zip ggs]# su - oracle ~]$ cd /ggs ggs]$ ls ggs]$ unzip V zip t ggs]$ tar -xvf fbo_ggs_Linux_x64_ora11g_64bit.tar ggs]$ export PATH=$PATH:/ggs ggs]$ export GGATE=/ggs ggs]$ export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:$ORACLE_HOME/lib:$GGATE

34 KURULUM 5 [oracle@FOBSTST01 ~]$ cd /ggs [oracle@FOBSTST01 ggs]$ ggsci
GGSCI (FOBSTST01) 1> CREATE SUBDIRS GGSCI (FOBSTST01) 2> exit ggs]$ mkdir $GGATE/discard SQL> create user ggate identified by ggate default tablespace users temporary tablespace temp; SQL> grant connect,resource,unlimited tablespace to ggate; SQL> grant execute on utl_file to ggate; SQL> grant select any dictionary, select any table to ggate; SQL> grant create table to ggate; SQL> grant flashback any table to ggate; SQL> grant execute on dbms_flashback to ggate;

35 KURULUM 6 SQL> @marker_setup.sql; SQL> @ddl_setup.sql;
SQL> grant GGS_GGSUSER_ROLE to ggate;

36 GOLDEN GATE EXTRACT [oracle@FOBSTST01 ggs]$ ggsci
GGSCI (FOBSTST01) 2> dblogin userid ggate GGSCI (FOBSTST01) 7> ADD EXTRACT ext1, TRANLOG, BEGIN NOW GGSCI (FOBSTST01) 8> ADD EXTTRAIL /home/oracle/OGG_Source/dirdat/lt, EXTRACT ext1 GGSCI (FOBSTST01) 9> ADD EXTRACT dpump, EXTTRAILSOURCE /home/oracle/OGG_Source/dirdat/lt GGSCI (FOBSTST01) 10> EDIT PARAMS ext1 EXTRACT ext1 USERID ggate, PASSWORD ggate TRANLOGOPTIONS EXCLUDEUSER ggate EXTTRAIL /home/oracle/OGG_Source/dirdat/lt TABLE source.*; GGSCI (FOBSTST01) 11> ADD RMTTRAIL /home/oracle/OGG_Target/dirdat/rt, EXTRACT dpump

37 GOLDEN GATE EXTRACT GGSCI (FOBSTST01) 13> EDIT PARAMS dpump
EXTRACT dpump USERID ggate, PASSWORD ggate RMTHOST vmora-02.oracle.com, MGRPORT 7901 RMTTRAIL /home/oracle/OGG_Target/dirdat/rt PASSTHRU TABLE source.*; GGSCI (FOBSTST01) 14> edit params mgr PORT 7901 GGSCI (FOBSTST01) 15> start mgr GGSCI (vmora-02.oracle.com) 13> info all Program Status Group Lag Time Since Chkpt MANAGER RUNNING EXTRACT STOPPED DPUMP :00: :19:24 EXTRACT STOPPED EXT :00: :24:12 EXTRACT ABENDED EXT_1A :00: :08:09 EXTRACT ABENDED PUMP_1A :00: :08:08

38 GOLDEN GATE REPLICAT [oracle@fobstst02 ggs]$ ggsci
GGSCI (fobstst02) 0> dblogin userid ggate GGSCI (fobstst02) 1> add checkpointtable GGATE.CHKPTAB GGSCI (fobstst02) 2> ADD REPLICAT rep1, EXTTRAIL /home/oracle/OGG_Target/dirdat/rt CHECKPOINTTABLE GGATE.CHKPTAB GGSCI (fobstst02) 3> EDIT PARAMS rep1 REPLICAT rep1 ASSUMETARGETDEFS USERID ggate, PASSWORD ggate MAP source.*, TARGET target.*;

39 PROCESS START GGSCI (vmora-02.oracle.com) 7> start mgr
GGSCI (FOBSTST01) 19> START EXTRACT ext1 GGSCI (FOBSTST01) 20> START EXTRACT dpump GGSCI (vmora-02.oracle.com) 16> info all Program Status Group Lag Time Since Chkpt MANAGER RUNNING EXTRACT RUNNING DPUMP :00: :29:34 EXTRACT RUNNING EXT :34: :00:08 GGSCI (vmora-02.oracle.com) 7> start mgr GGSCI (fobstst02) 15> START REPLICAT rep1 GGSCI (vmora-02.oracle.com) 11> info all REPLICAT RUNNING REP :00: :00:06

40 SAMPLE REPLICATION SOURCE:
SQL> delete from source.big_emp where empno=224; SQL> select * from source.big_emp where empno=224; TARGET: SQL> select empno from target.big_emp where empno=224; EMPNO 224