പ്രോഗ്രസ് ഓപ്പൺഎഡ്ജ് ബാങ്കിംഗ് സിസ്റ്റവും ഒറാക്കിൾ ഡിബിഎംഎസും തമ്മിൽ എങ്ങനെ ചങ്ങാത്തം കൂടാം

1999 മുതൽ, ബാക്ക് ഓഫീസ് സേവനത്തിനായി, ഞങ്ങളുടെ ബാങ്ക് പ്രോഗ്രസ് ഓപ്പൺ എഡ്ജ് പ്ലാറ്റ്‌ഫോമിൽ സംയോജിത ബാങ്കിംഗ് സിസ്റ്റം BISKVIT ഉപയോഗിച്ചു, ഇത് സാമ്പത്തിക മേഖല ഉൾപ്പെടെ ലോകമെമ്പാടും വ്യാപകമായി ഉപയോഗിക്കുന്നു. ഒരു ഡാറ്റാബേസിൽ (DB) സെക്കൻഡിൽ ഒരു ദശലക്ഷമോ അതിലധികമോ റെക്കോർഡുകൾ വായിക്കാൻ ഈ DBMS-ന്റെ പ്രകടനം നിങ്ങളെ അനുവദിക്കുന്നു. ഞങ്ങളുടെ പ്രോഗ്രസ് OpenEdge സേവനങ്ങൾ ഏകദേശം 1,5 ദശലക്ഷം വ്യക്തിഗത നിക്ഷേപങ്ങളും സജീവ ഉൽപ്പന്നങ്ങൾക്ക് (കാർ ലോണുകളും മോർട്ട്ഗേജുകളും) ഏകദേശം 22,2 ദശലക്ഷം കരാറുകളും, കൂടാതെ റെഗുലേറ്റർ (സെൻട്രൽ ബാങ്ക്), SWIFT എന്നിവയുമായുള്ള എല്ലാ സെറ്റിൽമെന്റുകൾക്കും ഉത്തരവാദിത്തമുണ്ട്.

പ്രോഗ്രസ് ഓപ്പൺഎഡ്ജ് ഉപയോഗിച്ച്, Oracle DBMS-ൽ ഇത് പ്രവർത്തിക്കേണ്ടതിന്റെ ആവശ്യകത ഞങ്ങൾ അഭിമുഖീകരിച്ചു. തുടക്കത്തിൽ, ഈ ബണ്ടിൽ ഞങ്ങളുടെ ഇൻഫ്രാസ്ട്രക്ചറിന്റെ തടസ്സമായിരുന്നു - ഞങ്ങൾ Pro2 CDC ഇൻസ്റ്റാൾ ചെയ്ത് കോൺഫിഗർ ചെയ്യുന്നതുവരെ - പ്രോഗ്രസ് DBMS-ൽ നിന്ന് Oracle DBMS-ലേക്ക് നേരിട്ട് ഓൺലൈനായി ഡാറ്റ അയയ്ക്കാൻ നിങ്ങളെ അനുവദിക്കുന്ന ഒരു പ്രോഗ്രസ് ഉൽപ്പന്നം. ഓപ്പൺ എഡ്ജിനും ഒറാക്കിളിനും ഇടയിൽ എങ്ങനെ ഫലപ്രദമായി ചങ്ങാതിമാരെ ഉണ്ടാക്കാമെന്ന് ഈ പോസ്റ്റിൽ ഞങ്ങൾ എല്ലാ അപകടങ്ങളോടും കൂടി വിശദമായി നിങ്ങളോട് പറയും.

ഇത് എങ്ങനെ സംഭവിച്ചു: ഫയൽ പങ്കിടൽ വഴി QCD-യിലേക്ക് ഡാറ്റ അപ്‌ലോഡ് ചെയ്യുന്നു

ആദ്യം, നമ്മുടെ അടിസ്ഥാന സൗകര്യങ്ങളെക്കുറിച്ചുള്ള ചില വസ്തുതകൾ. ഡാറ്റാബേസിന്റെ സജീവ ഉപയോക്താക്കളുടെ എണ്ണം ഏകദേശം 15 ആയിരം ആണ്. പകർപ്പും സ്റ്റാൻഡ്‌ബൈയും ഉൾപ്പെടെ എല്ലാ ഉൽപ്പാദനക്ഷമമായ ഡാറ്റാബേസുകളുടെയും വോളിയം 600 TB ആണ്, ഏറ്റവും വലിയ ഡാറ്റാബേസ് 16,5 TB ആണ്. അതേ സമയം, ഡാറ്റാബേസുകൾ നിരന്തരം നിറയ്ക്കുന്നു: കഴിഞ്ഞ വർഷം മാത്രം, ഏകദേശം 120 TB ഉൽപ്പാദനപരമായ ഡാറ്റ ചേർത്തു. x150 പ്ലാറ്റ്‌ഫോമിൽ 86 ഫ്രണ്ട് സെർവറുകളാണ് സിസ്റ്റം പ്രവർത്തിപ്പിക്കുന്നത്. ഡാറ്റാബേസുകൾ 21 ഐബിഎം പ്ലാറ്റ്ഫോം സെർവറുകളിൽ ഹോസ്റ്റ് ചെയ്തിരിക്കുന്നു.

ഫ്രണ്ട്-എൻഡ് സിസ്റ്റങ്ങൾ, വിവിധ കോർ ബാങ്കിംഗ് സംവിധാനങ്ങൾ, ബാങ്കിംഗ് സേവനങ്ങൾ എന്നിവ സോണിക് ESB ബസ് വഴി ഓപ്പൺ എഡ്ജ് പ്രോഗ്രസുമായി (BISCUIT IBS) സംയോജിപ്പിച്ചിരിക്കുന്നു. ക്യുസിഡിയിലേക്ക് ഡാറ്റ അപ്‌ലോഡ് ചെയ്യുന്നത് ഫയൽ എക്സ്ചേഞ്ച് വഴിയാണ്. ഒരു നിശ്ചിത സമയം വരെ, ഈ പരിഹാരത്തിന് ഒരേസമയം രണ്ട് വലിയ പ്രശ്‌നങ്ങളുണ്ടായിരുന്നു - ഒരു കോർപ്പറേറ്റ് ഡാറ്റ വെയർഹൗസിലേക്ക് (CDW) വിവരങ്ങൾ അപ്‌ലോഡ് ചെയ്യുന്നതിന്റെ കുറഞ്ഞ പ്രകടനവും മറ്റ് സിസ്റ്റങ്ങളുമായി ഡാറ്റ അനുരഞ്ജനം (അനുരഞ്ജനം) നടത്തുന്നതിനുള്ള ദീർഘകാലവും.

അതിനാൽ, ഈ പ്രക്രിയകൾ വേഗത്തിലാക്കാൻ കഴിയുന്ന ഒരു ഉപകരണം ഞങ്ങൾ തിരയാൻ തുടങ്ങി. രണ്ട് പ്രശ്‌നങ്ങൾക്കും പരിഹാരം പുതിയ പ്രോഗ്രസ് ഓപ്പൺഎഡ്ജ് ഉൽപ്പന്നമായിരുന്നു - Pro2 CDC (ഡാറ്റ ക്യാപ്‌ചർ മാറ്റുക). അതിനാൽ, നമുക്ക് ആരംഭിക്കാം.

Progress OpenEdge, Pro2Oracle എന്നിവ ഇൻസ്റ്റാൾ ചെയ്യുക

അഡ്മിനിസ്ട്രേറ്ററുടെ വിൻഡോസ് കമ്പ്യൂട്ടറിൽ Pro2 Oracle പ്രവർത്തിപ്പിക്കുന്നതിന്, Progress OpenEdge Developer Kit Classroom Edition ഇൻസ്റ്റാൾ ചെയ്താൽ മതിയാകും. скачать സൗജന്യമായി. ഡിഫോൾട്ട് OpenEdge ഇൻസ്റ്റലേഷൻ ഡയറക്ടറികൾ:

DLC: C:ProgressOpenEdge
WRK: C:OpenEdgeWRK

ETL പ്രക്രിയകൾക്ക് പ്രോഗ്രസ് ഓപ്പൺഎഡ്ജ് ലൈസൻസ് പതിപ്പ് 11.7+ ആവശ്യമാണ് - അതായത് ഒറാക്കിളിനുള്ള OE DataServer, 4GL ഡെവലപ്‌മെന്റ് സിസ്റ്റം. ഈ ലൈസൻസുകൾ Pro2-ൽ ഉൾപ്പെടുത്തിയിട്ടുണ്ട്. റിമോട്ട് ഒറാക്കിൾ ഡാറ്റാബേസുള്ള ഒറാക്കിളിനായുള്ള ഡാറ്റാസെർവറിന്റെ പൂർണ്ണമായ പ്രവർത്തനത്തിനായി, ഫുൾ ഒറാക്കിൾ ക്ലയന്റ് ഇൻസ്റ്റാൾ ചെയ്തിട്ടുണ്ട്.

Oracle സെർവറിൽ നിങ്ങൾ Oracle Database 12+ ഇൻസ്റ്റാൾ ചെയ്യണം, ഒരു ശൂന്യമായ ഡാറ്റാബേസ് സൃഷ്ടിച്ച് ഒരു ഉപയോക്താവിനെ ചേർക്കുക (നമുക്ക് അവനെ വിളിക്കാം cdc).

Pro2Oracle ഇൻസ്റ്റാൾ ചെയ്യാൻ, ഡൗൺലോഡ് സെന്ററിൽ നിന്ന് ഏറ്റവും പുതിയ വിതരണം ഡൗൺലോഡ് ചെയ്യുക പ്രോഗ്രസ് സോഫ്റ്റ്വെയർ. ഒരു ഡയറക്ടറിയിലേക്ക് ആർക്കൈവ് അൺപാക്ക് ചെയ്യുക സി:പ്രോ2 (Unix-ൽ Pro2 കോൺഫിഗർ ചെയ്യുന്നതിന്, ഒരേ വിതരണമാണ് ഉപയോഗിക്കുന്നത്, അതേ കോൺഫിഗറേഷൻ തത്വങ്ങൾ ബാധകമാണ്).

ഒരു സിഡിസി റെപ്ലിക്കേഷൻ ഡാറ്റാബേസ് സൃഷ്ടിക്കുന്നു

റെപ്ലിക്കേഷൻ ഡാറ്റാബേസ് cdc (repl) റെപ്ലിക്കേഷൻ മാപ്പ്, പകർത്തിയ ഡാറ്റാബേസുകളുടെ പേരുകൾ, അവയുടെ പട്ടികകൾ എന്നിവ ഉൾപ്പെടെയുള്ള കോൺഫിഗറേഷൻ വിവരങ്ങൾ സംഭരിക്കുന്നതിന് Pro2 ഉപയോഗിക്കുന്നു. ഉറവിട ഡാറ്റാബേസിലെ ഒരു പട്ടിക വരി മാറിയ വസ്തുതയെക്കുറിച്ചുള്ള കുറിപ്പുകൾ അടങ്ങുന്ന ഒരു റെപ്ലിക്കേഷൻ ക്യൂവും ഇതിൽ അടങ്ങിയിരിക്കുന്നു. ഉറവിട ഡാറ്റാബേസിൽ നിന്ന് Oracle-ലേക്ക് പകർത്തേണ്ട വരികൾ തിരിച്ചറിയാൻ ETL പ്രക്രിയകൾ റെപ്ലിക്കേഷൻ ക്യൂവിൽ നിന്നുള്ള ഡാറ്റ ഉപയോഗിക്കുന്നു.

ഞങ്ങൾ ഒരു പ്രത്യേക സിഡിസി ഡാറ്റാബേസ് സൃഷ്ടിക്കുകയാണ്.

ഒരു ഡാറ്റാബേസ് സൃഷ്ടിക്കുന്നതിനുള്ള നടപടിക്രമം

1. ഡാറ്റാബേസ് സെർവറിൽ ഞങ്ങൾ cdc ഡാറ്റാബേസിനായി ഒരു ഡയറക്ടറി സൃഷ്ടിക്കുന്നു - ഉദാഹരണത്തിന്, സെർവറിൽ /database/cdc/.
2. സിഡിസി ഡാറ്റാബേസിനായി ഒരു ഡമ്മി സൃഷ്ടിക്കുക: $DLC/ശൂന്യമായ cdc പ്രോകോപ്പി
3. വലിയ ഫയലുകൾക്കുള്ള പിന്തുണ പ്രവർത്തനക്ഷമമാക്കുക: proutil cdc -C EnableLargeFiles
4. സിഡിസി ഡാറ്റാബേസ് ആരംഭിക്കുന്നതിന് ഞങ്ങൾ ഒരു സ്ക്രിപ്റ്റ് തയ്യാറാക്കുന്നു. ആരംഭ പാരാമീറ്ററുകൾ, പകർത്തിയ ഡാറ്റാബേസിന്റെ ആരംഭ പാരാമീറ്ററുകൾക്ക് സമാനമായിരിക്കണം.
5. ഞങ്ങൾ സിഡിസി ഡാറ്റാബേസ് ആരംഭിക്കുന്നു.
6. cdc ഡാറ്റാബേസിലേക്ക് കണക്റ്റുചെയ്‌ത് ഫയലിൽ നിന്ന് Pro2 സ്കീമ ലോഡ് ചെയ്യുക cdc.df, ഇത് Pro2-ൽ ഉൾപ്പെടുത്തിയിട്ടുണ്ട്.
7. സിഡിസി ഡാറ്റാബേസിൽ ഞങ്ങൾ ഇനിപ്പറയുന്ന ഉപയോക്താക്കളെ സൃഷ്ടിക്കുന്നു:

pro2adm - Pro2 അഡ്മിനിസ്ട്രേറ്റീവ് പാനലിൽ നിന്ന് ബന്ധിപ്പിക്കുന്നതിന്;
pro2etl - ETL പ്രക്രിയകൾ ബന്ധിപ്പിക്കുന്നതിന് (ReplBatch);
pro2cdc - CDC പ്രക്രിയകൾ ബന്ധിപ്പിക്കുന്നതിന് (CDCBatch);

ഓപ്പൺഎഡ്ജ് മാറ്റുന്ന ഡാറ്റ ക്യാപ്ചർ സജീവമാക്കുന്നു

ഇപ്പോൾ നമുക്ക് CDC മെക്കാനിസം തന്നെ ഓണാക്കാം, അതിന്റെ സഹായത്തോടെ ഒരു അധിക സാങ്കേതിക മേഖലയിലേക്ക് ഡാറ്റ പകർത്തും. ഓരോ പ്രോഗ്രസ് ഓപ്പൺഎഡ്ജ് സോഴ്സ് ഡാറ്റാബേസിലേക്കും, സോഴ്സ് ഡാറ്റ ഡ്യൂപ്ലിക്കേറ്റ് ചെയ്യുന്ന പ്രത്യേക സ്റ്റോറേജ് ഏരിയകൾ നിങ്ങൾ ചേർക്കേണ്ടതുണ്ട്, കൂടാതെ കമാൻഡ് ഉപയോഗിച്ച് മെക്കാനിസം തന്നെ സജീവമാക്കുകയും വേണം. പ്രൗട്ടിൽ.

ബിസ്‌കിറ്റ് ഡാറ്റാബേസിനുള്ള ഉദാഹരണ നടപടിക്രമം

1. കാറ്റലോഗിൽ നിന്ന് പകർത്തുന്നു C:Pro2db ഫയൽ cdcadd.st ബിസ്‌ക്വിറ്റ് ഉറവിട ഡാറ്റാബേസ് ഡയറക്‌ടറിയിലേക്ക്.
2. ഞങ്ങൾ വിവരിക്കുന്നു cdcadd.st പ്രദേശങ്ങൾക്കുള്ള നിശ്ചിത വലുപ്പ പരിധികൾ "ReplCDCArea" и "ReplCDCArea_IDX". നിങ്ങൾക്ക് ഓൺലൈനിൽ പുതിയ സ്റ്റോറേജ് ഏരിയകൾ ചേർക്കാൻ കഴിയും: prostrct addonline bisquit cdcadd.st
3. OpenEdge CDC സജീവമാക്കുക:
   proutil bisquit -C enablecdc ഏരിയ "ReplCDCArea" സൂചിക "ReplCDCArea_IDX"
4. പ്രവർത്തിക്കുന്ന പ്രക്രിയകൾ തിരിച്ചറിയുന്നതിന് ഇനിപ്പറയുന്ന ഉപയോക്താക്കളെ ഉറവിട ഡാറ്റാബേസിൽ സൃഷ്ടിക്കേണ്ടതുണ്ട്:
   എ. pro2adm - Pro2 അഡ്മിനിസ്ട്രേറ്റീവ് പാനലിൽ നിന്ന് ബന്ധിപ്പിക്കുന്നതിന്.
   ബി. pro2etl - ETL പ്രക്രിയകൾ ബന്ധിപ്പിക്കുന്നതിന് (ReplBatch).
   സി. pro2cdc - CDC പ്രക്രിയകൾ ബന്ധിപ്പിക്കുന്നതിന് (CDCBatch).

ഒറാക്കിളിനായി ഡാറ്റാസെർവറിനായി ഒരു സ്കീമ ഹോൾഡർ സൃഷ്ടിക്കുന്നു

അടുത്തതായി, പ്രോഗ്രസ് ഡിബിഎംഎസിൽ നിന്നുള്ള ഡാറ്റ ഒറാക്കിൾ ഡിബിഎംഎസിലേക്ക് പകർത്തുന്ന സെർവറിൽ ഞങ്ങൾ ഒരു സ്കീമ ഹോൾഡർ ഡാറ്റാബേസ് സൃഷ്ടിക്കേണ്ടതുണ്ട്. ഡാറ്റാസെർവർ സ്കീമ ഹോൾഡർ എന്നത് ഉപയോക്താക്കളോ ആപ്ലിക്കേഷൻ ഡാറ്റയോ ഇല്ലാത്ത ഒരു ശൂന്യമായ പ്രോഗ്രസ് ഓപ്പൺഎഡ്ജ് ഡാറ്റാബേസാണ്, സോഴ്സ് ടേബിളുകളും ബാഹ്യ ഒറാക്കിൾ ടേബിളുകളും തമ്മിലുള്ള കത്തിടപാടുകളുടെ ഒരു മാപ്പ് അടങ്ങിയിരിക്കുന്നു.

പ്രോ 2-നുള്ള ഒറാക്കിളിനായുള്ള പ്രോഗ്രസ് ഓപ്പൺഎഡ്ജ് ഡാറ്റാസെർവറിനായുള്ള സ്കീമ ഹോൾഡർ ഡാറ്റാബേസ് ETL പ്രോസസ്സ് സെർവറിൽ സ്ഥിതിചെയ്യണം; ഇത് ഓരോ ബ്രാഞ്ചിനും വെവ്വേറെ സൃഷ്ടിച്ചിരിക്കുന്നു.

ഒരു സ്കീമ ഹോൾഡർ എങ്ങനെ സൃഷ്ടിക്കാം

1. Pro2 വിതരണത്തെ ഒരു ഡയറക്ടറിയിലേക്ക് അൺപാക്ക് ചെയ്യുക /പ്രൊ2
2. സൃഷ്ടിച്ച് ഡയറക്ടറിയിലേക്ക് പോകുക /pro2/dbsh
3. കമാൻഡ് ഉപയോഗിച്ച് ഒരു സ്കീമ ഹോൾഡർ ഡാറ്റാബേസ് സൃഷ്ടിക്കുക $DLC/ശൂന്യമായ ബിസ്‌ക്വിറ്റ്ഷ് പകർത്തുക
4. പരിവർത്തനം നടത്തുന്നു ബിസ്ക്വിറ്റ്ഷ് ആവശ്യമായ എൻകോഡിംഗിലേക്ക് - ഉദാഹരണത്തിന്, ഒറാക്കിൾ ഡാറ്റാബേസുകളിൽ UTF-8 എൻകോഡിംഗ് ഉണ്ടെങ്കിൽ UTF-8 ൽ: proutil bisquitsh -C convchar UTF-8 പരിവർത്തനം ചെയ്യുന്നു
5. ഒരു ശൂന്യമായ ഡാറ്റാബേസ് സൃഷ്ടിച്ച ശേഷം ബിസ്ക്വിറ്റ്ഷ് സിംഗിൾ യൂസർ മോഡിൽ ഇതിലേക്ക് ബന്ധിപ്പിക്കുക: പ്രോ ബിസ്‌ക്വിറ്റ്
6. നമുക്ക് ഡാറ്റ നിഘണ്ടുവിലേക്ക് പോകാം: ടൂളുകൾ -> ഡാറ്റാ നിഘണ്ടു -> ഡാറ്റാസെർവർ -> ഒറക്കിൾ യൂട്ടിലിറ്റികൾ -> ഡാറ്റാസെർവർ സ്കീമ സൃഷ്ടിക്കുക
7. സ്കീമ ഹോൾഡർ സമാരംഭിക്കുക
8. Oracle DataServer ബ്രോക്കർ സജ്ജീകരിക്കുന്നു:
   എ. അഡ്മിൻ സെർവർ ആരംഭിക്കുക.
   proadsv -ആരംഭിക്കുക
   ബി. Oracle DataServer ബ്രോക്കറിന്റെ തുടക്കം
   oram -name orabroker1 -start

അഡ്മിനിസ്ട്രേറ്റീവ് പാനലും റെപ്ലിക്കേഷൻ സ്കീമും സജ്ജീകരിക്കുന്നു

Pro2 അഡ്‌മിനിസ്‌ട്രേറ്റീവ് പാനൽ ഉപയോഗിച്ച്, പകർപ്പെടുക്കൽ സ്‌കീം സജ്ജീകരിക്കുന്നതും ETL പ്രോസസ്സുകൾ (പ്രോസസർ ലൈബ്രറി), പ്രൈമറി സിൻക്രൊണൈസേഷൻ പ്രോഗ്രാമുകൾ (ബൾക്ക്-കോപ്പി പ്രോസസർ), റെപ്ലിക്കേഷൻ ട്രിഗറുകൾ, ഓപ്പൺഎഡ്ജ് സിഡിസി നയങ്ങൾ എന്നിവ സൃഷ്ടിക്കുന്നതും ഉൾപ്പെടെ, Pro2 പാരാമീറ്ററുകൾ ക്രമീകരിച്ചിരിക്കുന്നു. ETL, CDC പ്രക്രിയകൾ നിരീക്ഷിക്കുന്നതിനും നിയന്ത്രിക്കുന്നതിനുമുള്ള പ്രാഥമിക ഉപകരണങ്ങളും ഉണ്ട്. ഒന്നാമതായി, ഞങ്ങൾ പാരാമീറ്റർ ഫയലുകൾ സജ്ജമാക്കുന്നു.

പാരാമീറ്റർ ഫയലുകൾ എങ്ങനെ ക്രമീകരിക്കാം

1. കാറ്റലോഗിലേക്ക് പോകുക C:Pro2bpreplScripts
2. എഡിറ്റിംഗിനായി ഫയൽ തുറക്കുക replProc.pf
3. cdc റെപ്ലിക്കേഷൻ ഡാറ്റാബേസിലേക്ക് കണക്ഷൻ പാരാമീറ്ററുകൾ ചേർക്കുക:
   # റെപ്ലിക്കേഷൻ ഡാറ്റാബേസ്
   -db cdc -ld repl -H <പ്രധാന ഡാറ്റാബേസ് ഹോസ്റ്റ്നാമം> -S <ഡാറ്റാബേസ് ബ്രോക്കർ പോർട്ട് cdc>
   -U pro2admin -P <പാസ്‌വേഡ്>
4. ഇതിലേക്ക് ചേർക്കുക replProc.pf ഉറവിട ഡാറ്റാബേസുകളിലേക്കുള്ള കണക്ഷൻ പാരാമീറ്ററുകളും പാരാമീറ്റർ ഫയലുകളുടെ രൂപത്തിൽ സ്കീമ ഹോൾഡറും. പരാമീറ്ററുകളുടെ ഫയലിന്റെ പേര് കണക്റ്റുചെയ്തിരിക്കുന്ന ഉറവിട ഡാറ്റാബേസിന്റെ പേരുമായി പൊരുത്തപ്പെടണം.
   # എല്ലാ പകർത്തിയ ഉറവിടങ്ങളിലേക്കും കണക്റ്റുചെയ്യുക BISQUIT
   -pf bpreplscriptsbisquit.pf
5. ഇതിലേക്ക് ചേർക്കുക replProc.pf സ്കീമ ഹോൾഡറുമായി ബന്ധിപ്പിക്കുന്നതിനുള്ള പാരാമീറ്ററുകൾ.
   #Target Pro DB സ്കീമ ഹോൾഡർ
   -db bisquitsh -ld bisquitsh
   -H <ETL പ്രോസസ്സ് ഹോസ്റ്റിന്റെ പേര്>
   -എസ് <biskuitsh ബ്രോക്കർ പോർട്ട്>
   -db bisquitsql
   -ld bisquitsql
   -dt ORACLE
   -S 5162 -H <ഒറാക്കിൾ ബ്രോക്കർ ഹോസ്റ്റ്നാമം>
   -DataService orabroker1
6. പാരാമീറ്ററുകൾ ഫയൽ സംരക്ഷിക്കുക replProc.pf
7. അടുത്തതായി, ഡയറക്‌ടറിയിലെ ഓരോ കണക്റ്റുചെയ്‌ത ഉറവിട ഡാറ്റാബേസിനും പാരാമീറ്റർ ഫയലുകൾ എഡിറ്റുചെയ്യുന്നതിനായി നിങ്ങൾ സൃഷ്‌ടിക്കുകയും തുറക്കുകയും ചെയ്യേണ്ടതുണ്ട് C:Pro2bpreplScripts: bisquit.pf. ഓരോ pf ഫയലിലും അനുബന്ധ ഡാറ്റാബേസിലേക്ക് ബന്ധിപ്പിക്കുന്നതിനുള്ള പാരാമീറ്ററുകൾ അടങ്ങിയിരിക്കുന്നു, ഉദാഹരണത്തിന്:
   -db bisquit -ld bisquit -H <hostname> -S <ബ്രോക്കർ പോർട്ട്>
   -U pro2admin -P <പാസ്‌വേഡ്>

വിൻഡോസ് കുറുക്കുവഴികൾ ക്രമീകരിക്കുന്നതിന്, നിങ്ങൾ ഡയറക്ടറിയിലേക്ക് പോകേണ്ടതുണ്ട് C:Pro2bpreplScripts കൂടാതെ "Pro2 - അഡ്മിനിസ്ട്രേഷൻ" കുറുക്കുവഴി എഡിറ്റ് ചെയ്യുക. ഇത് ചെയ്യുന്നതിന്, കുറുക്കുവഴിയുടെയും ലൈനിലെയും പ്രോപ്പർട്ടികൾ തുറക്കുക ആരംഭിക്കുക Pro2 ഇൻസ്റ്റലേഷൻ ഡയറക്ടറി സൂചിപ്പിക്കുക. "Pro2 - Editor", "RunBulkLoader" എന്നീ കുറുക്കുവഴികൾക്കായി സമാനമായ ഒരു പ്രവർത്തനം നടത്തണം.

Pro2 അഡ്മിനിസ്ട്രേഷൻ സജ്ജീകരണം: പ്രാരംഭ കോൺഫിഗറേഷൻ ലോഡുചെയ്യുന്നു

നമുക്ക് കൺസോൾ സമാരംഭിക്കാം.

"DB മാപ്പ്" എന്നതിലേക്ക് പോകുക.

Pro2 - അഡ്മിനിസ്ട്രേഷനിൽ ഡാറ്റാബേസുകൾ ലിങ്ക് ചെയ്യാൻ, ടാബിലേക്ക് പോകുക DB മാപ്പ്. ഉറവിട ഡാറ്റാബേസുകളുടെ മാപ്പിംഗ് ചേർക്കുക - സ്കീമ ഹോൾഡർ - ഒറാക്കിൾ.

ടാബിലേക്ക് പോകുക മാപ്പിംഗ്. പട്ടികപ്പെടുത്തിയത് ഉറവിട ഡാറ്റാബേസ് സ്ഥിരസ്ഥിതിയായി, കണക്റ്റുചെയ്‌ത ആദ്യത്തെ ഉറവിട ഡാറ്റാബേസ് തിരഞ്ഞെടുത്തു. പട്ടികയുടെ വലതുവശത്ത് ഒരു ലിഖിതം ഉണ്ടായിരിക്കണം എല്ലാ ഡാറ്റാബേസുകളും ബന്ധിപ്പിച്ചിരിക്കുന്നു - തിരഞ്ഞെടുത്ത ഡാറ്റാബേസുകൾ ബന്ധിപ്പിച്ചിരിക്കുന്നു. താഴെ ഇടതുവശത്ത് ബിസ്‌കിറ്റിൽ നിന്നുള്ള പ്രോഗ്രസ് ടേബിളുകളുടെ ഒരു ലിസ്റ്റ് നിങ്ങൾ കാണും. വലതുവശത്ത് ഒറാക്കിൾ ഡാറ്റാബേസിൽ നിന്നുള്ള പട്ടികകളുടെ ഒരു ലിസ്റ്റ് ഉണ്ട്.

ഒറാക്കിളിൽ SQL സ്കീമകളും ഡാറ്റാബേസുകളും സൃഷ്ടിക്കുന്നു

ഒരു റെപ്ലിക്കേഷൻ മാപ്പ് സൃഷ്ടിക്കുന്നതിന്, നിങ്ങൾ ആദ്യം സൃഷ്ടിക്കേണ്ടതുണ്ട് SQL സ്കീമ ഒറാക്കിളിൽ. Pro2 അഡ്മിനിസ്ട്രേഷനിൽ ഞങ്ങൾ മെനു ഇനം എക്സിക്യൂട്ട് ചെയ്യുന്നു ടൂളുകൾ -> കോഡ് സൃഷ്ടിക്കുക -> ടാർഗെറ്റ് സ്കീമ, പിന്നെ ഡയലോഗ് ബോക്സിൽ ഡാറ്റാബേസ് തിരഞ്ഞെടുക്കുക ഒന്നോ അതിലധികമോ ഉറവിട ഡാറ്റാബേസുകൾ തിരഞ്ഞെടുത്ത് അവയെ വലത്തേക്ക് നീക്കുക.

ശരി ക്ലിക്ക് ചെയ്ത് SQL സ്കീമകൾ സംരക്ഷിക്കാൻ ഡയറക്ടറി തിരഞ്ഞെടുക്കുക.

അടുത്തതായി ഞങ്ങൾ അടിസ്ഥാനം സൃഷ്ടിക്കുന്നു. ഇത് ചെയ്യാൻ കഴിയും, ഉദാഹരണത്തിന്, വഴി ഒറാക്കിൾ എസ്‌ക്യുഎൽ ഡവലപ്പർ. ഇത് ചെയ്യുന്നതിന്, ഞങ്ങൾ Oracle ഡാറ്റാബേസുമായി ബന്ധിപ്പിച്ച് പട്ടികകൾ ചേർക്കുന്നതിനുള്ള സ്കീമ ലോഡ് ചെയ്യുന്നു. ഒറാക്കിൾ ടേബിളുകളുടെ ഘടന മാറ്റിയ ശേഷം, നിങ്ങൾ സ്കീമ ഹോൾഡറിലെ SQL സ്കീമകൾ അപ്ഡേറ്റ് ചെയ്യേണ്ടതുണ്ട്.

ഡൗൺലോഡ് വിജയകരമായി പൂർത്തിയാക്കിയ ശേഷം, bisquitsh ഡാറ്റാബേസിൽ നിന്ന് പുറത്തുകടന്ന് Pro2 അഡ്മിനിസ്ട്രേറ്റീവ് പാനൽ തുറക്കുക. ഒറാക്കിൾ ഡാറ്റാബേസിൽ നിന്നുള്ള പട്ടികകൾ വലതുവശത്തുള്ള മാപ്പിംഗ് ടാബിൽ ദൃശ്യമാകും.

ടേബിൾ മാപ്പിംഗ്

ഒരു റെപ്ലിക്കേഷൻ മാപ്പ് സൃഷ്ടിക്കാൻ, Pro2 അഡ്മിനിസ്ട്രേറ്റീവ് പാനലിൽ, മാപ്പിംഗ് ടാബിലേക്ക് പോയി ഉറവിട ഡാറ്റാബേസ് തിരഞ്ഞെടുക്കുക. മാപ്പ് ടേബിളിൽ ക്ലിക്ക് ചെയ്യുക, ഒറാക്കിളിൽ പകർത്തേണ്ട ടേബിളുകളുടെ ഇടതുവശത്തുള്ള മാറ്റങ്ങൾ തിരഞ്ഞെടുക്കുക, അവ വലത്തേക്ക് നീക്കി തിരഞ്ഞെടുപ്പ് സ്ഥിരീകരിക്കുക. തിരഞ്ഞെടുത്ത പട്ടികകൾക്കായി ഒരു മാപ്പ് സ്വയമേവ സൃഷ്ടിക്കപ്പെടും. മറ്റ് ഉറവിട ഡാറ്റാബേസുകൾക്കായി ഒരു റെപ്ലിക്കേഷൻ മാപ്പ് സൃഷ്ടിക്കുന്നതിനുള്ള പ്രവർത്തനം ഞങ്ങൾ ആവർത്തിക്കുന്നു.

Pro2 റെപ്ലിക്കേഷൻ പ്രോസസർ ലൈബ്രറിയും ബൾക്ക്-കോപ്പി പ്രോസസർ പ്രോഗ്രാമുകളും സൃഷ്ടിക്കുന്നു

പ്രോ 2 റെപ്ലിക്കേഷൻ ക്യൂ പ്രോസസ്സ് ചെയ്യുകയും ഒറാക്കിൾ ഡാറ്റാബേസിലേക്ക് മാറ്റങ്ങൾ വരുത്തുകയും ചെയ്യുന്ന ഇഷ്‌ടാനുസൃത റെപ്ലിക്കേഷൻ പ്രോസസ്സുകൾക്കായി (ഇടിഎൽ) റെപ്ലിക്കേഷൻ പ്രോസസർ ലൈബ്രറി രൂപകൽപ്പന ചെയ്‌തിരിക്കുന്നു. റെപ്ലിക്കേഷൻ പ്രോസസർ ലൈബ്രറി പ്രോഗ്രാമുകൾ തലമുറയ്ക്ക് ശേഷം ഡയറക്ടറിയിലേക്ക് സ്വയമേവ സംരക്ഷിക്കപ്പെടും bprepl/repl_proc (PROC_DIRECTORY പാരാമീറ്റർ). റെപ്ലിക്കേഷൻ പ്രോസസർ ലൈബ്രറി ജനറേറ്റുചെയ്യാൻ, ഇതിലേക്ക് പോകുക ഉപകരണങ്ങൾ -> കോഡ് സൃഷ്ടിക്കുക -> പ്രോസസർ ലൈബ്രറി. ജനറേഷൻ പൂർത്തിയായ ശേഷം, പ്രോഗ്രാമുകൾ ഡയറക്ടറിയിൽ ദൃശ്യമാകും bprepl/repl_proc.

പ്രോഗ്രസ് എബിഎൽ (4ജിഎൽ) പ്രോഗ്രാമിംഗ് ഭാഷയെ അടിസ്ഥാനമാക്കിയുള്ള ഒറാക്കിൾ ഡാറ്റാബേസുമായി സോഴ്‌സ് പ്രോഗ്രസ് ഡാറ്റാബേസുകൾ സമന്വയിപ്പിക്കാൻ ബൾക്ക് ലോഡ് പ്രോസസർ പ്രോഗ്രാമുകൾ ഉപയോഗിക്കുന്നു. അവ സൃഷ്ടിക്കാൻ, മെനു ഇനത്തിലേക്ക് പോകുക ടൂളുകൾ -> കോഡ് ജനറേറ്റ് ചെയ്യുക -> ബൾക്ക്-കോപ്പി പ്രോസസർ. സെലക്ട് ഡാറ്റാബേസ് ഡയലോഗ് ബോക്സിൽ, സോഴ്സ് ഡാറ്റാബേസുകൾ തിരഞ്ഞെടുത്ത് വിൻഡോയുടെ വലതുവശത്തേക്ക് നീക്കി ക്ലിക്ക് ചെയ്യുക OK. ജനറേഷൻ പൂർത്തിയായ ശേഷം, പ്രോഗ്രാമുകൾ ഡയറക്ടറിയിൽ ദൃശ്യമാകും bpreplrepl_mproc.

Pro2-ൽ റെപ്ലിക്കേഷൻ പ്രക്രിയകൾ സജ്ജീകരിക്കുന്നു

ഒരു പ്രത്യേക റെപ്ലിക്കേഷൻ ത്രെഡ് നൽകുന്ന സെറ്റുകളായി പട്ടികകൾ വിഭജിക്കുന്നത് Pro2 Oracle-ന്റെ പ്രകടനവും കാര്യക്ഷമതയും മെച്ചപ്പെടുത്തുന്നു. സ്ഥിരസ്ഥിതിയായി, പുതിയ റെപ്ലിക്കേഷൻ ടേബിളുകൾക്കായി റെപ്ലിക്കേഷൻ മാപ്പിൽ സൃഷ്‌ടിച്ച എല്ലാ കണക്ഷനുകളും ത്രെഡ് നമ്പർ 1-മായി ബന്ധപ്പെട്ടിരിക്കുന്നു. പട്ടികകളെ വ്യത്യസ്ത ത്രെഡുകളായി വേർതിരിക്കാൻ ശുപാർശ ചെയ്യുന്നു.

റെപ്ലിക്കേഷൻ ത്രെഡുകളുടെ നിലയെക്കുറിച്ചുള്ള വിവരങ്ങൾ, റെപ്ലിക്കേഷൻ സ്റ്റാറ്റസ് വിഭാഗത്തിലെ മോണിറ്റർ ടാബിലെ Pro2 അഡ്മിനിസ്ട്രേഷൻ സ്ക്രീനിൽ പ്രദർശിപ്പിക്കും. പാരാമീറ്റർ മൂല്യങ്ങളുടെ വിശദമായ വിവരണം Pro2 ഡോക്യുമെന്റേഷനിൽ കാണാം (ഡയറക്‌ടറി C:Pro2Docs).

CDC നയങ്ങൾ സൃഷ്‌ടിക്കുകയും സജീവമാക്കുകയും ചെയ്യുക

ടേബിളുകളിലെ മാറ്റങ്ങൾ നിരീക്ഷിക്കുന്നതിനുള്ള OpenEdge CDC എഞ്ചിനുള്ള ഒരു കൂട്ടം നിയമങ്ങളാണ് നയങ്ങൾ. എഴുതുന്ന സമയത്ത്, Pro2 ലെവൽ 0 ഉള്ള CDC നയങ്ങളെ മാത്രമേ പിന്തുണയ്ക്കൂ, അതായത്, വസ്തുത മാത്രം നിരീക്ഷിക്കപ്പെടുന്നു റെക്കോർഡ് മാറ്റങ്ങൾ.

ഒരു CDC നയം സൃഷ്‌ടിക്കുന്നതിന്, അഡ്മിനിസ്ട്രേറ്റീവ് പാനലിൽ, മാപ്പിംഗ് ടാബിലേക്ക് പോയി, ഉറവിട ഡാറ്റാബേസ് തിരഞ്ഞെടുത്ത് നയങ്ങൾ ചേർക്കുക/നീക്കം ചെയ്യുക ബട്ടണിൽ ക്ലിക്കുചെയ്യുക. തുറക്കുന്ന മാറ്റങ്ങൾ തിരഞ്ഞെടുക്കുക വിൻഡോയിൽ, ഇടത് വശത്ത് തിരഞ്ഞെടുത്ത് നിങ്ങൾക്ക് ഒരു CDC നയം സൃഷ്‌ടിക്കാനോ ഇല്ലാതാക്കാനോ ആവശ്യമായ പട്ടികകൾ വലത്തേക്ക് നീക്കുക.

സജീവമാക്കുന്നതിന്, മാപ്പിംഗ് ടാബ് വീണ്ടും തുറക്കുക, ഉറവിട ഡാറ്റാബേസ് തിരഞ്ഞെടുത്ത് ബട്ടണിൽ ക്ലിക്കുചെയ്യുക (ഇൻ) നയങ്ങൾ സജീവമാക്കുക. സജീവമാക്കേണ്ട നയങ്ങൾ തിരഞ്ഞെടുത്ത് പട്ടികയുടെ വലതുവശത്തേക്ക് നീക്കുക, ശരി ക്ലിക്കുചെയ്യുക. ഇതിനുശേഷം അവ പച്ച നിറത്തിൽ അടയാളപ്പെടുത്തിയിരിക്കുന്നു. ഉപയോഗിച്ച് (ഇൻ) നയങ്ങൾ സജീവമാക്കുക നിങ്ങൾക്ക് CDC നയങ്ങൾ നിർജ്ജീവമാക്കാനും കഴിയും. എല്ലാ ഇടപാടുകളും ഓൺലൈനിലാണ് നടത്തുന്നത്.

സി‌ഡി‌സി നയം സജീവമാക്കിയ ശേഷം, പരിഷ്‌ക്കരിച്ച റെക്കോർഡുകളെക്കുറിച്ചുള്ള കുറിപ്പുകൾ സ്റ്റോറേജ് ഏരിയയിൽ സംരക്ഷിക്കപ്പെടും "ReplCDCArea" ഉറവിട ഡാറ്റാബേസ് അനുസരിച്ച്. ഈ കുറിപ്പുകൾ ഒരു പ്രത്യേക പ്രക്രിയയിലൂടെ പ്രോസസ്സ് ചെയ്യും CDCBatch, അവ അടിസ്ഥാനമാക്കിയുള്ളത് ഡാറ്റാബേസിലെ Pro2 റെപ്ലിക്കേഷൻ ക്യൂവിൽ കുറിപ്പുകൾ സൃഷ്ടിക്കും cdc (repl).

അങ്ങനെ, നമുക്ക് പകർത്താൻ രണ്ട് ക്യൂകളുണ്ട്. ആദ്യ ഘട്ടം CDCBatch ആണ്: ഉറവിട ഡാറ്റാബേസിൽ നിന്ന്, ഡാറ്റ ആദ്യം ഇന്റർമീഡിയറ്റ് CDC ഡാറ്റാബേസിലേക്ക് പോകുന്നു. സിഡിസി ഡാറ്റാബേസിൽ നിന്ന് ഒറാക്കിളിലേക്ക് ഡാറ്റ കൈമാറുന്നതാണ് രണ്ടാം ഘട്ടം. ഇത് നിലവിലെ വാസ്തുവിദ്യയുടെയും ഉൽപ്പന്നത്തിന്റെ തന്നെ സവിശേഷതയാണ് - ഇതുവരെ ഡെവലപ്പർമാർക്ക് നേരിട്ടുള്ള പകർപ്പ് സ്ഥാപിക്കാൻ കഴിഞ്ഞിട്ടില്ല.

പ്രാഥമിക സമന്വയം

സിഡിസി മെക്കാനിസം പ്രവർത്തനക്ഷമമാക്കി Pro2 റെപ്ലിക്കേഷൻ സെർവർ സജ്ജീകരിച്ച ശേഷം, ഞങ്ങൾ പ്രാരംഭ സമന്വയം ആരംഭിക്കേണ്ടതുണ്ട്. പ്രാരംഭ സമന്വയ കമാൻഡ്:

/pro2/bprepl/Script/replLoad.sh ബിസ്‌ക്വിറ്റ് പട്ടിക-നാമം

പ്രാരംഭ സമന്വയം പൂർത്തിയാക്കിയ ശേഷം, പകർപ്പെടുക്കൽ പ്രക്രിയകൾ ആരംഭിക്കാൻ കഴിയും.

അനുകരണ പ്രക്രിയകളുടെ തുടക്കം

റെപ്ലിക്കേഷൻ പ്രക്രിയകൾ ആരംഭിക്കുന്നതിന് നിങ്ങൾ ഒരു സ്ക്രിപ്റ്റ് പ്രവർത്തിപ്പിക്കേണ്ടതുണ്ട് replbatch.sh. ആരംഭിക്കുന്നതിന് മുമ്പ്, എല്ലാ ത്രെഡുകൾക്കും replbatch സ്ക്രിപ്റ്റുകൾ ഉണ്ടെന്ന് ഉറപ്പാക്കുക - replbatch1, replbatch2, മുതലായവ. എല്ലാം ശരിയാണെങ്കിൽ, കമാൻഡ് ലൈൻ തുറക്കുക (ഉദാഹരണത്തിന്, proenv), ഡയറക്ടറിയിലേക്ക് പോകുക /bprepl/scripts കൂടാതെ സ്ക്രിപ്റ്റ് ആരംഭിക്കുക. അഡ്‌മിനിസ്‌ട്രേറ്റീവ് പാനലിൽ, അനുബന്ധ പ്രോസസ്സിന് റണ്ണിംഗ് സ്റ്റാറ്റസ് ലഭിച്ചിട്ടുണ്ടോയെന്ന് ഞങ്ങൾ പരിശോധിക്കുന്നു.

ഫലങ്ങൾ

നടപ്പിലാക്കിയ ശേഷം, കോർപ്പറേറ്റ് ഡാറ്റ വെയർഹൗസിലേക്ക് വിവരങ്ങൾ അപ്‌ലോഡ് ചെയ്യുന്നത് ഞങ്ങൾ വളരെയധികം ത്വരിതപ്പെടുത്തി. ഡാറ്റ സ്വയമേവ ഒറാക്കിളിൽ ഓൺലൈനിൽ എത്തുന്നു. വ്യത്യസ്‌ത സിസ്റ്റങ്ങളിൽ നിന്ന് ഡാറ്റ ശേഖരിക്കുന്നതിന് ചില ദീർഘകാല അന്വേഷണങ്ങൾ നടത്തി സമയം പാഴാക്കേണ്ടതില്ല. കൂടാതെ, ഈ സൊല്യൂഷനിൽ റെപ്ലിക്കേഷൻ പ്രക്രിയയ്ക്ക് ഡാറ്റ കംപ്രസ് ചെയ്യാൻ കഴിയും, ഇത് വേഗതയിലും നല്ല സ്വാധീനം ചെലുത്തുന്നു. ഇപ്പോൾ മറ്റ് സിസ്റ്റങ്ങളുമായുള്ള BISKVIT സിസ്റ്റത്തിന്റെ ദൈനംദിന അനുരഞ്ജനം 15-20 മണിക്കൂറിന് പകരം 2-2,5 മിനിറ്റ് എടുക്കാൻ തുടങ്ങി, പൂർണ്ണമായ അനുരഞ്ജനത്തിന് രണ്ട് ദിവസത്തിന് പകരം നിരവധി മണിക്കൂറുകൾ എടുത്തു.

അവലംബം: www.habr.com