🥇 PostgreSQL र MySQL बीचको क्रस प्रतिकृति

म PostgreSQL र MySQL बीच क्रस-प्रतिकृति रूपरेखा गर्नेछु, साथै दुई डाटाबेस सर्भरहरू बीच क्रस-प्रतिकृति सेटअप गर्ने तरिकाहरू। सामान्यतया, क्रस-रिप्लिकेटेड डाटाबेसहरूलाई समरूप भनिन्छ, र यो एक RDBMS सर्भरबाट अर्कोमा सार्ने एक सुविधाजनक विधि हो।

PostgreSQL र MySQL डाटाबेसहरू सामान्यतया रिलेशनल मानिन्छ, तर थप विस्तारहरूसँग तिनीहरू NoSQL क्षमताहरू प्रस्ताव गर्छन्। यहाँ हामी PostgreSQL र MySQL बीचको सम्बन्धमा DBMS परिप्रेक्ष्यबाट प्रतिकृति छलफल गर्नेछौं।

हामी सम्पूर्ण भित्री कार्यहरू, केवल आधारभूत सिद्धान्तहरू वर्णन गर्दैनौं ताकि तपाईले डाटाबेस सर्भरहरू, फाइदाहरू, सीमितताहरू र प्रयोग केसहरू बीचको प्रतिकृति कन्फिगर गर्ने विचार प्राप्त गर्नुहुनेछ।

सामान्यतया, दुई समान डाटाबेस सर्भरहरू बीचको प्रतिकृति या त बाइनरी मोडमा वा मास्टर (उर्फ प्रकाशक, मास्टर, वा सक्रिय) र दास (सदस्यता, स्ट्यान्डबाइ, वा निष्क्रिय) बीचको प्रश्नहरू प्रयोग गरेर गरिन्छ। प्रतिकृतिको उद्देश्य दास पक्षमा मास्टर डाटाबेसको वास्तविक-समय प्रतिलिपि प्रदान गर्नु हो। यस अवस्थामा, डाटा मास्टरबाट दासमा हस्तान्तरण गरिएको छ, अर्थात् सक्रियबाट निष्क्रियमा, किनभने प्रतिकृति मात्र एक दिशामा गरिन्छ। तर तपाइँ दुबै दिशामा दुई डाटाबेसहरू बीच प्रतिकृति सेट अप गर्न सक्नुहुन्छ, ताकि डाटा सक्रिय-सक्रिय कन्फिगरेसनमा दासबाट मास्टरमा हस्तान्तरण हुन्छ। यी सबै, क्यास्केडिङ प्रतिकृति सहित, दुई वा बढी समान डाटाबेस सर्भरहरू बीच सम्भव छ। सक्रिय-सक्रिय वा सक्रिय-निष्क्रिय कन्फिगरेसन आवश्यकता, प्रारम्भिक कन्फिगरेसनमा त्यस्ता क्षमताहरूको उपलब्धता वा बाह्य कन्फिगरेसन समाधानहरू र अवस्थित ट्रेड-अफहरूको प्रयोगमा निर्भर गर्दछ।

वर्णन गरिएको कन्फिगरेसन विभिन्न डाटाबेस सर्भरहरू बीच सम्भव छ। सर्भरलाई अर्को डाटाबेस सर्भरबाट प्रतिकृत डाटा स्वीकार गर्न र अझै पनि प्रतिकृति डाटाको वास्तविक-समय स्न्यापसटहरू कायम राख्न कन्फिगर गर्न सकिन्छ। MySQL र PostgreSQL ले यी अधिकांश कन्फिगरेसनहरू इन-हाउस वा तेस्रो-पक्ष विस्तारहरू मार्फत प्रदान गर्दछ, बाइनरी लग विधिहरू, डिस्क लकिङ, र स्टेटमेन्ट- र पङ्क्ति-आधारित विधिहरू सहित।

MySQL र PostgreSQL बीचको क्रस प्रतिकृति एक डाटाबेस सर्भरबाट अर्कोमा एक पटक माइग्रेसनको लागि आवश्यक छ। यी डाटाबेसहरूले विभिन्न प्रोटोकलहरू प्रयोग गर्छन्, त्यसैले तिनीहरूलाई सीधा लिङ्क गर्न सम्भव छैन। डाटा एक्सचेन्ज स्थापना गर्न, तपाईंले बाह्य खुला स्रोत उपकरण प्रयोग गर्न सक्नुहुन्छ, उदाहरणका लागि pg_chameleon।

pg_chameleon के हो

pg_chameleon Python 3 मा MySQL देखि PostgreSQL मा एक प्रतिकृति प्रणाली हो। यसले पाइथनमा पनि खुला स्रोत mysql-प्रतिकृति पुस्तकालय प्रयोग गर्दछ। पङ्क्ति छविहरू MySQL तालिकाहरूबाट निकालिन्छन् र PostgreSQL डाटाबेसमा JSONB वस्तुहरूको रूपमा भण्डारण गरिन्छ, र त्यसपछि pl/pgsql प्रकार्यद्वारा डिक्रिप्ट गरिन्छ र PostgreSQL डाटाबेसमा पुन: उत्पादन गरिन्छ।

pg_chameleon को विशेषताहरु

एउटै क्लस्टरबाट धेरै MySQL स्किमाहरू एक-देखि-धेरै कन्फिगरेसनमा एकल लक्ष्य PostgreSQL डाटाबेसमा प्रतिलिपि गर्न सकिन्छ।
स्रोत र लक्ष्य योजना नामहरू एउटै हुन सक्दैनन्।
प्रतिकृति डाटा क्यास्केड गरिएको MySQL प्रतिकृतिबाट प्राप्त गर्न सकिन्छ।
नक्कल गर्न वा त्रुटिहरू उत्पादन गर्न नसक्ने तालिकाहरू बहिष्कृत छन्।
प्रत्येक प्रतिकृति प्रकार्य डेमन द्वारा नियन्त्रित छ।
YAML-आधारित प्यारामिटरहरू र कन्फिगरेसन फाइलहरू मार्फत नियन्त्रण।

उदाहरण:

होस्ट
vm1
vm2

OS संस्करण
CentOS लिनक्स 7.6 x86_64
CentOS लिनक्स 7.5 x86_64

DB सर्भर संस्करण
MySQL 5.7.26
PostgreSQL .10.5 .१

DB पोर्ट
3306
5433

आईपी ठेगाना
192.168.56.102
192.168.56.106

सुरु गर्न, pg_chameleon स्थापना गर्न सबै आवश्यक घटकहरू तयार गर्नुहोस्। यो उदाहरणले पाइथन 3.6.8 स्थापना गर्दछ, जसले भर्चुअल वातावरण सिर्जना र सक्रिय गर्दछ।

$> wget https://www.python.org/ftp/python/3.6.8/Python-3.6.8.tar.xz
$> tar -xJf Python-3.6.8.tar.xz
$> cd Python-3.6.8
$> ./configure --enable-optimizations
$> make altinstall

Python3.6 सफलतापूर्वक स्थापना गरेपछि, तपाईंले भर्चुअल वातावरण सिर्जना र सक्रिय गर्ने जस्ता बाँकी आवश्यकताहरू पूरा गर्न आवश्यक छ। थप रूपमा, pip मोड्युल नवीनतम संस्करणमा अद्यावधिक गरिएको छ र pg_chameleon स्थापना गर्न प्रयोग गरिन्छ। तलका आदेशहरूले जानाजानी pg_chameleon 2.0.9 स्थापना गर्दछ, यद्यपि नवीनतम संस्करण 2.0.10 हो। अपडेट गरिएको संस्करणमा नयाँ बगहरूबाट बच्न यो आवश्यक छ।

$> python3.6 -m venv venv
$> source venv/bin/activate
(venv) $> pip install pip --upgrade
(venv) $> pip install pg_chameleon==2.0.9

हामी त्यसपछि pg_chameleon सक्षम गर्न र पूर्वनिर्धारित डाइरेक्टरीहरू र कन्फिगरेसन फाइलहरू सिर्जना गर्न set_configuration_files तर्कको साथ pg_chameleon (chameleon एउटा आदेश हो) लाई कल गर्छौं।

(venv) $> chameleon set_configuration_files
creating directory /root/.pg_chameleon
creating directory /root/.pg_chameleon/configuration/
creating directory /root/.pg_chameleon/logs/
creating directory /root/.pg_chameleon/pid/
copying configuration  example in /root/.pg_chameleon/configuration//config-example.yml

अब हामी config-example.yml को default.yml को रूपमा प्रतिलिपि बनाउँछौं ताकि यो पूर्वनिर्धारित कन्फिगरेसन फाइल बनोस्। यस उदाहरणको लागि नमूना कन्फिगरेसन फाइल तल प्रदान गरिएको छ।

$> cat default.yml
---
#global settings
pid_dir: '~/.pg_chameleon/pid/'
log_dir: '~/.pg_chameleon/logs/'
log_dest: file
log_level: info
log_days_keep: 10
rollbar_key: ''
rollbar_env: ''

# type_override allows the user to override the default type conversion into a different one.
type_override:
  "tinyint(1)":
    override_to: boolean
    override_tables:
      - "*"

#postgres  destination connection
pg_conn:
  host: "192.168.56.106"
  port: "5433"
  user: "usr_replica"
  password: "pass123"
  database: "db_replica"
  charset: "utf8"

sources:
  mysql:
    db_conn:
      host: "192.168.56.102"
      port: "3306"
      user: "usr_replica"
      password: "pass123"
      charset: 'utf8'
      connect_timeout: 10
    schema_mappings:
      world_x: pgworld_x
    limit_tables:
#      - delphis_mediterranea.foo
    skip_tables:
#      - delphis_mediterranea.bar
    grant_select_to:
      - usr_readonly
    lock_timeout: "120s"
    my_server_id: 100
    replica_batch_size: 10000
    replay_max_rows: 10000
    batch_retention: '1 day'
    copy_max_memory: "300M"
    copy_mode: 'file'
    out_dir: /tmp
    sleep_loop: 1
    on_error_replay: continue
    on_error_read: continue
    auto_maintenance: "disabled"
    gtid_enable: No
    type: mysql
    skip_events:
      insert:
        - delphis_mediterranea.foo #skips inserts on the table delphis_mediterranea.foo
      delete:
        - delphis_mediterranea #skips deletes on schema delphis_mediterranea
      update:

यस उदाहरणमा कन्फिगरेसन फाइल स्रोत र लक्ष्य वातावरण अनुरूप साना परिमार्जनहरू सहित नमूना pg_chameleon फाइल हो, र तल कन्फिगरेसन फाइलको विभिन्न खण्डहरूको एक सिंहावलोकन छ।

default.yml कन्फिगरेसन फाइलमा विश्वव्यापी सेटिङहरूको एउटा खण्ड छ, जहाँ तपाईं लक फाइलको स्थान, लगहरूको स्थान, लगहरूको भण्डारण अवधि आदि जस्ता सेटिङहरू व्यवस्थापन गर्न सक्नुहुन्छ। त्यसपछि टाइप ओभरराइड खण्ड आउँछ, जहाँ प्रतिकृतिको समयमा ओभरराइडिङ प्रकारहरूको लागि नियमहरूको सेट। उदाहरण एक प्रकार अधिलेखन नियममा पूर्वनिर्धारित छ जसले tinyint(1) लाई बुलियन मानमा रूपान्तरण गर्दछ। अर्को खण्डमा, हामी लक्षित डाटाबेसमा जडान विवरणहरू निर्दिष्ट गर्दछौं। हाम्रो अवस्थामा, यो एक PostgreSQL डाटाबेस हो, नामित pg_conn। अन्तिम खण्डमा, हामी स्रोत डाटा संकेत गर्छौं, त्यो हो, स्रोत डाटाबेसको जडान प्यारामिटरहरू, स्रोत र लक्ष्य डाटाबेसहरू बीचको म्यापिङ योजना, छाड्नु पर्ने तालिकाहरू, प्रतीक्षा समय, मेमोरी, प्याकेज साइज। ध्यान दिनुहोस् कि "स्रोतहरू" बहुवचन हो, यसको मतलब हामी एकल लक्ष्य डेटाबेसमा धेरै-देखि-एक कन्फिगरेसन सेटअप गर्न धेरै स्रोत डाटाबेसहरू थप्न सक्छौं।

उदाहरण डाटाबेस world_x मा पङ्क्तिहरू सहित 4 तालिकाहरू छन् जुन MySQL समुदायले उदाहरणको रूपमा प्रस्ताव गर्दछ। यसलाई डाउनलोड गर्न सकिन्छ यहाँ। नमूना डाटाबेस पङ्क्तिहरू सिर्जना गर्न र आयात गर्न निर्देशनहरू सहित टार र संकुचित अभिलेखको रूपमा आउँछ।

MySQL र PostgreSQL डाटाबेसहरूमा, एक विशेष प्रयोगकर्ता समान नाम usr_replica को साथ सिर्जना गरिएको छ। MySQL मा, यसलाई सबै नक्कल गरिएका तालिकाहरूमा थप पढ्ने अधिकार दिइएको छ।

mysql> CREATE USER usr_replica ;
mysql> SET PASSWORD FOR usr_replica='pass123';
mysql> GRANT ALL ON world_x.* TO 'usr_replica';
mysql> GRANT RELOAD ON *.* to 'usr_replica';
mysql> GRANT REPLICATION CLIENT ON *.* to 'usr_replica';
mysql> GRANT REPLICATION SLAVE ON *.* to 'usr_replica';
mysql> FLUSH PRIVILEGES;

PostgreSQL साइडमा, एक db_replica डाटाबेस सिर्जना गरिएको छ जसले MySQL डाटाबेसबाट परिवर्तनहरू स्वीकार गर्नेछ। PostgreSQL मा प्रयोगकर्ता usr_replica स्वचालित रूपमा दुई स्कीमाहरू, pgworld_x र sch_chameleon को मालिकको रूपमा कन्फिगर गरिएको छ, जसले क्रमशः वास्तविक प्रतिकृति तालिकाहरू र प्रतिकृति डाइरेक्टरी तालिकाहरू समावेश गर्दछ। Create_replica_schema आर्गुमेन्ट स्वचालित कन्फिगरेसनको लागि जिम्मेवार छ, जसरी तपाईंले तल देख्नुहुनेछ।

postgres=# CREATE USER usr_replica WITH PASSWORD 'pass123';
CREATE ROLE
postgres=# CREATE DATABASE db_replica WITH OWNER usr_replica;
CREATE DATABASE

MySQL डाटाबेसलाई तल देखाइए अनुसार प्रतिकृतिको लागि तयार गर्न केही प्यारामिटर परिवर्तनहरूसँग कन्फिगर गरिएको छ। परिवर्तनहरू प्रभावकारी हुनको लागि तपाईंले डाटाबेस सर्भर पुन: सुरु गर्न आवश्यक हुनेछ।

$> vi /etc/my.cnf
binlog_format= ROW
binlog_row_image=FULL
log-bin = mysql-bin
server-id = 1

अब दुबै डाटाबेस सर्भरहरूमा जडान जाँच गर्न महत्त्वपूर्ण छ ताकि pg_chameleon आदेशहरू चलाउँदा कुनै समस्या नहोस्।

PostgreSQL नोडमा:

$> mysql -u usr_replica -Ap'admin123' -h 192.168.56.102 -D world_x

MySQL नोडमा:

$> psql -p 5433 -U usr_replica -h 192.168.56.106 db_replica

अर्को तीन pg_chameleon (chameleon) आदेशहरूले वातावरण तयार पार्छ, स्रोत थप्छ, र प्रतिकृति प्रारम्भ गर्दछ। pg_chameleon मा create_replica_schema तर्कले PostgreSQL डाटाबेसमा पूर्वनिर्धारित स्कीमा (sch_chameleon) र प्रतिकृति योजना (pgworld_x) सिर्जना गर्दछ, जसरी हामीले पहिले नै छलफल गरिसकेका छौं। add_source तर्कले कन्फिगरेसन फाइल (default.yml) पढेर कन्फिगरेसनमा स्रोत डाटाबेस थप्छ, र हाम्रो अवस्थामा यो mysql हो, र init_replica ले कन्फिगरेसन फाइलमा प्यारामिटरहरूमा आधारित कन्फिगरेसन प्रारम्भ गर्दछ।

$> chameleon create_replica_schema --debug
$> chameleon add_source --config default --source mysql --debug
$> chameleon init_replica --config default --source mysql --debug

यी तीन आदेशहरूको आउटपुट स्पष्ट रूपमा संकेत गर्दछ कि तिनीहरू सफलतापूर्वक कार्यान्वयन गरियो। कुनै पनि क्र्यास वा सिन्ट्याक्स त्रुटिहरू समस्या कसरी समाधान गर्ने भन्ने संकेतहरू सहित सरल, स्पष्ट सन्देशहरूमा रिपोर्ट गरिन्छ।

अन्तमा, हामी start_replica प्रयोग गरेर प्रतिकृति सुरु गर्छौं र सफल सन्देश प्राप्त गर्छौं।

$> chameleon start_replica --config default --source mysql 
output: Starting the replica process for source mysql

प्रतिकृति स्थिति show_status तर्क प्रयोग गरेर सोध्न सकिन्छ, र त्रुटिहरू show_errors तर्क प्रयोग गरेर हेर्न सकिन्छ।

परिणाम।

हामीले पहिले नै भनेझैं, प्रत्येक प्रतिकृति प्रकार्य डेमनद्वारा नियन्त्रित हुन्छ। तिनीहरूलाई हेर्नको लागि, हामी लिनक्स ps आदेशको साथ प्रक्रिया तालिकालाई सोध्छौं, तल देखाइएको रूपमा।

परिणाम।

हामीले यसलाई वास्तविक समयमा परीक्षण नगरेसम्म प्रतिकृति कन्फिगर गरिएको मानिने छैन, जस्तै तल देखाइएको छ। हामी एउटा तालिका सिर्जना गर्छौं, MySQL डाटाबेसमा केही रेकर्डहरू घुसाउँछौं, र pg_chameleon मा sync_tables argument लाई deemons अपडेट गर्न र PostgreSQL डाटाबेसमा रेकर्डहरू सहित तालिकाको नक्कल गर्न कल गर्छौं।

mysql> create table t1 (n1 int primary key, n2 varchar(10));
Query OK, 0 rows affected (0.01 sec)
mysql> insert into t1 values (1,'one');
Query OK, 1 row affected (0.00 sec)
mysql> insert into t1 values (2,'two');
Query OK, 1 row affected (0.00 sec)

$> chameleon sync_tables --tables world_x.t1 --config default --source mysql
Sync tables process for source mysql started.

परीक्षणको नतिजा पुष्टि गर्न, हामी PostgreSQL डाटाबेसबाट तालिकालाई सोध्छौं र पङ्क्तिहरू आउटपुट गर्छौं।

$> psql -p 5433 -U usr_replica -d db_replica -c "select * from pgworld_x.t1";
 n1 |  n2
----+-------
  1 | one
  2 | two

यदि हामी माइग्रेसन गर्दैछौं भने, निम्न pg_chameleon आदेशहरू यसको अन्त्य हुनेछ। सबै लक्षित तालिकाहरूको पङ्क्तिहरू नक्कल गरिएको छ भनी निश्चित भएपछि आदेशहरू कार्यान्वयन गर्न आवश्यक छ, र परिणाम स्रोत डेटाबेस वा प्रतिकृति योजना (sch_chameleon) को सन्दर्भ बिना नै सफा रूपमा माइग्रेट गरिएको PostgreSQL डाटाबेस हुनेछ।

$> chameleon stop_replica --config default --source mysql 
$> chameleon detach_replica --config default --source mysql --debug

यदि चाहियो भने, तपाइँ मूल कन्फिगरेसन र प्रतिकृति योजना मेटाउन निम्न आदेशहरू प्रयोग गर्न सक्नुहुन्छ।

$> chameleon drop_source --config default --source mysql --debug
$> chameleon drop_replica_schema --config default --source mysql --debug

pg_chameleon का फाइदाहरू

सजिलो सेटअप र कन्फिगरेसन।
स्पष्ट त्रुटि सन्देशहरूको साथ सजिलै समस्या निवारण र विसंगतिहरू पहिचान गर्नुहोस्।
बाँकी कन्फिगरेसन परिवर्तन नगरी प्रारम्भ पछि प्रतिकृतिमा थप विशेष तालिकाहरू थप्न सकिन्छ।
एउटै लक्ष्य डाटाबेसको लागि धेरै स्रोत डाटाबेसहरू कन्फिगर गर्न सम्भव छ, र यदि तपाइँ एक वा धेरै MySQL डाटाबेसहरूबाट डाटा एकल PostgreSQL डाटाबेसमा संयोजन गर्दै हुनुहुन्छ भने यो धेरै उपयोगी छ।
तपाईंले चयन गरिएका तालिकाहरू नक्कल गर्न आवश्यक छैन।

pg_chameleon का बेफाइदाहरू

केवल MySQL 5.5 र माथिको स्रोतको रूपमा र PostgreSQL 9.5 र माथिको लक्ष्य डाटाबेसको रूपमा समर्थित।
प्रत्येक तालिकामा प्राथमिक वा अद्वितीय कुञ्जी हुनुपर्छ, अन्यथा तालिकाहरू init_replica प्रक्रियाको क्रममा प्रारम्भ गरिन्छ तर प्रतिकृति हुँदैन।
एकतर्फी प्रतिकृति - केवल MySQL देखि PostgreSQL सम्म। त्यसकारण, यो "सक्रिय-निष्क्रिय" सर्किटको लागि मात्र उपयुक्त छ।
स्रोत केवल एक MySQL डाटाबेस हुन सक्छ, र स्रोतको रूपमा PostgreSQL डाटाबेसको लागि समर्थन प्रयोगात्मक र सीमितताहरूको साथ मात्र हो (थप जान्नुहोस्। यहाँ)

pg_chameleon का लागि परिणामहरू

MySQL बाट PostgreSQL मा डाटाबेस माइग्रेट गर्न pg_chameleon मा प्रतिकृति विधि उत्कृष्ट छ। महत्त्वपूर्ण नकारात्मक पक्ष यो हो कि प्रतिकृति केवल एक-तर्फी हो, त्यसैले डाटाबेस पेशेवरहरूले यसलाई माइग्रेसन बाहेक अरू कुनै कुराको लागि प्रयोग गर्न चाहँदैनन्। तर एकतर्फी प्रतिकृतिको समस्या अर्को खुला स्रोत उपकरण - SymmetricDS संग हल गर्न सकिन्छ।

आधिकारिक कागजातमा थप पढ्नुहोस् यहाँ। कमाण्ड लाइन मद्दत पाउन सकिन्छ यहाँ.

SymmetricDS को अवलोकन

SymmetricDS एउटा खुला स्रोत उपकरण हो जसले कुनै पनि डाटाबेसलाई कुनै पनि अन्य सामान्य डाटाबेसमा प्रतिकृति बनाउँछ: Oracle, MongoDB, PostgreSQL, MySQL, SQL Server, MariaDB, DB2, Sybase, Greenplum, Informix, H2, Firebird र अन्य क्लाउड डाटाबेस उदाहरणहरू, जस्तै Redshift, Azure, आदि उपलब्ध सुविधाहरू: डाटाबेस र फाइल सिङ्क्रोनाइजेसन, बहु-मास्टर डाटाबेस प्रतिकृति, फिल्टर सिङ्क्रोनाइजेसन, रूपान्तरण र अन्य। यो जाभा उपकरण हो र JRE वा JDK (संस्करण 8.0 वा उच्च) को मानक रिलीज आवश्यक छ। यहाँ, स्रोत डाटाबेसमा ट्रिगरहरूमा डाटा परिवर्तनहरू रेकर्ड गर्न सकिन्छ र ब्याचको रूपमा उपयुक्त लक्ष्य डाटाबेसमा पठाउन सकिन्छ।

SymmetricDS सुविधाहरू

उपकरण प्लेटफर्म स्वतन्त्र छ, मतलब दुई वा बढी फरक डाटाबेस डाटा आदान प्रदान गर्न सक्छन्।
रिलेसनल डाटाबेसहरू डाटा परिवर्तन रेकर्डहरू प्रयोग गरेर सिङ्क्रोनाइज हुन्छन्, जबकि फाइल प्रणाली-आधारित डाटाबेसहरूले फाइल सिङ्क्रोनाइजेसन प्रयोग गर्छन्।
नियमहरूको सेटमा आधारित पुश र पुल विधिहरू प्रयोग गरेर दुई-तर्फी प्रतिकृति।
सुरक्षित र कम ब्यान्डविथ नेटवर्कहरूमा डाटा स्थानान्तरण सम्भव छ।
स्वचालित रिकभरी जब नोडहरू विफलता र स्वचालित विवाद समाधान पछि सञ्चालन पुन: सुरु हुन्छ।
क्लाउड संगत र शक्तिशाली विस्तार API हरू।

उदाहरण:

SymmetricDS दुई विकल्पहरू मध्ये एकमा कन्फिगर गर्न सकिन्छ:
एउटा मास्टर (अभिभावक) नोड जसले दुई दास (बच्चा) नोडहरू बीचको डेटा प्रतिकृतिलाई केन्द्रित रूपमा समन्वय गर्दछ, र बाल नोडहरू बीचको सञ्चार अभिभावक मार्फत मात्र हुन्छ।
एक सक्रिय नोड (नोड 1) ले मध्यस्थ बिना अर्को सक्रिय नोड (नोड 2) सँग प्रतिकृतिको लागि सञ्चार गर्न सक्छ।

दुबै विकल्पहरूमा, पुश र पुल प्रयोग गरेर डाटा एक्सचेंज हुन्छ। यस उदाहरणमा हामी सक्रिय-सक्रिय कन्फिगरेसनलाई विचार गर्नेछौं। सम्पूर्ण वास्तुकला वर्णन गर्न धेरै लामो समय लाग्नेछ, त्यसैले आफ्नो अनुसन्धान गर्नुहोस्। गाईडSymmetricDS यन्त्रको बारेमा थप जान्नको लागि।

SymmetricDS स्थापना गर्न धेरै सरल छ: zip फाइलको खुला स्रोत संस्करण डाउनलोड गर्नुहोस् यहाँ देखि र यसलाई तपाईं जहाँ चाहनुहुन्छ बाहिर लैजानुहोस्। तलको तालिकाले यस उदाहरणमा SymmetricDS को स्थापना स्थान र संस्करण, साथै डाटाबेस संस्करणहरू, लिनक्स संस्करणहरू, IP ठेगानाहरू, र दुवै नोडहरूका लागि पोर्टहरू बारे जानकारी प्रदान गर्दछ।

होस्ट
vm1
vm2

OS संस्करण
CentOS लिनक्स 7.6 x86_64
CentOS लिनक्स 7.6 x86_64

DB सर्भर संस्करण
MySQL 5.7.26
PostgreSQL .10.5 .१

DB पोर्ट
3306
5832

आईपी ठेगाना
192.168.1.107
192.168.1.112

SymmetricDS संस्करण
SymmetricDS 3.9
SymmetricDS 3.9

SymmetricDS स्थापना पथ
/usr/local/symmetric-server-3.9.20
/usr/local/symmetric-server-3.9.20

SymmetricDS नोड नाम
निगम-000
स्टोर-२

यहाँ हामी /usr/local/symmetric-server-3.9.20 मा SymmetricDS स्थापना गर्छौं, र त्यहाँ विभिन्न उपनिर्देशिकाहरू र फाइलहरू भण्डार गरिनेछ। हामी नमूनाहरू र इन्जिन उपनिर्देशिकाहरूमा रुचि राख्छौं। नमूना डाइरेक्टरीले नोड गुणहरू सहित उदाहरण कन्फिगरेसन फाइलहरू समावेश गर्दछ, साथसाथै उदाहरण SQL स्क्रिप्टहरू तपाईंलाई छिटो सुरु गर्नको लागि।

नमूना डाइरेक्टरीमा हामी नोड गुणहरूसँग तीन कन्फिगरेसन फाइलहरू देख्छौं - नामले निश्चित योजनामा नोडको प्रकृति देखाउँछ।

corp-000.properties
store-001.properties
store-002.properties

SymmetricDS सँग आधारभूत 3-नोड डिजाइन (विकल्प 1) को लागि सबै आवश्यक कन्फिगरेसन फाइलहरू छन्, र उही फाइलहरू 2-नोड डिजाइन (विकल्प 2) को लागि प्रयोग गर्न सकिन्छ। आवश्यक कन्फिगरेसन फाइल नमूना डाइरेक्टरीबाट vm1 होस्टमा इन्जिनहरूमा प्रतिलिपि गर्नुहोस्। यो यस्तो निस्कन्छ:

$> cat engines/corp-000.properties
engine.name=corp-000
db.driver=com.mysql.jdbc.Driver
db.url=jdbc:mysql://192.168.1.107:3306/replica_db?autoReconnect=true&useSSL=false
db.user=root
db.password=admin123
registration.url=
sync.url=http://192.168.1.107:31415/sync/corp-000
group.id=corp
external.id=000

SymmetricDS कन्फिगरेसनमा रहेको यो नोडलाई corp-000 भनिन्छ, र डाटाबेस जडान mysql jdbc ड्राइभरद्वारा ह्यान्डल गरिन्छ, जसले माथिको जडान स्ट्रिङ र लगइन प्रमाणहरू प्रयोग गर्दछ। हामी replica_db डाटाबेसमा जडान गर्छौं र स्कीमा सिर्जना गर्दा तालिकाहरू सिर्जना गरिनेछ। sync.url ले सिंक्रोनाइजेसनको लागि नोडलाई कहाँ सम्पर्क गर्ने भनेर देखाउँछ।

होस्ट vm2 मा नोड 2 स्टोर-001 को रूपमा कन्फिगर गरिएको छ र बाँकी तलको node.properties फाइलमा निर्दिष्ट गरिएको छ। Node store-001 ले PostgreSQL डाटाबेस चलाउँछ र pgdb_replica प्रतिकृति डाटाबेस हो। registration.url ले होस्ट vm2 लाई होस्ट vm1 लाई सम्पर्क गर्न र यसबाट कन्फिगरेसन विवरणहरू प्राप्त गर्न अनुमति दिन्छ।

$> cat engines/store-001.properties
engine.name=store-001
db.driver=org.postgresql.Driver
db.url=jdbc:postgresql://192.168.1.112:5832/pgdb_replica
db.user=postgres
db.password=admin123
registration.url=http://192.168.1.107:31415/sync/corp-000
group.id=store
external.id=001

पूरा भएको SymmetricDS उदाहरणले दुई डाटाबेस सर्भरहरू (दुई नोडहरू) बीच दुई-तर्फी प्रतिकृति सेटअप गर्न प्यारामिटरहरू समावेश गर्दछ। तलका चरणहरू होस्ट vm1 (corp-000) मा प्रदर्शन गरिन्छ, जसले 4 तालिकाहरूसँग एउटा उदाहरण स्कीमा सिर्जना गर्नेछ। त्यसपछि symadmin आदेशको साथ सिर्जना-sym-तालिकाहरू चलाउँदा डाइरेक्टरी तालिकाहरू सिर्जना गर्दछ जहाँ नोडहरू बीचको प्रतिकृतिको नियम र दिशा भण्डार गरिनेछ। अन्तमा, नमूना डेटा तालिकाहरूमा लोड हुन्छ।

vm1$> cd /usr/local/symmetric-server-3.9.20/bin
vm1$> ./dbimport --engine corp-000 --format XML create_sample.xml
vm1$> ./symadmin --engine corp-000 create-sym-tables
vm1$> ./dbimport --engine corp-000 insert_sample.sql

उदाहरणमा, वस्तु र वस्तु_सेलिंग_मूल्य तालिकाहरू corp-000 बाट store-001 मा नक्कल गर्नको लागि स्वतः कन्फिगर गरिएको छ, र बिक्री तालिकाहरू (sale_transaction र sale_return_line_item) लाई स्टोर-001 बाट कर्प-000 मा नक्कल गर्न स्वतः कन्फिगर गरिएको छ। अब हामी होस्ट vm2 (store-001) मा PostgreSQL डाटाबेसमा corp-000 बाट डाटा प्राप्त गर्न तयार गर्नको लागि एउटा स्कीमा सिर्जना गर्छौं।

vm2$> cd /usr/local/symmetric-server-3.9.20/bin
vm2$> ./dbimport --engine store-001 --format XML create_sample.xml

vm1 मा रहेको MySQL डाटाबेसमा उदाहरण तालिकाहरू र SymmetricDS क्याटलग तालिकाहरू छन् भनी जाँच गर्नुहोस्। ध्यान दिनुहोस् कि SymmetricDS प्रणाली तालिकाहरू (sym_ को साथ उपसर्ग लगाइएको) हाल नोड कर्प-000 मा मात्र उपलब्ध छन् किनभने हामीले सिर्जना-sym-तालिकाहरू आदेश चलाएको छ र प्रतिकृति व्यवस्थापन गर्नेछौं। र नोड स्टोर-001 मा डाटाबेसमा डाटा बिना मात्र 4 उदाहरण तालिका हुनेछ।

सबै। वातावरण तल देखाइएका दुवै नोडहरूमा सिम सर्भर प्रक्रियाहरू चलाउन तयार छ।

vm1$> cd /usr/local/symmetric-server-3.9.20/bin
vm1$> sym 2>&1 &

लग प्रविष्टिहरू SymmetricDS स्थापना भएको डाइरेक्टरीको लग फोल्डरको पृष्ठभूमि लग फाइल (symmetric.log) मा पठाइन्छ, साथै मानक आउटपुटमा। सिम सर्भर अब नोड स्टोर-001 मा सुरु गर्न सकिन्छ।

vm2$> cd /usr/local/symmetric-server-3.9.20/bin
vm2$> sym 2>&1 &

यदि तपाइँ vm2 होस्टमा sym सर्भर प्रक्रिया चलाउनुहुन्छ भने, यसले PostgreSQL डाटाबेसमा SymmetricDS क्याटलग तालिकाहरू पनि सिर्जना गर्नेछ। यदि तपाइँ दुबै नोडहरूमा sym सर्भर प्रक्रिया चलाउनुहुन्छ भने, तिनीहरूले corp-000 बाट स्टोर-001 मा डेटा नक्कल गर्न एक अर्कासँग समन्वय गर्दछ। यदि केहि सेकेन्ड पछि हामीले दुबै छेउमा सबै 4 तालिकाहरू सोध्छौं भने, हामी प्रतिकृति सफल भएको देख्नेछौं। वा तपाईले बुटस्ट्र्यापलाई निम्न आदेशको साथ कर्प-001 बाट नोड स्टोर-000 मा पठाउन सक्नुहुन्छ।

vm1$> ./symadmin --engine corp-000 reload-node 001

यस बिन्दुमा, नोड कर्प-000 (होस्ट: vm1) मा MySQL डाटाबेसमा वस्तु तालिकामा एउटा नयाँ रेकर्ड घुसाइएको छ, र तपाईंले नोड स्टोर-001 (होस्ट: vm2) मा PostgreSQL डाटाबेसमा यसको प्रतिकृति जाँच गर्न सक्नुहुन्छ। हामी डेटा कर्प-000 बाट स्टोर-001 मा सार्नको लागि पुल अपरेशन देख्छौं।

mysql> insert into item values ('22000002','Jelly Bean');
Query OK, 1 row affected (0.00 sec)

vm2$> psql -p 5832 -U postgres pgdb_replica -c "select * from item"
 item_id  |   name
----------+-----------
 11000001 | Yummy Gum
 22000002 | Jelly Bean
(2 rows)

स्टोर-001 बाट कर्प-000 मा डाटा सार्नको लागि पुश अपरेशन गर्न, हामी sale_transaction तालिकामा रेकर्ड घुसाउँछौं र प्रतिकृति सफल भएको प्रमाणित गर्छौं।

परिणाम।

हामी MySQL र PostgreSQL डाटाबेसहरू बीचको उदाहरण तालिकाको दुई-तर्फी प्रतिकृतिको सफल सेटअप देख्छौं। नयाँ प्रयोगकर्ता तालिकाहरूको लागि प्रतिकृति सेटअप गर्न, यी चरणहरू पालना गर्नुहोस्: हामी उदाहरणको लागि तालिका t1 सिर्जना गर्छौं र निम्नानुसार यसको प्रतिकृति नियमहरू कन्फिगर गर्छौं। यस तरिकाले हामी कर्प-000 बाट स्टोर-001 मा प्रतिकृति मात्र कन्फिगर गर्छौं।

mysql> create table  t1 (no integer);
Query OK, 0 rows affected (0.01 sec)

mysql> insert into sym_channel (channel_id,create_time,last_update_time) 
values ('t1',current_timestamp,current_timestamp);
Query OK, 1 row affected (0.01 sec)

mysql> insert into sym_trigger (trigger_id, source_table_name,channel_id,
last_update_time, create_time) values ('t1', 't1', 't1', current_timestamp,
current_timestamp);
Query OK, 1 row affected (0.01 sec)

mysql> insert into sym_trigger_router (trigger_id, router_id,
Initial_load_order, create_time,last_update_time) values ('t1',
'corp-2-store-1', 1, current_timestamp,current_timestamp);
Query OK, 1 row affected (0.01 sec)

त्यसपछि कन्फिगरेसनलाई स्किमा परिवर्तनको बारेमा सूचित गरिन्छ, त्यो हो, नयाँ तालिकाको थप, सिंक-ट्रिगर तर्कसँग symadmin आदेश प्रयोग गरेर, जसले तालिका परिभाषाहरू नक्सा गर्न ट्रिगरहरूलाई पुन: सिर्जना गर्दछ। नोड स्टोर-001 मा स्कीमा परिवर्तनहरू पठाउन पठाउन-स्कीमा कार्यान्वयन गरिन्छ, र तालिका t1 को प्रतिकृति कन्फिगर गरिएको छ।

vm1$> ./symadmin -e corp-000 --node=001 sync-triggers    
vm1$> ./symadmin send-schema -e corp-000 --node=001 t1

SymmetricDS को लाभ

सजिलो स्थापना र कन्फिगरेसन, तीन-नोड वा दुई-नोड सर्किट सिर्जना गर्न प्यारामिटरहरू सहित फाइलहरूको तयार सेट सहित।
क्रस-प्लेटफर्म डाटाबेस र प्लेटफर्म स्वतन्त्रता, सर्भर, ल्यापटप र मोबाइल उपकरणहरू सहित।
कुनै पनि डाटाबेसलाई स्थानीय रूपमा, WAN वा क्लाउडमा कुनै पनि अन्य डाटाबेसमा नक्कल गर्नुहोस्।
सुविधाजनक प्रतिकृतिको लागि केहि डाटाबेस वा धेरै हजारको साथ इष्टतम कामको सम्भावना।
GUI र उत्कृष्ट समर्थनको साथ सशुल्क संस्करण।

SymmetricDS का बेफाइदाहरू

तपाईंले क्याटलग तालिकाहरू लोड गर्न SQL कथनहरू मार्फत आदेश रेखामा प्रतिकृतिको नियम र दिशा म्यानुअल रूपमा परिभाषित गर्न आवश्यक छ, जुन असुविधाजनक हुन सक्छ।
प्रतिकृतिको लागि धेरै तालिकाहरू सेटअप गर्न कठिन हुन सक्छ जबसम्म तपाइँ SQL कथनहरू सिर्जना गर्न स्क्रिप्टहरू प्रयोग गर्नुहुन्न जसले प्रतिकृतिको नियम र दिशा परिभाषित गर्दछ।
त्यहाँ लगहरूमा धेरै धेरै जानकारी रेकर्ड भइरहेको छ, र कहिलेकाहीँ तपाईंले लग फाइललाई व्यवस्थित गर्न आवश्यक छ ताकि यसले धेरै ठाउँ लिँदैन।

SymmetricDS का लागि परिणामहरू

SymmetricDS ले तपाईंलाई दुई, तीन, वा धेरै हजार नोडहरू बीचमा दुई-तर्फी प्रतिकृति सेटअप गर्न अनुमति दिन्छ फाइलहरू प्रतिकृति र सिङ्क्रोनाइज गर्न। यो एक अद्वितीय उपकरण हो जसले स्वतन्त्र रूपमा धेरै कार्यहरू गर्दछ, जस्तै नोडमा लामो समयको डाउनटाइम पछि स्वचालित डेटा रिकभरी, HTTPS मार्फत नोडहरू बीच सुरक्षित र कुशल डेटा आदानप्रदान, नियमहरूको सेटमा आधारित स्वचालित द्वन्द्व व्यवस्थापन, आदि। SymmetricDS कार्य गर्दछ। कुनै पनि डाटाबेसहरू बीचको प्रतिकृति, त्यसकारण, यो माइग्रेसन, माइग्रेसन, वितरण, फिल्टरिङ, र प्लेटफर्महरूमा डाटाको रूपान्तरण सहित विभिन्न परिदृश्यहरूको लागि प्रयोग गर्न सकिन्छ।

उदाहरणको आधारमा आधिकारिक हो द्रुत गाइड SymmetricDS द्वारा। IN प्रयोगकर्ता पुस्तिका SymmetricDS संग प्रतिकृति सेटअप मा संलग्न विभिन्न अवधारणाहरु को विस्तार मा वर्णन गर्दछ।

स्रोत: www.habr.com

PostgreSQL र MySQL बीच क्रस प्रतिकृति

pg_chameleon के हो

pg_chameleon को विशेषताहरु

उदाहरण:

pg_chameleon का फाइदाहरू

pg_chameleon का बेफाइदाहरू

pg_chameleon का लागि परिणामहरू

SymmetricDS को अवलोकन

SymmetricDS सुविधाहरू

उदाहरण:

SymmetricDS को लाभ

SymmetricDS का बेफाइदाहरू

SymmetricDS का लागि परिणामहरू

एक टिप्पणी थप्न Отменить ответ