ពិធីជប់លៀងរីករាយ ឬអនុស្សាវរីយពីរបីជួរអំពីការស្គាល់ការបែងចែកនៅក្នុង PostgreSQL10

បុព្វកថា ឬ របៀបដែលគំនិតនៃការបែងចែកកើតឡើង

រឿងនេះចាប់ផ្តើមនៅទីនេះ៖ តើអ្នកចាំពីរបៀបដែលវាបានចាប់ផ្តើម។ អ្វីគ្រប់យ៉ាងគឺជាលើកដំបូងហើយម្តងទៀត។ បន្ទាប់ពីធនធានស្ទើរតែទាំងអស់សម្រាប់ការបង្កើនប្រសិទ្ធភាពសំណើនៅពេលនោះត្រូវបានអស់ហើយសំណួរបានកើតឡើង - តើមានអ្វីបន្ទាប់ទៀត? នេះជារបៀបដែលគំនិតនៃការបែងចែកបានកើតឡើង។

ការ​បំប្លែង​អត្ថបទ​ចម្រៀង៖
ច្បាស់ណាស់ 'នៅពេលនោះ' ដោយសារតែ ដូចដែលវាបានប្រែក្លាយ មានទុនបំរុងបង្កើនប្រសិទ្ធភាពដែលមិនបានប្រើ។ សូមអរគុណ អាសម និង Habru!

ដូច្នេះ តើ​ធ្វើ​ដូចម្តេច​ទៀត​ដែល​អ្នក​អាច​ធ្វើ​ឱ្យ​អតិថិជន​សប្បាយ​ចិត្ត ហើយ​ទន្ទឹម​នឹង​នោះ​ក៏​បង្កើន​ជំនាញ​របស់​អ្នក​ដែរ?

ដើម្បីធ្វើឱ្យអ្វីៗគ្រប់យ៉ាងសាមញ្ញតាមដែលអាចធ្វើទៅបាន។បន្ទាប់មកមានវិធីពីរយ៉ាងក្នុងការធ្វើអោយប្រសើរឡើងនូវអ្វីមួយនៅក្នុងដំណើរការនៃមូលដ្ឋានទិន្នន័យ៖
1) ផ្លូវទូលំទូលាយ - យើងបង្កើនធនធានផ្លាស់ប្តូរការកំណត់រចនាសម្ព័ន្ធ;
2) ផ្លូវដែលពឹងផ្អែកខ្លាំង - ការបង្កើនប្រសិទ្ធភាពសំណួរ

ចាប់តាំងពីខ្ញុំនិយាយម្តងទៀតនៅពេលនោះវាមិនច្បាស់ទៀតទេថាត្រូវផ្លាស់ប្តូរអ្វីផ្សេងទៀតនៅក្នុងសំណើដើម្បីបង្កើនល្បឿនផ្លូវត្រូវបានជ្រើសរើស - ការផ្លាស់ប្តូរការរចនាតារាង។

ដូច្នេះសំណួរចម្បងកើតឡើង: តើយើងនឹងផ្លាស់ប្តូរអ្វី?

លក្ខខណ្ឌបឋម

ទីមួយមាន ERD នេះ (បង្ហាញតាមរបៀបសាមញ្ញតាមលក្ខខណ្ឌ)៖

លក្ខណៈសំខាន់ៗ:

1. ទំនាក់ទំនងជាច្រើនទៅច្រើន។
2. តារាងមានសោភាគថាសដែលមានសក្តានុពលរួចហើយ

សំណើដើម៖

SELECT
            p."PARAMETER_ID" as  parameter_id,
            pc."PC_NAME" AS pc_name,
            pc."CUSTOMER_PARTNUMBER" AS customer_partnumber,
            w."LASERMARK" AS lasermark,
            w."LOTID" AS lotid,
            w."REPORTED_VALUE" AS reported_value,
            w."LOWER_SPEC_LIMIT" AS lower_spec_limit,
            w."UPPER_SPEC_LIMIT" AS upper_spec_limit,
            p."TYPE_CALCUL" AS type_calcul,
            s."SHIPMENT_NAME" AS shipment_name,
            s."SHIPMENT_DATE" AS shipment_date,
            extract(year from s."SHIPMENT_DATE") AS year,
            extract(month from s."SHIPMENT_DATE") as month,
            s."REPORT_NAME" AS report_name,
            p."SPARAM_NAME" AS SPARAM_name,
            p."CUSTOMERPARAM_NAME" AS customerparam_name
        FROM data w INNER JOIN shipment s ON s."SHIPMENT_ID" = w."SHIPMENT_ID"
             INNER JOIN parameters p ON p."PARAMETER_ID" = w."PARAMETER_ID"
             INNER JOIN shipment_pc sp ON s."SHIPMENT_ID" = sp."SHIPMENT_ID"
             INNER JOIN pc pc ON pc."PC_ID" = sp."PC_ID"
             INNER JOIN ( SELECT w2."LASERMARK" , MAX(s2."SHIPMENT_DATE") AS "SHIPMENT_DATE"
                          FROM shipment s2 INNER JOIN data w2 ON s2."SHIPMENT_ID" = w2."SHIPMENT_ID" 
                          GROUP BY w2."LASERMARK"
                         ) md ON md."SHIPMENT_DATE" = s."SHIPMENT_DATE" AND md."LASERMARK" = w."LASERMARK"
        WHERE 
             s."SHIPMENT_DATE" >= '2018-07-01' AND s."SHIPMENT_DATE" <= '2018-09-30' ;

លទ្ធផលនៃការប្រតិបត្តិលើមូលដ្ឋានទិន្នន័យសាកល្បង៖
ការចំណាយ : 502 997.55
ពេលវេលាប្រតិបត្តិ៖ ៤៥ វិនាទី។

តើយើងឃើញអ្វី? សំណើទៀងទាត់ ដោយផ្អែកលើពេលវេលា។
ចូរ​ធ្វើ​ការ​សន្មត់​ឡូជីខល​សាមញ្ញ​បំផុត៖ ប្រសិន​បើ​មាន​គំរូ​នៃ​ពេលវេលា​មួយ តើ​វា​នឹង​ជួយ​យើង​បាន​ទេ? នោះជាការត្រឹមត្រូវ - ការបែងចែក។

ផ្នែកអ្វី?

នៅ glance ដំបូង ជម្រើសគឺជាក់ស្តែង - ការបែងចែកការប្រកាសនៃតារាង "ការដឹកជញ្ជូន" ដោយប្រើគ្រាប់ចុច "SHIPMENT_DATE" (លោតទៅមុខឆ្ងាយពេក - នៅទីបញ្ចប់វាប្រែទៅជាខុសបន្តិចបន្តួចនៅក្នុងផលិតកម្ម).

តើធ្វើដូចម្តេចដើម្បីបែងចែក?

សំណួរនេះក៏មិនពិបាកដែរ។ ជាសំណាងល្អនៅក្នុង PostgreSQL 10 ឥឡូវនេះមានយន្តការបែងចែកមនុស្ស។
ដូច្នេះ:

1. រក្សាទុកការបោះចោលតារាងប្រភព - pg_dump source_table
2. លុបតារាងដើម - ទម្លាក់តារាង source_table
3. បង្កើតតារាងមេជាមួយការបែងចែកជួរ - បង្កើតតារាង source_table
4. បង្កើតផ្នែក - បង្កើតតារាង source_table បង្កើតលិបិក្រម
5. នាំចូលការចាក់សំរាមដែលបានបង្កើតក្នុងជំហានទី 1 - pg_restore

ស្គ្រីបសម្រាប់ការបែងចែក

សម្រាប់ភាពសាមញ្ញ និងភាពងាយស្រួល ជំហាន 2,3,4 ត្រូវបានបញ្ចូលទៅក្នុងស្គ្រីបតែមួយ។

ដូច្នេះ:
រក្សាទុកការបោះចោលតារាងប្រភព

pg_dump postgres --file=/dump/shipment.dmp --format=c --table=shipment --verbose > /dump/shipment.log 2>&1

លុបតារាងប្រភព + បង្កើតតារាងមេជាមួយការបែងចែកជួរ + បង្កើតភាគថាស

--create_partition_shipment.sql
do language plpgsql $$
declare 
rec_shipment_date RECORD ;
partition_name varchar;
index_name varchar;
current_year varchar ;
current_month varchar ;
begin_year varchar ;
begin_month varchar ;
next_year varchar ;
next_month varchar ;
first_flag boolean ;
i integer ;
begin
  RAISE NOTICE 'CREATE TEMPORARY TABLE FOR SHIPMENT_DATE';
  CREATE TEMP TABLE tmp_shipment_date as select distinct "SHIPMENT_DATE" from shipment order by "SHIPMENT_DATE" ;

  RAISE NOTICE 'DROP TABLE shipment';
  drop table shipment cascade ;
  
  CREATE TABLE public.shipment
  (
    "SHIPMENT_ID" integer NOT NULL DEFAULT nextval('shipment_shipment_id_seq'::regclass),
    "SHIPMENT_NAME" character varying(30) COLLATE pg_catalog."default",
    "SHIPMENT_DATE" timestamp without time zone,
    "REPORT_NAME" character varying(40) COLLATE pg_catalog."default"
  )
  PARTITION BY RANGE ("SHIPMENT_DATE")
  WITH (
      OIDS = FALSE
  )
  TABLESPACE pg_default;

  RAISE NOTICE 'CREATE PARTITIONS FOR TABLE shipment';

  current_year:='0';
  current_month:='0';

  begin_year := '0' ;
  begin_month := '0'  ;
  next_year := '0' ;
  next_month := '0'  ;

  FOR rec_shipment_date IN SELECT * FROM tmp_shipment_date LOOP
      
      RAISE NOTICE 'SHIPMENT_DATE=%',rec_shipment_date."SHIPMENT_DATE";
      
      current_year := date_part('year' ,rec_shipment_date."SHIPMENT_DATE");
      current_month := date_part('month' ,rec_shipment_date."SHIPMENT_DATE") ; 

      IF to_number(current_month,'99') < 10 THEN
        current_month := '0'||current_month ; 
      END IF ;

      --Init borders
      IF   begin_year = '0' THEN
       first_flag := true ; --first time flag
       begin_year := current_year ;
       begin_month := current_month ;   
   
        IF current_month = '12' THEN
          next_year := date_part('year' ,rec_shipment_date."SHIPMENT_DATE" + interval '1 year') ;
        ELSE
          next_year := current_year ;
        END IF;
     
       next_month := date_part('month' ,rec_shipment_date."SHIPMENT_DATE" + interval '1 month') ;

      END IF;

      -- Check current date into borders NOT for First time
      IF to_date( current_year||'.'||current_month, 'YYYY.MM') >= to_date( begin_year||'.'||begin_month, 'YYYY.MM') AND 
         to_date( current_year||'.'||current_month, 'YYYY.MM') < to_date( next_year||'.'||next_month, 'YYYY.MM') AND 
         NOT first_flag 
      THEN
         CONTINUE ; 
      ELSE
       --NEW borders only for second and after time 
       begin_year := current_year ;
       begin_month := current_month ;   
   
        IF current_month = '12' THEN
          next_year := date_part('year' ,rec_shipment_date."SHIPMENT_DATE" + interval '1 year') ;
        ELSE
          next_year := current_year ;
        END IF;
     
       next_month := date_part('month' ,rec_shipment_date."SHIPMENT_DATE" + interval '1 month') ;

      END IF;      

      partition_name := 'shipment_shipment_date_'||begin_year||'-'||begin_month||'-01-'|| next_year||'-'||next_month||'-01'  ;
 
     EXECUTE format('CREATE TABLE ' || quote_ident(partition_name) || ' PARTITION OF shipment FOR VALUES FROM ( %L ) TO ( %L )  ' , current_year||'-'||current_month||'-01' , next_year||'-'||next_month||'-01'  ) ; 

      index_name := partition_name||'_shipment_id_idx';
      RAISE NOTICE 'INDEX NAME =%',index_name;
      EXECUTE format('CREATE INDEX ' || quote_ident(index_name) || ' ON '|| quote_ident(partition_name) ||' USING btree ("SHIPMENT_ID") TABLESPACE pg_default ' ) ; 

      --Drop first time flag
      first_flag := false ;
   
  END LOOP;

end
$$;

ការ​នាំ​ចូល​សំរាម

pg_restore -d postgres --data-only --format=c --table=shipment --verbose  shipment.dmp > /tmp/data_dump/shipment_restore.log 2>&1

កំពុងពិនិត្យមើលលទ្ធផលនៃការបែងចែក

តើយើងមានលទ្ធផលអ្វី? អត្ថបទពេញលេញនៃផែនការប្រតិបត្តិគឺធំ និងគួរឱ្យធុញ ដូច្នេះវាពិតជាអាចទៅរួចក្នុងការកំណត់ខ្លួនអ្នកទៅនឹងលេខចុងក្រោយ។

គឺ

តម្លៃ: 502 ផ្លូវទី 997.55th
ពេលវេលាអនុវត្ត៖ 505 វិនាទី។

បាន​ក្លាយជា

តម្លៃ: 77 ផ្លូវទី 872.36th
ពេលវេលាអនុវត្ត៖ 79 វិនាទី។

លទ្ធផលល្អណាស់។ កាត់បន្ថយការចំណាយ និងពេលវេលាអនុវត្ត។ ដូច្នេះ​ការ​ប្រើ​ការ​ចែក​ជា​ភាគ​ផ្តល់​ឱ្យ​នូវ​ប្រសិទ្ធិ​ភាព​ដែល​បាន​រំពឹង​ទុក​ហើយ​ជា​ទូទៅ​មិន​មាន​ការ​ភ្ញាក់​ផ្អើល​។

ធ្វើឱ្យអតិថិជនសប្បាយចិត្ត

លទ្ធផលតេស្តត្រូវបានបង្ហាញដល់អតិថិជនដើម្បីពិនិត្យ។ ហើយ​បន្ទាប់​ពី​បាន​ពិនិត្យ​ឡើង​វិញ ពួក​គេ​ត្រូវ​បាន​គេ​ផ្តល់​សាលក្រម​ដែល​មិន​នឹក​ស្មាន​ដល់៖ "អស្ចារ្យ​ណាស់ ចែក​តារាង "ទិន្នន័យ"។

បាទ/ចាស ប៉ុន្តែយើងបានពិនិត្យតារាង "ការដឹកជញ្ជូន" ខុសគ្នាទាំងស្រុង តារាង "ទិន្នន័យ" មិនមានវាល "SHIPMENT_DATE" ទេ។

គ្មានបញ្ហា, បន្ថែម, ផ្លាស់ប្តូរ។ រឿងចំបងគឺថាអតិថិជនពេញចិត្តនឹងលទ្ធផល ព័ត៌មានលម្អិតនៃការអនុវត្តមិនសំខាន់ជាពិសេសនោះទេ។

ការបែងចែកតារាងសំខាន់ "ទិន្នន័យ"

ជាទូទៅមិនមានការលំបាកពិសេសណាមួយកើតឡើងទេ។ ទោះបីជា, ក្បួនដោះស្រាយការបែងចែក, ជាការពិតណាស់, បានផ្លាស់ប្តូរមួយចំនួន។

ការបន្ថែមជួរឈរ “SHIPMENT_DATA” ទៅតារាង “ទិន្នន័យ”

psql -h хост -U база -d юзер
=> ALTER TABLE data ADD COLUMN "SHIPMENT_DATE" timestamp without time zone ;

បំពេញតម្លៃនៃជួរឈរ "SHIPMENT_DATA" នៅក្នុងតារាង "ទិន្នន័យ" ជាមួយនឹងតម្លៃនៃជួរឈរនៃឈ្មោះដូចគ្នាពីតារាង "ការដឹកជញ្ជូន"

-----------------------------
--update_data.sql
--updating for altered table "data" to values of "shipment_data" from the table "shipment"
--version 1.0
do language plpgsql $$
declare 
rec_shipment_data RECORD ;
shipment_date timestamp without time zone ; 
row_count integer ;
total_rows integer ;
begin

  select count(*) into total_rows from shipment ; 
  RAISE NOTICE 'Total %',total_rows;
  row_count:= 0 ;

  FOR rec_shipment_data IN SELECT * FROM shipment LOOP

   update data set "SHIPMENT_DATE" = rec_shipment_data."SHIPMENT_DATE" where "SHIPMENT_ID" = rec_shipment_data."SHIPMENT_ID";
   
   row_count:=  row_count +1 ;
   RAISE NOTICE 'row count = % , from %',row_count,total_rows;
  END LOOP;

end
$$;

រក្សាទុកការបោះចោលតារាង "ទិន្នន័យ"

pg_dump postgres --file=/dump/data.dmp --format=c --table=data --verbose > /dump/data.log 2>&1</source

បង្កើតតារាងបែងចែក "ទិន្នន័យ" ឡើងវិញ

--create_partition_data.sql
--create partitions for the table "wafer data" by range column "shipment_data" with one month duration
--version 1.0
do language plpgsql $$
declare 
rec_shipment_date RECORD ;
partition_name varchar;
index_name varchar;
current_year varchar ;
current_month varchar ;
begin_year varchar ;
begin_month varchar ;
next_year varchar ;
next_month varchar ;
first_flag boolean ;
i integer ;

begin

  RAISE NOTICE 'CREATE TEMPORARY TABLE FOR SHIPMENT_DATE';
  CREATE TEMP TABLE tmp_shipment_date as select distinct "SHIPMENT_DATE" from shipment order by "SHIPMENT_DATE" ;


  RAISE NOTICE 'DROP TABLE data';
  drop table data cascade ;


  RAISE NOTICE 'CREATE PARTITIONED TABLE data';
  
  CREATE TABLE public.data
  (
    "RUN_ID" integer,
    "LASERMARK" character varying(20) COLLATE pg_catalog."default" NOT NULL,
    "LOTID" character varying(80) COLLATE pg_catalog."default",
    "SHIPMENT_ID" integer NOT NULL,
    "PARAMETER_ID" integer NOT NULL,
    "INTERNAL_VALUE" character varying(75) COLLATE pg_catalog."default",
    "REPORTED_VALUE" character varying(75) COLLATE pg_catalog."default",
    "LOWER_SPEC_LIMIT" numeric,
    "UPPER_SPEC_LIMIT" numeric , 
    "SHIPMENT_DATE" timestamp without time zone
  )
  PARTITION BY RANGE ("SHIPMENT_DATE")
  WITH (
    OIDS = FALSE
  )
  TABLESPACE pg_default ;


  RAISE NOTICE 'CREATE PARTITIONS FOR TABLE data';

  current_year:='0';
  current_month:='0';

  begin_year := '0' ;
  begin_month := '0'  ;
  next_year := '0' ;
  next_month := '0'  ;
  i := 1;

  FOR rec_shipment_date IN SELECT * FROM tmp_shipment_date LOOP
      
      RAISE NOTICE 'SHIPMENT_DATE=%',rec_shipment_date."SHIPMENT_DATE";
      
      current_year := date_part('year' ,rec_shipment_date."SHIPMENT_DATE");
      current_month := date_part('month' ,rec_shipment_date."SHIPMENT_DATE") ; 

      --Init borders
      IF   begin_year = '0' THEN
       RAISE NOTICE '***Init borders';
       first_flag := true ; --first time flag
       begin_year := current_year ;
       begin_month := current_month ;   
   
        IF current_month = '12' THEN
          next_year := date_part('year' ,rec_shipment_date."SHIPMENT_DATE" + interval '1 year') ;
        ELSE
          next_year := current_year ;
        END IF;
     
       next_month := date_part('month' ,rec_shipment_date."SHIPMENT_DATE" + interval '1 month') ;

      END IF;

--      RAISE NOTICE 'current_year=% , current_month=% ',current_year,current_month;
--      RAISE NOTICE 'begin_year=% , begin_month=% ',begin_year,begin_month;
--      RAISE NOTICE 'next_year=% , next_month=% ',next_year,next_month;

      -- Check current date into borders NOT for First time

      RAISE NOTICE 'Current data = %',to_char( to_date( current_year||'.'||current_month, 'YYYY.MM'), 'YYYY.MM');
      RAISE NOTICE 'Begin data = %',to_char( to_date( begin_year||'.'||begin_month, 'YYYY.MM'), 'YYYY.MM');
      RAISE NOTICE 'Next data = %',to_char( to_date( next_year||'.'||next_month, 'YYYY.MM'), 'YYYY.MM');

      IF to_date( current_year||'.'||current_month, 'YYYY.MM') >= to_date( begin_year||'.'||begin_month, 'YYYY.MM') AND 
         to_date( current_year||'.'||current_month, 'YYYY.MM') < to_date( next_year||'.'||next_month, 'YYYY.MM') AND 
         NOT first_flag 
      THEN
         RAISE NOTICE '***CONTINUE';
         CONTINUE ; 
      ELSE
       --NEW borders only for second and after time 
       RAISE NOTICE '***NEW BORDERS';
       begin_year := current_year ;
       begin_month := current_month ;   
   
        IF current_month = '12' THEN
          next_year := date_part('year' ,rec_shipment_date."SHIPMENT_DATE" + interval '1 year') ;
        ELSE
          next_year := current_year ;
        END IF;
     
       next_month := date_part('month' ,rec_shipment_date."SHIPMENT_DATE" + interval '1 month') ;


      END IF;      

      IF to_number(current_month,'99') < 10 THEN
        current_month := '0'||current_month ; 
      END IF ;

      IF to_number(begin_month,'99') < 10 THEN
        begin_month := '0'||begin_month ; 
      END IF ;

      IF to_number(next_month,'99') < 10 THEN
        next_month := '0'||next_month ; 
      END IF ;

      RAISE NOTICE 'current_year=% , current_month=% ',current_year,current_month;
      RAISE NOTICE 'begin_year=% , begin_month=% ',begin_year,begin_month;
      RAISE NOTICE 'next_year=% , next_month=% ',next_year,next_month;

      partition_name := 'data_'||begin_year||begin_month||'01_'||next_year||next_month||'01'  ;

      RAISE NOTICE 'PARTITION NUMBER % , TABLE NAME =%',i , partition_name;
      
      EXECUTE format('CREATE TABLE ' || quote_ident(partition_name) || ' PARTITION OF data FOR VALUES FROM ( %L ) TO ( %L )  ' , begin_year||'-'||begin_month||'-01' , next_year||'-'||next_month||'-01'  ) ; 

      index_name := partition_name||'_shipment_id_parameter_id_idx';
      RAISE NOTICE 'INDEX NAME =%',index_name;
      EXECUTE format('CREATE INDEX ' || quote_ident(index_name) || ' ON '|| quote_ident(partition_name) ||' USING btree ("SHIPMENT_ID", "PARAMETER_ID") TABLESPACE pg_default ' ) ; 

      index_name := partition_name||'_lasermark_idx';
      RAISE NOTICE 'INDEX NAME =%',index_name;
      EXECUTE format('CREATE INDEX ' || quote_ident(index_name) || ' ON '|| quote_ident(partition_name) ||' USING btree ("LASERMARK" COLLATE pg_catalog."default") TABLESPACE pg_default ' ) ; 

      index_name := partition_name||'_shipment_id_idx';
      RAISE NOTICE 'INDEX NAME =%',index_name;
      EXECUTE format('CREATE INDEX ' || quote_ident(index_name) || ' ON '|| quote_ident(partition_name) ||' USING btree ("SHIPMENT_ID") TABLESPACE pg_default ' ) ; 

      index_name := partition_name||'_parameter_id_idx';
      RAISE NOTICE 'INDEX NAME =%',index_name;
      EXECUTE format('CREATE INDEX ' || quote_ident(index_name) || ' ON '|| quote_ident(partition_name) ||' USING btree ("PARAMETER_ID") TABLESPACE pg_default ' ) ; 

      index_name := partition_name||'_shipment_date_idx';
      RAISE NOTICE 'INDEX NAME =%',index_name;
      EXECUTE format('CREATE INDEX ' || quote_ident(index_name) || ' ON '|| quote_ident(partition_name) ||' USING btree ("SHIPMENT_DATE") TABLESPACE pg_default ' ) ; 

      --Drop first time flag
      first_flag := false ;

  END LOOP;
end
$$;

ផ្ទុកសំរាមដែលបានបង្កើតក្នុងជំហានទី 3 ។

pg_restore -h хост -юзер -d база --data-only --format=c --table=data --verbose  data.dmp > data_restore.log 2>&1

បង្កើតផ្នែកដាច់ដោយឡែកសម្រាប់ទិន្នន័យចាស់

---------------------------------------------------
--create_partition_for_old_dates.sql
--create partitions for keeping old dates 
--version 1.0
do language plpgsql $$
declare 
rec_shipment_date RECORD ;
partition_name varchar;
index_name varchar;

begin

      SELECT min("SHIPMENT_DATE") AS min_date INTO rec_shipment_date from data ;

      RAISE NOTICE 'Old date is %',rec_shipment_date.min_date ;

      partition_name := 'data_old_dates'  ;

      RAISE NOTICE 'PARTITION NAME IS %',partition_name;

      EXECUTE format('CREATE TABLE ' || quote_ident(partition_name) || ' PARTITION OF data FOR VALUES FROM ( %L ) TO ( %L )  ' , '1900-01-01' , 
              to_char( rec_shipment_date.min_date,'YYYY')||'-'||to_char(rec_shipment_date.min_date,'MM')||'-01'  ) ; 

      index_name := partition_name||'_shipment_id_parameter_id_idx';
      EXECUTE format('CREATE INDEX ' || quote_ident(index_name) || ' ON '|| quote_ident(partition_name) ||' USING btree ("SHIPMENT_ID", "PARAMETER_ID") TABLESPACE pg_default ' ) ; 

      index_name := partition_name||'_lasermark_idx';
      EXECUTE format('CREATE INDEX ' || quote_ident(index_name) || ' ON '|| quote_ident(partition_name) ||' USING btree ("LASERMARK" COLLATE pg_catalog."default") TABLESPACE pg_default ' ) ; 

      index_name := partition_name||'_shipment_id_idx';
      EXECUTE format('CREATE INDEX ' || quote_ident(index_name) || ' ON '|| quote_ident(partition_name) ||' USING btree ("SHIPMENT_ID") TABLESPACE pg_default ' ) ; 

      index_name := partition_name||'_parameter_id_idx';
      EXECUTE format('CREATE INDEX ' || quote_ident(index_name) || ' ON '|| quote_ident(partition_name) ||' USING btree ("PARAMETER_ID") TABLESPACE pg_default ' ) ; 

      index_name := partition_name||'_shipment_date_idx';
      EXECUTE format('CREATE INDEX ' || quote_ident(index_name) || ' ON '|| quote_ident(partition_name) ||' USING btree ("SHIPMENT_DATE") TABLESPACE pg_default ' ) ; 

end
$$;

លទ្ធផលចុងក្រោយ៖

គឺ
តម្លៃ: 502 ផ្លូវទី 997.55th
ពេលវេលាប្រតិបត្តិ៖ ៤៥ វិនាទី។

បាន​ក្លាយជា
តម្លៃ: 68 ផ្លូវទី 533.70th
ពេលវេលាអនុវត្ត៖ 69 វិនាទី

សក្តិសម សក្តិសមណាស់។ ហើយពិចារណាថាតាមវិធីដែលយើងគ្រប់គ្រងច្រើនឬតិចធ្វើជាម្ចាស់នៃយន្តការបែងចែកនៅក្នុង PostgreSQL 10 - លទ្ធផលដ៏ល្អ។

digression អត្ថបទចម្រៀង

តើ​វា​អាច​ធ្វើ​បាន​ល្អ​ជាង​នេះ​ទេ - បាទ អ្នក​អាច!ដើម្បីធ្វើដូចនេះអ្នកត្រូវប្រើ MATERIALIZED VIEW ។
បង្កើត​ទិដ្ឋភាព LASERMARK_VIEW

CREATE MATERIALIZED VIEW LASERMARK_VIEW 
AS
SELECT w."LASERMARK" , MAX(s."SHIPMENT_DATE") AS "SHIPMENT_DATE"
FROM shipment s INNER JOIN data w ON s."SHIPMENT_ID" = w."SHIPMENT_ID" 
GROUP BY w."LASERMARK" ;

CREATE INDEX lasermark_vw_shipment_date_ind on lasermark_view USING btree ("SHIPMENT_DATE") TABLESPACE pg_default;
analyze lasermark_view ;

ជាថ្មីម្តងទៀត យើងសរសេរសំណើឡើងវិញ៖
សំណួរដោយប្រើទិដ្ឋភាពជាក់ស្តែង

SELECT
            p."PARAMETER_ID" as  parameter_id,
            pc."PC_NAME" AS pc_name,
            pc."CUSTOMER_PARTNUMBER" AS customer_partnumber,
            w."LASERMARK" AS lasermark,
            w."LOTID" AS lotid,
            w."REPORTED_VALUE" AS reported_value,
            w."LOWER_SPEC_LIMIT" AS lower_spec_limit,
            w."UPPER_SPEC_LIMIT" AS upper_spec_limit,
            p."TYPE_CALCUL" AS type_calcul,
            s."SHIPMENT_NAME" AS shipment_name,
            s."SHIPMENT_DATE" AS shipment_date,
            extract(year from s."SHIPMENT_DATE") AS year,
            extract(month from s."SHIPMENT_DATE") as month,
            s."REPORT_NAME" AS report_name,
            p."STC_NAME" AS STC_name,
            p."CUSTOMERPARAM_NAME" AS customerparam_name
        FROM data w INNER JOIN shipment s ON s."SHIPMENT_ID" = w."SHIPMENT_ID"
             INNER JOIN parameters p ON p."PARAMETER_ID" = w."PARAMETER_ID"
             INNER JOIN shipment_pc sp ON s."SHIPMENT_ID" = sp."SHIPMENT_ID"
             INNER JOIN pc pc ON pc."PC_ID" = sp."PC_ID"
             INNER JOIN LASERMARK_VIEW md ON md."SHIPMENT_DATE" = s."SHIPMENT_DATE" AND md."LASERMARK" = w."LASERMARK"
        WHERE 
              s."SHIPMENT_DATE" >= '2018-07-01' AND s."SHIPMENT_DATE" <= '2018-09-30';

ហើយយើងទទួលបានលទ្ធផលមួយទៀត៖
គឺ
តម្លៃ: 502 ផ្លូវទី 997.55th
ពេលវេលាប្រតិបត្តិ: ០.៥ វិនាទី

បាន​ក្លាយជា
តម្លៃ: 42 ផ្លូវទី 481.16th
ពេលវេលាអនុវត្ត៖ 43 វិនាទី។

ទោះបី​ជា​ជា​ការ​ពិត​ណាស់ លទ្ធផល​ដ៏​ជោគជ័យ​បែប​នេះ​គឺ​ជា​ការ​បោក​បញ្ឆោត​ ប៉ុន្តែ​គំនិត​ត្រូវ​តែ​ធ្វើ​ឱ្យ​ស្រស់​ស្រាយ។ ដូច្នេះពេលវេលាសរុបសម្រាប់ការទទួលទិន្នន័យនឹងមិនជួយច្រើនទេ។ ប៉ុន្តែជាការពិសោធន៍វាគួរឱ្យចាប់អារម្មណ៍ណាស់។

ជាក់ស្តែង ដូចដែលវាបានប្រែក្លាយ សូមអរគុណម្តងទៀត អាសម និង Habru! សំណួរអាចត្រូវបានកែលម្អបន្ថែមទៀត។

Afterword

ដូច្នេះអតិថិជនពេញចិត្ត។ និង ត្រូវការ ទាញយកប្រយោជន៍ពីស្ថានភាព។

កិច្ចការថ្មី។៖ តើ​អ្នក​អាច​បង្កើត​អ្វី​ដើម្បី​ស៊ីជម្រៅ និង​ពង្រីក?

ហើយបន្ទាប់មកខ្ញុំចងចាំ - បុរសយើងមិនមានការត្រួតពិនិត្យមូលដ្ឋានទិន្នន័យ PostgreSQL របស់យើងទេ។

ដៃនៅលើបេះដូងនៅតែមានការត្រួតពិនិត្យមួយចំនួននៅក្នុងទម្រង់នៃ Cloud Watch នៅលើ AWS ។ ប៉ុន្តែតើអ្វីជាអត្ថប្រយោជន៍នៃការត្រួតពិនិត្យនេះសម្រាប់ DBA? ជាទូទៅការអនុវត្តមិនមានទេ។

ប្រសិនបើអ្នកមានឱកាសធ្វើអ្វីដែលមានប្រយោជន៍ និងគួរឱ្យចាប់អារម្មណ៍សម្រាប់ខ្លួនអ្នក អ្នកមិនអាចទាញយកប្រយោជន៍ពីឱកាសនេះបានទេ…
សម្រាប់



នេះជារបៀបដែលយើងមកដល់ផ្នែកគួរឱ្យចាប់អារម្មណ៍បំផុត:

ថ្ងៃទី 3 ខែធ្នូ ឆ្នាំ 2018 ។
ការសម្រេចចិត្តដើម្បីចាប់ផ្តើមការស្រាវជ្រាវទៅលើសមត្ថភាពដែលអាចរកបានសម្រាប់ការត្រួតពិនិត្យការអនុវត្តនៃសំណួរ PostgreSQL ។

ប៉ុន្តែនោះជារឿងខុសគ្នាទាំងស្រុង។

នៅ​មាន​ជា​បន្ត​ទៀត…

ប្រភព: www.habr.com