በ PostgreSQL የተከማቹ ተግባራት ደረጃ ላይ የንግድ ሥራ አመክንዮ በመተግበር ላይ የተደረገ ጥናት

ይህንን ንድፍ ለመጻፍ ያነሳሳው ጽሑፉ ነበር በለይቶ ማቆያ ወቅት የስራ ጫናው 5 ጊዜ ጨምሯል ነገርግን ዝግጁ ነበርን። Lingualeo ከ23 ሚሊዮን ተጠቃሚዎች ጋር ወደ PostgreSQL እንዴት እንደሄደ. ከ 4 ዓመታት በፊት የታተመውን ጽሑፍም አስደሳች ሆኖ አግኝቼዋለሁ - በ MySQL ውስጥ የንግድ አመክንዮ መተግበር.

ተመሳሳይ ሀሳብ አስደሳች መስሎ ነበር - "በመረጃ ቋቱ ውስጥ የንግድ ሥራ አመክንዮ መተግበር".

በ PostgreSQL የተከማቹ ተግባራት ደረጃ ላይ የንግድ ሥራ አመክንዮ በመተግበር ላይ የተደረገ ጥናት

ወደ አእምሮዬ የመጣሁት እኔ ብቻ አልነበረም።

ደግሞም ፣ ለወደፊቱ ፣ በመጀመሪያ ፣ ለራሴ ፣ በመተግበሩ ወቅት የተነሱ አስደሳች እድገቶችን ለመጠበቅ ፈለግሁ ። በተለይም በአንፃራዊነት በቅርብ ጊዜ የስነ-ህንፃውን ለውጥ እና የንግድ አመክንዮ ወደ ኋላ ደረጃ ለማሸጋገር ስልታዊ ውሳኔ ተወስኗል። ስለዚህ የተገነባው ነገር ሁሉ በቅርቡ ለማንም የማይጠቅም እና ለማንም የማይጠቅም ይሆናል.

የተገለጹት ዘዴዎች አንድ ዓይነት ግኝት ወይም ልዩ አይደሉም። እንዴት እንደሆነ, ሁሉም ነገር ክላሲክ ነው እና ብዙ ጊዜ ተተግብሯል (ለምሳሌ ከ 20 አመታት በፊት በ Oracle ላይ ተመሳሳይ አቀራረብ ተጠቀምኩኝ) ሁሉንም ነገር በአንድ ቦታ ለመሰብሰብ ወሰንኩ. ለአንድ ሰው ጠቃሚ ከሆነ። ልምምድ እንደሚያሳየው ብዙውን ጊዜ ተመሳሳይ ሀሳብ ወደ ተለያዩ ሰዎች ብቻ ይመጣል። እና እንደ መታሰቢያነት ለራስዎ ማቆየት ጠቃሚ ነው.

እርግጥ ነው, በዚህ ዓለም ውስጥ ፍጹም የሆነ ምንም ነገር የለም, ስህተቶች እና ስህተቶች በሚያሳዝን ሁኔታ ይቻላል. ትችት እና አስተያየቶች በጥብቅ የተቀበሉ እና የሚጠበቁ ናቸው ። እና አንድ ተጨማሪ ትንሽ ዝርዝር - ልዩ የትግበራ ዝርዝሮች ተትተዋል ። አሁንም ሁሉም ነገር አሁንም በእውነተኛ የሥራ ፕሮጀክት ውስጥ ጥቅም ላይ ይውላል. ስለዚህ, ጽሑፉ የአጠቃላይ ጽንሰ-ሐሳብ ንድፍ እና መግለጫ ብቻ ነው, ምንም ተጨማሪ ነገር የለም. አጠቃላዩን ምስል ለመረዳት በቂ ዝርዝሮች እንዳሉ ተስፋ አደርጋለሁ.

አጠቃላይ ሀሳቡ “ከፋፍለህ ግዛ፣ ደብቅ እና ገዛ” የሚል ነው።

ሀሳቡ ክላሲክ ነው - ለጠረጴዛዎች የተለየ ንድፍ ፣ ለተከማቹ ተግባራት የተለየ ንድፍ።
ደንበኛው በቀጥታ የውሂብ መዳረሻ የለውም. ደንበኛው ማድረግ የሚችለው የተከማቸበትን ተግባር መጥራት እና የተቀበለውን ምላሽ ማስኬድ ነው።

ሚና

CREATE ROLE store;

CREATE ROLE sys_functions;

CREATE ROLE loc_audit_functions;

CREATE ROLE service_functions;

CREATE ROLE business_functions;

እቅድዎች

የጠረጴዛ ማከማቻ እቅድ

ርዕሰ ጉዳዮችን የሚተገበሩ የዒላማ ሠንጠረዦች.

CREATE SCHEMA store AUTHORIZATION store ;

የስርዓት ተግባር ንድፍ

የስርዓት ተግባራት, በተለይም የምዝግብ ማስታወሻ ሰንጠረዥ ለውጦች.

CREATE SCHEMA sys_functions AUTHORIZATION sys_functions ;

የአካባቢ ኦዲት እቅድ

ተግባራት እና ሠንጠረዦች የተከማቹ ተግባራትን አፈፃፀም እና በዒላማ ጠረጴዛዎች ላይ የተደረጉ ለውጦችን በአካባቢያዊ ኦዲት ለመተግበር.

CREATE SCHEMA loc_audit_functions AUTHORIZATION loc_audit_functions;

የአገልግሎት ተግባር ንድፍ

ለአገልግሎት እና ለዲኤምኤል ተግባራት ተግባራት.

CREATE SCHEMA service_functions AUTHORIZATION service_functions;

የንግድ ተግባር ንድፍ

በደንበኛው የተጠሩት የመጨረሻ የንግድ ተግባራት ተግባራት.

CREATE SCHEMA business_functions AUTHORIZATION business_functions;

የመዳረሻ መብቶች

ሚና - dBA ለሁሉም መርሃግብሮች ሙሉ መዳረሻ አለው (ከዲቢ ባለቤት ሚና የተለየ)።

CREATE ROLE dba_role;
GRANT store TO dba_role;
GRANT sys_functions TO dba_role;
GRANT loc_audit_functions TO dba_role;
GRANT service_functions TO dba_role;
GRANT business_functions TO dba_role;

ሚና - USER የሚል መብት አለው። አፈፃፀም በሥዕላዊ መግለጫው ውስጥ የንግድ_ተግባራት.

CREATE ROLE user_role;

በእቅዶች መካከል ያሉ መብቶች

ፍቃድ
ሁሉም ተግባራት የተፈጠሩት ከባህሪው ጋር ስለሆነ የደህንነት ገላጭ የሚያስፈልጉ መመሪያዎች በሁሉም ተግባራት ላይ ማስፈጸሚያን ይሻሩ… ከህዝብ;

REVOKE EXECUTE ON ALL FUNCTION IN SCHEMA sys_functions FROM public ; 
REVOKE EXECUTE ON ALL FUNCTION IN SCHEMA  loc_audit_functions  FROM public ; 
REVOKE EXECUTE ON ALL FUNCTION IN SCHEMA  service_functions FROM public ; 
REVOKE EXECUTE ON ALL FUNCTION IN SCHEMA  business_functions FROM public ; 

GRANT USAGE ON SCHEMA sys_functions TO dba_role ; 
GRANT EXECUTE ON ALL FUNCTIONS IN SCHEMA sys_functions TO dba_role ;
GRANT USAGE ON SCHEMA loc_audit_functions  TO dba_role ; 
GRANT EXECUTE ON ALL FUNCTIONS IN SCHEMA loc_audit_functions  TO dba_role ;
GRANT USAGE ON SCHEMA service_functions TO dba_role ; 
GRANT EXECUTE ON ALL FUNCTIONS IN SCHEMA service_functions TO dba_role ;
GRANT USAGE ON SCHEMA business_functions TO dba_role ; 
GRANT EXECUTE ON ALL FUNCTIONS IN SCHEMA business_functions TO dba_role ;
GRANT EXECUTE ON ALL FUNCTIONS IN SCHEMA business_functions TO user_role ;

GRANT ALL PRIVILEGES ON SCHEMA store TO GROUP business_functions ;
GRANT ALL PRIVILEGES ON ALL TABLES IN SCHEMA store TO business_functions ;
GRANT USAGE ON ALL SEQUENCES IN SCHEMA store TO business_functions ;

ስለዚህ የውሂብ ጎታ ንድፍ ዝግጁ ነው. ውሂቡን መሙላት መጀመር ይችላሉ.

የዒላማ ጠረጴዛዎች

ጠረጴዛዎችን መፍጠር ቀላል ነው. ጥቅም ላይ እንዳይውል ከመወሰኑ በስተቀር ምንም ልዩ ባህሪያት የሉም አገልግሎት እና ቅደም ተከተሎችን በግልፅ ያመነጫሉ. በተጨማሪም ፣ በእርግጥ ፣ ከፍተኛው የመመሪያዎች አጠቃቀም

COMMENT ON ...

አስተያየቶች ለ всех እቃዎች, ያለምንም ልዩነት.

የአካባቢ ኦዲት

የተከማቹ ተግባራትን አፈፃፀም እና በዒላማ ሰንጠረዦች ላይ የተደረጉ ለውጦችን ለማስመዝገብ የአካባቢያዊ የኦዲት ሰንጠረዥ ጥቅም ላይ ይውላል, ከሌሎች ነገሮች በተጨማሪ የደንበኛ ግንኙነት ዝርዝሮች, የተጠራው ሞጁል መለያ እና የግብአት ትክክለኛ እሴቶች እና የውጤት መለኪያዎች በ JSON መልክ።

የስርዓት ተግባራት

በዒላማ ሠንጠረዦች ውስጥ ለውጦችን ለመመዝገብ የተነደፈ። ቀስቅሴ ተግባራት ናቸው።

አብነት - የስርዓት ተግባር

---------------------------------------------------------
-- INSERT
CREATE OR REPLACE FUNCTION sys_functions.table_insert_log ()
RETURNS TRIGGER AS $$
BEGIN
  PERFORM loc_audit_functions.make_log( ' '||'table' , 'insert' , json_build_object('id', NEW.id)  );
  RETURN NULL ;
END
$$ LANGUAGE plpgsql SECURITY DEFINER;

CREATE TRIGGER table_after_insert AFTER INSERT ON storage.table FOR EACH ROW EXECUTE PROCEDURE sys_functions.table_insert_log();

---------------------------------------------------------
-- UPDATE
CREATE OR REPLACE FUNCTION sys_functions.table_update_log ()
RETURNS TRIGGER AS $$
BEGIN
  IF OLD.column != NEW.column
  THEN
    PERFORM loc_audit_functions.make_log( ' '||'table' , 'update' , json_build_object('OLD.column', OLD.column , 'NEW.column' , NEW.column )  );
  END IF ;
  RETURN NULL ;
END
$$ LANGUAGE plpgsql SECURITY DEFINER;

CREATE TRIGGER table_after_update AFTER UPDATE ON storage.table FOR EACH ROW EXECUTE PROCEDURE sys_functions.table_update_log ();

---------------------------------------------------------
-- DELETE
CREATE OR REPLACE FUNCTION sys_functions.table_delete_log ()
RETURNS TRIGGER AS $$
BEGIN
  PERFORM loc_audit_functions.make_log( ' '||'table' , 'delete' , json_build_object('id', OLD.id )  );
  RETURN NULL ;
END
$$ LANGUAGE plpgsql SECURITY DEFINER;

CREATE TRIGGER table_after_delete AFTER DELETE ON storage.table FOR EACH ROW EXECUTE PROCEDURE sys_functions.table_delete_log ();

የአገልግሎት ተግባራት

በዒላማ ሠንጠረዦች ላይ አገልግሎት እና የዲኤምኤል ስራዎችን ለመተግበር የተነደፈ።

አብነት - የአገልግሎት ተግባር

--INSERT
--RETURN id OF NEW ROW
CREATE OR REPLACE FUNCTION service_functions.table_insert ( new_column store.table.column%TYPE )
RETURNS integer AS $$
DECLARE
  new_id integer ;
BEGIN
  -- Generate new id
  new_id = nextval('store.table.seq');

  -- Insert into table
  INSERT INTO store.table
  ( 
    id ,
    column
   )
  VALUES
  (
   new_id ,
   new_column
   );

RETURN new_id ;
END
$$ LANGUAGE plpgsql SECURITY DEFINER;

--DELETE
--RETURN ROW NUMBERS DELETED
CREATE OR REPLACE FUNCTION service_functions.table_delete ( current_id integer ) 
RETURNS integer AS $$
DECLARE
  rows_count integer  ;    
BEGIN
  DELETE FROM store.table WHERE id = current_id; 

  GET DIAGNOSTICS rows_count = ROW_COUNT;                                                                           

  RETURN rows_count ;
END
$$ LANGUAGE plpgsql SECURITY DEFINER;
 
-- UPDATE DETAILS
-- RETURN ROW NUMBERS UPDATED
CREATE OR REPLACE FUNCTION service_functions.table_update_column 
(
  current_id integer 
  ,new_column store.table.column%TYPE
) 
RETURNS integer AS $$
DECLARE
  rows_count integer  ; 
BEGIN
  UPDATE  store.table
  SET
    column = new_column
  WHERE id = current_id;

  GET DIAGNOSTICS rows_count = ROW_COUNT;                                                                           

  RETURN rows_count ;
END
$$ LANGUAGE plpgsql SECURITY DEFINER;

የንግድ ተግባራት

በደንበኛው ለተጠሩት የመጨረሻ የንግድ ተግባራት የተነደፈ። ሁልጊዜ ይመለሳሉ - JSON. የማስፈጸሚያ ስህተቶችን ለመጥለፍ እና ለመግባት, እገዳውን ይጠቀሙ በስተቀር.

አብነት - የንግድ ተግባር

CREATE OR REPLACE FUNCTION business_functions.business_function_template(
--Input parameters        
 )
RETURNS JSON AS $$
DECLARE
  ------------------------
  --for exception catching
  error_message text ;
  error_json json ;
  result json ;
  ------------------------ 
BEGIN
--LOGGING
  PERFORM loc_audit_functions.make_log
  (
    'business_function_template',
    'STARTED',
    json_build_object
    (
	--IN Parameters
    ) 
   );

  PERFORM business_functions.notice('business_function_template');            

  --START BUSINESS PART
  --END BUSINESS PART

  -- SUCCESFULLY RESULT
  PERFORM business_functions.notice('result');
  PERFORM business_functions.notice(result);

  PERFORM loc_audit_functions.make_log
  (
    'business_function_template',
    'FINISHED', 
    json_build_object( 'result',result )
  );

  RETURN result ;
----------------------------------------------------------------------------------------------------------
-- EXCEPTION CATCHING
EXCEPTION                        
  WHEN OTHERS THEN    
    PERFORM loc_audit_functions.make_log
    (
      'business_function_template',
      'STARTED',
      json_build_object
      (
	--IN Parameters	
      ) , TRUE );

     PERFORM loc_audit_functions.make_log
     (
       'business_function_template',
       ' ERROR',
       json_build_object('SQLSTATE',SQLSTATE ), TRUE 
     );

     PERFORM loc_audit_functions.make_log
     (
       'business_function_template',
       ' ERROR',
       json_build_object('SQLERRM',SQLERRM  ), TRUE 
      );

     GET STACKED DIAGNOSTICS error_message = RETURNED_SQLSTATE ;
     PERFORM loc_audit_functions.make_log
     (
      'business_function_template',
      ' ERROR-RETURNED_SQLSTATE',json_build_object('RETURNED_SQLSTATE',error_message  ), TRUE );

     GET STACKED DIAGNOSTICS error_message = COLUMN_NAME ;
     PERFORM loc_audit_functions.make_log
     (
       'business_function_template',
       ' ERROR-COLUMN_NAME',
       json_build_object('COLUMN_NAME',error_message  ), TRUE );

     GET STACKED DIAGNOSTICS error_message = CONSTRAINT_NAME ;
     PERFORM loc_audit_functions.make_log
     (
      'business_function_template',
      ' ERROR-CONSTRAINT_NAME',
      json_build_object('CONSTRAINT_NAME',error_message  ), TRUE );

     GET STACKED DIAGNOSTICS error_message = PG_DATATYPE_NAME ;
     PERFORM loc_audit_functions.make_log
     (
       'business_function_template',
       ' ERROR-PG_DATATYPE_NAME',
       json_build_object('PG_DATATYPE_NAME',error_message  ), TRUE );

     GET STACKED DIAGNOSTICS error_message = MESSAGE_TEXT ;
     PERFORM loc_audit_functions.make_log
     (
       'business_function_template',
       ' ERROR-MESSAGE_TEXT',json_build_object('MESSAGE_TEXT',error_message  ), TRUE );

     GET STACKED DIAGNOSTICS error_message = SCHEMA_NAME ;
     PERFORM loc_audit_functions.make_log
     (s
       'business_function_template',
       ' ERROR-SCHEMA_NAME',json_build_object('SCHEMA_NAME',error_message  ), TRUE );

     GET STACKED DIAGNOSTICS error_message = PG_EXCEPTION_DETAIL ;
     PERFORM loc_audit_functions.make_log
     (
      'business_function_template',
      ' ERROR-PG_EXCEPTION_DETAIL',
      json_build_object('PG_EXCEPTION_DETAIL',error_message  ), TRUE );

     GET STACKED DIAGNOSTICS error_message = PG_EXCEPTION_HINT ;
     PERFORM loc_audit_functions.make_log
     (
       'business_function_template',
       ' ERROR-PG_EXCEPTION_HINT',json_build_object('PG_EXCEPTION_HINT',error_message  ), TRUE );

     GET STACKED DIAGNOSTICS error_message = PG_EXCEPTION_CONTEXT ;
     PERFORM loc_audit_functions.make_log
     (
      'business_function_template',
      ' ERROR-PG_EXCEPTION_CONTEXT',json_build_object('PG_EXCEPTION_CONTEXT',error_message  ), TRUE );                                      

    RAISE WARNING 'ALARM: %' , SQLERRM ;

    SELECT json_build_object
    (
      'isError' , TRUE ,
      'errorMsg' , SQLERRM
     ) INTO error_json ;

  RETURN  error_json ;
END
$$ LANGUAGE plpgsql SECURITY DEFINER;

ውጤቱ

አጠቃላይ ስዕሉን ለመግለጽ, እኔ በጣም በቂ ነው ብዬ አስባለሁ. ለዝርዝሮቹ እና ውጤቶቹ ፍላጎት ያለው ሰው ካለ አስተያየቶችን ይፃፉ, በስዕሉ ላይ ተጨማሪ ንክኪዎችን ለመጨመር ደስተኛ ነኝ.

PS

ቀላል ስህተት በመግባት ላይ - የግቤት መለኪያ አይነት

-[ RECORD 1 ]-
date_trunc      | 2020-08-19 13:15:46
id              | 1072
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          | STARTED
jsonb_pretty    | {
                |     "dko": {
                |         "id": 4,
                |         "type": "Type1",                                                                                                                                                                                            
                |         "title": "CREATED BY addKD",
                |         "Weight": 10,
                |         "Tr": "300",
                |         "reduction": 10,
                |         "isTrud": "TRUE",
                |         "description": "decription",
                |         "lowerTr": "100",
                |         "measurement": "measurement1",
                |         "methodology": "m1",                                                                                                                                                                                           
                |         "passportUrl": "files",
                |         "upperTr": "200",
                |         "weightingFactor": 100.123,
                |         "actualTrValue": null,
                |         "upperTrCalcNumber": "120"
                |     },
                |     "CardId": 3
                | }
-[ RECORD 2 ]-
date_trunc      | 2020-08-19 13:15:46
id              | 1073
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          |  ERROR
jsonb_pretty    | {
                |     "SQLSTATE": "22P02"
                | }
-[ RECORD 3 ]-
date_trunc      | 2020-08-19 13:15:46
id              | 1074
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          |  ERROR
jsonb_pretty    | {
                |     "SQLERRM": "invalid input syntax for type numeric: "null""
                | }
-[ RECORD 4 ]-
date_trunc      | 2020-08-19 13:15:46
id              | 1075
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          |  ERROR-RETURNED_SQLSTATE
jsonb_pretty    | {
                |     "RETURNED_SQLSTATE": "22P02"
                | }
-[ RECORD 5 ]-
date_trunc      | 2020-08-19 13:15:46
id              | 1076
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          |  ERROR-COLUMN_NAME
jsonb_pretty    | {
                |     "COLUMN_NAME": ""
                | }

-[ RECORD 6 ]-
date_trunc      | 2020-08-19 13:15:46
id              | 1077
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          |  ERROR-CONSTRAINT_NAME
jsonb_pretty    | {
                |     "CONSTRAINT_NAME": ""
                | }
-[ RECORD 7 ]-
date_trunc      | 2020-08-19 13:15:46
id              | 1078
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          |  ERROR-PG_DATATYPE_NAME
jsonb_pretty    | {
                |     "PG_DATATYPE_NAME": ""
                | }
-[ RECORD 8 ]-
date_trunc      | 2020-08-19 13:15:46
id              | 1079
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          |  ERROR-MESSAGE_TEXT
jsonb_pretty    | {
                |     "MESSAGE_TEXT": "invalid input syntax for type numeric: "null""
                | }
-[ RECORD 9 ]-
date_trunc      | 2020-08-19 13:15:46
id              | 1080
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          |  ERROR-SCHEMA_NAME
jsonb_pretty    | {
                |     "SCHEMA_NAME": ""
                | }
-[ RECORD 10 ]-
date_trunc      | 2020-08-19 13:15:46
id              | 1081
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          |  ERROR-PG_EXCEPTION_DETAIL
jsonb_pretty    | {
                |     "PG_EXCEPTION_DETAIL": ""
                | }
-[ RECORD 11 ]-
date_trunc      | 2020-08-19 13:15:46
id              | 1082
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          |  ERROR-PG_EXCEPTION_HINT
jsonb_pretty    | {
                |     "PG_EXCEPTION_HINT": ""
                | }
-[ RECORD 12 ]-
date_trunc      | 2020-08-19 13:15:46
id              | 1083
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          |  ERROR-PG_EXCEPTION_CONTEXT
jsonb_pretty    | {
usename         | emp1
log_module      | addKD
log_module_hash | 0b4c1529a89af3ddf6af3821dc790e8a
status          |  ERROR-MESSAGE_TEXT
jsonb_pretty    | {
                |     "MESSAGE_TEXT": "invalid input syntax for type numeric: "null""
                | }

ምንጭ: hab.com

አስተያየት ያክሉ