โปรโฮสต์ > บล็อก > การบริหาร > ความพยายามที่จะสร้างอะนาล็อก ASH สำหรับ PostgreSQL

ความพยายามที่จะสร้างอะนาล็อก ASH สำหรับ PostgreSQL

คำแถลงปัญหา

เพื่อเพิ่มประสิทธิภาพการสืบค้น PostgreSQL จำเป็นต้องมีความสามารถในการวิเคราะห์ประวัติกิจกรรม โดยเฉพาะการรอ การล็อค และสถิติของตาราง

โอกาสที่มีอยู่

เครื่องมือวิเคราะห์ปริมาณงานในอดีตหรือ "AWR สำหรับ Postgres": วิธีแก้ปัญหาที่น่าสนใจมาก แต่ไม่มีประวัติของ pg_stat_activity และ pg_locks

นามสกุล pgsentinel :
«ข้อมูลที่สะสมทั้งหมดจะถูกจัดเก็บไว้ใน RAM เท่านั้น และจำนวนหน่วยความจำที่ใช้จะถูกควบคุมโดยจำนวนบันทึกที่เก็บไว้ล่าสุด

เพิ่มฟิลด์ queryid แล้ว - queryid เดียวกันจากส่วนขยาย pg_stat_statements (จำเป็นต้องติดตั้งล่วงหน้า)«

แน่นอนว่าสิ่งนี้จะช่วยได้มาก แต่สิ่งที่ลำบากที่สุดคือประเด็นแรก”ข้อมูลที่สะสมทั้งหมดจะถูกเก็บไว้ใน RAM เท่านั้น ", เช่น. มีผลกระทบต่อฐานเป้าหมาย นอกจากนี้ยังไม่มีประวัติการล็อคและสถิติตารางอีกด้วย เหล่านั้น. โดยทั่วไปวิธีแก้ปัญหาจะพูดไม่ครบถ้วน: “ยังไม่มีแพ็คเกจสำเร็จรูปสำหรับติดตั้ง ขอแนะนำให้ดาวน์โหลดซอร์สและประกอบไลบรารีด้วยตนเอง ก่อนอื่นคุณต้องติดตั้งแพ็คเกจ “devel” สำหรับเซิร์ฟเวอร์ของคุณและตั้งค่าเส้นทางเป็น pg_config ในตัวแปร PATH"

โดยทั่วไปมีเรื่องยุ่งยากมากมาย และในกรณีของฐานข้อมูลการผลิตที่จริงจัง อาจไม่สามารถทำอะไรกับเซิร์ฟเวอร์ได้ เราก็ต้องคิดหาเรื่องของเราเองขึ้นมาใหม่

การเตือน

เนื่องจากมีปริมาณค่อนข้างมากและเนื่องจากระยะเวลาการทดสอบที่ไม่สมบูรณ์ บทความนี้จึงมีลักษณะเป็นข้อมูลเป็นหลัก แทนที่จะเป็นชุดของวิทยานิพนธ์และผลลัพธ์ระดับกลาง
เราจะเตรียมเนื้อหาที่มีรายละเอียดเพิ่มเติมเป็นบางส่วนในภายหลัง

ข้อกำหนดฉบับร่างสำหรับโซลูชัน

จำเป็นต้องพัฒนาเครื่องมือที่ช่วยให้คุณจัดเก็บ:

pg_stat_activity ดูประวัติ
ประวัติการล็อกเซสชันโดยใช้มุมมอง pg_locks

ข้อกำหนดในการแก้ปัญหา–ลดผลกระทบต่อฐานข้อมูลเป้าหมาย

ความคิดทั่วไป– เอเจนต์การรวบรวมข้อมูลไม่ได้เปิดใช้งานในฐานข้อมูลเป้าหมาย แต่ในฐานข้อมูลการตรวจสอบเป็นบริการ systemd ใช่ ข้อมูลสูญหายบางส่วนอาจเกิดขึ้นได้ แต่นี่ไม่สำคัญสำหรับการรายงาน แต่ไม่มีผลกระทบต่อฐานข้อมูลเป้าหมายในแง่ของหน่วยความจำและพื้นที่ดิสก์ และในกรณีของการใช้พูลการเชื่อมต่อ ผลกระทบต่อกระบวนการของผู้ใช้จะมีน้อยมาก

ขั้นตอนการดำเนินการ

1.โต๊ะบริการ

มีการใช้สคีมาแยกต่างหากในการจัดเก็บตาราง เพื่อไม่ให้การวิเคราะห์ตารางหลักที่ใช้ซับซ้อน

DROP SCHEMA IF EXISTS activity_hist ;
CREATE SCHEMA activity_hist AUTHORIZATION monitor ;

สำคัญ: สคีมาไม่ได้ถูกสร้างขึ้นในฐานข้อมูลเป้าหมาย แต่สร้างในฐานข้อมูลการมอนิเตอร์

pg_stat_activity ดูประวัติ

ตารางถูกใช้เพื่อจัดเก็บสแน็ปช็อตปัจจุบันของมุมมอง pg_stat_activity

กิจกรรม_hist.history_pg_stat_activity :

--ACTIVITY_HIST.HISTORY_PG_STAT_ACTIVITY
DROP TABLE IF EXISTS activity_hist.history_pg_stat_activity;
CREATE TABLE activity_hist.history_pg_stat_activity
(
  timepoint timestamp without time zone ,
  datid             oid  , 
  datname           name ,
  pid               integer,
  usesysid          oid    ,
  usename           name   ,
  application_name  text   ,
  client_addr       inet   ,
  client_hostname   text   ,
  client_port       integer,
  backend_start     timestamp with time zone ,
  xact_start        timestamp with time zone ,
  query_start       timestamp with time zone ,
  state_change      timestamp with time zone ,
  wait_event_type   text ,                     
  wait_event        text ,                   
  state             text ,                  
  backend_xid       xid  ,                 
  backend_xmin      xid  ,                
  query             text ,               
  backend_type      text ,  
  queryid           bigint
);

เพื่อเร่งการแทรก - ไม่มีดัชนีหรือข้อจำกัด

ในการจัดเก็บประวัติจะใช้ตารางที่แบ่งพาร์ติชัน:

กิจกรรม_hist.archive_pg_stat_activity :

DROP TABLE IF EXISTS activity_hist.archive_pg_stat_activity;
CREATE TABLE activity_hist.archive_pg_stat_activity
(
  timepoint timestamp without time zone ,
  datid             oid  , 
  datname           name ,
  pid               integer,
  usesysid          oid    ,
  usename           name   ,
  application_name  text   ,
  client_addr       inet   ,
  client_hostname   text   ,
  client_port       integer,
  backend_start     timestamp with time zone ,
  xact_start        timestamp with time zone ,
  query_start       timestamp with time zone ,
  state_change      timestamp with time zone ,
  wait_event_type   text ,                     
  wait_event        text ,                   
  state             text ,                  
  backend_xid       xid  ,                 
  backend_xmin      xid  ,                
  query             text ,               
  backend_type      text ,
  queryid           bigint
)
PARTITION BY RANGE (timepoint);

เนื่องจากในกรณีนี้ไม่มีข้อกำหนดสำหรับความเร็วในการแทรก ดัชนีบางตัวจึงถูกสร้างขึ้นเพื่อเร่งการสร้างรายงาน

ประวัติการบล็อกเซสชัน

ตารางถูกใช้เพื่อจัดเก็บสแน็ปช็อตปัจจุบันของการล็อคเซสชัน:

กิจกรรม_hist.history_locking :

--ACTIVITY_HIST.HISTORY_LOCKING
DROP TABLE IF EXISTS activity_hist.history_locking;
CREATE TABLE activity_hist.history_locking
(
	timepoint timestamp without time zone ,
	locktype text ,
	relation oid ,
	mode text ,
	tid xid ,
	vtid text ,
	pid integer ,
	blocking_pids integer[] ,
	granted boolean
);

นอกจากนี้ เพื่อเร่งความเร็วในการแทรก ไม่มีดัชนีหรือข้อจำกัดใดๆ

ในการจัดเก็บประวัติจะใช้ตารางที่แบ่งพาร์ติชัน:

กิจกรรม_hist.archive_locking:

DROP TABLE IF EXISTS activity_hist.archive_locking;
CREATE TABLE activity_hist.archive_locking
(
	timepoint timestamp without time zone ,
	locktype text ,
	relation oid ,
	mode text ,
	tid xid ,
	vtid text ,
	pid integer ,
	blocking_pids integer[] ,
	granted boolean	
)
PARTITION BY RANGE (timepoint);

เนื่องจากในกรณีนี้ไม่มีข้อกำหนดสำหรับความเร็วในการแทรก ดัชนีบางตัวจึงถูกสร้างขึ้นเพื่อเร่งการสร้างรายงาน

2.กรอกประวัติปัจจุบัน

ในการรวบรวมสแน็ปช็อตการดูโดยตรง จะใช้สคริปต์ทุบตีที่เรียกใช้ฟังก์ชัน plpgsql

get_current_activity.sh

#!/bin/bash
#########################################################
#get_current_activity.sh

ERROR_FILE='/home/demon/get_current_activity'$(date +%Y%m%d-)'T'$(date +%H)$(date +%M)$(date +%S)
host=$1
s_name=$2
s_pass=$3

psql  -A -t -q -v ON_ERROR_STOP=1 -c "SELECT activity_hist.get_current_activity( '$host' , '$s_name' , '$s_pass' )" >/dev/null 2>$ERROR_FILE

line_count=`cat $ERROR_FILE | wc -l`
if [[ $line_count != '0' ]];
then
    rm -f /home/demon/*.err >/dev/null 2>/dev/null
	cp $ERROR_FILE $ERROR_FILE'.err' >/dev/null 2>/dev/null  
fi
rm $ERROR_FILE >/dev/null 2>/dev/null
exit 0

กรุณา ฟังก์ชัน dblink เข้าถึงมุมมองในฐานข้อมูลเป้าหมายและแทรกแถวลงในตารางบริการในฐานข้อมูลการมอนิเตอร์

get_current_activity.sql

CREATE OR REPLACE FUNCTION activity_hist.get_current_activity( current_host text , current_s_name text , current_s_pass text ) RETURNS BOOLEAN AS $$
DECLARE 
  database_rec record;
  dblink_str text ;
BEGIN   

	EXECUTE 'SELECT dblink_connect(''LINK1'',''host='||current_host||' port=5432 dbname=postgres'||
	                                         ' user='||current_s_name||' password='||current_s_pass|| ' '')';



--------------------------------------------------------------------
--GET pg_stat_activity stats
	INSERT INTO activity_hist.history_pg_stat_activity
	(
		SELECT * FROM dblink('LINK1',
			'SELECT 
			now() , 
			datid             , 
			datname           ,
			pid               ,
			usesysid              ,
			usename              ,
			application_name     ,
			client_addr          ,
			client_hostname      ,
			client_port       ,
			backend_start         ,
			xact_start            ,
			query_start           ,
			state_change          ,
			wait_event_type    ,                     
			wait_event         ,                   
			state              ,                  
			backend_xid         ,                 
			backend_xmin        ,                
			query              ,               
			backend_type   			
		FROM pg_stat_activity
		') 
		AS t (
		    timepoint 		  timestamp without time zone ,			
			datid             oid  , 
			datname           name ,
			pid               integer,
			usesysid          oid    ,
			usename           name   ,
			application_name  text   ,
			client_addr       inet   ,
			client_hostname   text   ,
			client_port       integer,
			backend_start     timestamp with time zone ,
			xact_start        timestamp with time zone ,
			query_start       timestamp with time zone ,
			state_change      timestamp with time zone ,
			wait_event_type   text ,                     
			wait_event        text ,                   
			state             text ,                  
			backend_xid       xid  ,                 
			backend_xmin      xid  ,                
			query             text ,               
			backend_type      text 			
		)
	);

---------------------------------------	
--ACTIVITY_HIST.HISTORY_LOCKING	
	INSERT INTO activity_hist.history_locking
	(
		SELECT * FROM dblink('LINK1',
			'SELECT 
			now() , 
			lock.locktype,
			lock.relation,
			lock.mode,
			lock.transactionid as tid,
			lock.virtualtransaction as vtid,
			lock.pid,
			pg_blocking_pids(lock.pid), 
			lock.granted
			FROM 	pg_catalog.pg_locks lock LEFT JOIN pg_catalog.pg_database db ON db.oid = lock.database
			WHERE NOT lock.pid = pg_backend_pid()	
		') 
		AS t (
			timepoint timestamp without time zone ,
			locktype text ,
			relation oid , 
			mode text ,
			tid xid ,
			vtid text ,
			pid integer ,
			blocking_pids integer[] ,
			granted boolean
		)
	);
	PERFORM dblink_disconnect('LINK1');
	
	RETURN TRUE ;
END
$$ LANGUAGE plpgsql;

ในการรวบรวมสแน็ปช็อตการดู จะมีการใช้บริการ systemd และสคริปต์สองตัว:

pg_current_activity.บริการ

# /etc/systemd/system/pg_current_activity.service
[Unit]
Description=Collect history of pg_stat_activity , pg_locks 
Wants=pg_current_activity.timer

[Service]
Type=forking
StartLimitIntervalSec=0
ExecStart=/home/postgres/pgutils/demon/get_current_activity.sh 10.124.70.40 postgres postgres

[Install]
WantedBy=multi-user.target

pg_current_activity.ตัวจับเวลา

# /etc/systemd/system/pg_current_activity.timer
[Unit]
Description=Run pg_current_activity.sh every 1 second
Requires=pg_current_activity.service

[Timer]
Unit=pg_current_activity.service
OnCalendar=*:*:0/1
AccuracySec=1

[Install]
WantedBy=timers.target

กำหนดสิทธิ์ให้กับสคริปต์:
# chmod 755 pg_current_activity.timer
# chmod 755 pg_current_activity.service

มาเริ่มบริการกัน:
# dactl ระบบโหลดซ้ำ
# systemctl เริ่ม pg_current_activity.service

ดังนั้นประวัติการดูจึงถูกรวบรวมในรูปแบบของสแนปช็อตแบบวินาทีต่อวินาที แน่นอนว่าหากทุกอย่างยังคงเหมือนเดิม ตารางจะเพิ่มขนาดอย่างรวดเร็วและงานที่มีประสิทธิผลไม่มากก็น้อยก็จะเป็นไปไม่ได้

มีความจำเป็นต้องจัดระเบียบการเก็บข้อมูล

3. การเก็บประวัติ

สำหรับการเก็บถาวร จะใช้ไฟล์เก็บถาวรตารางที่แบ่งพาร์ติชัน*

พาร์ติชั่นใหม่จะถูกสร้างขึ้นทุกๆ ชั่วโมง ในขณะที่ข้อมูลเก่าจะถูกลบออกจากตารางประวัติ* ดังนั้นขนาดของตารางประวัติ* จึงไม่เปลี่ยนแปลงมากนัก และความเร็วในการแทรกก็ไม่ลดลงเมื่อเวลาผ่านไป

การสร้างส่วนใหม่ดำเนินการโดยฟังก์ชัน plpgsql Activity_hist.archive_current_activity อัลกอริธึมการทำงานนั้นง่ายมาก (ใช้ตัวอย่างของส่วนสำหรับตาราง archive_pg_stat_activity)

สร้างและกรอกส่วนใหม่

EXECUTE format(
'CREATE TABLE ' || partition_name || 
' PARTITION OF activity_hist.archive_pg_stat_activity FOR VALUES FROM ( %L ) TO ( %L ) ' , 
to_char(date_trunc('year', partition_min_range ),'YYYY')||'-'||
to_char(date_trunc('month', partition_min_range ),'MM')||'-'||
to_char(date_trunc('day', partition_min_range ),'DD')||' '||
to_char(date_trunc('hour', partition_min_range ),'HH24')||':00', 
to_char(date_trunc('year', partition_max_range ),'YYYY')||'-'||
to_char(date_trunc('month', partition_max_range ),'MM')||'-'||
to_char(date_trunc('day', partition_max_range ),'DD')||' '||
to_char(date_trunc('hour', partition_max_range ),'HH24')||':00'
);

INSERT INTO activity_hist.archive_pg_stat_activity
(
	SELECT 	* 
	FROM 	activity_hist.history_pg_stat_activity
	WHERE 	timepoint BETWEEN partition_min_range AND partition_max_range 		
);

การสร้างดัชนี

EXECUTE format	(
'CREATE INDEX '||index_name||
' ON '||partition_name||' ( wait_event_type , backend_type , timepoint )' 
);

EXECUTE format	('CREATE INDEX '||index_name||
' ON '||partition_name||' ( wait_event_type , backend_type , timepoint , queryid )' 
);

การลบข้อมูลเก่าออกจากตาราง history_pg_stat_activity

DELETE 
FROM 	activity_hist.history_pg_stat_activity
WHERE 	timepoint < partition_max_range;

แน่นอนว่าในบางครั้งส่วนเก่าจะถูกลบโดยไม่จำเป็น

รายงานพื้นฐาน

จริงๆแล้วทำไมทั้งหมดนี้ถึงถูกทำ? เพื่อให้ได้รายงานที่ชวนให้นึกถึง AWR ของ Oracle อย่างคลุมเครือ

สิ่งสำคัญคือต้องเพิ่มว่าในการรับรายงาน คุณจะต้องสร้างการเชื่อมต่อระหว่างมุมมอง pg_stat_activity และ pg_stat_statements ตารางถูกเชื่อมโยงโดยการเพิ่มคอลัมน์ 'queryid' ลงในตาราง 'history_pg_stat_activity', 'archive_pg_stat_activity' วิธีการเพิ่มค่าคอลัมน์อยู่นอกเหนือขอบเขตของบทความนี้และมีอธิบายไว้ที่นี่ - pg_stat_statements + pg_stat_activity + loq_query = pg_ash? .

เวลา CPU ทั้งหมดสำหรับคำถาม

ขอ :

WITH hist AS
(
SELECT 
	aa.query ,aa.queryid ,			
	count(*) * interval '1 second' AS duration 
FROM 	activity_hist.archive_pg_stat_activity aa
WHERE timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND  pg_stat_history_end+(current_hour_diff * interval '1 hour')  AND backend_type = 'client backend' AND datname != 'postgres' AND	( aa.wait_event_type IS NULL  ) ANDaa.state = 'active'
GROUP BY aa.wait_event_type , aa.wait_event , aa.query ,aa.queryid		
UNION 
SELECT 
	ha.query ,ha.queryid,
	count(*) * interval '1 second' AS duration 
FROM 	activity_hist.history_pg_stat_activity_for_reports ha
WHERE timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour')  AND 	backend_type = 'client backend' AND datname != 'postgres' AND ( ha.wait_event_type IS NULL  )AND ha.state = 'active'
GROUP BY ha.wait_event_type , ha.wait_event , ha.query ,ha.queryid		
)
SELECT 	query , queryid , SUM( duration ) as duration 
FROM hist
GROUP BY  query , queryid 
ORDER BY 3 DESC

ตัวอย่าง:

-------------------------------------------------------------------
| TOTAL CPU TIME FOR QUERIES : 07:47:36
+----+----------------------------------------+--------------------
|   #|                                 queryid|            duration
+----+----------------------------------------+--------------------
|   1|                      389015618226997618|            04:28:58
|   2|                                        |            01:07:29
|   3|                     1237430309438971376|            00:59:38
|   4|                     4710212362688288619|            00:50:48
|   5|                       28942442626229688|            00:15:50
|   6|                     9150846928388977274|            00:04:46
|   7|                    -6572922443698419129|            00:00:06
|   8|                                        |            00:00:01
+----+----------------------------------------+--------------------

เวลารอทั้งหมดสำหรับคำถาม

ขอ :

WITH hist AS
(
SELECT 
	aa.query ,aa.queryid ,			
	count(*) * interval '1 second' AS duration 
FROM 	activity_hist.archive_pg_stat_activity aa
WHERE timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour')  AND 
	backend_type = 'client backend' AND datname != 'postgres' AND
	( aa.wait_event_type IS NOT NULL  ) 
GROUP BY aa.wait_event_type , aa.wait_event , aa.query ,aa.queryid		
UNION 
SELECT 
	ha.query ,ha.queryid,
	count(*) * interval '1 second' AS duration 
FROM 	activity_hist.history_pg_stat_activity_for_reports ha
WHERE timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour')  AND 
	backend_type = 'client backend' AND datname != 'postgres' AND				
	( ha.wait_event_type IS NOT NULL  )
GROUP BY ha.wait_event_type , ha.wait_event , ha.query ,ha.queryid		
)
SELECT 	query , queryid , SUM( duration ) as duration 
FROM hist
GROUP BY  query , queryid 
ORDER BY 3 DESC

ตัวอย่างเช่น:

-------------------------------------------------------------------
| TOTAL WAITINGS TIME FOR QUERIES : 21:55:04
+----+----------------------------------------+--------------------
|   #|                                 queryid|            duration
+----+----------------------------------------+--------------------
|   1|                      389015618226997618|            16:19:05
|   2|                                        |            03:47:04
|   3|                     8085340880788646241|            00:40:20
|   4|                     4710212362688288619|            00:13:35
|   5|                     9150846928388977274|            00:12:25
|   6|                       28942442626229688|            00:11:32
|   7|                     1237430309438971376|            00:09:45
|   8|                     2649515222348904837|            00:09:37
|   9|                                        |            00:03:45
|  10|                     3167065002719415275|            00:02:20
|  11|                     5731212217001535134|            00:02:13
|  12|                     8304755792398128062|            00:01:31
|  13|                     2649515222348904837|            00:00:59
|  14|                     2649515222348904837|            00:00:22
|  15|                                        |            00:00:12
|  16|                     3422818749220588372|            00:00:08
|  17|                    -5730801771815999400|            00:00:03
|  18|                    -1473395109729441239|            00:00:02
|  19|                     2404820632950544954|            00:00:02
|  20|                    -6572922443698419129|            00:00:02
|  21|                     2369289265278398647|            00:00:01
|  22|                      180077086776069052|            00:00:01
+----+----------------------------------------+--------------------

กำลังรอคำถาม

คำขอ:

WITH hist AS
(
SELECT 
	aa.wait_event_type , aa.wait_event 
FROM 	activity_hist.archive_pg_stat_activity aa
WHERE timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour') AND 
	backend_type = 'client backend' AND datname != 'postgres' AND
	aa.wait_event IS NOT NULL 
GROUP BY aa.wait_event_type , aa.wait_event
UNION 
SELECT 
	ha.wait_event_type , ha.wait_event 
FROM 	activity_hist.history_pg_stat_activity_for_reports ha
WHERE timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour') AND 
	backend_type = 'client backend' AND datname != 'postgres' AND
	ha.wait_event IS NOT NULL 
GROUP BY ha.wait_event_type , ha.wait_event		
)
SELECT 	wait_event_type , wait_event 
FROM hist
GROUP BY wait_event_type , wait_event
ORDER BY 1 ASC,2 ASC

----------------------------------------------------------------------

WITH hist AS
(
SELECT 
	aa.wait_event_type , aa.wait_event , aa.query ,aa.queryid ,			
	count(*) * interval '1 second' AS duration 
FROM 	activity_hist.archive_pg_stat_activity aa
WHERE timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour') AND 
	backend_type = 'client backend' AND datname != 'postgres' AND
	( aa.wait_event_type = waitings_stat_rec.wait_event_type AND aa.wait_event = waitings_stat_rec.wait_event )
GROUP BY aa.wait_event_type , aa.wait_event , aa.query ,aa.queryid		
UNION 
SELECT 
	ha.wait_event_type , ha.wait_event , ha.query ,ha.queryid,
	count(*) * interval '1 second' AS duration 
FROM 	activity_hist.history_pg_stat_activity_for_reports ha
WHERE timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour') AND 
	backend_type = 'client backend' AND datname != 'postgres' AND				
	( ha.wait_event_type = waitings_stat_rec.wait_event_type AND ha.wait_event = waitings_stat_rec.wait_event )
GROUP BY ha.wait_event_type , ha.wait_event , ha.query ,ha.queryid		
)
SELECT 	query , queryid , SUM( duration ) as duration 
FROM hist
GROUP BY  query , queryid 
ORDER BY 3 DESC

ตัวอย่าง:

------------------------------------------------
| WAITINGS FOR QUERIES
+-----------------------------------------------
|                      wait_event_type = Client|
|                       wait_event = ClientRead|
|                        Total time  = 00:46:56|
------------------------------------------------
|    #|             queryid|            duration
+-----+--------------------+--------------------
|    1| 8085340880788646241|            00:40:20
|    2|                    |            00:03:45
|    3| 5731212217001535134|            00:01:53
|    4|                    |            00:00:12
|    5| 9150846928388977274|            00:00:09
|    6| 3422818749220588372|            00:00:08
|    7| 1237430309438971376|            00:00:06
|    8|   28942442626229688|            00:00:05
|    9| 4710212362688288619|            00:00:05
|   10|-5730801771815999400|            00:00:03
|   11| 8304755792398128062|            00:00:02
|   12|-6572922443698419129|            00:00:02
|   13|-1473395109729441239|            00:00:02
|   14| 2404820632950544954|            00:00:02
|   15|  180077086776069052|            00:00:01
|   16| 2369289265278398647|            00:00:01

+-----------------------------------------------
|                          wait_event_type = IO|
|                      wait_event = BufFileRead|
|                        Total time  = 00:00:38|
------------------------------------------------
|    #|             queryid|            duration
+-----+--------------------+--------------------
|    1|   28942442626229688|            00:00:38

+-----------------------------------------------

ประวัติกระบวนการที่ถูกล็อค

ขอ:

SELECT 
MIN(date_trunc('second',timepoint)) AS started , 
	count(*) * interval '1 second' as duration ,
	pid , blocking_pids , relation , mode , locktype 	 
FROM 
	activity_hist.archive_locking al 
WHERE 
	timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour') AND
	NOT granted AND 
	locktype = 'relation' 
GROUP BY pid , blocking_pids , relation , mode , locktype			
UNION
SELECT 
	MIN(date_trunc('second',timepoint)) AS started , 
	count(*) * interval '1 second' as duration ,
	pid , blocking_pids , relation , mode , locktype
FROM 
	activity_hist.history_locking 
WHERE 
	timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour') AND
	NOT granted AND 
	locktype = 'relation' 
GROUP BY pid , blocking_pids , relation , mode , locktype			
ORDER BY 1

ตัวอย่าง:

-------------------------------------------------- -------------------------------------------------- -------------------------------------------------- -------------------------------------------------- --------------------------------- | ประวัติกระบวนการที่ถูกล็อค +-----+-----+-----+-------- --+------------ ---------+--------------------+----- --------------- +------------------- | #| พีด| เริ่มต้น| ระยะเวลา| blocking_pids| ความสัมพันธ์| โหมด| ประเภทล็อค +----------+----------+-----+---------- +--------- -----------+-----------+------- -------------+----- -------------- | 1| 26224| 2019-09-02 19:32:16| 00:01:45| {26211}| 16541| การเข้าถึงShareLock| ความสัมพันธ์ | 2| 26390| 2019-09-02 19:34:03| 00:00:53| {26211}| 16541| การเข้าถึงShareLock| ความสัมพันธ์ | 3| 26391| 2019-09-02 19:34:03| 00:00:53| {26211}| 16541| การเข้าถึงShareLock| ความสัมพันธ์ | 4| 26531| 2019-09-02 19:35:27| 00:00:12| {26211}| 16541| การเข้าถึงShareLock| ความสัมพันธ์ | 5| 27284| 2019-09-02 19:44:02| 00:00:19| {27276}| 16541| การเข้าถึงShareLock| ความสัมพันธ์ | 6| 27283| 2019-09-02 19:44:02| 00:00:19| {27276}| 16541| การเข้าถึงShareLock| ความสัมพันธ์ | 7| 27286| 2019-09-02 19:44:02| 00:00:19| {27276}| 16541| การเข้าถึงShareLock| ความสัมพันธ์ | 8| 27423| 2019-09-02 19:45:24| 00:00:12| {27394}| 16541| การเข้าถึงShareLock| ความสัมพันธ์ | 9| 27648| 2019-09-02 19:48:06| 00:00:20| {27647}| 16541| การเข้าถึงShareLock| ความสัมพันธ์ | 10| 27650| 2019-09-02 19:48:06| 00:00:20| {27647}| 16541| การเข้าถึงShareLock| ความสัมพันธ์ | 11| 27735| 2019-09-02 19:49:08| 00:00:06| {27650}| 16541| การเข้าถึง ExclusiveLock| ความสัมพันธ์ | 12| 28380| 2019-09-02 19:56:03| 00:01:56| {28379}| 16541| การเข้าถึงShareLock| ความสัมพันธ์ | 13| 28379| 2019-09-02 19:56:03| 00:00:01| 28377| 16541| การเข้าถึง ExclusiveLock| ความสัมพันธ์ | | | | | 28376| |

การปิดกั้นประวัติกระบวนการ

คำขอ:

SELECT 
blocking_pids 
FROM 
	activity_hist.archive_locking al 
WHERE 
	timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour') AND
	NOT granted AND 
	locktype = 'relation' 
GROUP BY blocking_pids 		
UNION
SELECT 
	blocking_pids 
FROM 
	activity_hist.history_locking 
WHERE 
	timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour') AND
	NOT granted AND 
	locktype = 'relation' 
GROUP BY blocking_pids 		
ORDER BY 1

---------------------------------------------------------------

SELECT 
	pid , usename , application_name , datname ,
	MIN(date_trunc('second',timepoint)) as started , 
	count(*) * interval '1 second' as duration ,		 
	state , 
	query
				FROM  	activity_hist.archive_pg_stat_activity
				WHERE 	pid= current_pid AND 
						timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour') 						 
				GROUP BY pid , usename , application_name , 
						datname , 
						state_change, 
						state , 
						query 
				UNION
				SELECT 
					pid , usename , application_name , datname ,
					MIN(date_trunc('second',timepoint)) as started , 
					count(*) * interval '1 second' as duration ,		 
					state , 
					query
				FROM  	activity_hist.history_pg_stat_activity_for_reports
				WHERE 	pid= current_pid AND 
						timepoint BETWEEN pg_stat_history_begin+(current_hour_diff * interval '1 hour') AND pg_stat_history_end+(current_hour_diff * interval '1 hour') 						 
				GROUP BY pid , usename , application_name , 
						datname , 
						state_change, 
						state , 
						query 
				ORDER BY 5 , 1

ตัวอย่าง:

-------------------------------------------------- -------------------------------------------------- -------------------------------------------------- -------------------------------------------------- -------------------------------------------------- -------------------------------------------------- ----------------------- ประวัติกระบวนการบล็อก +----+-----------+------------ ---+--------------------+-----------+-------------- -------+-------------------+--------------------- - ---------------------------------------------------------------------- | #| พีด| ชื่อผู้ใช้| application_name| ชื่อข้อมูล| เริ่มต้น| ระยะเวลา| รัฐ| สอบถาม +----------+----------+----------+-----+ --------- -+--------------------+------------------ --+------ -------------------------------+---------------- ------- ----------------- | 1| 26211| ทูเซอร์| พีเอสแอลแอล| tdb1| 2019-09-02 19:31:54| 00:00:04| ไม่ได้ใช้งาน| | 2| 26211| ทูเซอร์| พีเอสแอลแอล| tdb1| 2019-09-02 19:31:58| 00:00:06| ไม่ได้ใช้งานในการทำธุรกรรม| เริ่ม; | 3| 26211| ทูเซอร์| พีเอสแอลแอล| tdb1| 2019-09-02 19:32:16| 00:01:45| ไม่ได้ใช้งานในการทำธุรกรรม| ล็อคตาราง wafer_data; | 4| 26211| ทูเซอร์| พีเอสแอลแอล| tdb1| 2019-09-02 19:35:54| 00:01:23| ไม่ได้ใช้งาน| ให้สัญญา; | 5| 26211| ทูเซอร์| พีเอสแอลแอล| tdb1| 2019-09-02 19:38:46| 00:00:02| ไม่ได้ใช้งานในการทำธุรกรรม| เริ่ม; | 6| 26211| ทูเซอร์| พีเอสแอลแอล| tdb1| 2019-09-02 19:38:54| 00:00:08| ไม่ได้ใช้งานในการทำธุรกรรม| ล็อคตาราง wafer_data; | 7| 26211| ทูเซอร์| พีเอสแอลแอล| tdb1| 2019-09-02 19:39:08| 00:42:42| ไม่ได้ใช้งาน| ให้สัญญา; | 8| 26211| ทูเซอร์| พีเอสแอลแอล| tdb1| 2019-09-03 07:12:07| 00:00:52| ใช้งานอยู่| เลือก test_del();

การพัฒนา.

ข้อความค้นหาพื้นฐานที่แสดงและรายงานผลลัพธ์ทำให้ชีวิตง่ายขึ้นมากเมื่อวิเคราะห์เหตุการณ์ด้านประสิทธิภาพ
จากการสืบค้นพื้นฐาน คุณสามารถรับรายงานที่คล้ายกับ AWR ของ Oracle อย่างคลุมเครือ
ตัวอย่างรายงานสรุป

+---------------------------------------------------------------- ----------------------------------- | รายงานรวมสำหรับกิจกรรมและการรอคอย

ยังมีต่อ. บรรทัดถัดไปคือการสร้างประวัติการล็อก (pg_stat_locks) ซึ่งเป็นคำอธิบายโดยละเอียดเพิ่มเติมเกี่ยวกับกระบวนการเติมตาราง

ที่มา: will.com

เพิ่มความคิดเห็น