জেনকিন্সে এসকিউএল সার্ভারের অটোমেশন: ফলাফলটি সুন্দরভাবে ফিরিয়ে দেওয়া

আবার ব্যবস্থার থিম অব্যাহত রাখা জিরো টাচ PROD RDS এর অধীনে. ভবিষ্যতের ডিবিএগুলি সরাসরি PROD সার্ভারের সাথে সংযোগ করতে সক্ষম হবে না, তবে ব্যবহার করতে সক্ষম হবে৷ জেনকিন্স একটি সীমিত সেট অপারেশনের জন্য চাকরি। ডিবিএ কাজ শুরু করে এবং কিছু সময় পরে এই অপারেশন সমাপ্তির রিপোর্ট সহ একটি চিঠি পায়। আসুন ব্যবহারকারীর কাছে এই ফলাফলগুলি উপস্থাপন করার উপায়গুলি দেখি৷

সাধারণ পাঠ্য

সবচেয়ে তুচ্ছ দিয়ে শুরু করা যাক। প্রথম পদ্ধতিটি এতই সহজ যে এখানে কথা বলার মতো কিছুই নেই (লেখক এর পরে ফ্রিস্টাইল কাজগুলি ব্যবহার করেন):

sqlcmd কিছু করে এবং আমরা ব্যবহারকারীর কাছে তা উপস্থাপন করি। উদাহরণস্বরূপ, ব্যাকআপ কাজের জন্য আদর্শ:

যাইহোক, ভুলে যাবেন না যে RDS ব্যাকআপ/রিস্টোরের অধীনে অ্যাসিঙ্ক্রোনাস, তাই আপনাকে এটির জন্য অপেক্ষা করতে হবে:

declare @rds table
  (id int, task_type varchar(128), database_name sysname, pct int, duration int, 
   lifecycle varchar(128), taskinfo varchar(max) null, 
   upd datetime, cre datetime,
   s3 varchar(256), ovr int, KMS varchar(256) null)
waitfor delay '00:00:20' 
insert into @rds exec msdb.dbo.rds_task_status @db_name='{db}'
select @xid=max(id) from @rds

again:
waitfor delay '00:00:02'
delete from @rds
insert into @rds exec msdb.dbo.rds_task_status @db_name='{db}' 
# {db} substituted with db name by powershell
select @stat=lifecycle,@info=taskinfo from @rds where id=@xid
if @stat not in ('ERROR','SUCCESS','CANCELLED') goto again

দ্বিতীয় পদ্ধতি, CSV

এখানে সবকিছু খুব সহজ:

যাইহোক, এই পদ্ধতিটি তখনই কাজ করে যখন CSV তে ফেরত দেওয়া ডেটা "সহজ" হয়। আপনি যদি এইভাবে TOP N CPU নিবিড় ক্যোয়ারীগুলির একটি তালিকা ফেরত দেওয়ার চেষ্টা করেন, তাহলে ক্যোয়ারী টেক্সটে যেকোন অক্ষর - কমা, উদ্ধৃতি এবং এমনকি লাইন বিরতি থাকতে পারে এই কারণে CSV "করোড" হবে। অতএব, আমাদের আরও জটিল কিছু দরকার।

HTML এ সুন্দর চিহ্ন

আমি এখনই আপনাকে একটি কোড স্নিপেট দেব

$Header = @"
<style>
TABLE {border-width: 1px; border-style: solid; border-color: black; border-collapse: collapse;}
TH {border-width: 1px; padding: 3px; border-style: solid; border-color: black; background-color: #6495ED;}
TD {border-width: 1px; padding: 3px; border-style: solid; border-color: black;}
</style>
"@
  
$Result = invoke-Sqlcmd -ConnectionString $jstr -Query "select * from DbInv" `
  | Select-Object -Property * -ExcludeProperty "ItemArray", "RowError", "RowState", "Table", "HasErrors"
if ($Result -eq $null) { $cnt = 0; }
elseif ($Result.getType().FullName -eq "System.Management.Automation.PSCustomObject") { $cnt = 1; }
else { $cnt = $Result.Rows.Count; } 
if ($cnt -gt 0) {
  $body = "<h2>My table</h2>"
  $Result | ConvertTo-HTML -Title "Rows" -Head $header -body $body `
    | Out-File "res.log" -Append -Encoding UTF8
  } else {
    "<h3>No data</h3>" | Out-File "res.log" -Append -Encoding UTF8
  }

যাইহোক, System.Management.Automation.PSCustomObject-এর সাথে লাইনে মনোযোগ দিন, এটি জাদুকর; যদি গ্রিডে ঠিক একটি লাইন থাকে, তাহলে কিছু সমস্যা দেখা দেয়। অনেক না বুঝেই সমাধানটা ইন্টারনেট থেকে নেওয়া হয়েছে। ফলস্বরূপ, আপনি এই মত কিছু আউটপুট ফরম্যাট পাবেন:

গ্রাফ অঙ্কন

সতর্কীকরণ: নিচের কোড!
এসকিউএল সার্ভারে একটি মজার প্রশ্ন রয়েছে যা শেষ এন মিনিটের জন্য CPU প্রদর্শন করে - দেখা যাচ্ছে যে কমরেড মেজর সবকিছু মনে রেখেছেন! এই ক্যুইজ চেষ্টা করুন:

DECLARE @ts_now bigint = (SELECT cpu_ticks/(cpu_ticks/ms_ticks) 
  FROM sys.dm_os_sys_info WITH (NOLOCK)); 
SELECT TOP(256) 
  DATEADD(ms, -1 * (@ts_now - [timestamp]), GETDATE()) AS [EventTime],
  SQLProcessUtilization AS [SQLCPU], 
  100 - SystemIdle - SQLProcessUtilization AS [OtherCPU]
FROM (SELECT record.value('(./Record/@id)[1]', 'int') AS record_id, 
  record.value('(./Record/SchedulerMonitorEvent/SystemHealth/SystemIdle)[1]', 'int') 
    AS [SystemIdle], 
  record.value('(./Record/SchedulerMonitorEvent/SystemHealth/ProcessUtilization)[1]', 'int') 
    AS [SQLProcessUtilization], [timestamp] 
  FROM (SELECT [timestamp], CONVERT(xml, record) AS [record] 
  FROM sys.dm_os_ring_buffers WITH (NOLOCK)
  WHERE ring_buffer_type = N'RING_BUFFER_SCHEDULER_MONITOR' 
    AND record LIKE N'%<SystemHealth>%') AS x) AS y 
ORDER BY 1 DESC OPTION (RECOMPILE);

এখন, এই ফরম্যাটিং ব্যবহার করে ($Fragment ভেরিয়েবল)

<table style="width: 100%"><tbody><tr style="background-color: white; height: 2pt;">
  <td style="width: SQLCPU%; background-color: green;"></td>
  <td style="width: OtherCPU%; background-color: blue;"></td>
  <td style="width: REST%; background-color: #C0C0C0;"></td></tr></tbody>
</table>

আমরা চিঠির শরীর গঠন করতে পারি:

$Result = invoke-Sqlcmd -ConnectionString $connstr -Query $Query `
  | Select-Object -Property * -ExcludeProperty `
  "ItemArray", "RowError", "RowState", "Table", "HasErrors"
if ($Result.HasRows) {
  foreach($item in $Result) 
    { 
    $time = $itemEventTime 
    $sqlcpu = $item.SQLCPU
    $other = $itemOtherCPU
    $rest = 100 - $sqlcpu - $other
    $f = $fragment -replace "SQLCPU", $sqlcpu
    $f = $f -replace "OtherCPU", $other
    $f = $f -replace "REST", $rest
    $f | Out-File "res.log" -Append -Encoding UTF8
    }

যা এই মত দেখাবে:

হ্যাঁ, মহাশয় বিকৃতি সম্পর্কে অনেক কিছু জানেন! এটি আকর্ষণীয় যে এই কোডটিতে রয়েছে: পাওয়ারশেল (এটিতে লেখা), SQL, Xquery, HTML। এটা দুঃখের বিষয় যে আমরা HTML এ জাভাস্ক্রিপ্ট যোগ করতে পারি না (যেহেতু এটি লেখার জন্য), কিন্তু পাইথন কোড পালিশ করা (যা এসকিউএল-এ ব্যবহার করা যেতে পারে) প্রত্যেকের কর্তব্য!

এসকিউএল প্রোফাইলার ট্রেস আউটপুট

এটা স্পষ্ট যে টেক্সটডেটা ফিল্ডের কারণে ট্রেসটি CSV-তে ফিট হবে না। কিন্তু একটি চিঠিতে একটি ট্রেস গ্রিড প্রদর্শন করাও অদ্ভুত - আকারের কারণে এবং এই ডেটা প্রায়শই আরও বিশ্লেষণের জন্য ব্যবহৃত হয়। অতএব, আমরা নিম্নলিখিতগুলি করি: আমরা এর মাধ্যমে কল করি invoke-SqlCmd একটি নির্দিষ্ট স্ক্রিপ্ট, যার গভীরতায় এটি করা হয়

select 
  SPID,EventClass,TextData,
  Duration,Reads,Writes,CPU,
  StartTime,EndTime,DatabaseName,HostName,
  ApplicationName,LoginName
   from ::fn_trace_gettable ( @filename , default )  

পরবর্তী বন্ধু সার্ভার, DBA-তে অ্যাক্সেসযোগ্য, একটি খালি টেমপ্লেট সহ একটি Traces ডাটাবেস আছে, একটি Model টেবিল, যা সমস্ত নির্দিষ্ট কলাম গ্রহণ করার জন্য প্রস্তুত। আমরা এই মডেলটি একটি অনন্য নামের সাথে একটি নতুন টেবিলে অনুলিপি করি:

$dt = Get-Date -format "yyyyMMdd"
$tm = Get-Date -format "hhmmss"
$tableName = $srv + "_" + $dt + "_" + $tm
$copytab = "select * into " + $tableName + " from Model"
invoke-SqlCmd -ConnectionString $tstr -Query $copytab 

এবং এখন আমরা এটি ব্যবহার করে আমাদের ট্রেস লিখতে পারি Data.SqlClient.SqlBulkCopy - আমি উপরে এর একটি উদাহরণ আগেই দিয়েছি। হ্যাঁ, TextData-এ ধ্রুবক মাস্ক করাও ভালো হবে:

# mask data
foreach ($Row in $Result)
{ 
  $v = $Row["TextData"]
  $v = $v -replace "'([^']{2,})'", "'str'" -replace "[0-9][0-9]+", '999'
  $Row["TextData"] = $v
}

আমরা 999 দিয়ে এক অক্ষরের বেশি লম্বা সংখ্যা প্রতিস্থাপন করি এবং আমরা 'str' দিয়ে এক অক্ষরের চেয়ে দীর্ঘ স্ট্রিং প্রতিস্থাপন করি। 0 থেকে 9 পর্যন্ত সংখ্যাগুলি প্রায়শই পতাকা হিসাবে ব্যবহৃত হয় এবং আমরা তাদের স্পর্শ করি না, পাশাপাশি খালি এবং একক-অক্ষর স্ট্রিং - 'Y', 'N', ইত্যাদি প্রায়শই তাদের মধ্যে পাওয়া যায়।

আসুন আমাদের জীবনে কিছু রঙ যোগ করি (কঠোরভাবে 18+)

সারণিতে, আপনি প্রায়শই এমন কক্ষগুলিকে হাইলাইট করতে চান যার জন্য মনোযোগ প্রয়োজন। উদাহরণস্বরূপ, ব্যর্থতা, উচ্চ স্তরের বিভক্তকরণ ইত্যাদি। অবশ্যই, এটি খালি এসকিউএল-এ করা যেতে পারে, প্রিন্ট ব্যবহার করে এইচটিএমএল তৈরি করা এবং জেনকিন্সে এইচটিএমএল ফাইলের ধরন সেট করা:

declare @body varchar(max), @chunk varchar(max)
set @body='<font face="Lucida Console" size="3">'
set @body=@body+'<b>Server name: '+@@servername+'</b><br>'
set @body=@body+'<br><br>'
set @body=@body+'<table><tr><th>Job</th><th>Last Run</th><th>Avg Duration, sec</th><th>Last Run, Sec</th><th>Last Status</th></tr>'
print @body

DECLARE tab CURSOR FOR SELECT '<tr><td>'+name+'</td><td>'+
  LastRun+'</td><td>'+
  convert(varchar,AvgDuration)+'</td><td>'+
  convert(varchar,LastDuration)+'</td><td>'+
    case when LastStatus<>'Succeeded' then '<font color="red">' else '' end+
      LastStatus+
      case when LastStatus<>'Succeeded' then '</font>' else '' end+
     +'</td><td>'
  from #j2
OPEN tab;  
FETCH NEXT FROM tab into @chunk
WHILE @@FETCH_STATUS = 0  
BEGIN
  print @chunk
  FETCH NEXT FROM tab into @chunk;  
END  
CLOSE tab;  
DEALLOCATE tab;
print '</table>'

কেন আমি এই ধরনের কোড লিখলাম?

কিন্তু আরো সুন্দর সমাধান আছে। কনভার্ট টু-এইচটিএমএল আমাদের কোষগুলিকে রঙ করতে দেয় না, তবে আমরা সত্যের পরে এটি করতে পারি। উদাহরণস্বরূপ, আমরা 80-এর বেশি এবং 90-এর বেশি ফ্র্যাগমেন্টেশন লেভেল সহ সেল নির্বাচন করতে চাই। আসুন শৈলী যোগ করি:

<style>
.SQLmarkup-red { color: red; background-color: yellow; }
.SQLmarkup-yellow { color: black; background-color: #FFFFE0; }
.SQLmarkup-default { color: black; background-color: white; }
</style>

ক্যোয়ারীতেই আমরা একটি ডামি কলাম যোগ করব অবিলম্বে আগে কলাম আমরা রঙ করতে চাই. কলাম বলা উচিত এসকিউএলমার্কআপ-কিছু:

case  
  when ps.avg_fragmentation_in_percent>=90.0 then 'SQLmarkup-red'
  when ps.avg_fragmentation_in_percent>=80.0 then 'SQLmarkup-yellow'
  else 'SQLmarkup-default' 
  end as [SQLmarkup-1], 
ps.avg_fragmentation_in_percent, 

এখন, পাওয়ারশেল দ্বারা জেনারেট করা এইচটিএমএল পাওয়ার পরে, আমরা হেডার থেকে ডামি কলামটি সরিয়ে দেব এবং ডেটার বডিতে আমরা কলাম থেকে স্টাইলে মান স্থানান্তর করব। এটি শুধুমাত্র দুটি প্রতিস্থাপনের সাথে করা হয়:

$html = $html `
  -replace "<th>SQLmarkup[^<]*</th>", "" `
  -replace "<td>SQLmarkup-(.+?)</td><td>",'<td class="SQLmarkup-$1">'

ফলাফল:


এটা মার্জিত না? যদিও না, এই রঙ আমাকে কিছু মনে করিয়ে দেয়


উত্স: www.habr.com