Linux वर Powershell वरून MS SQL सह कार्य करणे

हा लेख पूर्णपणे व्यावहारिक आहे आणि माझ्या दुःखाच्या कथेला समर्पित आहे

साठी तयार होत आहे झिरो टच PROD आरडीएस (एमएस एसक्यूएल) साठी, ज्याबद्दल आमचे सर्व कान गुंजत होते, मी ऑटोमेशनचे एक सादरीकरण (पीओसी - प्रूफ ऑफ कॉन्सेप्ट) केले: पॉवरशेल स्क्रिप्टचा संच. सादरीकरणानंतर, जेव्हा वादळी, प्रदीर्घ टाळ्यांचा मृत्यू झाला, तेव्हा ते मला म्हणाले - हे सर्व चांगले आहे, परंतु केवळ वैचारिक कारणांमुळे आमचे जेनकिन्स गुलाम लिनक्सवर काम करतात!

हे शक्य आहे का? विंडोजच्या खाली असा उबदार, दिवा डीबीए घ्या आणि लिनक्सच्या खाली पॉवरशेलच्या उष्णतेमध्ये चिकटवा? हे क्रूर नाही का?

तंत्रज्ञानाच्या या विचित्र संयोजनात मला स्वतःला बुडवावे लागले. अर्थात, माझ्या सर्व 30+ स्क्रिप्ट्सने काम करणे थांबवले. माझ्या आश्चर्याची गोष्ट म्हणजे, मी एका कामाच्या दिवसात सर्वकाही ठीक करण्यात व्यवस्थापित केले. मी गरम पाठपुरावा लिहित आहे. तर, पॉवरशेल स्क्रिप्ट्स विंडोज वरून लिनक्समध्ये हस्तांतरित करताना तुम्हाला कोणत्या अडचणी येऊ शकतात?

sqlcmd vs Invoke-SqlCmd

मी तुम्हाला त्यांच्यातील मुख्य फरकाची आठवण करून देतो. चांगली जुनी उपयुक्तता sqlcmd हे जवळजवळ समान कार्यक्षमतेसह Linux अंतर्गत देखील कार्य करते. आम्ही -Q कार्यान्वित करण्यासाठी क्वेरी पास करतो, इनपुट फाइल -i म्हणून आणि आउटपुट -o म्हणून. पण फाईलची नावे अर्थातच केस-सेन्सेटिव्ह बनवली आहेत. जर तुम्ही -i वापरत असाल तर फाईलमध्ये शेवटी लिहा:

GO
EXIT

जर शेवटी EXIT नसेल, तर sqlcmd इनपुटची प्रतीक्षा करण्यासाठी पुढे जाईल, आणि जर आधी बाहेर पडा नाही GO, नंतर शेवटची आज्ञा कार्य करणार नाही. आउटपुट फाइलमध्ये सर्व आउटपुट, निवड, संदेश, प्रिंट इ.

Invoke-SqlCmd डेटासेट, डेटाटेबल्स किंवा डेटारोज म्हणून परिणाम तयार करते. म्हणून, आपण साध्या निवडीच्या निकालावर प्रक्रिया केल्यास, आपण वापरू शकता sqlcmd, त्याचे आउटपुट विश्लेषित केल्यावर, काहीतरी जटिल मिळवणे जवळजवळ अशक्य आहे: यासाठी आहे Invoke-SqlCmd. परंतु या संघाचे स्वतःचे विनोद देखील आहेत:

• जर तुम्ही तिच्याकडे फाइल ट्रान्सफर केलीत -इनपुट फाइलमग बाहेर पडा आवश्यक नाही, शिवाय, ते वाक्यरचना त्रुटी निर्माण करते
• -आउटपुट फाइल नाही, कमांड तुम्हाला ऑब्जेक्ट म्हणून परिणाम देईल
• सर्व्हर निर्दिष्ट करण्यासाठी दोन वाक्यरचना आहेत: -सर्व्हरइन्स्टन्स -वापरकर्तानाव -पासवर्ड -डेटाबेस आणि माध्यमातून -कनेक्शनस्ट्रिंग. विचित्रपणे पुरेसे आहे, पहिल्या प्रकरणात 1433 व्यतिरिक्त पोर्ट निर्दिष्ट करणे शक्य नाही.
• मजकूर आउटपुट, टाइप करा PRINT, जे फक्त "पकडले" आहे sqlcmdसाठी Invoke-SqlCmd एक समस्या आहे
• आणि सर्वात महत्वाचे: बहुधा तुमच्या लिनक्समध्ये हे cmdlet नाही!

आणि ही मुख्य समस्या आहे. केवळ मार्चमध्ये या cmdlet नॉन-विंडोज प्लॅटफॉर्मसाठी उपलब्ध झाले, आणि शेवटी आपण पुढे जाऊ शकतो!

व्हेरिएबल प्रतिस्थापन

sqlcmd मध्ये -v वापरून व्हेरिएबल प्रतिस्थापन आहे, उदाहरणार्थ यासारखे:

# $conn содержит начало команды sqlcmd
$cmd = $conn + " -i D:appsSlaveJobsKillSpid.sql -o killspid.res 
  -v spid =`"" + $spid + "`" -v age =`"" + $age + "`""
Invoke-Expression $cmd

SQL स्क्रिप्टमध्ये आम्ही पर्याय वापरतो:

set @spid=$(spid)
set @age=$(age)

तर इथे आहे. *निक्स मध्ये व्हेरिएबल प्रतिस्थापन कार्य करत नाहीत. पॅरामीटर -v दुर्लक्ष केले. यू Invoke-SqlCmd दुर्लक्ष केले -चल. जरी स्वतः व्हेरिएबल्स निर्दिष्ट करणारे पॅरामीटर दुर्लक्षित केले असले तरी, प्रतिस्थापन स्वतःच कार्य करतात - तुम्ही शेलमधील कोणतेही व्हेरिएबल्स वापरू शकता. तथापि, मी व्हेरिएबल्समुळे नाराज झालो आणि मी त्यांच्यावर अजिबात अवलंबून न राहण्याचा निर्णय घेतला आणि एसक्यूएल स्क्रिप्ट लहान असल्याने मी उद्धटपणे आणि आदिम वागलो:

# prepend the parameters  
"declare @age int, @spid int" | Add-Content "q.sql"
"set @spid=" + $spid | Add-Content "q.sql"
"set @age=" + $age | Add-Content "q.sql"

foreach ($line in Get-Content "Sqlserver/Automation/KillSpid.sql") { 
  $line | Add-Content "q.sql" 
  }
$cmd = "/opt/mssql-tools/bin/" + $conn + " -i q.sql -o res.log"

ही, जसे तुम्ही समजता, युनिक्स आवृत्तीची आधीच चाचणी आहे.

फाइल्स अपलोड करत आहे

विंडोज आवृत्तीमध्ये, कोणतेही ऑपरेशन ऑडिटसह होते: आम्ही sqlcmd चालवले, आउटपुट फाइलमध्ये काही प्रकारचा गैरवापर केला, ही फाईल ऑडिट प्लेटशी संलग्न केली. सुदैवाने, एसक्यूएल सर्व्हरने जेनकिन्स सारख्याच सर्व्हरवर काम केले, ते असे काहीतरी केले गेले:

CREATE procedure AuditUpload
  @id int, @filename varchar(256)
as
  set nocount on
  declare @sql varchar(max)

  CREATE TABLE #multi (filer NVARCHAR(MAX))
  set @sql='BULK INSERT #multi FROM '''+@filename
    +''' WITH (ROWTERMINATOR = '' '',CODEPAGE = ''ACP'')'
  exec (@sql)
  select @sql=filer from #multi
  update JenkinsAudit set multiliner=@sql where ID=@id
  return

अशा प्रकारे, आम्ही BCP फाइल पूर्णपणे गिळतो आणि ती ऑडिट टेबलच्या nvarchar(max) फील्डमध्ये टाकतो. अर्थात, ही संपूर्ण प्रणाली वेगळी पडली, कारण मला एसक्यूएल सर्व्हरऐवजी आरडीएस मिळाला आणि फाईलवर अनन्य लॉक घेण्याच्या प्रयत्नामुळे यूएनसीद्वारे बल्क इन्सर्ट अजिबात कार्य करत नाही आणि आरडीएस सह हे सामान्यतः नशिबात असते. अगदी सुरुवात. म्हणून मी ऑडिट लाइन ओळीने संग्रहित करून सिस्टम डिझाइन बदलण्याचा निर्णय घेतला:

CREATE TABLE AuditOut (
  ID int NULL,
  TextLine nvarchar(max) NULL,
  n int IDENTITY(1,1) PRIMARY KEY
  )

आणि या सारणीमध्ये असे लिहा:

function WriteAudit([string]$Filename, [string]$ConnStr, 
     [string]$Tabname, [string]$Jobname)
{
  # get $lastid of the last execution  -- проскипано для статьи
	
  #create grid and populate it with data from file
  $audit =  Get-Content $Filename
  $DT = new-object Data.DataTable   

  $COL1 =  new-object Data.DataColumn; 
  $COL1.ColumnName = "ID"; 
  $COL1.DataType =  [System.Type]::GetType("System.Int32") 

  $COL2 =  new-object Data.DataColumn; 
  $COL2.ColumnName = "TextLine"; 
  $COL2.DataType =  [System.Type]::GetType("System.String") 
  
  $DT.Columns.Add($COL1) 
  $DT.Columns.Add($COL2) 
  foreach ($line in $audit) 
    { 
    $DR = $dt.NewRow()   
    $DR.Item("ID") = $lastid
    $DR.Item("TextLine") = $line
    $DT.Rows.Add($DR)   
    } 

  # write it to table
  $conn=new-object System.Data.SqlClient.SQLConnection 
  $conn.ConnectionString = $ConnStr
  $conn.Open() 
  $bulkCopy = new-object ("Data.SqlClient.SqlBulkCopy") $ConnStr
  $bulkCopy.DestinationTableName = $Tabname 
  $bulkCopy.BatchSize = 50000
  $bulkCopy.BulkCopyTimeout = 0
  $bulkCopy.WriteToServer($DT) 
  $conn.Close() 
  }  

सामग्री निवडण्यासाठी, तुम्हाला n (ओळख) क्रमाने निवडून, आयडीनुसार निवडणे आवश्यक आहे.

पुढील लेखात मी हे सर्व जेनकिन्सशी कसे संवाद साधते याबद्दल अधिक तपशीलवार जाईन.

स्त्रोत: www.habr.com