ເຮັດວຽກກັບ MS SQL ຈາກ Powershell ໃນ Linux

ບົດ​ຄວາມ​ນີ້​ເປັນ​ການ​ປະ​ຕິ​ບັດ​ຢ່າງ​ດຽວ​ແລະ​ອຸ​ທິດ​ຕົນ​ເພື່ອ​ເລື່ອງ​ທີ່​ໂສກ​ເສົ້າ​ຂອງ​ຂ້າ​ພະ​ເຈົ້າ​

ການກຽມພ້ອມສໍາລັບ Zero Touch PROD ສໍາລັບ RDS (MS SQL), ກ່ຽວກັບການທີ່ຫູຂອງພວກເຮົາທັງຫມົດແມ່ນ buzzing, ຂ້າພະເຈົ້າໄດ້ນໍາສະເຫນີ (POC - ຫຼັກຖານສະແດງແນວຄວາມຄິດ) ອັດຕະໂນມັດ: ຊຸດຂອງ powershell scripts. ຫຼັງຈາກການນໍາສະເຫນີ, ໃນເວລາທີ່ລົມພາຍຸ, ສຽງຕົບມືທີ່ຍາວນານໄດ້ເສຍຊີວິດລົງ, ກາຍເປັນສຽງຕົບມືທີ່ບໍ່ຢຸດຢັ້ງ, ພວກເຂົາບອກຂ້ອຍ - ທັງຫມົດນີ້ແມ່ນດີ, ແຕ່ວ່າພຽງແຕ່ສໍາລັບເຫດຜົນທາງອຸດົມການ, ທາດ Jenkins ທັງຫມົດຂອງພວກເຮົາເຮັດວຽກຢູ່ໃນ Linux!

ອັນນີ້ເປັນໄປໄດ້ບໍ? ເອົາຫລອດໄຟ DBA ທີ່ອົບອຸ່ນຈາກພາຍໃຕ້ Windows ແລະຕິດມັນຢູ່ໃນຄວາມຮ້ອນຂອງ powershell ພາຍໃຕ້ Linux? ນີ້ບໍ່ແມ່ນຄວາມໂຫດຮ້າຍບໍ?

ຂ້າ​ພະ​ເຈົ້າ​ໄດ້​ຝັງ​ຕົວ​ເອງ​ໃນ​ການ​ປະ​ສົມ​ປະ​ສານ​ທີ່​ແປກ​ຂອງ​ເຕັກ​ໂນ​ໂລ​ຊີ​ນີ້. ແນ່ນອນ, ສະຄຣິບທັງໝົດ 30+ ຂອງຂ້ອຍຢຸດເຮັດວຽກ. ເພື່ອຄວາມແປກໃຈຂອງຂ້ອຍ, ຂ້ອຍໄດ້ແກ້ໄຂທຸກຢ່າງໃນມື້ເຮັດວຽກ. ຂ້ອຍກໍາລັງຂຽນໃນການຄົ້ນຫາຮ້ອນ. ດັ່ງນັ້ນ, ເຈົ້າສາມາດພົບອຸປະສັກອັນໃດໃນເວລາໂອນ script powershell ຈາກ Windows ໄປ Linux?

sqlcmd ທຽບກັບ Invoke-SqlCmd

ຂ້າພະເຈົ້າຂໍເຕືອນທ່ານກ່ຽວກັບຄວາມແຕກຕ່າງຕົ້ນຕໍລະຫວ່າງພວກມັນ. ປະໂຫຍດເກົ່າດີ sqlcmd ມັນຍັງເຮັດວຽກພາຍໃຕ້ Linux, ມີຫນ້າທີ່ເກືອບຄືກັນ. ພວກເຮົາຜ່ານການສອບຖາມເພື່ອປະຕິບັດ -Q, ໄຟລ໌ປ້ອນຂໍ້ມູນເປັນ -i, ແລະຜົນຜະລິດເປັນ -o. ແຕ່ຊື່ໄຟລ໌, ແນ່ນອນ, ຖືກສ້າງເປັນຕົວພິມນ້ອຍ. ຖ້າທ່ານໃຊ້ -i, ຫຼັງຈາກນັ້ນໃນໄຟລ໌ຂຽນຢູ່ທ້າຍ:

GO
EXIT

ຖ້າບໍ່ມີ EXIT ໃນຕອນທ້າຍ, sqlcmd ຈະດໍາເນີນການລໍຖ້າການປ້ອນຂໍ້ມູນ, ແລະຖ້າກ່ອນ ອອກ ຈະບໍ່ GO, ຫຼັງຈາກນັ້ນຄໍາສັ່ງສຸດທ້າຍຈະບໍ່ເຮັດວຽກ. ໄຟລ໌ຜົນຜະລິດປະກອບດ້ວຍຜົນຜະລິດທັງຫມົດ, ເລືອກ, ຂໍ້ຄວາມ, ພິມ, ແລະອື່ນໆ.

Invoke-SqlCmd ຜະລິດຜົນໄດ້ຮັບເປັນ DataSet, DataTables ຫຼື DataRows. ດັ່ງນັ້ນ, ຖ້າທ່ານປຸງແຕ່ງຜົນໄດ້ຮັບຂອງການເລືອກແບບງ່າຍໆ, ທ່ານສາມາດນໍາໃຊ້ sqlcmd, ໂດຍໄດ້ວິເຄາະຜົນຜະລິດຂອງມັນ, ມັນເກືອບເປັນໄປບໍ່ໄດ້ທີ່ຈະເອົາບາງສິ່ງບາງຢ່າງທີ່ສັບສົນ: ສໍາລັບນີ້ມີ ຮຽກຮ້ອງ-SqlCmd. ແຕ່ທີມງານນີ້ຍັງມີເລື່ອງຕະຫລົກຂອງຕົນເອງ:

• ຖ້າທ່ານໂອນໄຟລ໌ໄປຫານາງຜ່ານ -InputFile, ຫຼັງຈາກນັ້ນ, ອອກ ບໍ່ຈໍາເປັນ, ນອກຈາກນັ້ນ, ມັນເຮັດໃຫ້ເກີດຄວາມຜິດພາດ syntax
• -OutputFile ບໍ່, ຄໍາສັ່ງສົ່ງຄືນຜົນໄດ້ຮັບໃຫ້ທ່ານເປັນວັດຖຸ
• ມີສອງ syntax ສໍາລັບການລະບຸເຄື່ອງແມ່ຂ່າຍ: -ServerInstance -ຊື່ຜູ້ໃຊ້ -Password -Database ແລະຜ່ານ -ConnectionString. Oddly ພຽງພໍ, ໃນກໍລະນີທໍາອິດມັນບໍ່ສາມາດທີ່ຈະລະບຸພອດອື່ນນອກເຫນືອຈາກ 1433.
• ຜົນຜະລິດຂໍ້ຄວາມ, ພິມ PRINT, ເຊິ່ງພຽງແຕ່ "ຈັບໄດ້" sqlcmdສຳ ລັບ ຮຽກຮ້ອງ-SqlCmd ເປັນບັນຫາ
• ແລະສໍາຄັນທີ່ສຸດ: ສ່ວນຫຼາຍອາດຈະ Linux ຂອງທ່ານບໍ່ມີ cmdlet ນີ້!

ແລະນີ້ແມ່ນບັນຫາຕົ້ນຕໍ. ພຽງແຕ່ໃນເດືອນມີນານີ້ cmdlet ໄດ້ກາຍເປັນສໍາລັບເວທີທີ່ບໍ່ແມ່ນ Windows, ແລະສຸດທ້າຍພວກເຮົາສາມາດກ້າວໄປຂ້າງຫນ້າ!

ການປ່ຽນແທນຕົວແປ

sqlcmd ມີການປ່ຽນແທນຕົວແປໂດຍໃຊ້ -v, ຕົວຢ່າງເຊັ່ນນີ້:

# $conn содержит начало команды sqlcmd
$cmd = $conn + " -i D:appsSlaveJobsKillSpid.sql -o killspid.res 
  -v spid =`"" + $spid + "`" -v age =`"" + $age + "`""
Invoke-Expression $cmd

ໃນ SQL script ພວກເຮົາໃຊ້ການທົດແທນ:

set @spid=$(spid)
set @age=$(age)

ດັ່ງນັ້ນໃນທີ່ນີ້ມັນແມ່ນ. ໃນ *nix ການປ່ຽນແທນຕົວແປບໍ່ເຮັດວຽກ. ພາລາມິເຕີ -v ບໍ່ສົນໃຈ. U ຮຽກຮ້ອງ-SqlCmd ບໍ່ສົນໃຈ - ຕົວແປ. ເຖິງແມ່ນວ່າຕົວກໍານົດການທີ່ກໍານົດຕົວແປຂອງຕົວມັນເອງຈະຖືກລະເວັ້ນ, ການທົດແທນຕົວມັນເອງເຮັດວຽກ - ທ່ານສາມາດນໍາໃຊ້ຕົວແປໃດໆຈາກ Shell. ຢ່າງໃດກໍຕາມ, ຂ້າພະເຈົ້າຮູ້ສຶກຜິດຫວັງກັບຕົວແປແລະຕັດສິນໃຈທີ່ຈະບໍ່ຂຶ້ນກັບພວກມັນທັງຫມົດ, ແລະປະຕິບັດຢ່າງໂຫດຮ້າຍແລະເບື້ອງຕົ້ນ, ເພາະວ່າ SQL scripts ສັ້ນ:

# prepend the parameters  
"declare @age int, @spid int" | Add-Content "q.sql"
"set @spid=" + $spid | Add-Content "q.sql"
"set @age=" + $age | Add-Content "q.sql"

foreach ($line in Get-Content "Sqlserver/Automation/KillSpid.sql") { 
  $line | Add-Content "q.sql" 
  }
$cmd = "/opt/mssql-tools/bin/" + $conn + " -i q.sql -o res.log"

ນີ້, ຕາມທີ່ທ່ານເຂົ້າໃຈ, ແມ່ນການທົດສອບແລ້ວຈາກສະບັບ Unix.

ກຳ ລັງອັບໂຫຼດໄຟລ

ໃນສະບັບ Windows, ການດໍາເນີນງານໃດໆແມ່ນມາພ້ອມກັບການກວດສອບ: ພວກເຮົາດໍາເນີນການ sqlcmd, ໄດ້ຮັບການລ່ວງລະເມີດບາງປະເພດໃນໄຟລ໌ຜົນຜະລິດ, ຄັດຕິດໄຟລ໌ນີ້ໃສ່ແຜ່ນການກວດສອບ. ໂຊກດີ, ເຄື່ອງແມ່ຂ່າຍ SQL ເຮັດວຽກຢູ່ໃນເຄື່ອງແມ່ຂ່າຍດຽວກັນກັບ Jenkins, ມັນໄດ້ເຮັດບາງສິ່ງບາງຢ່າງເຊັ່ນນີ້:

CREATE procedure AuditUpload
  @id int, @filename varchar(256)
as
  set nocount on
  declare @sql varchar(max)

  CREATE TABLE #multi (filer NVARCHAR(MAX))
  set @sql='BULK INSERT #multi FROM '''+@filename
    +''' WITH (ROWTERMINATOR = '' '',CODEPAGE = ''ACP'')'
  exec (@sql)
  select @sql=filer from #multi
  update JenkinsAudit set multiliner=@sql where ID=@id
  return

ດັ່ງນັ້ນ, ພວກເຮົາກືນໄຟລ໌ BCP ທັງຫມົດແລະ shove ມັນເຂົ້າໄປໃນພາກສະຫນາມ nvarchar (max) ຂອງຕາຕະລາງການກວດສອບ. ແນ່ນອນ, ລະບົບທັງຫມົດນີ້ໄດ້ແຕກແຍກ, ເພາະວ່າແທນທີ່ຈະເປັນເຄື່ອງແມ່ຂ່າຍ SQL ຂ້ອຍໄດ້ຮັບ RDS, ແລະ BULK INSERT ບໍ່ໄດ້ເຮັດວຽກທັງຫມົດໂດຍຜ່ານ UNC ເນື່ອງຈາກຄວາມພະຍາຍາມທີ່ຈະລັອກໄຟລ໌, ແລະ RDS ໂດຍທົ່ວໄປແລ້ວນີ້ແມ່ນ doomed ຈາກ. ການເລີ່ມຕົ້ນ. ດັ່ງນັ້ນ, ຂ້າພະເຈົ້າໄດ້ຕັດສິນໃຈທີ່ຈະປ່ຽນການອອກແບບລະບົບ, ເກັບຮັກສາການກວດສອບໂດຍສາຍ:

CREATE TABLE AuditOut (
  ID int NULL,
  TextLine nvarchar(max) NULL,
  n int IDENTITY(1,1) PRIMARY KEY
  )

ແລະຂຽນໃນຕາຕະລາງນີ້:

function WriteAudit([string]$Filename, [string]$ConnStr, 
     [string]$Tabname, [string]$Jobname)
{
  # get $lastid of the last execution  -- проскипано для статьи
	
  #create grid and populate it with data from file
  $audit =  Get-Content $Filename
  $DT = new-object Data.DataTable   

  $COL1 =  new-object Data.DataColumn; 
  $COL1.ColumnName = "ID"; 
  $COL1.DataType =  [System.Type]::GetType("System.Int32") 

  $COL2 =  new-object Data.DataColumn; 
  $COL2.ColumnName = "TextLine"; 
  $COL2.DataType =  [System.Type]::GetType("System.String") 
  
  $DT.Columns.Add($COL1) 
  $DT.Columns.Add($COL2) 
  foreach ($line in $audit) 
    { 
    $DR = $dt.NewRow()   
    $DR.Item("ID") = $lastid
    $DR.Item("TextLine") = $line
    $DT.Rows.Add($DR)   
    } 

  # write it to table
  $conn=new-object System.Data.SqlClient.SQLConnection 
  $conn.ConnectionString = $ConnStr
  $conn.Open() 
  $bulkCopy = new-object ("Data.SqlClient.SqlBulkCopy") $ConnStr
  $bulkCopy.DestinationTableName = $Tabname 
  $bulkCopy.BatchSize = 50000
  $bulkCopy.BulkCopyTimeout = 0
  $bulkCopy.WriteToServer($DT) 
  $conn.Close() 
  }  

ເພື່ອເລືອກເນື້ອຫາ, ທ່ານຈໍາເປັນຕ້ອງເລືອກໂດຍ ID, ເລືອກໃນຄໍາສັ່ງ n (ຕົວຕົນ).

ໃນບົດຄວາມຕໍ່ໄປຂ້າພະເຈົ້າຈະເຂົ້າໄປໃນລາຍລະອຽດເພີ່ມເຕີມກ່ຽວກັບວິທີການທັງຫມົດນີ້ພົວພັນກັບ Jenkins.

ແຫຼ່ງຂໍ້ມູນ: www.habr.com