🥇Fjärråtkomst till VM med GPU via Citrix

Denna guide beskriver detaljerat stegen som behöver vidtas för att förbereda fjärråtkomst till virtuella arbetsstationer med hjälp av teknologin som erbjuds av Citrix.

Den kommer vara användbar för dem som nyligen bekantat sig med teknologin för virtualisering av arbetsstationer, eftersom den är en samling användbara kommandon, sammanställda från omkring 10 manualer, många av vilka finns tillgängliga på Citrix, Nvidia, Microsofts webbplatser efter inloggning.

Denna implementation innehåller steg för att förbereda fjärråtkomst till virtuella maskiner (VM) med grafiska acceleratorer Nvidia Tesla M60 och operativsystemet CentOS 7.

Så, låt oss börja.

Förbered hyperlinjen för hosting av virtuella maskiner

Hur laddar man ner och installerar XenServer 7.4?
Hur lägger man till XenServer i Citrix XenCenter?
Hur laddar man ner och installerar Nvidia-drivrutinen?
Hur ändrar man läget för Nvidia Tesla M60?
Hur monterar man lagring?

XenServer 7.4

Länk för nedladdning XenServer 7.4 tillgänglig efter inloggning på webbplatsen Citrix.

Vi kommer att installera XenServer.iso på en server med 4x NVIDIA Tesla M60 på vanlig väg. I mitt fall monteras iso via IPMI. För Dell-servrar hanteras BMC-kontrollern via IDRAC. Installationsstegen överensstämmer nästan helt med installationen av Linux-liknande operativsystem.

Min adress för XenServer med GPU är 192.168.1.100

Vi installerar XenCenter.msi på den lokala datorn som vi kommer att använda för att hantera hyperlinjerna och de virtuella maskinerna. Vi lägger till servern med GPU och XenServer genom att klicka på fliken 'Server' och sedan 'Lägg till'. Vi anger användarnamn och lösenord för root som angavs vid installationen av XenServer.

I XenCenter, efter att ha klickat på namnet på den tillagda hyperlinjen, kommer fliken 'Console' att vara tillgänglig. I menyn väljer vi 'Remote Service Configuration' och aktiverar autentisering via SSH - 'Enable/Disable Remote Shell'.

Nvidia-drivrutin

Jag kommer att lämna mina känslor fritt och säga att under hela min tid med vGPU har jag aldrig kommit in på webbplatsen nvid.nvidia.com på första försöket. Om autentiseringen inte fungerar rekommenderar jag Internet Explorer.

Vi laddar ner zip-filen med vGPU samt GPUMode Change Utility:

NVIDIA-GRID-XenServer-7.4-390.72-390.75-391.81.zip
NVIDIA-gpumodeswitch-2020-01.zip

Håll koll på versionerna. I namnet på den nedladdade arkivet anges versionen av de kompatibla NVIDIA-drivrutinerna som kan installeras på de virtuella maskinerna i framtiden. I mitt fall är detta 390.72.

Vi överför zip-filerna till XenServer och packar upp dem.

Vi ändrar GPU-läget och installerar vGPU-drivrutinen

$ cd NVIDIA-gpumodeswitch-2020-01
$ gpumodeswitch --listgpumodes
$ gpumodeswitch --gpumode graphics
$ cd ../NVIDIA-GRID-XenServer-7.4-390.72-390.75-391.81
$ yum install NVIDIA-vGPU-xenserver-7.4-390.72.x86_64.rpm
$ reboot

Montera lagring

Vi konfigurerar en gemensam katalog med hjälp av NFS på vilken dator som helst i nätverket.

$ yum install epel-release
$ yum install nfs-utils libnfs-utils
$ systemctl enable rpcbind
$ systemctl enable nfs-server
$ systemctl enable nfs-lock
$ systemctl enable nfs-idmap
$ systemctl start rpcbind
$ systemctl start nfs-server
$ systemctl start nfs-lock
$ systemctl start nfs-idmap
$ firewall-cmd --permanent --zone=public --add-service=nfs
$ firewall-cmd --permanent --zone=public --add-service=mountd
$ firewall-cmd --permanent --zone=public --add-service=rpc-bind
$ firewall-cmd --reload
$ mkdir -p /nfs/store1
$ chmod -R 777 /nfs/store1
$ touch /nfs/store1/forcheck
$ cat /etc/exports
  ...
  /nfs/store1 192.168.1.0/24(rw,async,crossmnt,no_root_squash,no_all_squash,no_subtree_check)
$ systemctl restart nfs-server

I XenCenter väljer vi XenServer och under fliken "Storage" väljer vi "New SR". Vi anger lagringstyp — NFS ISO. Sökvägen ska peka på den gemensamma NFS-katalogen.

Citrix Master Image baserad på Centos 7

Hur skapar man en virtuell maskin med Centos 7?

Hur förbereder man den virtuella maskinen för att skapa en katalog?

Bild av Centos 7

Med hjälp av XenCenter skapar vi en virtuell maskin med GPU. Under fliken "VM" klickar vi på "New VM".

Vi väljer de nödvändiga inställningarna:

VM-mall — Övriga installationsmedia
Namn — mall
Installera från ISO-bibliotek — Centos 7 (ladda ner), välj från den monterade NFS ISO-lagringen.
Antal vCPUs — 4
Topologi — 1 socket med 4 kärnor per socket
Minnes — 30 Gb
GPU-typ — GRID M60-4Q
Använd denna virtuella disk — 80 Gb
Nätverk

Efter skapandet kommer den virtuella maskinen att visas i den vertikala listan till vänster. Vi klickar på den och går till fliken "Console". Vänta på att Centos 7-installationsprogrammet laddas och följ de nödvändiga stegen för att installera OS med GNOME-skalet.

Förberedelse av bilden

Att förbereda bilden med Centos 7 tog mig mycket tid. I slutändan resulterade det i en uppsättning skript som förenklar den initiala Linux-konfigurationen och möjliggör skapandet av en katalog för virtuella maskiner med hjälp av Citrix Machine Creation Services (MCS).

DHCP-servern som installerades på ws-ad tilldelade den nya virtuella maskinen IP-adressen 192.168.1.129.

Sedan kommer jag att visa de grundläggande inställningarna.

$ hostnamectl set-hostname mall
$ yum install -y epel-release
$ yum install -y lsb mc gcc
$ firewall-cmd --permanent --zone=dmz --remove-service=ssh
$ firewall-cmd --permanent --zone=external --remove-service=ssh
$ firewall-cmd --permanent --zone=home --remove-service=ssh
$ firewall-cmd --permanent --zone=home --remove-service=mdns
$ firewall-cmd --permanent --zone=home --remove-service=samba-client
$ firewall-cmd --permanent --zone=home --remove-service=dhcpv6-client
$ firewall-cmd --permanent --zone=internal --remove-service=dhcpv6-client
$ firewall-cmd --permanent --zone=internal --remove-service=samba-client
$ firewall-cmd --permanent --zone=internal --remove-service=mdns
$ firewall-cmd --permanent --zone=internal --remove-service=ssh
$ firewall-cmd --permanent --zone=public --remove-service=ssh
$ firewall-cmd --permanent --zone=public --remove-service=dhcpv6-client
$ firewall-cmd --permanent --zone=work --remove-service=dhcpv6-client
$ firewall-cmd --permanent --zone=work --remove-service=ssh
$ firewall-cmd --permanent --zone=public --add-service=ssh
$ firewall-cmd --complete-reload

I XenCenter på fliken "Console" monterar vi guest-tools.iso i DVD-enheten för den virtuella maskinen och kör installationen av XenTools för Linux.

$ mount /dev/cdrom /mnt
$ /mnt/Linux/install.sh
$ reboot

Vid inställningen av XenServer använde vi arkivet NVIDIA-GRID-XenServer-7.4-390.72-390.75-391.81.zip, laddat ner från NVIDIA:s webbplats. Detta innehåller, förutom NVIDIA-drivrutinen för XenServer, även den drivrutin vi behöver för klienterna vGPU. Ladda ner och installera den på VM.

$ cat /etc/default/grub
  GRUB_TIMEOUT=5
  GRUB_DISTRIBUTOR="$(sed 's, release .*$,,g' /etc/system-release)"
  GRUB_DEFAULT=saved
  GRUB_DISABLE_SUBMENU=true
  GRUB_TERMINAL_OUTPUT="console"
  GRUB_CMDLINE_LINUX="rhgb quiet modprobe.blacklist=nouveau"
  GRUB_DISABLE_RECOVERY="true"
$ grub2-mkconfig -o /boot/grub2/grub.cfg
$ wget http://vault.centos.org/7.6.1810/os/x86_64/Packages/kernel-devel-3.10.0-957.el7.x86_64.rpm
$ yum install kernel-devel-3.10.0-957.el7.x86_64.rpm
$ reboot
$ init 3
$ NVIDIA-GRID-XenServer-7.4-390.72-390.75-391.81/NVIDIA-Linux-x86_64-390.75-grid.run
$ cat /etc/nvidia/gridd.conf
  ServerAddress=192.168.1.111
  ServerPort=7070
  FeatureType=1
$ reboot

Ladda ner Linux Virtual Delivery Agent 1811 (VDA) för CentOS 7. Länk för nedladdning Linux VDA tillgänglig efter inloggning på webbplatsen Citrix.

$ yum install -y LinuxVDA-1811.el7_x.rpm
$ cat /var/xdl/mcs/mcs.conf
  #!/bin/bash
  dns1=192.168.1.110
  NTP_SERVER=some.ntp.ru
  AD_INTEGRATION=winbind
  SUPPORT_DDC_AS_CNAME=N
  VDA_PORT=80
  REGISTER_SERVICE=Y
  ADD_FIREWALL_RULES=Y
  HDX_3D_PRO=Y
  VDI_MODE=Y
  SITE_NAME=domain.ru
  LDAP_LIST=ws-ad.domain.ru
  SEARCH_BASE=DC=domain,DC=ru
  START_SERVICE=Y
$ /opt/Citrix/VDA/sbin/deploymcs.sh
$ echo "exclude=kernel* xorg*" >> /etc/yum.conf

I Citrix Studio skapar vi en Maskinkatalog och en Leveransgrupp. Innan dess behöver vi installera och konfigurera Windows Server.

Windows Server med domänkontroller

Hur laddar man ner och installerar Windows Server 2016?
Hur installerar man komponenter i Windows Server?
Hur konfigurerar man Active Directory, DHCP och DNS?

Windows Server 2016

Eftersom den virtuella maskinen (VM) med Windows Server inte behöver GPU, kommer vi att använda en server utan GPU som hypervisor. På samma sätt som ovan, installerar vi ytterligare en XenServer för att hosta de systemiska virtuella maskinerna.

Efter detta skapar vi en virtuell maskin för Windows Server med Active Directory.

Ladda ner Windows Server 2016 från webbplatsen Microsoft. Det är bäst att använda länken i Internet Explorer.

Med XenCenter skapar vi en virtuell maskin. På fliken "VM" klickar vi på "New VM".

Vi väljer de nödvändiga inställningarna:

VM-mall — Windows Server 2016 (64-bit)
Namn — ws-ad.domain.ru
Installera från ISO-bibliotek — WindowsServer2016.iso, välj från den monterade NFS ISO-lagringen.
Antal vCPUs — 4
Topologi — 1 socket med 4 kärnor per socket
Minne — 20 Gb
GPU-typ — ingen
Använd denna virtuella disk — 100 Gb
Nätverk

Efter skapandet kommer den virtuella maskinen att visas i den vertikala listan till vänster. Klicka på den och gå till fliken "Console". Vänta på att installationsprogrammet för Windows Server laddas och följ de nödvändiga stegen för att installera operativsystemet.

Vi installerar XenTools i VM. Högerklicka på VM och välj 'Install Citrix VM Tools...'. Efter detta kommer en bild att monteras som behöver startas och XenTools installeras. Efter installationen krävs en omstart av VM.

Vi konfigurerar nätverksadaptern:

IP-adress — 192.168.1.110
Nätmask — 255.255.255.0
Gateway — 192.168.1.1
DNS1 — 8.8.8.8
DNS2 — 8.8.4.4

Om Windows Server inte är aktiverad, så utför vi aktivering. Nyckeln kan hämtas därifrån som bilden laddades ner.

[PowerShell]$ slmgr -ipk xxxxx-xxxxx-xxxxx-xxxxx-xxxxx

Vi konfigurerar datorns namn. I mitt fall är detta ws-ad.

Installation av komponenter

I Serverhanteraren väljer vi 'Lägg till roller och komponenter'. Vi markerar för installation DHCP-server, DNS-server och Active Directory-domäntjänster. Vi markerar rutan 'Starta om automatiskt'.

Konfigurering av Active Directory

Efter att VM har startats om, trycker vi på 'Höj den här servern till domänkontrollnivå' och lägger till ett nytt skog domain.ru.

Konfigurering av DHCP-server

På den övre menyraden i Serverhanteraren klickar vi på utropstecknet för att spara ändringar vid installationen av DHCP-server.

Vi går till inställningarna för DHCP-server.

Vi skapar ett nytt område 192.168.1.120-130. Vi ändrar inget annat. Vi väljer 'Konfigurera DHCP-parametrar nu' och anger IP-adressen ws-ad (192.168.1.110) som gateway och DNS som kommer att anges i nätverksadapternas inställningar för virtuella maskiner.

Konfigurering av DNS-server

Vi går till inställningarna för DNS-server.

Vi skapar en ny zon för direktvisning — primary zone, för alla DNS-servrar i domänen domain.ru. Vi ändrar inget annat.

Vi skapar en ny zon för omvänd visning med liknande parametrar.

I egenskaperna för DNS-servern, under fliken 'Avancerat', markerar vi rutan 'Inaktivera rekursion'.

Skapa en testanvändare

Vi går till 'Active Directory administrativt centrum'

I avsnittet 'Användare' trycker vi till höger på 'Skapa'. Vi anger ett namn, till exempel test, och trycker på 'OK' längst ner.

Vi väljer den skapade användaren och i den vertikala menyn till höger väljer vi 'Återställ lösenord'. Vi lämnar rutan 'Kräva lösenordsändring vid nästa inloggning' markerad.

Windows Server med Citrix Delivery Controller

Hur laddar man ner och installerar Windows Server 2016?
Hur laddar man ner och installerar Citrix Delivery Controller?
Hur installerar och konfigurerar man Citrix License Manager?
Hur installerar och konfigurerar man NVIDIA License Manager?

Windows Server 2016

Eftersom den virtuella maskinen (VM) med Windows Server inte behöver GPU:er, kommer vi att använda en server utan GPU som hypervisor.

Ladda ner Windows Server 2016 från webbplatsen Microsoft. Det är bäst att använda länken i Internet Explorer.

Med XenCenter skapar vi en virtuell maskin. På fliken "VM" klickar vi på "New VM".

Vi väljer de nödvändiga inställningarna:

VM-mall — Windows Server 2016 (64-bit)
Namn — ws-dc
Installera från ISO-bibliotek — WindowsServer2016.iso, välj från den monterade NFS ISO-lagringen.
Antal vCPUs — 4
Topologi — 1 socket med 4 kärnor per socket
Minne — 20 Gb
GPU-typ — ingen
Använd denna virtuella disk — 100 Gb
Nätverk

Efter att ha skapat den virtuella maskinen kommer den att visas i den vertikala listan till vänster. Klicka på den och gå till fliken "Console". Vänta på att Windows Server-installationsprogrammet ska laddas och följ de nödvändiga stegen för att installera operativsystemet.

Vi konfigurerar nätverksadaptern:

IP-adressen är 192.168.1.111
Nätmask — 255.255.255.0
Gateway — 192.168.1.1
DNS1 — 8.8.8.8
DNS2 — 8.8.4.4

Om Windows Server inte är aktiverad, så utför vi aktivering. Nyckeln kan hämtas därifrån som bilden laddades ner.

[PowerShell]$ slmgr -ipk xxxxx-xxxxx-xxxxx-xxxxx-xxxxx

Låt oss ange datorns namn. I mitt fall är det ws-dc.

Vi lägger till VM i domänen domen.se, startar om och loggar in med det domänanvändarkontot administratör DOMENAdministrator.

Citrix delivery controller

Ladda ner Citrix Virtual Apps and Desktops 1811 på ws-dc.domain.se. Länk för nedladdning Citrix Virtual Apps and Desktops tillgänglig efter inloggning på webbplatsen Citrix.

Montera den nedladdade ISO-filen och starta den. Välj "Citrix Virtual Apps and Desktops 7". Klicka sedan på "Get started". En omstart kan krävas.

I mitt fall räcker det att välja följande komponenter för installation:

Delivery Controller
Studio
License Server
StoreFront

Ändra inget mer och klicka på "Installera". Flera omstarter kan krävas, efter vilken installationen fortsätter.

Så snart installationen är klar startar Citrix Studio — miljön för att hantera hela Citrix-infrastrukturen.

Konfigurera Citrix Site

Välj den första av tre sektioner — Site setup. Vid konfigureringen anger vi Site Name — domain.

I avsnittet "Connection" anger vi information för att ansluta hypervisorn med GPU:

Anslutningsadress — 192.168.1.100
Användarnamn — root
Lösenord — yourpassword
Anslutningsnamn — m60

Store management — Använd lagring lokal till hypervisorn.

Namn för dessa resurser — m60.

Välj nätverk.

Välj en GPU-typ och grupp — GRID M60-4Q.

Konfigurera Citrix Machine Catalogs

Vid konfigurationen av det andra avsnittet — Machine Catalogs, välj Single-session OS (Desktop OS).

Master Image — välj den förberedda bilden av den virtuella maskinen och versionen Citrix Virtual Apps and Desktops — 1811.

Välj antalet virtuella maskiner i katalogen, till exempel 4.

Ange en namngivningsschema för de virtuella maskinerna, i mitt fall är det desktop##. I detta fall kommer 4 VM med namnen desktop01-04 att skapas.

Machine Catalog name — m60.

Machine Catalog description — m60.

Efter att ha skapat Machine Catalog med fyra VM kan de hittas i den vertikala listan i XenCenter till vänster.

Citrix Delivery Group

Det tredje avsnittet börjar med att välja antalet VM som ska ges åtkomst. Jag kommer att ange alla fyra.

I avsnittet "Desktops" klickar vi på "Add" för att lägga till en grupp VM som vi ger tillgång. Visningsnamn — m60.

Delivery group name — m60.

Efter att ha konfigurerat de tre huvudsakliga avsnitten kommer huvudfönstret i Citrix Studio att se ut ungefär så här

Citrix license manager

Ladda ner licensfilen via mitt konto på webbplatsen Citrix.

I den vertikala listan till vänster väljer vi All Licensing Tools (Legacy). Vi går till fliken "Activate and Allocate Licenses". Vi väljer Citrix VDA-licenser och klickar på "Continue". Vi anger namnet på vår Delivery Controller — ws-dc.domain.ru och antalet licenser — 4. Vi klickar på "Continue". Ladda ner den genererade licensfilen till ws-dc.domain.ru.

I den vänstra vertikala listen i Citrix Studio väljer vi avsnittet "Licensing". I den högra vertikala listen klickar vi på "License Management Console". I det öppnade webbläsarfönstret anger vi inloggningsuppgifterna för domänanvändaren DOMENAdministrator.

I Citrix Licensing Manager går vi till fliken "Install License". För att lägga till licensfilen behöver vi välja "Use downloaded license file".

Installation av Citrix-komponenter innebär användning av flera virtuella maskiner, en komponent — en VM. I mitt fall fungerar alla systemtjänster för Citrix inom en och samma VM. Jag vill påpeka en bugg som visade sig särskilt svår att åtgärda.

Om det uppstår olika problem efter omstart av ws-dc, rekommenderar jag att först kontrollera de aktiva tjänsterna. Här är en lista över Citrix-tjänster som ska starta automatiskt efter omstart av VM:

SQL Server (SQLEXPRESS)
Citrix Configuration Service
Citrix Delegated Administration Service
Citrix Analytics
Citrix Broker Service
Citrix Configuration Logging Service
Citrix AD Identity Service
Citrix Host Service
Citrix App Library
Citrix Machine Creation Service
Citrix Monitor Service
Citrix Storefront Service
Citrix Trust Service
Citrix Environment Test Service
Citrix Orchestration Service
FlexNet License Server -nvidia

Jag stötte på ett problem som uppstår när flera Citrix-tjänster installeras på en VM. Efter omstart startar inte alla tjänster. Det var jobbigt att starta hela kedjan en och en. Lösningen var svår att hitta på Google, så jag skriver ner den här — man bör ändra två parametrar i registret:

HKEY_LOCAL_MACHINESYSTEMCurrentControlSetControl
Name : ServicesPipeTimeout
Value :240000

Name : WaitToKillServiceTimeout
Value : 20000

Nvidia license manager

Ladda ner NVIDIA:s licenshanterare för Windows via ditt personliga konto på deras webbplats. nvid.nvidia.com. Det är bättre att gå in via Internet Explorer.

Vi installerar den på ws-dc. För detta behöver vi först installera JAVA och lägga till miljövariabeln JAVA_HOME. Efter detta kan vi köra setup.exe för att installera NVIDIA License Manager.

Vi skapar en server, genererar och laddar ner licensfilen i vårt personliga konto på webbplatsen nvid.nvidia.com. Vi överför licensfilen till ws-dc.

Genom att använda en webbläsare loggar vi in i webbgränssnittet för NVIDIA:s licenshanterare, tillgängligt på localhost:8080/licserver och lägger till licensfilen.