Κάπου στη μέση μεταξύ Μόσχας και Αγίας Πετρούπολης υπάρχει μια μικρή πόλη που ονομάζεται Udomlya. Προηγουμένως, ήταν γνωστό για τον πυρηνικό σταθμό Kalinin. Το 2019, ένα άλλο αξιοθέατο εμφανίστηκε κοντά - το κέντρο Udomlya megadata με 4 χιλιάδες ράφια.
Μετά την ένταξή τους στην ομάδα της Rostelecom-DPC, οι ειδικοί της DataLine θα συμμετάσχουν επίσης στη λειτουργία αυτού του κέντρου δεδομένων. Σίγουρα έχετε ήδη ακούσει κάτι για το "Udomlya". Σήμερα αποφασίσαμε να σας πούμε αναλυτικά πώς λειτουργούν όλα εκεί.
Βιομηχανικά τοπία: ένα κέντρο δεδομένων 32 m² και ένα πυρηνικό εργοστάσιο στο βάθος. Udomlya δείγμα άνοιξη 000.
Κάτω από την περικοπή έχουμε συλλέξει περισσότερες από 40 φωτογραφίες των συστημάτων μηχανικής των κέντρων δεδομένων με λεπτομερή περιγραφή. Μια ευχάριστη έκπληξη περιμένει όσους φτάσουν στο τέλος.
Σχετικά με τα logistics
Το κέντρο δεδομένων βρίσκεται στην περιοχή Tver. Το ταξίδι από τη Μόσχα στο Udomlya θα διαρκέσει περίπου τρεις ώρες: 1 ώρα και 45 λεπτά στο σταθμό Sapsan προς το σταθμό Vyshny Volochek και από εκεί, κατόπιν αιτήματος, θα σας συναντήσει ένα λεωφορείο και θα σας μεταφέρει στο κέντρο δεδομένων. Από την Αγία Πετρούπολη μέχρι το Vyshny Volochek διαρκεί λίγο περισσότερο - 2 ώρες 20 λεπτά.
Με αυτοκίνητο μπορείτε να φτάσετε από τη Μόσχα σε 4,5 ώρες, από την Αγία Πετρούπολη σε 5.
Ναι, πιθανότατα δεν θα θέλετε να πάτε εδώ για μερικές μονάδες. Αλλά αν χρειάζεστε ένα νέο σπίτι για δεκάδες ράφια, τότε αξίζει να ρίξετε μια πιο προσεκτική ματιά. Υπάρχει αρκετός χώρος και ηλεκτρικό ρεύμα, ακόμα κι αν θέλετε να διπλασιάσετε αυτήν την ποσότητα ανά πάσα στιγμή. Στη Μόσχα, όπου, σύμφωνα με την εμπειρία μας, τα κέντρα δεδομένων δεσμεύονται στο στάδιο της κατασκευής, αυτό το τέχνασμα δεν θα λειτουργεί πάντα.
Επιπλέον, η τοποθεσία του κέντρου δεδομένων μεταξύ Μόσχας και Αγίας Πετρούπολης μπορεί να χρησιμοποιηθεί για γεωγραφική κράτηση. Εάν οι κύριες εγκαταστάσεις βρίσκονται στη Μόσχα ή την Αγία Πετρούπολη, τότε μια εφεδρική τοποθεσία θα ταίριαζε καλά.
Η ομάδα έξυπνων χεριών θα βοηθήσει με όλες τις τυπικές λειτουργίες επιτόπου. Θα λάβουν, θα αποσυσκευάσουν και θα εγκαταστήσουν εξοπλισμό σε ράφια, θα τον συνδέσουν στο ρεύμα και στο δίκτυο και θα παρέχουν απομακρυσμένη πρόσβαση στον εξοπλισμό. Σε περίπτωση δυσλειτουργιών, θα βοηθήσουν με τη διάγνωση και θα αντικαταστήσουν τα εξαρτήματα που έχουν αποτύχει.
Το πρώτο στάδιο του κέντρου δεδομένων αποτελείται από 4 αίθουσες υπολογιστών, ή ενότητες, με 205 rack το καθένα. Υπάρχουν 2 μηχανοστάσια και ένα ενεργειακό κέντρο στο ισόγειο και άλλα δύο δωμάτια και ένα ψυκτικό κέντρο στον δεύτερο όροφο. Πάμε να δούμε πώς λειτουργούν όλα εδώ.
Σωματική ασφάλεια
Το κέντρο δεδομένων καταλαμβάνει μια καθορισμένη περιοχή, η οποία δεν μπορεί να εισαχθεί χωρίς πάσο και έγγραφο ταυτοποίησης. Όσοι φτάνουν με αυτοκίνητο λαμβάνουν επίσης μια κάρτα μεταφοράς και μόνο μετά από αυτό μπορούν να εισέλθουν στο κέντρο δεδομένων. Για όσους έχουν τα πάντα σε τάξη με το πάσο τους, το κέντρο δεδομένων είναι ανοιχτό 24x7.
Η πρώτη XNUMXωρη θέση ασφαλείας είναι η είσοδος στην περιοχή.
Προχωράμε παρακάτω και φτάνουμε στο σημείο ελέγχου ακριβώς στην είσοδο του κέντρου δεδομένων.
Οι αξιωματικοί ασφαλείας όχι μόνο καλωσορίζουν τους πελάτες και εκδίδουν κάρτες, αλλά παρακολουθούν επίσης το video wall όλο το εικοσιτετράωρο, το οποίο εμφανίζει εικόνες όλων των εσωτερικών χώρων του κέντρου δεδομένων και των γύρω περιοχών.
Τροφοδοσία ρεύματος
Η ηλεκτρική ενέργεια ξεκινά το ταξίδι της προς το κέντρο δεδομένων από τον πυρηνικό σταθμό. Το κέντρο δεδομένων λαμβάνει 10 kV για 6 μετασχηματιστές υποβάθμισης. Στη συνέχεια, το 0,4 kV διέρχεται από δύο ανεξάρτητες διαδρομές προς τον διακόπτη χαμηλής τάσης (LVSD). Στη συνέχεια, μέσω του DIBP, παρέχεται ισχύς σε εξοπλισμό πληροφορικής και μηχανικής. Δύο ανεξάρτητες είσοδοι είναι κατάλληλες για το rack, δηλαδή πλεονασμός 2N. Θα σας πούμε περισσότερα για το πώς λειτουργούν τα πάντα όσον αφορά την παροχή ρεύματος σε ξεχωριστό άρθρο.
Η διαδρομή του ηλεκτρισμού στο κέντρο δεδομένων Udomlya
Ηλεκτρικά λεωφορεία μέσω των οποίων η ηλεκτρική ενέργεια έρχεται από το RUNN στους πίνακες ισχύος DIBP
Σειρές RUNN
Παρά το γεγονός ότι υπάρχει πυρηνικός σταθμός σε κοντινή απόσταση, σε οποιοδήποτε αξιόπιστο κέντρο δεδομένων η κύρια παροχή ρεύματος θεωρείται εγγυημένη. Στα κέντρα δεδομένων μας, όπως γνωρίζετε, υπεύθυνα είναι τα σύνολα γεννητριών ντίζελ, αλλά εδώ χρησιμοποιούνται δυναμικά UPS (DIUPS). Παρέχουν επίσης αδιάλειπτη παροχή ρεύματος. Τα DIUP δεσμεύονται σύμφωνα με το σχήμα N+1.
Μάρκα DIPS Euro-Diesel (Kinolt) ισχύος 2 MW. Μουγκρίζουν τόσο δυνατά που είναι καλύτερα να μην μπεις εκεί χωρίς ωτοασπίδες.
Και έτσι λειτουργεί. Το DIBP είναι ένας συνδυασμός τριών κύριων στοιχείων: ενός κινητήρα ντίζελ, μιας σύγχρονης ηλεκτρικής μηχανής και ενός συσσωρευτή κινητικής ενέργειας με ρότορα. Όλα είναι στερεωμένα στον κύριο άξονα.
Η ηλεκτρική μηχανή μπορεί να λειτουργήσει σε λειτουργία ηλεκτροκινητήρα και γεννήτριας. Όταν το DIBP τροφοδοτείται τακτικά από την πόλη, το ηλεκτρικό μηχάνημα είναι ένας ηλεκτροκινητήρας που περιστρέφει τον ρότορα και αποθηκεύει κινητική ενέργεια στην μπαταρία.
Το γκρι μπλοκ στο πρώτο πλάνο είναι μια σύγχρονη μηχανή DIBP
Κινητήρας ντίζελ DIBP
Εάν διακοπεί το ρεύμα της πόλης, το ηλεκτρικό μηχάνημα μεταβαίνει σε λειτουργία γεννήτριας. Χάρη στη συσσωρευμένη κινητική ενέργεια, ο ρότορας προκαλεί την περιστροφή του κύριου άξονα του DIBP, το ηλεκτρικό μηχάνημα συνεχίζει να λειτουργεί χωρίς ρεύμα πόλης και η τάση εξόδου δεν εξαφανίζεται. Αυτό εξασφαλίζει αδιάλειπτη παροχή ρεύματος στο κέντρο δεδομένων. Ταυτόχρονα, το σύστημα ελέγχου DIBP στέλνει ένα σήμα για την εκκίνηση του κινητήρα ντίζελ. Η ίδια κινητική ενέργεια του ρότορα εκκινεί τον κινητήρα ντίζελ και τον βοηθά να φτάσει στη συχνότητα λειτουργίας. Ο ρότορας διατηρεί την ταχύτητα έως και ένα λεπτό, και αυτό είναι αρκετό για να μπει στο παιχνίδι το ντίζελ. Μετά την εκκίνηση, ο κινητήρας ντίζελ περιστρέφει τον κύριο άξονα και μέσω αυτού την ηλεκτρική μηχανή (εδώ αλλαγή του DIBP από τη μία λειτουργία στην άλλη).
Ως αποτέλεσμα, η ισχύς στα ράφια δεν χάνεται ούτε για ένα δευτερόλεπτο.
Η δεξαμενή κάθε γεννήτριας ντίζελ είναι σχεδιασμένη για 3 ώρες. Το κέντρο δεδομένων διαθέτει επίσης τη δική του εγκατάσταση αποθήκευσης καυσίμων για 80 τόνους, η οποία θα κρατήσει ολόκληρο το φορτίο του κέντρου δεδομένων για 24 ώρες. Σε περίπτωση πολύ υποθετικών μπλακ άουτ (το κοντινό πυρηνικό εργοστάσιο δεν θα το επιτρέψει αυτό), υπάρχουν συμφωνίες με αρκετούς εργολάβους που θα παραδώσουν αμέσως καύσιμο ντίζελ στο εργοτάξιο κατόπιν κλήσης. Σε γενικές γραμμές, όλα είναι όπως πρέπει.
Κάθε εβδομάδα τα DIBP αυτοδοκιμάζονται και ξεκινάνε τον κινητήρα ντίζελ. Μία φορά το μήνα πραγματοποιούνται δοκιμές με βραχυπρόθεσμη διακοπή λειτουργίας του δικτύου της πόλης.
Πίνακας ελέγχου DIBP
Εγκαταστάσεις ShchGP και ShchBP
«Γραμμές κορμού» και «διασταυρώσεις» καλωδίων ρεύματος
Μηχανοστάσια
Κάθε ενότητα βρίσκεται σε μια ερμητική ζώνη, σε ένα ειδικό κουτί. Αυτοί οι πρόσθετοι τοίχοι και η οροφή προστατεύουν το δωμάτιο του στροβίλου από τη σκόνη, το νερό και τη φωτιά. Κατά την αποδοχή ενός κέντρου δεδομένων, η περιοχή περιορισμού χύνεται παραδοσιακά με νερό για έλεγχο για διαρροές.
Η στέγη του κτιρίου και η δική της στέγη του τουρμπίνας με σωλήνες αποχέτευσης
Το νερό που εισέρχεται στην οροφή της ζώνης περιορισμού περνά μέσω υδρορροών στον αγωγό αποχέτευσης
Κάθε αίθουσα είναι έτοιμη να δεχθεί 205 ράφια μέσης ισχύος 5 kW.
Η διάταξη του εξοπλισμού στην αίθουσα οργανώνεται σύμφωνα με το σχέδιο των ψυχρών και ζεστών διαδρόμων.
Τα ισχυρά συστήματα έγκαιρης ανίχνευσης πυρκαγιάς και πυρόσβεσης αερίου δρομολογούνται κατά μήκος της οροφής.
Αισθητήρες καπνού βρίσκονται επίσης κάτω από το υπερυψωμένο δάπεδο. Αρκεί να ενεργοποιήσετε δύο αισθητήρες και θα ηχήσει η σειρήνα του συναγερμού πυρκαγιάς, αλλά θα μιλήσουμε για αυτό λίγο αργότερα.
Ακριβώς εκεί, κατά μήκος των σειρών των κλιματιστικών, υπάρχουν αισθητήρες διαρροής ταινίας.
Κάθε διάδρομος μεταξύ των γκισέ «επιτηρείται» με κάμερες CCTV.
Εάν είναι επιθυμητό, τα ράφια μπορούν να τοποθετηθούν πίσω από ειδικό φράχτη (κλουβί) και να τοποθετηθούν σε αυτό πρόσθετες κάμερες, συστήματα ελέγχου πρόσβασης και αισθητήρες κίνησης, αισθητήρες έντασης κ.λπ.
Ψύξη
Το κέντρο δεδομένων Udomlya χρησιμοποιεί ένα κύκλωμα ψύκτη αιθυλενογλυκόλης. Υπάρχουν κλιματιστικά στα μηχανοστάσια, ψυκτικά συγκροτήματα στην ταράτσα, και στον δεύτερο όροφο υπάρχει ψυκτικό κέντρο με αγωγούς, σύστημα αυτοματισμού και ελέγχου, αντλίες, δεξαμενές αποθήκευσης κ.λπ.
Κάθε δωμάτιο διαθέτει 12 κλιματιστικά, τα μισά από αυτά με υγραντήρες ατμού. Σχέδιο απολύσεων N+1.
Στον ψυχρό διάδρομο, η θερμοκρασία διατηρείται μεταξύ 21–25 °C και η υγρασία 40–60%.
Κλιματιστικά ακριβείας Stulz Cyber Cool
Υπάρχουν δύο δακτύλιοι γύρω από κάθε μηχανοστάσιο: μια «ψυχρή» γραμμή που τροφοδοτεί το κλιματιστικό με ψυχρή αιθυλενογλυκόλη και μια «καυτή» γραμμή που αφαιρεί τη θερμαινόμενη γλυκόλη από τα κλιματιστικά στους ψύκτες. Αν ανοίξουμε το υπερυψωμένο δάπεδο στο διάδρομο, θα δούμε σταγόνες στα μηχανοστάσια από το σύστημα ψύξης.
Η διαδρομή της αιθυλενογλυκόλης είναι η εξής: από το κλιματιστικό, η θερμαινόμενη αιθυλενογλυκόλη εισέρχεται πρώτα στη γραμμή επιστροφής γύρω από το μηχανοστάσιο και στη συνέχεια στον κοινό δακτύλιο. Στη συνέχεια, η αιθυλενογλυκόλη πηγαίνει στην αντλία και στη συνέχεια στον ψύκτη, όπου ψύχεται στους 10 °C. Μετά το ψυκτικό συγκρότημα, η αιθυλενογλυκόλη επιστρέφει στο κλιματιστικό μέσω της γραμμής παροχής κοινού δακτυλίου, των δεξαμενών αποθήκευσης και του δακτυλίου γύρω από τη μονάδα.
Διάγραμμα παροχής ψύξης κέντρου δεδομένων
Έτσι μοιάζει ένα ψυκτικό κέντρο από το οποίο περνούν 100 m3 αιθυλενογλυκόλης
Τα γκρι δοχεία είναι δοχεία διαστολής. Η θερμαινόμενη αιθυλενογλυκόλη περνά μέσα από αυτά στο δρόμο προς τον ψύκτη. Το καλοκαίρι, η αιθυλενογλυκόλη διαστέλλεται και απαιτεί επιπλέον χώρο.
Αυτά τα εντυπωσιακά δοχεία είναι δεξαμενές αποθήκευσης, 5 m3 το καθένα. Παρέχουν αδιάλειπτη ψύξη του κέντρου δεδομένων σε περίπτωση βλάβης του ψυκτικού συγκροτήματος.
Η ψυχρή αιθυλενογλυκόλη από τις δεξαμενές παρέχεται στο σύστημα και αυτό επιτρέπει τη διατήρηση της θερμοκρασίας εξόδου του κλιματιστικού στους 19 °C για 5 λεπτά. Ακόμα κι αν έξω είναι +40°C.
Αντλίες ψύξης
Διχτυωτές τσέπες φίλτρα και διαχωριστικές δεξαμενές για τον καθαρισμό της αιθυλενογλυκόλης από μηχανικά σωματίδια και αέρα
Η λεπτή κόκκινη γραμμή στο πάτωμα κάτω από τους σωλήνες είναι η ταινία αισθητήρα διαρροής. Πηγαίνουν σε όλη την περίμετρο του ψυκτικού κέντρου.
Εάν κάποιος από τους σωλήνες διαρρεύσει, η αιθυλενογλυκόλη θα περάσει από το σύστημα αποχέτευσης και θα καταλήξει σε μια ειδική δεξαμενή στο δωμάτιο επεξεργασίας νερού. Υπάρχουν επίσης δύο δεξαμενές με «εφεδρική» αιθυλενογλυκόλη για την αναπλήρωση του συστήματος ψύξης σε περίπτωση μεγάλων διαρροών.
Και για τα ψυκτικά συγκροτήματα. Υπάρχουν 5 ψυκτικά συγκροτήματα στην οροφή που χρησιμοποιούν ένα σχέδιο πλεονασμού N+1. Κάθε μέρα, ο αυτοματισμός καθορίζει, ανάλογα με τις ώρες λειτουργίας, ποιο ψυκτικό συγκρότημα θα βάλει σε ρεζέρβα.
Ψυκτικά συγκροτήματα της μάρκας Stulz CyberCool 2 με χωρητικότητα 1096 kW
Τα ψυκτικά συγκροτήματα υποστηρίζουν τρεις λειτουργίες:
- συμπιεστής - από 12 °C;
- μικτή – στους 0–12 °C.
- δωρεάν ψύξη – από 0 και κάτω. Αυτή η λειτουργία περιλαμβάνει την ψύξη της αιθυλενογλυκόλης μέσω της λειτουργίας ανεμιστήρων και όχι ενός συμπιεστή.
Πυρασφάλεια
Το κέντρο δεδομένων διαθέτει δύο σταθμούς πυρόσβεσης αερίου. Το καθένα περιέχει δύο μπαταρίες των 11 κυλίνδρων: η πρώτη είναι η κύρια, η δεύτερη είναι μια ρεζέρβα.
Το πυροσβεστικό σύστημα του κέντρου δεδομένων είναι συνδεδεμένο με τον διακομιστή του NPP Kalinin και, εάν είναι απαραίτητο, η πυροσβεστική υπηρεσία του σταθμού θα φτάσει στο χώρο εντός λεπτών.
Η φωτογραφία δείχνει ένα σύστημα συναγερμού πυρκαγιάς και ένα κουμπί εξόδου κινδύνου στο δωμάτιο του στροβίλου. Το τελευταίο χρειάζεται εάν οι πόρτες δεν ξεκλειδώθηκαν για κάποιο λόγο κατά τη διάρκεια ενός συναγερμού πυρκαγιάς: διακόπτει την παροχή ρεύματος στην ηλεκτρική κλειδαριά.
Τηλεπικοινωνίες
Δύο αυτοκινητόδρομοι της Rostelecom φτάνουν στο κέντρο δεδομένων μέσω ανεξάρτητων διαδρομών. Κάθε σύστημα DWDM έχει χωρητικότητα 8 Terabit.
Το κέντρο δεδομένων διαθέτει δύο εισόδους τηλεπικοινωνιών, οι οποίες βρίσκονται σε απόσταση μεγαλύτερη από 25 μέτρα η μία από την άλλη.
Παρόντες στον ιστότοπο είναι επίσης οι χειριστές Rascom, Telia Carrier Russia, Consyst και DataLine θα εμφανιστούν στο εγγύς μέλλον.
Από το Udomlya μπορείτε να φτιάξετε ένα κανάλι προς τη Μόσχα, την Αγία Πετρούπολη ή οπουδήποτε στη Ρωσία και στον κόσμο.
Παρακολούθηση
Οι εφημερεύοντες μηχανικοί εφημερεύουν στο κέντρο παρακολούθησης όλο το εικοσιτετράωρο.
Όλες οι πληροφορίες για τα μηχανολογικά συστήματα λαμβάνονται εδώ: κλιματικές συνθήκες στην αίθουσα, κατάσταση εισροών, DIBP κ.λπ.
Κάθε δύο ώρες, το προσωπικό υπηρεσίας πραγματοποιεί περιήγηση σε όλους τους χώρους υποδομής για να επιθεωρήσει την κατάσταση του μηχανολογικού εξοπλισμού και του εξοπλισμού πληροφορικής.
Υποστηρικτικές υποδομές
Παρέχεται χώρος εκφόρτωσης για την παράδοση του εξοπλισμού στο κέντρο δεδομένων.
Χώρος εκφόρτωσης από το εσωτερικό.
Εάν η αίθουσα σας βρίσκεται στον δεύτερο όροφο, τότε αυτός ο υδραυλικός ανελκυστήρας θα παραδώσει οποιονδήποτε εξοπλισμό εκεί.
Ντουλάπια για την αποθήκευση εργαλείων πελάτη και πολλά άλλα.
Λίγα λόγια για την καθημερινότητα
Για μόνιμο προσωπικό, μπορείτε να νοικιάσετε εξοπλισμένους χώρους εργασίας στο τμήμα του γραφείου. Εάν επισκέπτεστε από καιρό σε καιρό, μπορείτε να μείνετε σε ένα προσωρινό ξενοδοχείο με όλες τις ανέσεις ακριβώς στην περιοχή του κέντρου δεδομένων.
Το τμήμα του γραφείου διαθέτει επίσης τραπεζαρία και κουζίνα.
Και υπάρχει εκπληκτική φύση τριγύρω με δάση, λίμνες, ποτάμια, ψάρεμα και άλλες υπαίθριες δραστηριότητες. Ελάτε για μια επίσκεψη.
Όπως υποσχέθηκε, ένα ωραίο μπόνους για όσους έφτασαν μέχρι το τέλος. Για τους πρώτους έξι μήνες, η ενοικίαση χώρου rack στο Udomlya με παρεχόμενη ισχύ 5 kW θα είναι δωρεάν. Πληρώστε μόνο για την ηλεκτρική ενέργεια που καταναλώθηκε πραγματικά. Στείλτε την αίτησή σας στο .
Πηγή: www.habr.com