Αφιερώνω αυτήν την ανάρτηση σε εκείνους τους ανθρώπους που είπαν ψέματα στα πιστοποιητικά, εξαιτίας των οποίων σχεδόν εγκαταστήσαμε βεγγαλικά στις αίθουσες μας.
Η ιστορία είναι πάνω από τέσσερα χρόνια, αλλά τη δημοσιεύω τώρα επειδή η NDA έχει λήξει. Τότε συνειδητοποιήσαμε ότι το κέντρο δεδομένων (το οποίο νοικιάσαμε) ήταν σχεδόν πλήρως φορτωμένο και η ενεργειακή του απόδοση δεν είχε βελτιωθεί πολύ. Παλαιότερα, η υπόθεση ήταν ότι όσο περισσότερο το γεμίζουμε, τόσο το καλύτερο, γιατί ο μηχανικός κατανέμεται σε όλους. Αλλά αποδείχθηκε ότι εξαπατούσαμε τους εαυτούς μας ως προς αυτό, και παρόλο που το φορτίο ήταν καλό, κάπου υπήρχαν απώλειες. Δουλέψαμε σε πολλούς τομείς, αλλά η γενναία ομάδα μας επικεντρώθηκε στην ψύξη.
Η πραγματική ζωή ενός κέντρου δεδομένων είναι λίγο διαφορετική από αυτή που υπάρχει στο έργο. Συνεχείς προσαρμογές από την υπηρεσία λειτουργίας για αύξηση της απόδοσης και βελτιστοποίηση των ρυθμίσεων για νέες εργασίες. Πάρτε τη μυθική κολόνα Β. Στην πράξη, αυτό δεν συμβαίνει· η κατανομή του φορτίου είναι ανομοιόμορφη, κάπου πυκνή, κάπου άδεια. Έπρεπε λοιπόν να αναδιαμορφώσουμε κάποια πράγματα για καλύτερη ενεργειακή απόδοση.
Ο συμπιεστής του κέντρου δεδομένων μας είναι απαραίτητος για διάφορους πελάτες. Επομένως, εκεί, μεταξύ των συνηθισμένων ραφιών δύο έως τεσσάρων κιλοβάτ, μπορεί κάλλιστα να υπάρχει ένα 23 κιλοβάτ ή περισσότερα. Αντίστοιχα, τα κλιματιστικά ρυθμίστηκαν για να τα ψύχουν και ο αέρας απλώς περνούσε ορμητικά μέσα από τα λιγότερο ισχυρά ράφια.
Η δεύτερη υπόθεση ήταν ότι ο ζεστός και ο κρύος διάδρομος δεν αναμειγνύονται. Μετά από μετρήσεις, μπορώ να πω ότι αυτό είναι μια ψευδαίσθηση, και η πραγματική αεροδυναμική διαφέρει από το μοντέλο σχεδόν από κάθε άποψη.
Έρευνα
Αρχικά αρχίσαμε να εξετάζουμε τις ροές αέρα στις αίθουσες. Γιατί πήγαν εκεί; Επειδή κατάλαβαν ότι το κέντρο δεδομένων είναι σχεδιασμένο για πέντε έως έξι kW ανά rack, αλλά ήξεραν ότι στην πραγματικότητα είναι από 0 έως 25 kW. Είναι σχεδόν αδύνατο να ρυθμιστούν όλα αυτά με πλακάκια: οι πρώτες κιόλας μετρήσεις έδειξαν ότι μεταδίδονται σχεδόν εξίσου. Αλλά δεν υπάρχουν καθόλου πλακίδια 25 kW· δεν πρέπει να είναι απλά άδεια, αλλά με υγρό κενό.
Αγοράσαμε ένα ανεμόμετρο και αρχίσαμε να μετράμε τις ροές μεταξύ των ράφια και πάνω από τα ράφια. Γενικά, πρέπει να εργαστείτε με αυτό σύμφωνα με το GOST και μια δέσμη προτύπων που είναι δύσκολο να εφαρμοστούν χωρίς να κλείσετε την αίθουσα του στροβίλου. Δεν μας ενδιέφερε η ακρίβεια, αλλά η θεμελιώδης εικόνα. Δηλαδή μέτρησαν κατά προσέγγιση.
Σύμφωνα με μετρήσεις, από το 100 τοις εκατό του αέρα που βγαίνει από τα πλακάκια, το 60 τοις εκατό μπαίνει στα ράφια, το υπόλοιπο πετάει. Αυτό οφείλεται στο γεγονός ότι υπάρχουν βαριές ράγες 15–25 kW κατά μήκος των οποίων είναι χτισμένη η ψύξη.
Δεν μπορούμε να απενεργοποιήσουμε τα κλιματιστικά, γιατί θα είναι πολύ ζεστό στα ζεστά ράφια στην περιοχή των άνω διακομιστών. Αυτή τη στιγμή καταλαβαίνουμε ότι πρέπει να απομονώσουμε κάτι από κάτι άλλο, έτσι ώστε ο αέρας να μην μεταπηδά από σειρά σε σειρά και έτσι να συνεχίζεται η ανταλλαγή θερμότητας στο μπλοκ.
Ταυτόχρονα, αναρωτιόμαστε εάν αυτό είναι οικονομικά εφικτό.
Είμαστε έκπληκτοι όταν ανακαλύπτουμε ότι έχουμε την κατανάλωση ενέργειας του κέντρου δεδομένων στο σύνολό του, αλλά απλά δεν μπορούμε να μετρήσουμε μονάδες fan coil για ένα συγκεκριμένο δωμάτιο. Δηλαδή, αναλυτικά μπορούμε, αλλά στην πραγματικότητα δεν μπορούμε. Και δεν είμαστε σε θέση να εκτιμήσουμε την εξοικονόμηση. Το έργο γίνεται όλο και πιο ενδιαφέρον. Αν εξοικονομήσουμε το 10% της ισχύος του κλιματιστικού, πόσα χρήματα μπορούμε να διαθέσουμε για μόνωση; Πώς να μετρήσετε;
Πήγαμε στους ειδικούς αυτοματισμού, που ολοκλήρωναν το σύστημα παρακολούθησης. Χάρη στα παιδιά: είχαν όλους τους αισθητήρες, έπρεπε απλώς να προσθέσουν τον κωδικό. Ξεκίνησαν να εγκαθιστούν ψυκτικά συγκροτήματα, UPS και φωτιστικά ξεχωριστά. Με το νέο gadget, κατέστη δυνατό να δούμε πώς αλλάζει η κατάσταση μεταξύ των στοιχείων του συστήματος.
Πειράματα με κουρτίνες
Παράλληλα, ξεκινάμε πειράματα με κουρτίνες (φράχτες). Αποφασίζουμε να τα τοποθετήσουμε στις ακίδες των συρταριών καλωδίων (δεν χρειάζεται τίποτα άλλο πάντως), αφού θα πρέπει να είναι ελαφριά. Γρήγορα αποφασίσαμε για στέγαστρα ή χτένες.
Το αλίευμα είναι ότι είχαμε συνεργαστεί στο παρελθόν με ένα σωρό πωλητές. Ο καθένας έχει λύσεις για τα κέντρα δεδομένων των ίδιων των εταιρειών, αλλά ουσιαστικά δεν υπάρχουν έτοιμες λύσεις για ένα εμπορικό κέντρο δεδομένων. Οι πελάτες μας έρχονται και φεύγουν συνέχεια. Είμαστε ένα από τα λίγα «βαριά» κέντρα δεδομένων χωρίς περιορισμούς στο πλάτος του rack με δυνατότητα φιλοξενίας αυτών των διακομιστών λείανσης έως 25 kW. Δεν υπάρχει εκ των προτέρων σχεδιασμός υποδομής. Δηλαδή, αν πάρουμε αρθρωτά συστήματα εγκλωβισμού από πωλητές, θα υπάρχουν πάντα τρύπες για δύο μήνες. Δηλαδή, η αίθουσα του στροβίλου δεν θα είναι ποτέ ενεργειακά αποδοτική κατ' αρχήν.
Αποφασίσαμε να το κάνουμε μόνοι μας, αφού έχουμε δικούς μας μηχανικούς.
Το πρώτο πράγμα που πήραν ήταν κασέτες από βιομηχανικά ψυγεία. Αυτά είναι εύκαμπτες μύτες πολυαιθυλενίου που μπορείτε να χτυπήσετε. Μάλλον τα έχετε δει κάπου στην είσοδο του τμήματος κρέατος των μεγαλύτερων παντοπωλείων. Άρχισαν να ψάχνουν για μη τοξικά και μη εύφλεκτα υλικά. Το βρήκαμε και το αγοράσαμε για δύο σειρές. Το κλείσαμε και αρχίσαμε να βλέπουμε τι έγινε.
Καταλάβαμε ότι δεν θα ήταν πολύ καλό. Αλλά γενικά αποδείχθηκε πολύ, πολύ όχι πολύ καλά. Αρχίζουν να φτερουγίζουν στα ρυάκια σαν ζυμαρικά. Βρήκαμε μαγνητικές ταινίες σαν μαγνήτες ψυγείου. Τα κολλήσαμε σε αυτές τις λωρίδες, τα κολλήσαμε μεταξύ τους και ο τοίχος αποδείχθηκε αρκετά μονολιθικός.
Αρχίσαμε να καταλαβαίνουμε τι θα επιφύλασσε το κοινό.
Ας πάμε στους κατασκευαστές και ας σας δείξουμε το έργο μας. Κοιτάνε και λένε: οι κουρτίνες σου είναι πολύ βαριές. 700 κιλά σε όλη την αίθουσα του στροβίλου. Πάμε στο διάολο, λένε, καλοί άνθρωποι. Πιο συγκεκριμένα, στην ομάδα του ΣΚΣ. Αφήστε τους να μετρήσουν πόσες χυλοπίτες έχουν στους δίσκους, γιατί 120 κιλά ανά τετραγωνικό μέτρο είναι το μέγιστο.
Η SKS λέει: θυμάσαι, ένας μεγάλος πελάτης ήρθε σε εμάς; Έχει δεκάδες χιλιάδες λιμάνια σε ένα δωμάτιο. Κατά μήκος των άκρων του θαλάμου του στροβίλου εξακολουθεί να είναι εντάξει, αλλά δεν θα είναι δυνατό να το συνδέσετε πιο κοντά στο θάλαμο διασταύρωσης: οι δίσκοι θα πέσουν.
Οι οικοδόμοι ζήτησαν και πιστοποιητικό για το υλικό. Σημειώνω ότι πριν από αυτό δουλέψαμε για τον τιμητικό λόγο του προμηθευτή, καθώς αυτό ήταν απλώς μια δοκιμαστική πορεία. Επικοινωνήσαμε με αυτόν τον προμηθευτή και είπαμε: Εντάξει, είμαστε έτοιμοι να πάμε σε έκδοση beta, δώστε μας όλη τη γραφειοκρατία. Στέλνουν κάτι που δεν είναι πολύ καθιερωμένο.
Λέμε: άκου, από πού το πήρες αυτό το χαρτί; Αυτοί: ο Κινέζος κατασκευαστής μας μας το έστειλε ως απάντηση σε αιτήματα. Σύμφωνα με την εφημερίδα, αυτό το πράγμα δεν καίγεται καθόλου.
Σε αυτό το σημείο συνειδητοποιήσαμε ότι ήταν καιρός να σταματήσουμε και να ελέγξουμε τα γεγονότα. Πηγαίνουμε στα κορίτσια από το τμήμα πυρασφάλειας του data center, μας λένε το εργαστήριο που ελέγχει την ευφλεκτότητα. Αρκετά γήινα χρήματα και προθεσμίες (αν και τα βλαστημούσαμε όλα όσο συγκεντρώναμε τον απαιτούμενο αριθμό χαρτιών). Οι επιστήμονες εκεί λένε: φέρτε το υλικό, θα κάνουμε δοκιμές.
Συμπερασματικά, γράφτηκε ότι από ένα κιλό ουσίας απομένουν περίπου 50 γραμμάρια στάχτης. Το υπόλοιπο καίγεται έντονα, ρέει προς τα κάτω και διατηρεί την καύση πολύ καλά στη λακκούβα.
Καταλαβαίνουμε - είναι καλό που δεν το αγοράσαμε. Αρχίσαμε να ψάχνουμε για άλλο υλικό.
Βρήκαμε πολυανθρακικό. Αποδείχθηκε πιο σκληρός. Το διαφανές φύλλο είναι δύο mm, οι πόρτες είναι κατασκευασμένες από τέσσερα mm. Ουσιαστικά, είναι plexiglass. Μαζί με τον κατασκευαστή, ξεκινάμε μια συζήτηση για την πυρασφάλεια: δώστε μας ένα πιστοποιητικό. Εστειλαν. Υπογράφεται από το ίδιο ινστιτούτο. Καλούμε εκεί και λέμε: καλά, παιδιά, το έχετε ελέγξει αυτό;
Λένε: ναι, έκαναν έλεγχο. Πρώτα το έκαψαν στο σπίτι, μετά το έφεραν μόνο για εξετάσεις. Εκεί, από ένα κιλό υλικού, μένουν περίπου 930 γραμμάρια στάχτης (αν την κάψετε με καυστήρα). Λιώνει και στάζει, αλλά η λακκούβα δεν θα καεί.
Ελέγχουμε αμέσως τους μαγνήτες μας (βρίσκονται σε επένδυση πολυμερούς). Παραδόξως καίγονται άσχημα.
συνέλευση
Από αυτό αρχίζουμε να συλλέγουμε. Το πολυανθρακικό είναι εξαιρετικό γιατί είναι ελαφρύτερο από το πολυαιθυλένιο και λυγίζει πολύ λιγότερο εύκολα. Είναι αλήθεια ότι φέρνουν φύλλα 2,5 επί 3 μέτρα και ο προμηθευτής δεν ενδιαφέρεται τι να τα κάνει. Αλλά χρειαζόμαστε 2,8 με πλάτος 20-25 εκατοστά. Οι πόρτες στάλθηκαν σε γραφεία που έκοβαν τα σεντόνια ανάλογα με τις ανάγκες. Και κόβουμε μόνοι μας τις λάμες. Η ίδια η διαδικασία κοπής κοστίζει δύο φορές περισσότερο από ένα φύλλο.
Εδώ τι συνέβη:
Το αποτέλεσμα είναι ότι το σύστημα εγκλωβισμού εξοφλείται σε λιγότερο από ένα χρόνο. Έτσι εξοικονομήσαμε συνεχώς 200–250 kW σε ισχύ fan coil. Δεν ξέρουμε πόσο υπάρχει ακόμα στα ψυκτικά συγκροτήματα, πόσα ακριβώς. Οι διακομιστές πιπιλίζουν με σταθερή ταχύτητα, φυσούν τα fan coils. Και τα ψυκτικά συγκροτήματα ενεργοποιούνται και απενεργοποιούνται με μια χτένα: είναι δύσκολο να εξαχθούν δεδομένα από αυτό. Η αίθουσα του στροβίλου δεν μπορεί να σταματήσει για δοκιμές.
Χαιρόμαστε που κάποτε υπήρχε ένας κανόνας για την εγκατάσταση ραφιών 5x5 σε μονάδες έτσι ώστε η μέση κατανάλωσή τους να είναι έξι kW μέγιστη. Δηλαδή, το ζεστό δεν συγκεντρώνεται από το νησί, αλλά διανέμεται σε όλο το δωμάτιο του στροβίλου. Αλλά υπάρχει μια κατάσταση όπου υπάρχουν 10 κομμάτια ραφιών 15 κιλοβάτ το ένα δίπλα στο άλλο, αλλά υπάρχει μια στοίβα από αυτά απέναντι. Κρυώνει. Ισορροπημένο.
Όπου δεν υπάρχει πάγκος, χρειάζεστε φράχτη μέχρι το πάτωμα.
Και ορισμένοι από τους πελάτες μας είναι μονωμένοι με σχάρες. Υπήρχαν και αρκετές ιδιαιτερότητες μαζί τους.
Κόβουν σε ελάσματα, επειδή το πλάτος των στύλων δεν είναι σταθερό και η συχνότητα της χτένας των στερέωσης καθορίζεται: τρία ή τέσσερα cm είτε προς τα δεξιά είτε προς τα αριστερά θα είναι πάντα. Εάν έχετε ένα μπλοκ 600 για χώρο στο ράφι, τότε υπάρχει 85 τοις εκατό πιθανότητα να μην ταιριάζει. Και κοντές και μακριές λάμες συνυπάρχουν και κολλάνε μεταξύ τους. Μερικές φορές κόβουμε το έλασμα με το γράμμα G κατά μήκος των περιγραμμάτων των ραφιών.
Αισθητήρες
Πριν μειωθεί η ισχύς των μονάδων fan coil, ήταν απαραίτητο να ρυθμιστεί πολύ ακριβής παρακολούθηση θερμοκρασίας σε διάφορα σημεία της αίθουσας, ώστε να μην προκύψουν εκπλήξεις. Έτσι προέκυψαν οι ασύρματοι αισθητήρες. Ενσύρματο - σε κάθε σειρά πρέπει να κρεμάσετε το δικό σας πράγμα για να συνδέσετε αυτούς τους αισθητήρες και μερικές φορές τα καλώδια επέκτασης σε αυτό. Αυτό μετατρέπεται σε γιρλάντα. Πολύ κακό. Και όταν αυτά τα καλώδια μπαίνουν στα κλουβιά των πελατών, οι φύλακες αμέσως ενθουσιάζονται και ζητούν να εξηγήσουν με πιστοποιητικό τι αφαιρείται από αυτά τα καλώδια. Τα νεύρα των σεκιούριτι πρέπει να προστατεύονται. Για κάποιο λόγο δεν αγγίζουν ασύρματους αισθητήρες.
Και περισσότερα περίπτερα έρχονται και φεύγουν. Είναι ευκολότερο να επανατοποθετήσετε έναν αισθητήρα σε έναν μαγνήτη επειδή πρέπει να κρεμιέται ψηλότερα ή χαμηλότερα κάθε φορά. Εάν οι διακομιστές βρίσκονται στο κάτω τρίτο του rack, θα πρέπει να κρεμαστούν προς τα κάτω και όχι σύμφωνα με το πρότυπο ενάμισι μέτρο από το πάτωμα στην πόρτα του rack σε έναν κρύο διάδρομο. Είναι άχρηστο να μετράς εκεί· πρέπει να μετράς ό,τι υπάρχει στο σίδερο.
Ένας αισθητήρας για τρία ράφια - πιο συχνά δεν χρειάζεται να τον κρεμάτε. Η θερμοκρασία δεν είναι διαφορετική. Φοβόμασταν ότι ο αέρας θα τραβούσε μέσα από τα ίδια τα στηρίγματα, αλλά αυτό δεν συνέβη. Αλλά παρέχουμε ακόμα λίγο περισσότερο κρύο αέρα από τις υπολογιζόμενες τιμές. Φτιάξαμε παράθυρα στα πηχάκια 3, 7 και 12 και κάναμε μια τρύπα πάνω από το σταντ. Όταν κυκλοφορούμε, βάζουμε ένα ανεμόμετρο: βλέπουμε ότι η ροή πηγαίνει εκεί που πρέπει.
Μετά κρέμασαν φωτεινά κορδόνια: μια παλιά πρακτική για τους ελεύθερους σκοπευτές. Φαίνεται περίεργο, αλλά σας επιτρέπει να εντοπίσετε ένα πιθανό πρόβλημα πιο γρήγορα.
αστείος
Ενώ τα κάναμε όλα αυτά σιωπηλά, έφτασε ένας πωλητής που παράγει μηχανολογικό εξοπλισμό για κέντρα δεδομένων. Λέει: να έρθουμε να σας πούμε για την ενεργειακή απόδοση. Φτάνουν και αρχίζουν να μιλούν για τη μη βέλτιστη αίθουσα και τις ροές αέρα. Κουνάμε το κεφάλι με κατανόηση. Γιατί έχουμε τρία χρόνια ως καθιερωμένο.
Κρεμούν τρεις αισθητήρες σε κάθε ράφι. Οι εικόνες παρακολούθησης είναι εκπληκτικές και όμορφες. Περισσότερο από το ήμισυ της τιμής αυτής της λύσης είναι λογισμικό. Σε επίπεδο συναγερμού Zabbix, αλλά ιδιόκτητο και πολύ ακριβό. Το πρόβλημα είναι ότι έχουν αισθητήρες, λογισμικό και, στη συνέχεια, αναζητούν έναν ανάδοχο στο χώρο του ξενοδοχείου: δεν έχουν δικούς τους προμηθευτές για την τοποθέτηση σε βαλβίδες.
Αποδεικνύεται ότι τα χέρια τους κοστίζουν πέντε έως επτά φορές περισσότερο από αυτό που κάναμε εμείς.
παραπομπές
- .
- .
- .
- .
- .
- Η αλληλογραφία μου: [προστασία μέσω email]
Πηγή: www.habr.com