Kehidupan sehari-hari pusat data: hal-hal kecil yang tidak terlihat selama 7 tahun beroperasi. Dan lanjutannya tentang tikus

Kehidupan sehari-hari pusat data: hal-hal kecil yang tidak terlihat selama 7 tahun beroperasi. Dan lanjutannya tentang tikus

Saya akan segera mengatakan: tikus di server yang dibawa, yang kami berikan teh beberapa tahun yang lalu setelah tersengat listrik, kemungkinan besar melarikan diri. Karena kami pernah melihat temannya berkeliling. Dan kami segera memutuskan untuk memasang repeller ultrasonik.

Sekarang ada tanah terkutuk di sekitar pusat data: tidak ada burung yang akan hinggap di gedung, dan mungkin semua tikus tanah dan cacing telah lolos. Kami khawatir akan hal itu suara bisa menyebabkan kegagalan HDD, tetapi dicek, frekuensinya tidak sama.

Kisah selanjutnya jauh lebih menyenangkan. Kami pernah menerima perangkat keras seharga beberapa juta rubel di dalam kotak dengan sensor kemiringan, getaran, dan kelembapan. Semuanya utuh. Keluarkan kemasannya dengan hati-hati, dan potongan besi itu bengkok. Mistik.

Badannya lurus membentuk busur. Sangat cantik.

Detektif

Kami tidak akan menganggap penting hal ini, karena bodi logam yang melengkung hampir merupakan gambaran desain. Sangat cantik, tidak ada keripik. Dan jika bukan karena perangkat keras serupa lainnya di sekitar, kami bahkan tidak akan berpikir saat membongkarnya bahwa ada sesuatu yang salah. Tapi di dekatnya ada yang sama, hanya saja bentuknya geometris lebih teratur.

Untungnya, pembongkaran perangkat keras tersebut difilmkan (saya menyarankan agar semua orang membiasakan diri), sehingga kami dapat membuktikan kepada pabrikan bahwa perangkat tersebut tiba seperti ini. Kemasan yang utuh dan bodi yang tertekuk rapi tidak menjadi pukulan telak bagi para penggeraknya. Kemungkinan besar, dia terluka bahkan sebelum berangkat ke Rusia.

Vendor berkata: “Eh, teman-teman, ayo segera ganti untuk Anda dalam garansi.” Dan kemudian penyergapan hebat menanti kami.

Faktanya, bea cukai mengizinkan impor peralatan tersebut dengan dokumen tanpa hak untuk mengekspor. Artinya, Anda bisa membawanya, tetapi Anda tidak bisa menjualnya kembali ke seseorang di luar Rusia. Ketika kami mengirim kembali catu daya yang terbakar, misalnya, semuanya menjadi jelas. Ini adalah suku cadang, catu daya.

Dan kemudian saya harus mengirimkan semuanya kembali:
- Teman-teman, lihat, kami mengirimkan perangkat kerasnya kembali ke pabriknya.
- Seluruh peralatan?
- Ya
— Modelkan ini dan itu?
- Ya
- Bisa bekerja?
– Kami tidak tahu, kami tidak menyalakannya.
- Jadi ini adalah keseluruhan peralatan.
- Yah, itu tidak berhasil.
- Nah, lihat, seluruh peralatannya model ini. Tidak ada hak ekspor ulang. Kami tidak akan membiarkanmu masuk.

Secara umum, ada banyak kesalahan sebelum kami menyadari bahwa kami tidak mengekspornya, tetapi mengembalikannya. Pada akhirnya, kami berhasil melakukan segalanya.

Ada juga penutup sepatu

Pertama, beberapa tahun yang lalu, kami memiliki sistem otomatis pertama, impian seorang administrator. Anda memasukkan satu pak penutup sepatu ke dalamnya, ia akan membukanya sendiri, membukanya dan menempatkannya pada posisi di mana Anda hanya perlu menginjaknya. Chp-chpk dan selesai.

Setelah sekitar enam bulan, dia mengunyah sekitar seratus bungkus penutup sepatu dan tersedak. Ternyata ada begitu banyak komponen bergerak sehingga kami perlu memperbaikinya sebulan sekali saat memuat (kami memiliki banyak teknisi pelanggan yang berkeliling di sekitar fasilitas, karena kami adalah pusat data komersial), atau kami perlu membeli yang baru.

Masalah kedua adalah kemudian, pada salah satu pembersihan rutin, kami entah bagaimana menemukan “kain biru kecil” tergantung di jeruji salah satu rak pengujian kami. Ahli forensik yang diwakili oleh insinyur X-Team mengidentifikasi pecahan tubuh penutup sepatu. Ternyata memakai penutup sepatu di klinik itu nyaman: Saya berjalan-jalan selama setengah jam dan itu saja. Dan beberapa insinyur dapat bekerja dengan perangkat keras sepanjang hari. Menyeret kaki. Banyak mengocok. Dan penutup sepatu menjadi rusak hingga menjadi serpihan-serpihan kecil yang beterbangan di sekitar ruang turbin.

Kami segera membeli penutup sepatu baru. Kami mengambil kotak boot termal: ini adalah mesin tempat film diisi, dan dengan hati-hati mengecilkan film ini di atas sepatu. Cantik, efektif, tahan lama. Lebih sedikit hamburan. Kami sudah memilikinya cukup lama, namun kami harus mengganti shrink film setiap 1-2 jam sekali, karena solnya cenderung lepas dengan sendirinya.

Awalnya kami mengira kami kurang beruntung, namun entah bagaimana orang-orang memecahkan masalah ini. Tapi tidak. Kami bertanya kepada rekan-rekan Barat kami - cerita yang sama. Akibatnya, mereka mulai memikirkan bagaimana melakukannya secara normal. Kembali dari ruang turbin untuk membeli penutup sepatu baru, sejujurnya, adalah ide yang biasa-biasa saja. Kami menemukan pembersih industri untuk lokasi konstruksi dan industri. Ini adalah sesuatu seperti jalur yang dilalui oleh pergeseran memasuki bengkel. Jalur dengan banyak rol membersihkan semuanya, dan dibuat sedemikian rupa sehingga mau atau tidak, akan tersangkut dan bersih. Harganya setengah juta hingga satu juta rubel. Kami menggali dan menemukan yang sama seharga 200 ribu, tetapi Anda harus terjun sendiri. Ukurannya mirip dengan mesin semir sepatu. Anda datang, memasukkan kaki Anda ke sana, dia mengunyahnya dan mengembalikannya hingga bersih. Mereka menempatkannya di pintu masuk pusat data.

Ini berfungsi dengan baik kecuali untuk dua masalah. Yang pertama adalah dengan cepat menjadi jelas bahwa ini normal bagi kami para insinyur. Namun dalam praktiknya, banyak orang datang ke pusat data untuk melihat, termasuk para eksekutif puncak perusahaan besar. Dengan sepatu yang terbuat dari kulit pantat naga. Dan bahkan untuk mengoleskan krim pada sepatu, kuasnya harganya lebih mahal daripada sepatu olahraga saya, mereka secara khusus memilih bulunya. Merekalah yang menolak untuk terjun ke dalam perangkat ajaib kami. Masalah kedua muncul di musim dingin: ketika sepatu sangat berantakan, mereka tidak bisa mengeluarkan semuanya dari dalam tapaknya. Kemudian Anda berjalan mengitari aula, meninggalkan jejak ektoplasma.

Kami memutuskan dengan sederhana. Kami menempatkan penutup sepatu yang digulung di sebelahnya. Bagaimanapun, kita perlu menduplikasi semuanya sesuai standar.

Masalah baru telah muncul. Mengamati perilaku teknisi pelanggan, kami melihat gambar berikut: pertama-tama mereka memasukkan kaki mereka ke dalam mesin untuk dibersihkan, dan kemudian mengaitkan penutup sepatu dari penutup sepatu yang digulung. Sekarang mereka sudah memasang tanda bahwa itu salah satunya, dan lebih baik membersihkan diri, tetapi jika prinsip hidup melarang membersihkan sepatu, maka pakailah penutup sepatu. Nampaknya tiket yang berlaku beberapa hari namun bertahan lama itu sudah ditutup. Ini perangkatnya:

Kehidupan sehari-hari pusat data: hal-hal kecil yang tidak terlihat selama 7 tahun beroperasi. Dan lanjutannya tentang tikus

"ku" dua kali

Menurut persyaratan PCI DSS, Anda harus dapat membedakan secara visual peran orang-orang yang berada di pusat data. Tanpa melihat dari dekat ke celah dan membaca sesuatu di sana, tetapi secara visual langsung, seperti personel militer membedakan satu sama lain dari tali bahunya, hanya saja lebih cerah. Kami memutuskan untuk tidak pamer dan menggunakan metode Chatlan lama yang bagus - diferensiasi warna celana. Secara khusus, mereka mulai membuat pita pass dengan warna berbeda. Admin kami langsung mengambil warna Hijau sebagai favoritnya.

Kedengarannya sederhana, namun menimbulkan tiga efek yang tidak terduga:

  1. Retraktor diperlukan untuk menarik kembali lintasan ini secara otomatis saat dipakai (hal ini mengatur panjang pita itu sendiri). Kami menulis spesifikasi teknis yang mempertimbangkan semua keinginan semua departemen. Ini adalah kesalahan strategis. Warna, bentuk, bahan, retraktor bukan plastik, tali pancing terbuat dari logam untuk diaplikasikan logo sehingga dijahit menjadi pita. Potongannya ternyata sangat mahal sehingga kami harus memotong persyaratan dan mengubah formatnya.
  2. Setelah diferensiasi celana mulai berfungsi, menjadi sangat nyaman. Kontraktor memiliki beberapa pita, admin eksternal memiliki pita lainnya, dan admin kami memiliki pita lainnya. Anda dapat melihat siapa yang memiliki peran apa. Untuk listrik - hanya abu-abu, untuk AC - biru. Dan kemudian kami membutuhkan pita untuk pengemudi (ini adalah peran terpisah, mereka dapat memasuki area bongkar muat, tetapi tidak dapat keluar kecuali di luar). Pengemudi tidak memerlukan izin. Awalnya kami memberi mereka pita tanpa izin. Kemudian penjaga keamanan memutuskan bahwa ini benar-benar aneh dan merendahkan martabat manusia para pengemudi. Mereka punya logika militernya sendiri, jadi sekarang pengemudi datang untuk langsung menerima izin dengan pita, tapi izin ini tidak memungkinkan mereka pergi kemana-mana. Dari segi keamanan ternyata menjadi penanda bahwa pihak keamanan telah memeriksa orang tersebut.
  3. Salah satu teknisi kami menyarankan untuk membuat sweter seragam berwarna hijau daripada pita. Dan dia mengirimkan proposal rasionalisasi. Mereka melakukannya setengah jalan: mereka meninggalkan tiket dengan pita, ditambah lagi mereka benar-benar menjahit sweter seragam hijau. Sekarang kami memiliki seragam admin. Petugas keamanan mendukung lelucon tersebut dan memasukkannya ke dalam peraturan. Sekarang wajib (celana, kemeja, sweater, tapi sweaternya bisa dilepas).

Pelanggan kami juga sering mengeluhkan rute yang tidak rata pada peta sebelum memasuki pusat data Kompresor kami. Anda memasukkan alamatnya, tetapi jalan yang ditampilkan salah. Pengunjung akhirnya salah arah, karena di sana ada rel kereta api, dan di belakangnya ada kemacetan, dan tidak ada jalan untuk memutar ke sana. Awalnya kami ingin memasang rambu di atas jalan. Kota ini memiliki layanan seperti itu - letakkan tanda tambahan berwarna kuning di bawah tanda biasa, itu dianggap iklan. Dan harganya seperti iklan: di Entuziastov Highway, satu tanda berharga satu juta rubel setahun. Pada saat yang sama, kami menulis ke Yandex, dan mereka bahkan tiba-tiba merespons. Dan mereka berhenti bertingkah. Anda bahkan dapat menentukan dioda gerbang: masuk melalui beberapa, keluar melalui yang lain.

Google, jika Anda membaca kami, ketahuilah: Anda masih mempunyai masalah, dan kami tidak tahu kepada siapa harus menceritakannya agar kami dapat didengarkan.

Surat undangan menyertakan tautan tidak hanya ke suatu alamat, tetapi ke alamat dengan rute berdasarkan geolokasi pengguna. Hasilnya, kesalahan yang terjadi lebih sedikit.

Proyektor Gobo dan barang kecil lainnya

Tahukah Anda apa itu proyektor gobo? Kami juga tidak tahu. Entah bagaimana kami berpikir tentang cara menandai deretan rak. Raknya sendiri tentu saja ditandai dengan tanda pelepas cepat khusus, namun dapat dilihat dari jarak 1-2 meter. Aulanya sendiri berukuran 500 meter persegi, jadi ada banyak ruang untuk tersesat di sana. Oleh karena itu, kami akhirnya mulai menandai baris tersebut. Brainstorming telah dimulai. Bagaimana cara menandainya, dengan apa dan di mana? Di lantai, di dinding, tanda di langit-langit, dll. Dan kemudian rekan kami melihat bahwa di Ikea dulu ada stiker yang terkikis di lantai, dan kemudian muncul panah ringan. Ya, kami memutuskan untuk membalikkannya dengan cara sederhana: pergi ke Ikea dan nyalakan salah satu proyektor untuk melihatnya. Kami tidak bisa mendapatkannya: saat kami sedang membawa kursi, penjual menanyakan apa yang kami lakukan. Dan dia segera membantu sambil mengatakan bahwa itu adalah gobo. Ternyata ini bukan proyektornya sendiri, melainkan piringan atau lensa untuk gambar berwarna. Filter ini adalah gobo. Satu proyektor berharga mulai 40 ribu rubel (ada lampu yang kuat untuk penggunaan siang hari), dan kami memiliki 14 baris di masing-masing dari empat ruang mesin. Itu sebabnya kami menempelkan stiker di atasnya.

Kami juga memiliki diagram di dinding yang memudar selama bertahun-tahun. Kami mengubahnya menjadi yang dilaminasi, dengan kantong khusus yang “dijahit” untuk auditor. Dalam kasus kami, Inspektur adalah chief engineer, yang tanggung jawabnya mencakup memeriksa relevansi semua skema yang berlokasi di pusat data. Jadi, semua skema harus diperiksa setiap tahun dan ditandatangani oleh auditor tersebut. Dan hadirnya magasin kecil khusus di saku diagram membuat prosedur ini lebih mudah dan tidak perlu mengganti diagram itu sendiri setiap tiga tahun sekali. Laba!

Kami melakukan pembersihan berputar pada lantai yang ditinggikan di luar. Kami melakukan pembersihan rutin, kami memiliki metode dan waktu pembersihan. Namun roda rak yang berat itu meninggalkan bekas. Kami melakukan pembersihan. Sekarang kami gugup: tampilannya tidak jauh lebih rapi, tetapi sorotan telah muncul dari sudut tertentu untuk orang-orang tertentu, yang memiliki spidol sendiri yang sesuai dengan selera mereka. Sekarang kami sedang memikirkannya dan mencari bahan kimia yang akan memutihkan lantai dan menambah kilau. Sehingga yang terpilih pun tidak ada pertanyaan.

Pernahkah Anda melihat rak konsol? Ini seperti meja prasmanan bepergian, tetapi sebagai pengganti minuman, ada terminal untuk menghubungkan ke rak. Jadi, di rak kantilever ini, rodanya terjatuh dan macet, seperti gerobak di supermarket. Kami sangat muak. Oleh karena itu, satu-satunya cara yang mungkin untuk menghidupkannya kembali adalah dengan membeli roda baru. Namun tidak mungkin lagi mendapatkan roda khusus untuk model kami; kami mewawancarai semua kontraktor. Hasilnya, kami merancang rak sendiri, dengan fokus pada kemudahan pergerakan di sekitar ruang mesin dan kemudahan perawatan. Itu berhasil dengan sangat baik.

Ada sebuah cerita dengan kaus kaki sintetis. Ada yang namanya gelang antistatis. Ini adalah saat Anda pergi ke rak, menghubungkan gelang ke tanah di rak, dan itu berkomunikasi dengan sistem pemerataan potensial. Jadi, rak tersebut di-ground-kan, tetapi ternyata teknisinya tidak di-ground-kan. Rekan kerja dari tempat kerja sebelumnya memberi tahu kami bagaimana mereka melihat percikan api di kamera pengawas beberapa kali, dan kami memutuskan, karena dosa, untuk mewajibkan semua orang untuk menggunakannya secara langsung sesuai dengan peraturan.

Insiden Kritis

Pada catatan yang lebih serius, ada situasi ketika semua pendingin dimatikan sekaligus. Pendingin kami tidak dilindungi oleh UPS, karena kami percaya pada fisika, dan kami memiliki genangan air dingin sebagai cadangan suhu. Jika terjadi pemadaman listrik, Anda tidak memerlukan baterai untuk menyalakan pendingin yang mendinginkan air, cukup air dingin itu sendiri yang sudah siap. Nyaman dan sederhana, tetapi ada nuansanya. Pendingin dilengkapi dengan peralatan keselamatan otomatis, yang mematikannya jika terjadi parameter berbahaya pada jaringan listrik. Jika input dimatikan, kami menyalakan genset diesel, dan kemudian pendingin diberi daya darinya. Semuanya akan baik-baik saja jika kita tidak tinggal di Rusia. Kami mengalami pemadaman jaringan berkali-kali, tetapi semuanya baik-baik saja. Namun suatu hari terjadi lompatan tajam, pertama turun, lalu naik tajam, lalu turun lagi - dalam beberapa detik parameter input berubah sekitar 4 kali. Tentu saja, pendinginnya dimatikan. Kami pertama kali mencoba menyalakannya dari jarak jauh, tetapi mereka melindungi diri mereka sendiri dengan sangat andal, seperti dalam keadaan darurat. Pergeseran harus berjalan dengan kaki di atas atap dan menyalakannya secara manual. Yang penting, menurut standar TierIII, situasi seperti itu merupakan alasan yang sah untuk menutup pusat data. Kami tidak berhenti, karena orang-orang tergeletak di tanah, dan ada latihan dengan latihan. Untuk ini, UI hanya meniduri kami secara teratur, untuk memastikan TIII Beroperasi. Bahkan kami sudah lolos resertifikasi UI menjadi TIII Emas - Keberlanjutan Operasional. Di pasar pusat data komersial Rusia tidak ada yang lebih keren, kecuali milik kami, hanya satu yang memiliki pencapaian yang sama Pusat Data. Saya perhatikan bahwa sertifikasi ulang lebih sulit daripada mendapatkan sertifikat dari awal, karena mereka memeriksa periode sebelumnya seolah-olah Anda bukan diri Anda sendiri, dan diperlukan lebih banyak bukti.

Ada kejadian menarik dengan kamera. Kami memutuskan untuk menghitung ulang titik buta untuk berjaga-jaga, menggambar persimpangan, menggambar diagonal sudut pandang pada denah, dan tiba-tiba kami menemukan titik buta berukuran sekitar 30 sentimeter kali 15 meter tepat di tengah salah satu aula. Sempit dan panjang. Tidak ada hal seperti itu di kamar sebelah. Ternyata kamera yang berputar tersebut perlahan-lahan bergerak selama bertahun-tahun sehingga mulai terlihat sekitar satu setengah derajat ke kiri dari yang seharusnya pada posisi ekstrim.

Ada insiden besar lainnya di postingan tersebut tentang perbaikan penggantian DDIBP.

referensi

Sumber: www.habr.com

Tambah komentar