Cuộc sống thường nhật của một trung tâm dữ liệu: Những điều nhỏ nhặt không thể thấy rõ trong 7 năm hoạt động. Và phần tiếp theo về con chuột

Cuộc sống thường nhật của một trung tâm dữ liệu: Những điều nhỏ nhặt không thể thấy rõ trong 7 năm hoạt động. Và phần tiếp theo về con chuột

Tôi sẽ nói ngay: con chuột trong máy chủ được mang đến, nơi chúng tôi đã pha trà vài năm trước sau một lần bị điện giật, rất có thể đã trốn thoát. Bởi vì chúng tôi đã từng gặp bạn của cô ấy trong một lần đi chơi. Và chúng tôi ngay lập tức quyết định lắp đặt thiết bị đuổi sóng siêu âm.

Bây giờ có một vùng đất bị nguyền rủa xung quanh trung tâm dữ liệu: không có con chim nào đậu trên tòa nhà, và có lẽ tất cả chuột chũi và sâu đã trốn thoát. Đã lo lắng rằng âm thanh có thể gây ra lỗi ổ cứng nhưng kiểm tra thì tần số không giống nhau.

Câu chuyện tiếp theo sẽ vui hơn nhiều. Có lần chúng tôi nhận được một phần cứng trị giá vài triệu rúp đựng trong một chiếc hộp có cảm biến độ nghiêng, độ rung và độ ẩm. Mọi thứ đều nguyên vẹn. Cẩn thận tháo bao bì ra, miếng sắt bị cong. Thần bí.

Thân thẳng theo hình vòng cung. Rất đẹp.

thám tử

Chúng tôi sẽ không coi trọng điều này vì thân kim loại cong gần như là một hình ảnh thiết kế. Đẹp quá, không có chip. Và nếu không có những phần cứng tương tự khác ở gần đó, chúng tôi thậm chí sẽ không nghĩ đến việc giải nén rằng có điều gì đó không ổn. Nhưng gần đó cũng có những cái tương tự, chỉ có hình dạng hình học đều đặn hơn.

May mắn thay, việc giải nén phần cứng như vậy đã được quay phim (tôi khuyên mọi người nên tập thói quen này), vì vậy chúng tôi đã có thể chứng minh cho nhà sản xuất rằng nó đã đến như vậy. Một gói hàng nguyên vẹn và thân xe được uốn cong gọn gàng không phải là cú đánh từ những người vận chuyển. Rất có thể, cô ấy đã bị thương ngay cả trước khi lên đường sang Nga.

Người bán hàng nói: “Ồ, các bạn ơi, đổi ngay cho các bạn theo chế độ bảo hành nhé”. Và rồi một cuộc phục kích hoành tráng đang chờ đợi chúng tôi.

Thực tế là hải quan cho phép chúng tôi nhập khẩu những thiết bị đó có giấy tờ mà không có quyền xuất khẩu. Tức là bạn có thể mang nó đi nhưng không thể bán lại cho người ngoài nước Nga. Ví dụ: khi chúng tôi gửi lại một nguồn điện bị cháy, mọi thứ đều rõ ràng. Đây là một bộ phận dự phòng, một nguồn điện.

Và sau đó tôi phải gửi lại mọi thứ:
- Các bạn nhìn xem, chúng tôi đang gửi lại phần cứng cho nhà sản xuất.
- Toàn bộ thiết bị?
- Vâng.
– Làm mẫu thế này thế nọ?
- Vâng.
- Có thể làm việc?
- Chúng tôi không biết, chúng tôi không bật nó lên.
- Vậy đây là cả một thiết bị.
- Thôi, nó không có tác dụng.
- Nhìn này, toàn bộ thiết bị đều là của model này. Không có quyền tái xuất. Chúng tôi sẽ không cho phép bạn vào.

Nói chung, đã có rất nhiều lần squat trước khi chúng tôi phát hiện ra rằng chúng tôi không xuất khẩu mà trả lại. Cuối cùng, chúng tôi đã làm được mọi việc.

Ngoài ra còn có bao giày

Đầu tiên, nhiều năm trước, chúng tôi đã có chiếc máy tự động đầu tiên, giấc mơ của một quản trị viên. Bạn nhét một gói bọc giày vào đó, nó sẽ tự bung ra, mở ra và đặt vào vị trí mà bạn chỉ cần dẫm lên là được. Chp-chpk thế là xong.

Sau khoảng sáu tháng, cô nhai hết khoảng trăm gói bọc giày và nghẹn ngào. Hóa ra là có rất nhiều bộ phận chuyển động mà chúng tôi cần phải sửa chữa mỗi tháng một lần khi tải (chúng tôi có rất nhiều kỹ sư khách hàng đi lại quanh cơ sở vì chúng tôi là một trung tâm dữ liệu thương mại) hoặc chúng tôi cần mua một cái mới.

Vấn đề thứ hai là sau đó, trong một lần dọn dẹp thường xuyên, bằng cách nào đó chúng tôi đã tìm thấy một “miếng giẻ nhỏ màu xanh” treo trên vỉ của một trong những giá đỡ thử nghiệm của chúng tôi. Chuyên gia pháp y do kỹ sư X-Team đại diện đã xác định được một mảnh vỏ giày. Hóa ra việc mang bao giày ở phòng khám rất tiện lợi: Tôi đi bộ nửa tiếng là xong. Và một số kỹ sư có thể làm việc với phần cứng cả ngày. Bước chân loạng choạng. Xáo trộn rất nhiều. Và vỏ giày bị mòn thành những mảnh vụn nhỏ bay quanh sảnh tuabin.

Chúng tôi gần như ngay lập tức mua một vỏ giày mới. Chúng tôi lấy một hộp đựng ủng tản nhiệt: đây là một chiếc máy có màng được sạc vào và nó cẩn thận làm nóng lớp màng này trên đầu giày. Đẹp, hiệu quả, bền bỉ. Ít tán xạ hơn. Chúng tôi đã sử dụng nó khá lâu nhưng chúng tôi phải thay màng co khoảng 1-2 giờ một lần, vì đế có xu hướng tự rơi ra.

Lúc đầu chúng tôi nghĩ mình không may mắn, nhưng mọi người bằng cách nào đó đã giải quyết được vấn đề này. Nhưng không. Chúng tôi đã hỏi các đồng nghiệp phương Tây của mình - câu chuyện tương tự. Kết quả là họ bắt đầu suy nghĩ về việc làm thế nào để thực hiện điều đó một cách đúng đắn. Thành thật mà nói, trở về từ hội trường tuabin để mua vỏ giày mới là một ý tưởng tầm thường. Chúng tôi đã tìm thấy chất tẩy rửa công nghiệp cho các công trường xây dựng và các ngành công nghiệp. Đây giống như những con đường mà ca làm việc đi vào xưởng. Các đường dẫn với một loạt con lăn sẽ làm sạch mọi thứ và được làm theo cách mà dù bạn có muốn hay không thì nó cũng sẽ bắt và làm sạch. Chúng có giá từ nửa triệu đến một triệu rúp. Chúng tôi đã lùng sục và tìm thấy một chiếc tương tự với giá 200 nghìn, nhưng bạn phải tự mình đặt chân vào đó. Nó có kích thước tương tự như một chiếc máy đánh giày. Bạn bước lên, thọc chân vào đó, cô ấy nhai rồi trả lại sạch sẽ. Họ đặt nó ở lối vào trung tâm dữ liệu.

Nó hoạt động rất tốt ngoại trừ hai vấn đề. Đầu tiên là chúng tôi nhanh chóng nhận ra rằng điều này là bình thường đối với các kỹ sư của chúng tôi. Nhưng trên thực tế, có rất nhiều người đến trung tâm dữ liệu để xem xét, bao gồm cả những giám đốc điều hành cấp cao của các công ty lớn. Với đôi giày làm bằng da từ mông rồng. Và ngay cả khi thoa kem lên giày, bàn chải của họ còn đắt hơn giày thể thao của tôi, họ đặc biệt chọn loại lông bàn chải. Chính họ đã từ chối đặt chân vào thiết bị thần kỳ của chúng tôi. Vấn đề thứ hai nảy sinh vào mùa đông: khi giày thực sự bẩn, chúng không thể lấy hết mọi thứ ra khỏi rãnh sâu. Sau đó, bạn đi bộ xung quanh hội trường, để lại dấu vết của tế bào chất.

Chúng tôi quyết định một cách đơn giản. Chúng tôi đặt một vỏ bọc giày cuộn bên cạnh nó. Tương tự, chúng ta cần sao chép mọi thứ theo tiêu chuẩn.

Một vấn đề mới đã phát sinh. Quan sát hành vi của các kỹ sư khách hàng, chúng tôi thấy hình ảnh sau: đầu tiên họ nhét chân vào máy để vệ sinh, sau đó móc vỏ giày từ vỏ giày cuộn lại. Bây giờ họ đã đặt biển báo là cái này hay cái kia, tốt hơn hết là bạn nên vệ sinh sạch sẽ, nhưng nếu nguyên tắc cuộc sống cấm vệ sinh giày thì hãy mang bao giày vào. Có vẻ như tấm vé chỉ có vài ngày nhưng tồn tại rất lâu đã bị đóng. Đây là thiết bị:

Cuộc sống thường nhật của một trung tâm dữ liệu: Những điều nhỏ nhặt không thể thấy rõ trong 7 năm hoạt động. Và phần tiếp theo về con chuột

"ku" hai lần

Theo yêu cầu của PCI DSS, bạn cần có khả năng phân biệt trực quan vai trò của những người ở trung tâm dữ liệu. Không cần nhìn kỹ vào thẻ và đọc một cái gì đó ở đó, mà trực tiếp bằng mắt, giống như quân nhân phân biệt nhau bằng dây đeo vai, chỉ có điều còn sáng hơn. Chúng tôi quyết định không phô trương và sử dụng phương pháp Chatlan cũ - phân biệt màu sắc của quần. Cụ thể, họ bắt đầu tạo ra những dải ruy băng có nhiều màu sắc khác nhau. Quản trị viên của chúng tôi ngay lập tức chọn Màu xanh lá cây làm mục yêu thích của họ.

Nghe có vẻ đơn giản nhưng nó lại gây ra ba tác dụng không ngờ:

  1. Cần có bộ rút để tự động rút lại các đường chuyền này khi bị mòn (đây là những thứ tự điều chỉnh độ dài của băng). Chúng tôi đã viết một bản đặc tả kỹ thuật có tính đến tất cả mong muốn của tất cả các bộ phận. Đây là một sai lầm chiến lược. Màu sắc, hình thức, chất liệu, dây rút không phải nhựa, dây câu được làm bằng kim loại để dán logo sao cho được khâu vào băng. Các sản phẩm này đắt đến mức chúng tôi phải cắt giảm yêu cầu và thay đổi định dạng.
  2. Khi tính năng phân biệt quần bắt đầu hoạt động, nó trở nên rất tiện lợi. Các nhà thầu có một số dải băng, quản trị viên bên ngoài có những dải băng khác và quản trị viên của chúng tôi có những dải băng khác. Bạn có thể xem ai có vai trò gì. Đối với điện - chỉ màu xám, đối với điều hòa không khí - màu xanh lam. Và sau đó chúng tôi cần ruy băng cho người lái xe (đây là một vai trò riêng biệt, họ có thể vào khu vực dỡ hàng, nhưng không được rời khỏi đó ngoại trừ bên ngoài). Trình điều khiển không cần phải có pass. Lúc đầu, chúng tôi đưa cho họ những dải ruy băng mà không cần giấy thông hành. Sau đó, các nhân viên bảo vệ cho rằng điều này hoàn toàn kỳ lạ và hạ thấp phẩm giá con người của người lái xe. Họ có logic quân sự riêng nên giờ đây tài xế đến nhận thẻ ngay bằng dải băng, nhưng thẻ này không cho phép họ đi đâu cả. Từ quan điểm bảo mật, hóa ra đó là dấu hiệu cho thấy an ninh đã kiểm tra người này.
  3. Một trong những kỹ sư của chúng tôi đề nghị làm áo len đồng phục màu xanh lá cây thay vì ruy băng. Và anh ấy đã gửi một đề nghị hợp lý hóa. Họ đã làm được một nửa: họ để lại những dải ruy băng trên thẻ, ngoài ra họ còn may những chiếc áo len đồng phục màu xanh lá cây. Bây giờ chúng ta có đồng phục quản trị viên. Các nhân viên bảo vệ ủng hộ trò đùa và đưa nó vào quy định. Bây giờ nó là bắt buộc (quần, áo sơ mi, áo len, nhưng áo len có thể được cởi bỏ).

Khách hàng của chúng tôi cũng thường phàn nàn về các tuyến đường quanh co trên bản đồ trước khi vào trung tâm dữ liệu Compressor của chúng tôi. Bạn nhập địa chỉ nhưng đường được hiển thị không chính xác. Cuối cùng, du khách đã đi taxi sai hướng, vì ở đó có đường sắt, phía sau lại tắc đường, không có cách nào để quay đầu lại. Lúc đầu, chúng tôi muốn đặt biển báo phía trên đường. Thành phố có một dịch vụ như vậy - đặt các biển bổ sung màu vàng bên dưới các biển báo thông thường, chúng được coi là quảng cáo. Và cái giá dành cho chúng cũng giống như quảng cáo: trên Đường cao tốc Entuziastov, một tấm biển có giá một triệu rúp một năm. Đồng thời, chúng tôi đã viết thư cho Yandex và họ thậm chí còn đột ngột phản hồi. Và họ đã ngừng hành động. Bạn thậm chí có thể chỉ định các điốt cổng: vào qua một số, thoát qua các điốt khác.

Google, nếu bạn đang đọc chúng tôi, thì hãy biết: bạn vẫn gặp sự cố và chúng tôi không biết phải nói với ai về vấn đề đó để chúng tôi có thể được lắng nghe.

Thư mời bao gồm các liên kết không chỉ đến một địa chỉ mà còn đến một địa chỉ có lộ trình dựa trên vị trí địa lý của người dùng. Kết quả là số lần bỏ lỡ ít hơn.

Máy chiếu Gobo và các vật dụng nhỏ khác

Bạn có biết máy chiếu gobo là gì không? Chúng tôi cũng không biết. Bằng cách nào đó chúng tôi đã nghĩ đến cách đánh dấu các hàng giá đỡ. Tất nhiên, bản thân các giá đỡ được đánh dấu bằng các dấu hiệu tháo nhanh đặc biệt, nhưng chúng có thể được nhìn thấy từ khoảng cách 1-2 mét. Hội trường rộng 500 m40 nên có rất nhiều chỗ để lạc ở đó. Vì vậy, cuối cùng chúng tôi đã bắt đầu đánh dấu các hàng. Một cuộc động não đã bắt đầu. Làm thế nào để đánh dấu, với cái gì và ở đâu? Trên sàn, trên tường, bảng hiệu trên trần nhà, v.v. Và sau đó đồng nghiệp của chúng tôi thấy rằng ở Ikea từng có những miếng dán bị mòn trên sàn và sau đó những mũi tên ánh sáng xuất hiện. Chà, chúng tôi quyết định đảo ngược nó theo một cách đơn giản: đến Ikea và lấy ra một trong những máy chiếu để xem. Chúng tôi không hiểu: khi chúng tôi đang khiêng ghế, người bán hàng hỏi chúng tôi đang làm gì. Và anh ấy ngay lập tức giúp đỡ, nói rằng đó là một con gobo. Hóa ra đây không phải là máy chiếu mà là một tấm hoặc ống kính để tạo ra hình ảnh màu. Bộ lọc này là một gobo. Một máy chiếu có giá từ 14 nghìn rúp (có đèn mạnh để sử dụng vào ban ngày) và chúng tôi có XNUMX hàng trong mỗi phòng trong số bốn phòng máy. Đó là lý do tại sao chúng tôi dán nhãn dán lên nó.

Chúng tôi cũng có những sơ đồ trên tường bị phai màu theo năm tháng. Chúng tôi đã đổi chúng thành loại nhiều lớp, có túi “khâu vào” đặc biệt dành cho kiểm toán viên. Trong trường hợp của chúng tôi, Thanh tra viên là kỹ sư trưởng, người có trách nhiệm bao gồm kiểm tra mức độ liên quan của tất cả các sơ đồ nằm trong trung tâm dữ liệu. Vì vậy, tất cả các kế hoạch phải được kiểm tra hàng năm và có chữ ký của kiểm toán viên đó. Và sự hiện diện của một tạp chí nhỏ đặc biệt trong túi sơ đồ giúp quy trình này trở nên dễ dàng hơn và không yêu cầu phải thay sơ đồ ba năm một lần. Lợi nhuận!

Chúng tôi đã thực hiện vệ sinh quay vòng sàn nâng bên ngoài. Chúng tôi có dịch vụ dọn dẹp thường xuyên, chúng tôi có phương pháp và thời gian dọn dẹp. Nhưng bánh xe của giá đỡ nặng để lại dấu vết. Chúng tôi đã dọn dẹp. Bây giờ chúng tôi lo lắng: nó trông không gọn gàng hơn nhiều, nhưng những điểm nổi bật đã xuất hiện từ những góc độ nhất định đối với một số người, những người có bút nỉ riêng để phù hợp với sở thích của họ. Bây giờ chúng tôi đang suy nghĩ về nó và đang tìm kiếm một loại hóa chất nào đó có thể làm trắng sàn và thêm độ bóng. Để ngay cả những người được chọn cũng không có câu hỏi nào.

Bạn đã thấy giá đỡ bảng điều khiển chưa? Chúng giống như bàn buffet du lịch, nhưng thay vì đồ uống, có một thiết bị đầu cuối để kết nối với giá đỡ. Vì vậy, trên những giá đỡ đúc hẫng này, bánh xe rơi ra và kẹt cứng, giống như những chiếc xe đẩy trong siêu thị. Chúng tôi vô cùng chán ngấy. Do đó, cách duy nhất có thể để hồi sinh nó là mua một bánh xe mới. Nhưng không còn có thể mua bánh xe dành riêng cho các mẫu xe của chúng tôi nữa; chúng tôi đã phỏng vấn tất cả các nhà thầu. Do đó, chúng tôi đã tự thiết kế giá đỡ, tập trung vào việc dễ dàng di chuyển xung quanh phòng máy và khả năng bảo trì. Nó làm việc ra rất tốt.

Có một câu chuyện về những chiếc tất tổng hợp. Có một thứ như vậy - vòng tay chống tĩnh điện. Đây là lúc bạn đến giá đỡ, nối vòng đeo tay với mặt đất trên giá và nó giao tiếp với hệ thống cân bằng điện thế. Vì vậy, giá đỡ được nối đất, nhưng có thể kỹ sư không được nối đất. Các đồng nghiệp ở những nơi làm việc trước đây đã nói với chúng tôi rằng họ đã đôi lần nhìn thấy những tia lửa trên video giám sát và chúng tôi quyết định, vì tội lỗi, bắt buộc mọi người phải sử dụng nó trực tiếp theo quy định.

Sự cố quan trọng

Một lưu ý nghiêm trọng hơn là có một tình huống là tất cả các thiết bị làm lạnh đều bị cắt cùng một lúc. Thiết bị làm lạnh của chúng tôi không được bảo vệ bởi UPS vì chúng tôi tin vào vật lý và chúng tôi có một bể nước lạnh để dự trữ nhiệt độ. Nếu có sự cố xảy ra, bạn không cần pin để cấp nguồn cho thiết bị làm lạnh làm mát nước mà chỉ cần nước lạnh đã sẵn sàng. Thuận tiện và đơn giản, nhưng có một sắc thái. Máy làm lạnh được trang bị thiết bị an toàn tự động, có chức năng tắt khi có thông số nguy hiểm của mạng điện. Nếu đầu vào bị tắt, chúng tôi bật bộ máy phát điện diesel và sau đó các thiết bị làm lạnh sẽ được cấp điện từ chúng. Mọi thứ sẽ ổn nếu chúng tôi không sống ở Nga. Chúng tôi đã nhiều lần bị mất mạng nhưng mọi thứ đều ổn. Nhưng một ngày nọ, có một bước nhảy vọt, lúc đầu giảm xuống, sau đó tăng mạnh, rồi lại giảm - trong vài giây, các thông số đầu vào thay đổi khoảng 4 lần. Tất nhiên, máy làm lạnh đã tắt. Lần đầu tiên chúng tôi thử bật chúng từ xa, nhưng chúng tự bảo vệ mình rất đáng tin cậy, giống như một trường hợp khẩn cấp. Ca làm việc phải đi bằng chân trên nóc và bật bằng tay. Điều quan trọng là, theo tiêu chuẩn TierIII, tình huống như vậy là lý do chính đáng để đóng cửa trung tâm dữ liệu. Chúng tôi không có điểm dừng, bởi vì mọi người đều cúi đầu xuống đất và có các bài tập luyện. Đối với điều này, giao diện người dùng chỉ đơn giản là làm phiền chúng tôi thường xuyên để đảm bảo về Hoạt động của TIII. Nếu có, chúng tôi đã chuyển chứng nhận lại UI cho TIII Gold - Tính bền vững trong hoạt động. Trên thị trường trung tâm dữ liệu thương mại của Nga không có gì ngầu hơn, ngoại trừ của chúng tôi, chỉ có một trung tâm có thành tích tương tự Trung tâm dữ liệu. Tôi lưu ý rằng việc chứng nhận lại khó hơn việc lấy chứng chỉ từ đầu, vì họ kiểm tra kỳ trước như thể bạn không phải là chính mình và cần nhiều bằng chứng hơn.

Có một sự cố thú vị xảy ra với camera. Chúng tôi quyết định tính toán lại các điểm mù để đề phòng, vẽ các giao lộ, vẽ các đường chéo của góc nhìn trên sơ đồ, và đột nhiên chúng tôi tìm thấy một điểm mù có kích thước khoảng 30 cm x 15 mét ngay chính giữa một trong các hội trường. Hẹp và dài. Không có thứ đó ở phòng bên cạnh. Hóa ra là camera quay đã di chuyển chậm rãi trong nhiều năm nên nó bắt đầu hiển thị về bên trái khoảng một độ rưỡi so với mức cần thiết ở vị trí cực đoan.

Có một sự cố lớn khác trong bài viết về việc sửa chữa thay thế DDIBP.

tài liệu tham khảo

Nguồn: www.habr.com

Thêm một lời nhận xét