ライトグリーンを基調とした小旅行

サンクトペテルブルクの最も重要な交通問題は橋です。 夜になると、彼らのせいでビールを飲み終えずに居酒屋から逃げなければなりません。 あるいは、タクシーに通常の XNUMX 倍の料金を支払うことになります。 朝は、橋が閉まったらすぐに機敏なマングースのように駅に到着できるように、時間を慎重に計算してください。 私たちは、「駅の近くの中心部のどこかで夜を過ごす」という選択肢がイデオロギー的に有害であるとは考えていません。

...5:30出発の「ハヤブサ」はフクロウを嫌う人々が発明したものです。 いや、もちろん、朝の270時にモスクワに着くのはとても便利だし、サンクトペテルブルクは白夜の間は信じられないほど美しいが、XNUMX時半にタクシーに乗ったとき、私は頭をXNUMX度向けたくなった。今朝の電車を発明したヒバリに敬意を表します。

DataLine の担当者が私たちを訪問に招待したことを知ったとき、「優れたデータセンターはどれも似ている」と思いました。

結局のところ、各データセンターには独自の点で多少の良い (または悪い) 点があり、特に大きなチャンスを掴み、エリア内のすべての熊手を集め、自分の (そして少しは他の人の) 教訓から学ぶことができます。 ）豊富な経験。 そこで、私たち (大手 linkmeup XNUMX 社とその友人および共感者で構成) は、OST および NORD データ センターがどの程度優れているか (またはそれほど良くないか) を確認することにしました。

道路上で少しの仕事をなんとかこなした後（ここには携帯電話会社の広告が表示される可能性がありますが、そうではありません。通信範囲はまだ悪かったです）、私たちはレニングラードスキー駅で荷物を降ろしました。 まあ、少なくともガズマノフの下ではそうではありません。

私たちは、OST を備えた「石灰」データ センターのツアーを開始しました。これは、少し前に「燃え尽きた」「同じもの」です。 なぜ引用符で囲んだ後なのか。 その間、私たちは立ってタバコを吸いながら、遅れてくる人を待ちます。 隣のRTオフィスを撮影。 この地区については、高官の到着前に新鮮なアスファルトを敷いて縁石にペンキを塗った話から、バッジが似ているという理由でデータラインの住民に与えられた近くのカフェの割引まで、面白い話がたくさんあります。

全体主義プロパガンダの代弁者

ストリクト（アクセス）モードのデータセンター

パス、行動規則、入り口の肉挽き器 - 私たちが見たものとほぼ同じもの Linxdatacenterへの小旅行中。 データセンターにコーヒーショップがたくさんあるのを見たことがありますか? 今、私たちはカップルを知っています。 従業員と顧客はバッジに「コーヒー」を預けており、定期的に補充されます。 したがって、妥当な範囲内であれば、完全に無料でコーヒーを楽しむことができます。 親愛なるゲストである私たちも食事をご馳走になりました。

コーヒーについては何も悪いことは言えません。「チェーン」コーヒーショップとしてはごく普通のことですが、ロケーションは思わず魅了され、インテリアは最高の現代の伝統に沿っています。

地元のコーヒーショップのインテリア

写真はNORDデータセンターを示しています

ツアーはオフィスから始まります。 壁の碑文や、ルネット全体で知られる白とライムの配色に加えて、あらゆる種類の面白いものもあります。 これらは、企業劇場の公演で使われた小道具です (データ センター ネットワークのテクニカル ディレクターが劇中で演じているところを想像できますか? 私たちは彼のことを個人的に知っています)。

そして真実

公演写真

データ センター (正確には XNUMX つのデータ センター) は、前世紀に建設された工業用建物の複合施設 (当時はシトロエン工場、ソ連時代にはギドロプリヴォド工場) に位置しているため、一方では厳しい環境が整っています。インダストリアルな外観、金属の梁、ロフトの雰囲気、さまざまな作品の中で今でも見られるさまざまな時代の工業製品。 一方で、データセンターの気密ゾーンは既存の構造に適合させる必要があり、現実との妥協が必要な場合もあります。 ただし、これらの妥協が品質に影響を与えたとは言いませんが、設計中にスタッフはおそらく懸命に働く必要がありました。 また、噂によるとメトロ2号線が近くを通っているそうですが、定かではありません。

劇場のほかに博物館もあります。 展示物、当然のことながら考古学的発見物

について一言 火。 そう、建物（というか屋上）が本当に燃えていました。 冷却システムの外部ユニットと冷気配管が損傷した。 どこかの配線が切れてしまい、エアコンに電気が通らなくなってしまったのです。 フロンパイプがどこかで爆発した。 しかし、それにもかかわらず、気密ゾーンは大量の水が注がれても耐え、装置は無事でした。 彼らはそれを全世界のトップマネジメントが代表する「本部」の管理下で修復した。彼らはモスクワとその周辺地域のすべての銅管をかき集め（夜間にBMW X5で運び込んだ）、そしてすべての地味な銅管をすべてかき集めた。設置者。 損傷したデータホール (火災ではなく、寒さの欠如によって損傷した!) の重要な機器はすぐに他のホールに移動され、午前 XNUMX 時までにすべてのサービスだけでなく、顧客の数も回復しました。

私たちは「最も被害を受けた」ホールを個人的に確認しました。高床式タイルが焼けて交換された臭いを除いて、火災を思い出させるものはまったくありませんでした（別のデータホールに「一時的に」運ばれた機器のラックを除いて）。そしてそこに留まりました）。

ステータスパネル

廊下に沿って歩いていると、データセンターのタービン室の図に非常によく似たものが表示されたタッチ ディスプレイが見えます。 これはステータスパネルです。 廊下にたくさん設置されており、現場のエンジニアは必要なエアコンなどをすぐに見つけて、現状を報告するだけで済みます。

監視は Nagios 上に構築され (現在、すでにいくつかの独立したクラスターがあります)、すべてのデータセンター (OST と NORD の両方) をカバーします。 さらに、Android および iOS 用のアプリケーション (クライアントおよび従業員用) と、Web サイト上に直接ステータス ページが表示されます。

ディスプレイを見ると、PUE が異常に高いことに気づきました。これはロシアのどこでも受け入れられているわけではありませんが、それでも 1.90 はやや高いです。 これに対する答えは純粋に経済的なものです。2012 年から 2013 年にかけて、データセンターのラックは飛ぶように売れたため、感傷やエネルギー効率に気を配る暇はありませんでした。 私たちは市販されているものをできるだけ早くインストールし、お客様の PUE についてはまったく気にしません。なぜなら? 設計段階でもラックの 80 ～ 90% が購入されていますが、ロシア連邦の法律はエネルギー効率については何も知りたがりません。 アムステルダムの一部の委員会はそのような数字に満足するだろうが。

Ничего личного.個人的なことは何もありません。 Просто бизнес.ただのビジネス。

もう一つの特徴はデータホールのマーキングです。 各サイトのデータ ホールには、「公式」の英数字エンコーディングに加えて、海軍のアルファベット (Alpha-Bravo-Charlie-Delta...) からの「人間の」仮名が使用されています。 どういうわけか、すべてのクライアントはウィスキールームを愛しています。

カスタマーケアに関しては細かいことはありません。

一部のクライアントに対しては、そのような「柵」が設置されています。 タービン室内は撮影禁止だったので写真はDataLine ©

DataLine の顧客のほとんどは評判の高い大企業ですが、自社の機器が写真に撮られることを非常に好みません。 また、カウンターに直接お客様のお名前（またはロゴ）が大きく書かれている場合。 彼らはそれが気に入らない、それだけです。 そこで、さまざまな碑文が刻まれたすでに有名な壁とエンジニアを撮影しました。 エンジニア全体やどこでも写真を撮ることは不可能ですが、私たちは試みました。 当社のクライアントは規模が大きく、尊敬されているため、特別なラック (または複数のベンダーのラックからの何らかの種類の uber ストレージ システム)、独自のフェンス、独自のアクセス制御システム、独自のビデオ監視、および迅速な対応チームなど、特定の要求もあります。機関銃。 一般に、DataLine の暗黙の (そして公の) ルールの 152 つは、クライアントの世話をし、クライアントに良いことをすることです。 ベストやインターネット アクセスと充電器を備えたワークステーションから始まり、クライアント向けのさまざまなイベントまで。 後者は、同じ人が会社から会社へと移動しながら DataLine に連れてくるという点でも非常に便利です。 それは単に、ここにあるものすべてが居心地が良く、便利で、信頼できるからです。 DataLine のビジネスは、ラック スペースをレンタルすることだけではありません。 これはクラウドでもあり、9-FZ と PCI-DSS に従って同時に認定されており (これについてはポッドキャストを作成する予定です。発表をお待ちください)、接続性 (サイト間および各サイトからサイトへの独自のファイバー) を提供します。 MXNUMX、都市全体にわたる独自の光リングなど、クライアントのオフィスまでのラストマイルの組織まで続きます。

M - モチベーション

碑文といえば、従業員だけでなくパートナーやクライアントからもアイデアが寄せられ、最も成功したアイデアに投票できます。 公式ページ FBのデータライン。 そうですね、そこであなたのアイデアを提案することができます。

エルベの会議

クロス（写真提供：DataLine）

オペレーターがいるミートミールームに立ち寄ります。 MMR (アクティブおよびパッシブのメイン光入力の数に応じて、OST には 18 つのペアがあります) では、すべてのデータ ホールからの接続が結合されます。 クロスカントリーシューズでは、すべてが退屈できちんとしています。 しかし、アクティブなカメラが配置されている場所には、ワイヤーとさまざまな機器 (DLink、Extreme、Juniper、Mikrotik... など、ASR9k まで) で作られたいくつかの BMXNUMX の最高の年と映像が思い出されます。 ここにはXNUMX人以上のオペレーターがいて、すべてがカラフルです。 MMR から、光学部品と銅線が機械室に分配されます。 それぞれに少なくとも XNUMX つのルート (変更も可能) があるため、接続の信頼性を心配する必要はありません。 MMRは「エルベ」と呼ばれていますが、これは非常に微妙です。

IBMパワーナダ?

もう XNUMX つの発見物は、一度も電源が入っていない、数年間廊下の XNUMX つに放置されていた IBM P シリーズです。 このマシンは（テープ ライブラリとストレージ システムとともに）顧客の XNUMX 人によって注文されましたが、「役に立たなかった」ため、データ センターに寄贈されました。 それ以来ずっと立っています。

お金持ちの人がそういう贈り物をするのはいいことですよね？ （あるいは、プレゼントとしてあげたわけではなく忘れてしまったのかもしれません。あるいはトランプで負けたかもしれません。しかし、それは長い間存在していました）

このハンサムな男が NORD-4 に立っています

私たちはエネルギーセンターに行きます。各データセンターには 30 台 (または 40 台) のディーゼル発電機セットがあります (OST には 1900 台あることを思い出してください)。 ディーゼル エンジンは 1 ～ 12 秒でフルパワーに達し、2.5 kVA を生成します。 N+85 冗長性、同期などが含まれます。 OST でディーゼル エンジンを使用している最長時間は XNUMX 時間です。 NORDでは - XNUMX日（結局のところ、XNUMXトンの保管施設は大したお金ではありません）。

もちろん、燃料の供給についてはさまざまな燃料会社との協定がございます。 ディーゼルへの切り替えは定期的に行われるため、燃料の生産と契約の確認が行われます。 ちなみに同僚によると、NORDでは通常XNUMX時間以上かかるディーゼル発電機のテストを、ディーゼルエンジンからの熱風が出る場所で行うと、冬でもなんとか芝生が緑色に染まったという。

馴染みの喫茶店で軽食をとった後、NORD会場へ向かいます。 これも 1 つのデータ センターではなく、同じ敷地内に 2 つの独立した建物があります。 それぞれに独自の電力入力、独自のディーゼル エンジン、独自の冷却機能があります。 NORD-4 と NORD-XNUMX は Uptime Institute M&O の監査を受けました。 最新 (そして最高の DataLine データ センター) は NORD-XNUMX なので、そこを目指します。

モスクワには膨大な数のデータセンターがあるように見えますが、依然として不足しています。 いいえ、もちろん、4 つまたは 5 つのラックは問題なく出荷されます。 2020個もくれるよ。 さらに疑問がある (そして DataLine にはそのようなニーズを持つクライアントが XNUMX つか XNUMX つ以上あります)。 具体的には、NORD-XNUMX では、XNUMX つの大規模クライアントが自社の新しく構築されたデータ センターに移転したため、（今のところ）その場所がありますが、他の場所ではこれはそれほど幸運ではない可能性があります。 しかし、NORD-XNUMX の設計は現在本格的に進められており、XNUMX 年の初めに発売されることが約束されています。

さて、私たちの旅行に戻りましょう。 私たちは車で旅行していたので、彼らは私たちをゲートウェイに入れました、そこで機関銃手が私たちを狙い、アプリケーションで車の番号を確認し、乗客全員にパスを取得するために降りるように言いました（もちろんパスポートと一緒に）。 なぜならBはセキュリティだからです。

NORD-4 は当社の誇りであり、データセンターの建設と運営における長年の経験の集大成であり、設計プロジェクトと施設 (つまり、構築されたデータセンター)、および運用の持続可能性に関して Uptime Institute Tier III 証明書を取得しています。 - 彼らは責任を持って可能な限り厳密にこの問題に取り組みました。 内部には互いに独立した XNUMX つの密閉ゾーンがあり、XNUMX つの建物内にそれぞれ XNUMX つのホールがあります。 それぞれに独自の電力センター (ディーゼル発電機セット、バッテリー室)、冷却回路、消火システムがあります。 一般 - 光入力 (建物ごとに XNUMX つあります) および MMR。

健全なエンジニアの改造

データセンターの入り口には、おなじみのコーヒーショップが待っています（まあ、いいでしょう？）。 監視センターに行きます。 現在、OST と NORD-4 の 1,2,3 つの主要なものがあります (NORD-1、XNUMX、XNUMX にも独自の勤務シフトがあります)。 各センターからは両方のサイトを参照できるため、ここでも n+XNUMX の冗長性が確保されています。 ビデオ ウォールには、薄緑色の配色ですでに見慣れたダッシュボードがあります (もちろん、ステータス表示よりもはるかに多くのパラメーターがあります)。 私たちはモニタリングについて少しだけ伝えます。派手な Prometheus や Grafan はなく、Nagios のみ、ハードコアで自家製のビジュアライゼーションのみです。 XNUMX 年以上 (ただし、それ以上) 使用されているため、多くのカスタム チェックとスクリプトがすでに作成されているため、他のものに切り替えるのは賭けのように思えます。 月に一度くらい、すべての問題を「迅速かつ苦痛なく」解決すると提案する別の会社が現れますが、どういうわけかまだうまくいきません。 ちなみに、ビデオウォールは自己組み立てソリューションでも機能し、市販の類似品よりも数倍安価であることが判明しました。

ローカルコントロールセンター

長年データセンターの設計、構築、運用を行っていると、既製品を購入するよりも自分で何かを行うことをそれほど恐れなくなります。 たとえば、DataLine は、単純に規模の都合で最大限の間違いを犯しており、新しいデータセンターはそれぞれ、困難な間違いと XNUMX 年以上続いてきた経験の結果であると躊躇せずに述べています。 。 もちろん、新しいデータセンターにはそれぞれ独自のノウハウがあり、NORD の周りを歩いていると、時々、人々がただやってうまくやったのではないかと思うことがあります。 誇示のためでも、評価や証明書のためでもなく、反復のたびに自分自身を超えて成長し、より良くなる通常のエンジニアリング プロセスです。 外部の観察者は、これは退屈で保守的だと言うでしょうが、クライアントは逆に、自分のお金でそのような安定性を維持しています。 そして、それをうまく行うために、エンジニアリング システムやソフトウェアを大金を払って購入する必要はまったくありません (ただし、それなしでは実行できない場合もあります)。 多くの場合、経験、知識、エンジニアリングの創意工夫によって決まります。

たとえば、NORD-4 ビルは 3,5 階建てです。 最初の 4.5 つは天井高 1.8 メートルの本格的なもので、タービン室があります。 そして最後のものは技術的なもので、高さはわずか XNUMX メートルで、純粋に冷却システム専用です。 フロアは技術的なものであるため、要件が大幅に低くなり、プロジェクトが簡素化され、コストが節約されました。

三角形のデータセンターの眺め

マックスは写真に写らない特別なカンフー能力を持っています

ツアーは屋上で終了します。ここからは、近くの火力発電所や住宅地、その他の NORD の建物の素晴らしい景色を眺めることができます。 そのうちのXNUMXつは三角形です。 これについて同僚は「DataLineはバカだ。なぜか三角ラックや三角サーバーを設置するために三角データセンターを建てている」と笑ったほどだ。 しかし、何もありません-彼らは建設され、首尾よく運営されており、同時に既存の領土（モスクワでは、それは無料ではないと言わなければなりません）を効果的に使用しています。 もう XNUMX つの（私にとって）驚くべき事実は、商業クライアントの大多数がモスクワに拠点を置くことを望んでいることです。 ミンスク高速道路沿いにXNUMXキロ離れた場所は（必要な能力と通信がすべて揃っていたとしても）もはや誰も興味を持ちません。 それでみんなゴムじゃないものに群がる。

冷却塔はもはやデータセンターではなく、火力発電所です

これで私たちの次の旅は終わりました。

その後、共同計画や将来のポッドキャストについて、また長く生産的な会話が行われました (長く待たなくて済むことを願っています)。すぐにさらに興味深い内容が発表される予定ですので、楽しみにしていてください。

すべてを自分の目で見てみたい場合は、DataLine がツアーにご招待します。 完全無料ですが予約制です。 隠語「リンクミーアップ」を呼んだ人にはカルマがプラスされます。

乞うご期待！

出所： habr.com