مهمترین مشکل حمل و نقل در سن پترزبورگ پل ها هستند. شب به خاطر آنها مجبور می شوید بدون اینکه آبجوتان را تمام کنید از میخانه فرار کنید. خوب، یا دو برابر معمول برای تاکسی پرداخت کنید. صبح زمان را با دقت حساب کنید تا به محض بسته شدن پل مانند یک مانگوس چابک به ایستگاه برسید. ما گزینه «گذراندن شب در جایی در مرکز، نزدیک ایستگاه» را از نظر ایدئولوژیک مضر نمی دانیم.
..."پرگرین شاهین" که ساعت 5:30 حرکت می کند توسط افرادی که از جغد متنفر هستند اختراع شد. نه، البته، ساعت نه صبح در مسکو بودن خیلی راحت است و سن پترزبورگ در شب های سفید فوق العاده زیباست، اما ساعت پنج و نیم که سوار تاکسی شدم، می خواستم سرم را 270 بچرخانم. درجات به کوچولویی که این قطار صبحگاهی را اختراع کرد.
وقتی فهمیدم که بچه های DataLine ما را برای بازدید دعوت کرده اند، فکر کردم: "همه مراکز داده خوب شبیه هم هستند."
همانطور که به نظر می رسد، هر مرکز داده در نوع خود کمی خوب (یا بد) است، به خصوص زمانی که شما به زمان بزرگی دست پیدا می کنید، تمام شن کش های منطقه را جمع آوری می کنید و از مرکز داده خود (و کمی از دیگران) درس می گیرید. ) تجربه غنی بنابراین ما (متشکل از پنج لینک پیشرو و دوستان و طرفداران آنها) تصمیم گرفتیم بررسی کنیم که مراکز داده OST و NORD چقدر خوب (یا نه چندان خوب) هستند.
پس از اینکه توانستیم کمی کار در جاده انجام دهیم (در اینجا می توان یک تبلیغ برای یک اپراتور تلفن همراه داشت، اما نه - پوشش هنوز بد بود)، در ایستگاه لنینگرادسکی بارگیری کردیم. خوب، حداقل نه در زمان گزمانوف.
ما تور خود را از مراکز داده "آهک" با OST آغاز کردیم - "همان" که نه چندان دور "سوخت". چرا در نقل قول - بعد. در این میان ایستاده ایم، سیگار می کشیم و منتظر کسانی هستیم که دیر می کنند. گرفتن عکس از دفتر RT همسایه. داستان های خنده دار زیادی در مورد این محله وجود دارد - از آسفالت تازه و رنگ آمیزی حاشیه ها قبل از ورود بزرگان گرفته تا تخفیف در کافه های اطراف که به دلیل شباهت نشان های آنها به ساکنان دیتالین داده می شد.
بلندگوی تبلیغات توتالیتر
مرکز داده حالت سخت (دسترسی).
پاس، قوانین رفتار، چرخ گوشت در ورودی - تقریباً همان چیزی که دیدیم . آیا کافی شاپ های زیادی را در مراکز داده دیده اید؟ حالا ما یک زوج را می شناسیم. کارمندان و مشتریان دارای سپرده "قهوه" در نشان های خود هستند که مرتباً دوباره پر می شوند. بنابراین، در محدوده‌های معقول، می‌توانید خود را کاملاً رایگان با قهوه پذیرایی کنید. از ما هم به عنوان مهمان عزیز پذیرایی شد.
من نمی توانم چیز بدی در مورد قهوه بگویم - برای یک کافی شاپ "زنجیره ای" کاملاً عادی است ، اما مکان به طور غیرارادی فریبنده است و فضای داخلی مطابق با بهترین سنت های مدرن است.
فضای داخلی یک کافی شاپ محلی
عکس‌ها مراکز داده NORD را نشان می‌دهند
تور از دفتر شروع می شود. علاوه بر کتیبه های روی دیوارها و طرح رنگ سفید و لیمویی که در سراسر Runet شناخته شده است، انواع چیزهای خنده دار نیز وجود دارد. اینها وسایل به جا مانده از اجراهای تئاتر شرکتی هستند (می توانید تصور کنید مدیر فنی یک شبکه مرکز داده در یک نمایش بازی کند؟ و ما شخصاً او را می شناسیم).
و حقیقت
عکس هایی از اجراها
مرکز داده (یا بهتر است بگوییم، چهار مرکز داده) در مجموعه ای از ساختمان های صنعتی که در قرن قبل از آن ساخته شده بودند (در آن زمان کارخانه سیتروئن و در زمان شوروی کارخانه Gidroprivod) واقع شده است، بنابراین از یک طرف یک وضعیت سخت وجود دارد. نمای صنعتی، تیرهای فلزی، فضای زیر شیروانی و مصنوعات صنعتی از دوران مختلف که هنوز در آثار مختلف یافت می شود. از سوی دیگر، مناطق هرمتیک مرکز داده باید با ساختارهای موجود تناسب داشته باشند و هر از گاهی باید با واقعیت سازش کرد. با این حال، من نمی گویم که این سازش ها بر کیفیت تأثیر می گذارد - اما بچه ها احتمالاً مجبور بودند در طول طراحی سخت کار کنند. همچنین، طبق شایعات، مترو-2 از جایی نزدیک می گذرد، اما این قطعی نیست.
علاوه بر تئاتر، یک موزه نیز وجود دارد. نمایشگاه ها، به طور طبیعی - یافته های باستان شناسی
چند کلمه در مورد . بله، ساختمان (یا بهتر است بگوییم، سقف) واقعاً آتش گرفته بود. واحدهای خارجی سیستم های خنک کننده و لوله های سرد آسیب دیدند. یک جایی سیم کشی سوخت و کولرها بدون برق ماندند. لوله های فریون در جایی منفجر شد. اما، با وجود این، مناطق هرمتیک در برابر تن ها آبی که روی آنها ریخته شد، مقاومت کردند و تجهیزات زنده ماندند. آنها آن را تحت کنترل "دفتر مرکزی" که توسط مدیریت ارشد کل جهان نمایندگی می شود بازسازی کردند - آنها تمام لوله های مس را در مسکو و مناطق اطراف آن بیرون آوردند (حتی آنها را شبانه با یک BMW X5 آوردند) و همه هوشیار بودند. نصب کنندگان تجهیزات بحرانی دیتاهال‌های آسیب‌دیده (که از نبود سرما آسیب دیده بودند، نه از آتش!) به سرعت به سالن‌های دیگر منتقل شدند، به طوری که تا ساعت پنج صبح نه تنها تمام خدمات آنها، بلکه مشتریانشان نیز فعال بودند.
ما شخصاً سالنی را که "بیشترین رنج را متحمل شده بود" بررسی کردیم - به جز بوی سوختن و جایگزینی کاشی های کف بلند ، هیچ چیز اصلاً یادآور آتش سوزی نیست (به جز قفسه های تجهیزاتی که "به طور موقت" به سالن داده دیگری منتقل شدند. و در آنجا ماند.
پانل وضعیت
با قدم زدن در راهروها، یک صفحه نمایش لمسی با چیزی بسیار شبیه به نمودار اتاق های توربین مرکز داده را می بینیم. این پانل وضعیت است. تعداد زیادی از آنها در راهروها وجود دارد و به مهندسان حاضر در محل اجازه می دهد تا به سرعت، به عنوان مثال، کولر گازی مورد نیاز را پیدا کنند و به سادگی وضعیت فعلی را گزارش کنند.
نظارت بر روی Nagios ساخته شده است (اکنون چندین خوشه مستقل وجود دارد) و همه مراکز داده (هم OST و هم NORD) را پوشش می دهد. علاوه بر این، برنامه های کاربردی برای Android و iOS (برای مشتریان و کارمندان) و یک صفحه وضعیت به طور مستقیم در وب سایت وجود دارد.
روی صفحه نمایش متوجه یک PUE غیرعادی بالا هستم - در همه جای روسیه پذیرفته نیست، اما هنوز هم 1.90 تا حدودی بالا است. پاسخ به این کاملاً اقتصادی است - در سال‌های 2012-2013، قفسه‌ها در مراکز داده مانند کیک‌های داغ فروخته می‌شدند، بنابراین زمانی برای احساسات و صرفه‌جویی در انرژی وجود نداشت. ما آنچه در بازار وجود دارد را نصب می کنیم، آن را در سریع ترین زمان ممکن انجام می دهیم و اصلاً به PUE شما اهمیت نمی دهیم، زیرا چرا؟ حتی در مرحله طراحی، 80-90٪ از قفسه ها خریداری می شود، اما قانون فدراسیون روسیه نمی خواهد چیزی در مورد بهره وری انرژی بداند. اگرچه برخی از کمیسیون ها در آمستردام با چنین ارقامی قانع خواهند شد.
هیچ چیز شخصی نیست فقط تجارت
یکی دیگر از ویژگی های آن علامت گذاری سالن های داده است. در هر سایت، سالن های داده، علاوه بر رمزگذاری الفبایی عددی "رسمی"، دارای نام مستعار "انسانی" از الفبای دریایی (آلفا-براوو-چارلی-دلتا...) هستند. به دلایلی، همه مشتریان اتاق ویسکی را دوست دارند.
در مورد مراقبت از مشتری جزئیات کوچکی وجود ندارد.
چنین "حصارها" برای برخی از مشتریان ساخته شده است. ما اجازه نداشتیم در اتاق های توربین عکس بگیریم، بنابراین عکس DataLine © است
مشتریان DataLine اکثراً شرکت‌های بزرگ و معتبر هستند؛ آنها واقعاً دوست ندارند از تجهیزات خود عکس بگیرند. علاوه بر این، اگر نام مشتری (یا لوگو) مستقیماً روی پیشخوان با حروف بزرگ نوشته شده باشد. آنها آن را دوست ندارند - این همه است. بنابراین، ما از دیوارهای از قبل معروف با کتیبه های مختلف و مهندس فیلمبرداری کردیم. همچنین امکان عکاسی از کل مهندس و نه همه جا وجود ندارد، اما ما سعی کردیم. از آنجایی که مشتریان ما بزرگ و قابل احترام هستند، آنها همچنین درخواست های خاصی دارند - قفسه های ویژه (یا نوعی سیستم ذخیره سازی بار از چندین قفسه فروشنده)، نرده های خودشان، سیستم های کنترل دسترسی خودشان، نظارت تصویری خودشان و یک تیم واکنش سریع با مسلسل ها. به طور کلی یکی از قوانین ناگفته (و عمومی) دیتالاین، مراقبت از مشتری و نیکی کردن به او است. از جلیقه ها و ایستگاه های کاری مجهز با دسترسی به اینترنت و شارژر گرفته تا رویدادهای مختلف برای مشتریان. دومی از این جهت بسیار مفید است که همین افراد، با جابجایی از شرکتی به شرکت دیگر، آنها را به DataLine می آورند. فقط به این دلیل که همه چیز در اینجا دنج، راحت و قابل اعتماد است. کسب و کار DataLine تنها در مورد اجاره فضای رک نیست. این نیز یک ابر است که به طور همزمان مطابق با 152-FZ و PCI-DSS تایید شده است (ما یک پادکست در مورد آن ایجاد می کنیم، منتظر اطلاعیه ها باشید) و اتصال (فیبرهای خاص خود را بین سایت ها و از هر یک از آنها به M9، حلقه نوری خود در سراسر شهر، و به همین ترتیب تا سازماندهی آخرین مایل به دفتر مشتری).
م - انگیزه
در مورد کتیبه ها، ایده ها نه تنها از کارمندان، بلکه از شرکا و مشتریان نیز می آیند، پس از آن می توانید به موفق ترین آنها رای دهید. DataLine در FB. خوب، شما می توانید ایده خود را در آنجا مطرح کنید.
جلسه در البه
صلیب (عکس با حسن نیت ارائه شده از DataLine)
ما در Meet-Me-Room، جایی که اپراتورها در آن قرار دارند، توقف می کنیم. در MMR (سه جفت در OST وجود دارد، با توجه به تعداد ورودی های نوری اصلی، برای فعال و غیرفعال) اتصالات از تمام سالن های داده ترکیب می شوند. در کفش های کراس کانتری همه چیز خسته کننده و مرتب است. اما در جایی که دوربین فعال قرار دارد، بهترین سال ها و فیلم های برخی BM18 را به خاطر می آورید: رشته فرنگی ساخته شده از سیم و تجهیزات مختلف (DLink، Extreme، Juniper، Mikrotik... و غیره تا ASR9k). اینجا بیش از پنجاه اپراتور وجود دارد، بنابراین همه چیز رنگارنگ است. از MMR، اپتیک و مس به اتاق های ماشین توزیع می شود. حداقل دو مسیر برای هر کدام (انواع آن امکان پذیر است)، بنابراین لازم نیست نگران قابلیت اطمینان اتصال باشید. MMR "Elbe" نامیده می شود که کاملاً ظریف است.
آی بی ام پاور نادا؟
یکی دیگر از کشفیات سری P آی بی ام است که هرگز روشن نشده و چندین سال است که در یکی از راهروها ایستاده است. این دستگاه (همراه با کتابخانه نوار و سیستم ذخیره سازی) توسط یکی از مشتریان سفارش داده شد، اما "مفید نبود"، بنابراین به مرکز داده اهدا شد. از آن زمان ایستاده است.
احتمالاً خوب است که مردان ثروتمند باشید و چنین هدایایی بدهید، درست است؟ (یا شاید آنها آن را به عنوان هدیه نداده اند، اما فراموش کرده اند. یا با کارت باختند. اما مدت زیادی است که وجود دارد)
این مرد خوش تیپ در NORD-4 ایستاده است
ما به مرکز انرژی می رویم - سه (یا حتی چهار) مجموعه دیزل ژنراتور برای هر مرکز داده (اجازه دهید یادآوری کنم، چهار مورد از آنها در OST وجود دارد). موتور دیزل در 30-40 ثانیه به قدرت کامل می رسد و 1900 کیلو ولت آمپر تولید می کند. N+1 افزونگی، همگام سازی، و غیره گنجانده شده است. طولانی ترین زمان نشستن در موتورهای دیزلی در OST 12 ساعت است. در NORD - 2.5 روز (به هر حال، یک مرکز ذخیره سازی برای 85 تن پول زیادی نیست).
البته توافقاتی با شرکت های مختلف سوخت برای تامین سوخت وجود دارد. تغییر به گازوئیل به طور منظم اتفاق می افتد، به طوری که هم سوخت تولید می شود و هم قراردادها تأیید می شود. به هر حال، به گفته همکاران، در NORD، هنگام آزمایش مجموعه های دیزل ژنراتور، که معمولا بیش از یک ساعت طول می کشد، در محلی که هوای گرم از موتورهای دیزلی منتشر می شود، حتی در زمستان چمن موفق به سبز شدن می شود.
پس از یک میان وعده کوتاه در یک کافی شاپ آشنا، به سمت سایت NORD می رویم. این نیز یک مرکز داده نیست، بلکه چهار ساختمان مستقل در یک قلمرو است. هر کدام ورودی های برق، موتورهای دیزلی و خنک کننده خاص خود را دارند. NORD-1 و NORD-2 توسط مؤسسه Uptime M&O ممیزی شدند. جدیدترین (و بهترین مرکز داده DataLine) NORD-4 است، بنابراین ما به اینجا می رویم.
با وجود تعداد به ظاهر زیاد مراکز داده در مسکو، هنوز کمبود وجود دارد. خیر، البته یک یا دو رک بدون مشکل برای شما ارسال می شود. حتی بیست تا هم بهت میدن بیشتر یک سوال است (و DataLine بیش از یک یا دو مشتری با چنین نیازهایی دارد). به طور خاص، در NORD-4 (در حال حاضر) مکانی وجود دارد، زیرا یک مشتری بزرگ به مرکز داده تازه ساخته خود نقل مکان کرده است، اما در جاهای دیگر ممکن است چندان خوش شانس نباشد. با این حال، طراحی NORD-5 اکنون در حال انجام است که وعده داده شده است که در ابتدای سال 2020 راه اندازی شود.
اما بیایید به سفر خود برگردیم. از آنجایی که ما با ماشین سفر می کردیم، ما را به دروازه راه دادند، جایی که مسلسل ها ما را هدف گرفتند، شماره ماشین ما را با برنامه بررسی کردند و از همه مسافران خواستند که برای گرفتن گذرنامه (البته با گذرنامه) پیاده شوند. زیرا B امنیت است.
NORD-4 افتخار این شرکت و تلفیقی از چندین سال تجربه در ساخت و بهره برداری از مراکز داده است، دارای گواهینامه های Uptime Institute Tier III برای پروژه طراحی و تسهیلات (یعنی مرکز داده ساخته شده) و همچنین پایداری عملیاتی است. - بچه ها با مسئولیت پذیری بهترین رویکرد ممکن را برای این موضوع اتخاذ کردند. در داخل چهار زون هرمتیک مستقل از یکدیگر با دو تالار در داخل یک ساختمان وجود دارد. هر کدام دارای مرکز قدرت (مجموعه دیزل ژنراتور، اتاق باتری)، مدارهای خنک کننده و سیستم های اطفاء حریق هستند. ورودی های عمومی - نوری (در هر ساختمان دو عدد از آنها وجود دارد) و MMR.
مودینگ مهندس سالم
در ورودی مرکز داده، کافی شاپی که از قبل برای ما آشنا بود منتظر است (خوب، چرا که نه؟). به مرکز مانیتورینگ می رویم. اکنون دو مورد اصلی وجود دارد - در OST و NORD-4 (NORD-1,2,3،1،XNUMX نیز شیفت های وظیفه خود را دارند). از هر مرکز می توانید به هر دو سایت نگاه کنید، بنابراین حتی در اینجا نیز افزونگی n+XNUMX تضمین می شود. روی دیوار ویدیویی داشبوردهای آشنا از قبل با طرح رنگ سبز روشن وجود دارد (البته پارامترهای بسیار بیشتری نسبت به نمایش وضعیت روی آن وجود دارد). ما کمی در مورد نظارت ارتباط برقرار می کنیم - بدون پرومتئوس و گرافان فانتزی، فقط Nagios، فقط هاردکور و تجسم خانگی. بیش از ده سال (اما، حتی بیشتر) استفاده، بسیاری از چک‌ها و اسکریپت‌های سفارشی قبلاً نوشته شده‌اند، بنابراین تغییر به چیز دیگری مانند یک قمار به نظر می‌رسد. حدود یک بار در ماه یک شرکت دیگر ظاهر می شود که پیشنهاد می کند همه مشکلات را "به سرعت و بدون دردسر" حل کند، اما به نوعی هنوز کار نمی کند. به هر حال، دیوار ویدئویی نیز بر روی یک راه حل خود مونتاژ کار می کند، که چندین برابر ارزان تر از آنالوگ های تجاری است.
مرکز کنترل محلی
وقتی سال‌هاست که در حال طراحی، ساخت و راه‌اندازی مراکز داده هستید، دیگر ترسی از انجام کاری به جای خرید یک چیز آماده ندارید. برای مثال DataLine ابایی ندارد که بگوید، صرفاً به دلیل مقیاس، آنها بر روی حداکثر تعداد اشتباهات قدم گذاشته اند و هر مرکز داده جدید نتیجه اشتباهات دشوار و تجربه ای است که بیش از ده سال است که ادامه دارد. . البته، هر مرکز داده جدید دانش خود را دارد، و در حین قدم زدن در اطراف NORD، هر از چند گاهی فکر می‌کنید که مردم این کار را انجام داده‌اند و آن را به خوبی انجام داده‌اند. نه به خاطر خودنمایی، نه به خاطر رتبه بندی و گواهینامه ها - یک فرآیند مهندسی عادی، زمانی که در هر تکرار بالاتر از خودتان رشد می کنید و بهتر و بهتر می شوید. یک ناظر خارجی خواهد گفت که این خسته کننده و محافظه کارانه است، اما مشتری، برعکس، با پول خود چنین ثباتی را حفظ می کند. و برای اینکه این کار را به خوبی انجام دهید، اصلاً نیازی به خرید سیستم های مهندسی یا نرم افزار با پول زیاد نیست (اگرچه گاهی اوقات نمی توانید بدون آن این کار را انجام دهید). تجربه، دانش و نبوغ مهندسی اغلب تصمیم می گیرند.
به عنوان مثال، ساختمان NORD-4 دارای 3,5 طبقه است. سه مورد اول تمام عیار با سقف های 4.5 متری هستند که اتاق های توربین در آن قرار دارند. و آخرین مورد فنی است و تنها 1.8 متر ارتفاع دارد و صرفاً به سیستم خنک کننده اختصاص دارد. از آنجایی که کف فنی است، الزامات آن بسیار کمتر است، که پروژه را ساده کرده و در هزینه صرفه جویی می کند.
نمای مرکز داده مثلثی
مکس توانایی کونگ فو خاصی دارد که در عکس ها نسوزد
ما تور را روی پشت بام به پایان می بریم - از اینجا منظره ای عالی از نیروگاه حرارتی و منطقه مسکونی مجاور و همچنین سایر ساختمان های NORD داریم. دو تا از آنها مثلثی هستند. در مورد این، همکاران حتی خندیدند که "DataLine احمق هستند، به دلایلی آنها در حال ساخت یک مرکز داده مثلثی هستند" تا رک های مثلثی و سرورهای مثلثی را در آنجا نصب کنند. اما هیچ چیز - آنها ساختند و با موفقیت در حال فعالیت هستند و در عین حال به طور مؤثر از قلمرو موجود (که در مسکو باید گفت رایگان نیست) استفاده می کنند. یکی دیگر از واقعیت های شگفت انگیز (برای من) این است که اکثر مشتریان تجاری می خواهند در مسکو مستقر شوند. سایتی در فاصله نیم صد کیلومتری در امتداد بزرگراه مینسک (حتی اگر همه ظرفیت ها و ارتباطات لازم وجود داشته باشد) دیگر برای کسی جالب نیست. بنابراین همه در یک غیر لاستیکی جمع می شوند.
برج های خنک کننده دیگر مراکز داده نیستند، بلکه نیروگاه های حرارتی هستند
با این کار سفر بعدی ما به پایان رسید.
پس از آن گفتگوی طولانی و سازنده دیگری در مورد برنامه های مشترک و پادکست های آتی انجام شد (امیدوارم نیازی به انتظار طولانی نباشد)، پس با ما همراه باشید، به زودی چیزهای جالب تری نیز وجود خواهد داشت.
خوب، اگر می خواهید همه چیز را با چشمان خود ببینید، DataLine شما را به یک تور دعوت می کند. کاملا رایگان ولی با تعیین وقت قبلی کسانی که کلمه رمز را "linkmeup" می نامند، یک امتیاز مثبت در کارما خواهند داشت.
گوش به زنگ باشید!
منبع: www.habr.com