خاطره من از "مورفی و دیتاسنتر"

یه مطلب از سایت NEOPERSIA.com خوندم جالب بود، یاد خاطره خودم افتادم فکر کنم درستش اینکه اون قسمت که کپی کردم آدرسش رو بذارم

ابتدا اون مطلب :

قوانین مورفی در خصوص پیش گویی پیامدهای منفی مشهور هستند:

اصلی‌ترین پیامی که این قانون بیان می‌کند این است که در هر حالتی که احتمال خراب شدن یا خطا رفتن باشد بی‌شک روزی این اتفاق می‌افتد. «اگر راه‌های متفاوتی برای انجام کاری باشد که یکی از آنها به خرابی یا فاجعه بینجامد، حتماً یک نفر کار را به همان صورت انجام خواهد داد.» که معمولاً به این صورت بیان می‌شود: "خطای احتمالی رخ خواهد داد."

اگر تعداد ساعتهای یکسال را (365*24) 8760 در نظر بگیریم، حداقل میزان مجاز قطعی و از دسترس خارج بودن مرکز داده، کمتر از 22ساعت تعریف میگردد یعنی در مجموع یکسال با احتساب 24 ساعت در شبانه روز، یک مرکز داده برای تمامی عملیات اعم از جایگزینی تجهیزات، بروز رسانی، رفع خطاهای احتمای، قطعی منبع تغذیه ، قطعی سرویس دهنده های اینترنتی و مخابراتی و به هردلیل پیش بینی شده و نشده، نمی تواند بیشتر از 22 دقیقه از دسترس خارج گردد.

این درحالی است که این سطح کمترین سطح استاندارد مرکز داده است و در بالاترین سطح این عدد به کمتر از 20 دقیقه محدود میگردد.

حال با این حساسیت ها و برنامه های نگهداری و پشتیبانی مرکز داده که به روز رسانی ها و تعویض تجهیزات Active یا افزودن تجهیزات جدید را الزامی میکند، رخداد هر اتفاق پیش بینی نشده که منجر به قطعی سرویس گردد، تمام این استانداردها را میتواند به هم بریزد.

اگر برای یک پروژه، کار یا یک اتفاق، چند سرنوشت مختلف قابل تصور باشد، بی‌تردید
بدترین آن‌ها روی خواهد داد.

یکی از مهمترین و تاثیرگذار ترین بخش هر مرکز داده، بخش تامین برق مصرفی آن است .

مصرف برق زیاد مرکز داده به دلیل استفاده از تجهیزات پرمصرف سرمایشی همواره ممکن است باعث بروز اشکالات فنی یا غیر فنی گردد تا مواجه به قطعی های ناخواسته برق باشیم.

برای کنترل و پیشگیری این بحران ها، راهکارهای ایحاد Redundancy برای کلیه تحهیزات تابلوها و UPS ها استفاده از دو منبع تغذیه مجاز برای تجهیزات از محل تابلو تا پشت دستگاه ها و تجهیزات نصب شده در Server Room و سایر رک های مورد استفاده در یک مرکز داده، استفاده از دیزل ژنراتور ها طبق قانون 2n+1 ( دوبرابر تعداد ژنراتور مورد نیاز در مدار مصرفی نصب شده یعنی n تعداد اصلی و همان تعداد به عنوان جایگزین وصل شده در مدار و یک دستگاه ژنراتور بصورت آماده نصب ) طراحی و پیاده سازی می گردد.

جایگاه قانون مورفی

یه جایی تو کتابی در خصوص طراحی مرکز داده نوشته بود:
طراح مرکز داده، باید برخی از قوانین مورفی رو درشت بنویسه و آوویزون کنه تو اتاق جلو چشمش تا همیشه بیادش باشه !

این تا اینجا مطلب اون سایت بود .

خاطره من از دیتاسنتر و مورفی

این خاطره کاملا واقعی و برام عبرت آموز بود، امیدوارم برای خوانندگان هم مفید باشه

اینم بگم در خصوص قوانین مورفی از نظر روانشناسی مخصوصا مکتب یونگ (کارل گوستاو یونگ روانشناس صاحب مکتب روانکاوی تحلیلی-سوئیس) ساعتها میشه صحبت کرد،اما الان موضوع استفاده از این قوانین در جهت کاهش آسیب ها و خسارات احتمالی به جهت پیش بینی ریسک ها و داشتن نقشه و برنامه برای آن ها هستش.

یکی از پروژه هایی که بعد از خرید تجهیزات به من واگذار شد یعنی مدیریت نصب و راه اندازیش، که (البته بعدها دیدیم که طراحی هم وجود نداره و صرفا یه سری تجهیزات خریداری شده بود!!)

محل سازمان در یکی از خیابان های اصلی شهر تهران بود که مراکز و ادارات حساس دولتی در اطراف وجود داشتند.

با توجه به اهمیت این دیتاسنتر که الان یکی از مهمترین و پراستفاده ترین دیتاسنتر های ارائه خدمات در کشور با مخاطبان چند ده میلیونی ، تاکید ما این بود که از Tire 3 پایین تر نیاییم.

برای بحث تامین برق، علاوه بر پیش بینی دیزل ژنراتور به تعداد 2n+1 و دو خط مجزا تابلو برق و UPS، من اصرار به داشتن دو خط برق مجزا از دو منطقه برقی داشتم. بدلیل هزینه های بالا و مشکلات هماهنگی با شرکت توزیع برق برای کشیدن خط برق جدید از منطقه دیگه، مسئولان ومدیران سازمان زیربار نمی رفتند. و جلسات متعددی در این خصوص بین کارشناسان و مشاوران برگزار گردید که منو منصرف کنند اما من زیربار نمی رفتم و کوتاه نیومدم.

تا اینکه قرار شد جلسه در حضور رئیس هیئت مدیره سازمان با حضور مشاوران و مدیران سابق و اسبق وفعلی برگزار شود تا تمامی مستندات و ادله ها بررسی شده و تصمیم گیری شود.

جلسه تشکیل شدو یکی از مدیران ارشد تاسسیات و برق سازمان که بالای 30 سال خدمت کرده بود و از مخالفان شدید طرح من بود.با کلی پرونده و به همراه چند تا مدیر همفکر خودش تو سازمان اومد که منو محکوم کنه،شنیده بود که من آدمی هستم مقید به استانداردها.

ابتدا من شروع کردم که بجز مطرح کردن استانداردهای توصیه شده، مطلب دیگه ای نداشتم برای دفاع از طرحم و تاکیدم بر این بود که طراح های این مستندهای استاندارد، حتما یه چیزهای میدونند و تجربه اجرای دیتاسنتر و استفاده از آن جه خوشمون بیاد جه بدمون بیاد، تو امریکا بیشتره

ایشون شروع کرد به زیرسئوال بردن مستنداتی که من در خصوص توصیه های استانداردهای TIA-942 داشتم وچون نمی تونست استاندارد ها رو زیر سئوال ببره رفت سمت این مطلب که همه چی رو که نباید از استاندارد امریکایی ها و اروپایی ها کپی کنیم (علیرغم تیپ و ظاهر و شخصیتش داشت از جو ضد امریکایی بودن و عدم وابستگی و الگو نگرفتن از غرب استفاده ناجوانمردانه و غیر علمی میکرد) تقریبا داشت موفق میشد.اما

یه اشتباه خیلی بزرگی انجام داد و همون جا مورفی یقه اش رو گرفت!

آخر صحبتهاش که دیگه مطمئن شده بود منو زده زمین، برگشت گفت برق این ساختمان از همان مکانی تامین میشود که برق ساختمانهای حساسی مثل ریاست جمهوری و برخی وزارتخونه ها و ...

من تو 30 سال خدمتم تو این سازمان اصلا قطعی برق ندیدم ! نمی دونم این مورفی از کجا پیداش شد. همون موقع برق رفت و هم چراغ ها خاموش شد و هم سیستم های خنک کنندگی ! بنده خدا راست میگفت چون ده دقیقه گذشت و هیچ برق جایگزینی وصل نشد معلوم بود اون سازمان تا قطعی برق نداشته تا اون موقع یا خیلی کم بوده !

تو اون ده دقیقه ایشون فقط عرق میریخت هم از گرما هم از حرفی که زده بود و اتفاقی که افتاده بود !

اولش گفت چیزی نیست حتما قطع و وصلی اتفاق افتاده الان وصل میشه ولی مشخص بود آخر صحبتهاش شیرازه صحبت کلا از دستش خارج شده

تا اینکه بیشتر از ده دقیقه شد و مسئول دفتر رئیس هیئت مدیره اومد (داخل اونم از هیچی خبر نداشت و نمیدونست داریم راجع به چی صحبت میکنیم ! )باصدای بلندگفت با اداره برق تماس گرفتم گفتن قطعی دوره ای برای PM هستش و باید بین 30 دقیقه تا 1 ساعت صبر کنین !

رئیس هیئت مدیره ختم جلسه رو اعلام کرد با دستور اینکه پیشنهادوطرح من رو برای ایجاد خط تغذیه دوم برق تایید و دستورات لازم را صادر کرد.

خدائیش خیلی ناراحت شدم برای ایشون چون حداقل 20 سال از من بزرگتر بودن و احترامشون واجب

ولی من کاری نکرده بودم، اگه کسی رو باید سرزنش میکرد باید سراغ مورفی میرفت

اینم بگم خودم هم از مورفی ضربه خودم که می نویسم...