在莫斯科和圣彼得堡之间:Udomlya巨型数据中心之旅

在莫斯科和圣彼得堡之间的某个地方,有一个乌多姆里亚小镇。此前,他以加里宁核电站闻名。2019年,附近又出现了一个景点-拥有4千个机架的Udomlya大型数据中心。 



加入Rostelecom-DPC团队后,DataLine专家还将运营该数据中心。您可能已经听说过有关“ Udomlya”的信息。今天,我们决定详细告诉您那里的一切运作方式。





工业景观:32,000平方米的数据中心和背景中的核电站。Udomlya于2019年春季发布的样本。



在切口处收集了40余张详细描述的数据中心工程系统照片。令人惊喜的惊喜等待着那些最终实现的人。



关于物流

数据中心位于特维尔地区。从莫斯科到Udomlya,这条道路大约需要3个小时:从Sapsan到Vyshny Volochek站需要1小时45分钟,然后,在事先要求的情况下,从那里应有往返班车将您带到数据中心。从圣彼得堡到Vyshny Volochok稍长一点-2小时20分钟。 



开车,您可以在4.5小时内从莫斯科出发,在圣彼得堡,则是5分钟内到达。



是的,由于有几个单元,您可能不想去这里。但是,如果您需要一个可以容纳数十个机架的新房屋,那么值得仔细看看。即使您想随时增加一倍的电量,也有足够的空间和电力。在莫斯科,根据我们的经验,即使在建设阶段也已预订了数据中心,但这种技巧并非总是可行。



此外,莫斯科和圣彼得堡之间的数据中心位置可用于地理冗余。如果主要容量在莫斯科或圣彼得堡,则储备地点将非常适合这里。



一个聪明的团队将协助现场进行所有标准操作。他们将在机架中接收,打开包装并安装设备,将其连接到电源和网络,并提供对设备的远程访问。万一发生故障,他们将帮助诊断并更换发生故障的组件。



数据中心的第一阶段由4个计算机室或模块组成,每个室或模块有205个机架。一楼有2个机房和一个能源中心,二楼有两个大厅和一个冷中心。让我们来看一下这里的一切。



人身安全

数据中心占据一个专用区域,没有通行证和身份证件就无法输入。那些开车前来的人也可以获得运输通行证,然后才能进入数据中心。对于那些通过通行证的人来说,数据中心是24x7全天候开放的。







第一个24小时保安站是该地区的入口。







我们走得更远,直接到达数据中心入口处的检查站。







安全人员不仅会见客户并签发通行证,而且会全天候监控视频墙,在此显示数据中心和相邻区域的所有内部建筑物的图像。







电源供应

电力从核电站开始进入数据中心。为数据中心提供6台降压变压器的10 kV电压。进一步-已经通过两条独立的线路将0.4 kV连接到低压开关设备(LVSN)。然后,通过DIBP,为IT和工程设备供电。两个独立的输入适用于机架,即2N冗余。在另一篇文章中,我们将在电源方面告诉您更多一切。





电力的在数据中心“乌多姆利亚”路径





电源总线,通过该电力来自所述低压开关到电源板DIBP 的行低压开关









尽管附近有核电厂,但在任何可靠的数据中心中,都可以保证主电源的安全。如您所知,在我们的数据中心,DGU对此负责,但在这里它们使用动态UPS(DIBP)。它们还提供不间断的电源。 RIBP为N + 1冗余。 





DIBP品牌欧洲柴油(Kinolt),容量为2兆瓦。他们咆哮着,最好不要戴上耳塞而不去那里



,这就是工作原理。 DIBP是三个主要部件的组合:柴油发动机,同步电机和带有转子的动能蓄能器。它们都固定在主轴上。



电机可以以电动机和发电机的模式运行。当从城市正常提供DIBP时,电机是使转子旋转并将动能存储在电池中的电动机。









前景中的灰色块-同步电机DIBP





柴油机DIBP



如果市电出现故障,电机将切换到发电机模式。由于积聚了动能,转子使DIBP的主轴旋转,电机在没有市电的情况下继续运行,并且输出电压也不会消失。这样可以确保数据中心的电源不中断。同时,DIBP控制系统发出信号以启动柴油发动机。转子具有相同的动能,从而使柴油启动并帮助其达到工作频率。转子持续加速一分钟,这足以让柴油发动机接管。启动后,柴油机旋转主轴,并通过主轴-电机旋转(此处是可视视频将DIBP从一种模式切换到另一种模式)。



结果,即使一秒钟,机架中的电源也不会丢失。







每个柴油发电机箱设计为3个小时。数据中心还拥有自己的80吨燃料储存库,可将数据中心的整个负载保持24小时。如果发生非常严重的停电事件(附近的核电站不允许这样做),则与几名承包商签有合同,这些承包商将立即将柴油运送到现场。总的来说,一切都是应有的。



每周,DIBP进行自我测试并启动柴油。每月一次,在城市网络短期断开的情况下进行测试。





控制面板DIBP





室ShGP和ShbP  





“ Magistrali”和“去耦”电源线



机房

每个模块都位于一个特殊盒子中的容纳区域中。这些额外的墙壁和屋顶可以保护机房免受灰尘,水和火的侵害。接受数据中心时,收容区域通常会洒水以检查是否泄漏。





带有排水管的建筑物的屋顶和涡轮机大厅的自身屋顶





进入围护区屋顶的水通过排水沟进入排水管道,



每个大厅准备接收205个机架,平均功率为5 kW。







大厅内设备的布置是根据冷热走廊的方案进行组织的。 





天花板上安装了Bolid早期火灾探测和气体灭火系统。 







烟雾探测器也位于活动地板下。足以触发任何两个传感器,并且火警警报器会响起,但是稍后我们将讨论。



紧挨着空调排的地方有胶带泄漏传感器。







柜台之间的每个走廊都是由视频监控摄像机“拍摄”的。

如果需要,可以将机架放在特殊的围栏(笼子)后面,并可以在其上安装其他摄像机,ACS和运动传感器,音量传感器等。 







冷供应

Udomlya数据中心使用乙二醇冷却器回路。机房中有空调,屋顶上有冷却器,二楼有一个带管道的制冷中心,一个自动化和控制系统,泵,储罐等



。每个房间有12个空调,其中一半装有蒸汽加湿器。 N + 1个冗余方案。



冷通道保持21-25°C的温度和40-60%的湿度。





精密空调Stulz Cyber​​Air 3PRO CW 



每个计算机室周围都有两个环:一条“冷”线将冷的乙二醇供应给空调,一条“热”线将已加热的乙二醇从空调中移除到冷却器。如果打开走廊中的高架地板,我们将看到制冷系统掉落到机房中。 







乙二醇的路线如下:从空调中,加热的乙二醇首先进入机房周围的回油管,然后进入总环。然后,乙二醇进入泵,然后进入冷却器,在冷却器中将其冷却至10°C。进入冷却器后,乙二醇通过公用的环形供应管线,储罐和模块周围的环形环返回空调。





数据中心





制冷 方案这是一个冷中心的样子,其中有100 m 3的乙二醇通过,



灰色的储罐是膨胀罐。加热的乙二醇在进入冷却器的过程中通过它们。在夏天,乙二醇膨胀并需要更多空间。







这些惊人的容量是储罐,每个储罐5 m 3每个。如果冷却器发生故障,它们可为数据中心提供不间断的冷却。

来自储罐的冷却的乙二醇被供应至系统,这使得空调出口处的空气温度在19°C下保持5分钟。即使窗外是+40°C。









冷却系统泵





网状袋式过滤器和分离器罐用于清除机械颗粒和空气中的乙二醇,



管道下方地板上的细红线是胶带泄漏传感器。他们沿着寒冷中心的整个周边走。







如果任何管道泄漏,乙二醇将通过排水系统并进入水处理室的专用水箱。还有两个装有“备用”乙二醇的储罐,用于在大泄漏情况下向制冷系统供料。







关于冷却器。屋顶上有5台具有N +1冗余的冷却器。每天,自动化系统都会根据运行时间确定要保留的冷却器。 





容量为1096 kW的Stulz Cyber​​Cool 2品牌



冷水机组支持以下三种模式:



  • 压缩机-从12°C开始;
  • 混合-0–12°C;
  • 自然冷却-0以下。此模式涉及使用风扇而不是压缩机冷却乙二醇。






消防安全

数据中心有两个气体灭火站。每个都有两个由11个气缸组成的电池:第一个是主电池,第二个是备用电池。



数据中心的防火系统与Kalinin NPP的服务器相连,如有必要,该站自己的消防服务将在数分钟内到达现场。







图为机房中的火灾报警系统和紧急出口按钮。如果在发生火灾报警时由于某种原因门未解锁,则需要后者:它会中断电锁的电源。







电讯

两条Rostelecom高速公路通过独立的路线到达数据中心。每个DWDM系统的容量为8兆位。



数据中心有两个电信输入端,彼此之间的距离超过25米。



该站点还包括运营商Raskom,俄罗斯Telia Carrier,Consist; DataLine将在不久的将来出现。  



您可以从Udomlya修建通往莫斯科,圣彼得堡或俄罗斯乃至世界任何地方的运河。 







监控方式

值班工程师在监控中心全天候值班。



在这里接收到有关工程系统的所有信息:大厅的气候条件,投入物的条件,DIBP等。



每两个小时,值班人员会巡视所有基础设施,以检查工程和IT设备的状态。 







支持基础设施

提供了一个卸货区,用于将设备运送到数据中心。







从内部卸货区。







如果您的健身房位于二楼,则此液压叉车将在此处携带任何设备。







用于存储客户端工具等的储物柜。  







有关日常生活的一些知识

对于常驻人员,您可以在办公室部分租用设备齐全的工作场所。如果您不时来访,则可以在数据中心范围内的所有设施中呆在临时旅馆中。 

办公区还设有饭厅和厨房。  







周围还有森林,湖泊,河流,钓鱼和其他户外活动,自然风光无限。快来看我的地方。











如所承诺的,对于那些成功的人来说,这是一笔不错的奖金。在头六个月内,将免费提供Udomla的机架式房屋,其供电功率为5 kW。仅支付实际消耗的电量。将您的申请发送到request@dtln.ru



All Articles