Связаться с редакцией
В 2023–2025 годах команда Jet CSIRT (центра кибербезопасности компании «Инфосистемы Джет») расследовала и ликвидировала последствия более 100 крупных киберинцидентов — каждый пятый случился на промышленных предприятиях. Однако угрозу заводам несут не только взломы: выход из строя оборудования, чрезвычайные ситуации, а теперь и атаки БПЛА могут прервать производство за считанные минуты. Единственный способ не допустить остановки — перестать полагаться на единственный ЦОД. Почему вместо неподъемного монолита надежнее подвижная инфраструктура из нескольких элементов? И в чем особенность геораспределенной защиты информационных ресурсов промышленных объектов?
Геораспределенные дата-центры — это проверенный способ обеспечить отказоустойчивость и катастрофоустойчивость информационных систем предприятия. Главная особенность этого подхода состоит в том, что ключевые компоненты ИТ-инфраструктуры (серверы, базы данных, приложения, сервисы) размещаются сразу в нескольких географически разнесенных дата-центрах и синхронизируются между собой. Если, например, отдельный сервер или целый ЦОД выходит из строя, его нагрузка перераспределяется на остальные узлы.
При этом у промышленных предприятий особый подход к геораспределению ЦОД. В отличие, скажем, от операторов связи, которым необходимо рассредоточить инфраструктуру по всей стране, чтобы максимально приблизить обработку трафика к абонентам и обеспечить низкую задержку для голосовых и интернет-сервисов, промышленные компании чаще всего управляют несколькими крупными производственными объектами, расположенными за пределами крупных городов. Каждый объект связан с управляющим центром, однако имеет собственный уникальный ИТ-ландшафт, отвечающий его специфике.
Так, в управляющем центре могут размещаться серверы, отвечающие за бизнес-логику, базы данных для аналитики и принятия стратегических решений. В то же время все критические компоненты, обеспечивающие автоматизацию производства, должны располагаться на конкретном промышленном объекте: АСУ ТП, MES (система управления производством), средства защиты информации и другие системы.
«Все, что критически важно для промышленного предприятия, является и критически уязвимым. Поэтому правильное решение — расположить ключевые сервисы максимально близко к производству и контролировать все изменения в режиме онлайн. А уже готовые выборки, накопленные на объекте за определенный промежуток времени, компания может анализировать централизованно».
Сергей Андронов,
директор центра сетевых решений компании «Инфосистемы Джет»
Оптоволоконная сеть имеет ограничения в скорости передачи данных: преодолевать скорость света инженеры пока не научились. По словам эксперта, если для отказоустойчивой работы сервиса важна синхронная репликация данных с максимально низкой задержкой (что актуально для любого производства), то расстояние между ЦОД, где хранятся и обрабатываются эти данные, не должно превышать 15 км.
Таким образом, для предприятия логичным выглядит построение геораспределенной системы ЦОД непосредственно на каждом промышленном объекте или неподалеку от него.
«Сейчас все бизнес-процессы функционируют при поддержке ИТ-систем. Значит, если в результате какого-то происшествия отключится единственный ЦОД, встанет все производство. Поэтому на территории предприятия нужно создать несколько дата-центров, между которыми можно переключать нагрузку. Лучше всего локально распределить их в рамках обозримого участка, соблюдая необходимое расстояние для связанности. Тогда выход из строя одного узла не повлияет кардинально на работу всего предприятия».
Всеволод Воробьев,
руководитель направления ЦОД центра сетевых решений компании «Инфосистемы Джет»
Эксперт уточняет, что для резервирования ресурсов можно использовать разные схемы взаимодействия ЦОД — как Active-Active (когда все или несколько узлов одновременно обрабатывают запросы), так и Active-Passive (когда один узел активен, а другие находятся в режиме ожидания). Главное — чтобы при необходимости переключение между ними происходило мгновенно.
Кто не спрятался...
Итак, для создания наиболее сбалансированной ИТ-архитектуры на промышленном объекте вместо строительства одного крупного ЦОД, который обслуживает все предприятие, стоит рассмотреть возведение нескольких небольших дата-центров. Но как защитить эти объекты от новых типов физических угроз — например, от атак БПЛА?
«Есть крылатое выражение: ни одна крепость не падает без предательства. Каждый ЦОД тоже, по сути, является крепостью. Зачастую удары по нему происходят не потому, что его защита слабая, а потому что информацию о нем сложно долгое время хранить в тайне. Маскировка какое-то время спасает ситуацию, но если угроза физического воздействия существует, то рано или поздно предприятию придется задуматься о перемещении ЦОД».
Сергей Андронов,
директор центра сетевых решений компании «Инфосистемы Джет»
Задача состоит в создании системы дата-центров, местоположение которых можно динамически менять. Лучше всего для этого подходят модульные ЦОД — готовые решения со всей необходимой начинкой: серверами, СХД, инженерными системами, сетевой и кабельной инфраструктурой. Они поставляются в виде отдельных блоков, и при необходимости их можно объединять как детали конструктора.
«Модульные ЦОД отличаются минимальным сроком внедрения и возможностью гибкого масштабирования. Мобильный ЦОД в форм-факторе контейнера можно быстро отключить, перевезти в другое место и включить даже на минимально подготовленной площадке. Меняя таким образом конфигурацию системы дата-центров в пределах промышленной площадки, можно добиться высокой устойчивости и оптимального резервирования».
Всеволод Воробьев,
руководитель направления ЦОД центра сетевых решений компании «Инфосистемы Джет»
После перемещения такой контейнер можно очень быстро подключить к существующей инфраструктуре и ввести в эксплуатацию. По словам эксперта, для этого в месте установки достаточно провести минимальную строительную подготовку, подвести электричество, проложить подъездные пути и обеспечить каналы связи. Чтобы эффективно управлять ЦОД, необходимо предусмотреть систему автоматизации и диспетчеризации, которая позволит квалифицированным инженерам настраивать и контролировать инфраструктуру удаленно. Безусловно, эти операции повлекут издержки, тем не менее они не идут ни в какое сравнение с ущербом от полного разрушения узла в результате физической атаки.
Торг уместен?
Конечно, как и любой ИТ-проект, построение геораспределенной системы ЦОД на промышленном предприятии потребует ощутимых вложений. Однако их можно сильно сократить.
Во-первых, важно приоритизировать компоненты инфраструктуры. Это позволит спроектировать и построить дата-центр, который будет поддерживать работу лишь наиболее критичных для конкретного промышленного объекта приложений, сервисов и хранилищ данных.
Во-вторых, проект стоит разбить на несколько этапов — добавлять модули постепенно, по мере загрузки существующих. Вместе с тем каждый раз следует сохранять определенный запас вычислительных мощностей на случай внезапного роста нагрузки на ЦОД.
В-третьих, необходимо подготовить персонал предприятия к работе с геораспределенной инфраструктурой: составить четкие инструкции и план аварийного восстановления, регулярно проводить тренинги. Чем быстрее команда сможет отреагировать на возникшую ситуацию (например, переместить и переподключить мобильный ЦОД), тем меньше будут издержки компании.
Не стоит опасаться того, что несколько распределенных ЦОД потребляют существенно больше электроэнергии, чем один централизованный. Чаще всего это не так, и на промышленном предприятии, оснащенном энергоемким оборудованием, разницы заметно не будет.
Таким образом, при правильном подходе локально распределенная система ЦОД в сравнении с монолитным дата-центром окажется для предприятия не только надежнее, но и выгоднее.
Фундамент для цифровизации
Летом 2025 года усилиями специалистов центра сетевых решений компании «Инфосистемы Джет» в Республике Мордовия на территории МПК «Атяшевский» (входит в структуру группы компаний «Талина») были возведены два параллельно функционирующих модульных ЦОД. Они поддерживают работу WMS (системы управления складом), MES, систем учета и других критически важных программных комплексов предприятия.
Каждый ЦОД расположен на открытой площадке, имеет класс огнестойкости II, класс пылевлагозащиты IP66, рассчитан на девять шкафов 42U с максимальной общей мощностью более 100 кВт. Схема с двумя независимыми узлами обеспечивает отказоустойчивость ИТ-инфраструктуры комбината как в стандартных, так и в нештатных ситуациях.
«Опыт эксплуатации прежней серверной убедил нас: отказоустойчивость — это не опция, а обязательное условие для промышленного предприятия. Поэтому при проектировании новой архитектуры мы сделали ставку на резервирование всех критичных систем и надежную систему копирования данных. Сегодня два независимых ЦОД дают нам уверенность: производство не остановится даже при сбое одного из узлов».
Алексей Пигачев,
директор департамента по ИТ группы компаний «Талина»
ЦОД размещены таким образом, что при необходимости можно добавить в них новые секции или установить рядом дополнительное оборудование. Это дает предприятию большой задел для будущих проектов цифровизации.
Как отмечает Сергей Андронов, спрос на модульные ЦОД растет с каждым годом. С их помощью производства решают целый ряд задач — от обеспечения катастрофоустойчивости до более гибкого и эффективного распределения ресурсов.
«На предприятиях, в том числе в металлургии и ТЭК, мы наблюдаем сейчас явную тенденцию к децентрализации ИТ-инфраструктуры и выстраиванию геораспределенной системы автономных ЦОД непосредственно на промышленных площадках. Такая схема дает максимальную гарантию того, что выход из строя одного дата-центра не приведет к остановке производства и другим негативным последствиям».
Сергей Андронов,
директор центра сетевых решений компании «Инфосистемы Джет»
Эксперты компании «Инфосистемы Джет» подчеркивают, что в своих проектах собирают модульные ЦОД с использованием преимущественно отечественного оборудования: больше половины компонентов изготавливают российские заводы, а остальное поставляется из дружественных стран, в основном из Китая. Это не только обеспечивает соответствие требованиям регуляторов к объектам КИИ (к которым относятся многие производства), но и позволяет предприятиям исключить зависимость от западных вендоров, быстрее развертывать дата-центры и проводить их обслуживание: все комплектующие доступны, необходимые специалисты есть в любом городе.
Сегодня цифровизация промышленности идет крайне динамично. Процессы, которые раньше осуществлялись традиционным способом, активно автоматизируются — внедряются системы компьютерного зрения для контроля качества продукции, ИИ-алгоритмы, роботизированная сборка, интернет вещей. Это влечет масштабный рост данных — соответственно, появляется потребность в их надежном хранении и защите информационных систем. А постоянная готовность к отказам инфраструктурных компонентов и атакам стала для предприятий нормой жизни. В таких условиях выиграют компании, освоившие принципы антихрупкости: вместо опоры на надежный центр — децентрализация, вместо монолита — подвижная и адаптивная структура. Геораспределенные ЦОД — один из элементов такой парадигмы. Их взаимозаменяемость — фактор непрерывности бизнеса.