ITGLOBAL.COM: кейс внедрения надежного решения для хранения большого объема данных ITPOD в телеком
В условиях стремительного роста объемов данных в сфере телекоммуникаций компании сталкиваются с новыми вызовами, связанными с хранением, обработкой и анализом информации. С одним из них столкнулся и один из клиентов компании ITGLOBAL.COM, корпорация ITG.
Содержание |
О ситуации
В рамках одного из проектов компания столкнулась с необходимостью упорядочивать и хранить большие объемы статистики сетевого трафика. Главной задачей стало обеспечить высокую надежность и производительность системы.
Ранее компания использовала решения на основе серверов с локальным хранением данных, однако они не соответствовали этим требованиям. Из-за периодических сбоев данные терялись, что приводило к снижению эффективности работы.
Чтобы решить эту проблему, компания обратилась к своему партнеру — ITGLOBAL.COM, который является глобальным поставщиком ИТ-услуг, продуктов и сервисов.
О решении
Для обеспечения надежной защиты данных был выбран комплексный подход, который включает три ключевых компонента:
- Серверы ITPOD — высокопроизводительные вычислительные мощности, предназначенные для обработки большого объема информации;
- ITPOD Storage — система хранения данных, отличающаяся отказоустойчивостью и высокой скоростью доступа к информации;
- Программное обеспечение СКАТ от VAS Experts — решение для анализа сетевого трафика, работающее на основе аппаратной платформы ITPOD.
Почему выбрали именно ITPOD
Для клиента было крайне важно исключить риск потери важной информации. Система хранения данных ITPOD гарантирует надежное сохранение данных, даже в случае сбоев оборудования. Также система продемонстрировала высокую производительность, что позволяет обрабатывать большие объемы данных в режиме реального времени. Это особенно актуально для анализа сетевого трафика, где задержки в обработке информации могут привести к потере актуальности данных.
ITPOD предлагает гибкие решения для хранения данных, разделяя их на две категории:
- Оперативные данные — информация, которая часто используется для построения отчетов за короткие промежутки времени, хранится на быстрых СХД из линейки ITPOD Full Flash. Это позволяет получать мгновенный доступ к данным и быстро реагировать на изменения сетевого трафика, а также моментально формировать необходимые отчеты.
- Аппроксимированные данные — данные, которые используются для анализа за длительные периоды, хранятся на более медленных СХД линейки ITPOD Hybrid. Такой подход позволяет оптимизировать затраты на хранение без потери производительности, поскольку доступ к этим данным требуется значительно реже.
Что сделали
На момент старта проекта система заказчика могла обрабатывать 2,5 ТБ/с, что уже было впечатляющим результатом. Однако теперь стояла задача еще более амбициозная — увеличить пропускную способность до 5 ТБ/с, чтобы удовлетворить растущие потребности заказчика в обработке и хранении данных.
Для реализации этой цели компания разработала масштабируемую архитектуру, которая включала:
- 120 серверов, отвечающих за обработку трафика;
- 4 all-flash СХД (ITPOD Full Flash), построенных на NVMe-накопителях с высокими показателями IOPS (операций ввода-вывода в секунду). Они обеспечили хранение оперативных данных, требующих максимальной скорости доступа;
- 2 гибридные СХД (ITPOD HYB) для хранения аппроксимированных данных, которые используются реже, но также требуют надежного хранения.
Для обеспечения высокой производительности и низких задержек между серверами и системой хранения данных была создана специальная сеть, которая работает на скорости 25 ГБ/с. Это позволило значительно сократить задержки и увеличить пропускную способность.
Для подключения к сети использовался современный протокол NVMe over TCP, который позволил в полной мере использовать возможности NVMe-дисков в Ethernet-сетях. Его основные преимущества:
- Высокая производительность. Благодаря эффективному использованию ресурсов NVMe-накопителей, протокол обеспечивает быстрый доступ к данным.
- Низкие задержки. Протокол позволяет значительно снизить задержки, что значительно улучшает качество работы с данными.
Для обеспечения стабильности и высокой производительности на серверах была установлена операционная система Oracle Linux. Для хранения данных на каждый сервер были выделены равные логические пространства Namespace, которые располагаются на СХД и подключены по протоколу NVMe/TCP.
Результаты
Внедрение этой архитектуры позволило добиться значительных результатов:
- Увеличить пропускную способность системы с 2,5 до 5 ТБ/с, что полностью соответствует требованиям заказчика.
- Повысить отказоустойчивость и надежность хранения данных, что обеспечивает безопасность информации даже в периоды пиковых нагрузок.
- Минимизировать задержки при обработке данных, что позволяет проводить анализ сетевого трафика в режиме реального времени.
Данный кейс демонстрирует, как современные технологии и грамотно разработанная архитектура способны эффективно справляться с самыми сложными задачами. Благодаря увеличению пропускной способности до 5 ТБ/с, использованию передовых протоколов и технологий хранения данных, таких как NVMe over TCP и all-flash СХД, система заказчика превратилась в мощную и масштабируемую инфраструктуру.
