Дата-центры и технологии хранения и анализа больших данных

Дайджест. — М.: Агентство промышленного развития города Москвы, 2020. — 98 с.В конце 90-х удачно сошлись две новации — научная база RAID и выпускаемые массовым тиражом винчестеры. Если собрать их вместе, оказалось возможным создать коммерческий накопитель кластерного типа, способный конкурировать с дисками IBM по техническим показателям при существенно меньшей цене.
В 1988 году Майкл Рюттгерс предложил разработать дисковую систему, состоящую из винчестеров, и поставлять их для мэйнфреймов, совместимых с IBM, и для AS/400.
Моше Янаи выдвинул идеологию кэш-памяти Integrated Cached Disk Array (ICDA), в результате родился прародитель дисковых кластеров.
В последующем на рынке появилось множество моделей дисковых массивов самого разного назначения.
С 2010 г. объём хранимой и передаваемой информации растёт приблизительно на 50% каждый год.
Вместе с объёмом растёт и стоимость информации, поскольку она влияет на бизнес-процессы организаций.
Однако большая часть данных не является «горячей», поэтому во многих случаях нагрузка согласуется с принципом Парето: 80% всех обращений адресовано 20% данных.
В связи с чем, появилась необходимость надёжного хранения данных, быстрого доступа к данным и восстановление утраченных данных. Все это требует организации отдельной системы вычислительных комплексов — системы хранения данных (СХД).
СХД является совокупностью программного и аппаратного обеспечения и предназначена для эффективного хранения и передачи информации больших объёмов. СХД позволяет оптимально распределить ресурсы для хранения информации. СХД должна быть масштабируемой, гибкой, отказоустойчивой. Она должна соответствовать стандартам и требованиям информационной и физической безопасности.
Системы хранения данных размещают в центрах обработки данных (ЦОД или дата-центр). Дата-центр или ЦОД представляет собой высокотехнологичное помещение, заполненное вычислительным и телекоммуникационным оборудованием для сбора, хранения и обработки различной информации, и позволяет пользователям работать в сети Интернет.Термины и определения.
Введение.
Инфраструктура ЦОД.
Основные схемы резервирования инженерных систем ЦОД.
Компоненты ЦОД.
Типы ЦОД.
Классификация ЦОД с точки зрения архитектуры.
Базовая архитектура ЦОД.
Основные типы архитектур.
Модульные и контейнерные ЦОД.
Облачные ЦОД.
Гиперконвергентные решения.
Децентрализованная сеть хранения и обработки данных SIA.
Классификация ЦОД по уровню надёжности инженерной инфраструктуры.
Экологичность ЦОД.
Текущая ситуация.
Повышение экологичности дата-центров.
Услуги ЦОД.
Услуга HaaS.
Услуга IaaS.
Услуга VPS/VDS.
Услуга Dedicated.
Услуга Siacoin.
Услуга Colocation.
ИТ-безопасность.
Объектное хранилище.
Стандарты в области ЦОД.
Российские.
Международные.
QSA-аудит.
Перспективные технологии ЦОД.
Технологии хранения данных.
Решения для хранения данных.
Магнитные ленты.
Гибкие диски.
Оптические диски.
Жёсткие диски.
Файловые системы.
RAID (Redundant array of independent disks).
Сети и СХД, объектные СХД.
Многоуровневое хранение данных.
Системы хранения данных.
Тренды технологий хранения данных.
Кооперационные связи.
Реестр операторов ЦОД.
Национальный реестр операторов ЦОД.
Национальный реестр сервисных операторов ЦОД.
Производители.
Российские.
Иностранные.
Инвестиционная привлекательность проектов создания ЦОД.
Совокупные затраты на создание ЦОД.
Кейсы.
ЦОД для «Транснефти».
ЦОД DEAC (Рига).
Сеть центров обработки данных в Карелии.
МЦОД МТС Приморье.
Государственная единая облачная платформа Mail.ru Group.
Центры обработки данных АО «Концерн Росэнергоатом».
Создание ЦОД в Твери.
Новый ЦОД IXcellerate.
Дата-центр «Яндекса» во Владимире.
Рынок центров обработки данных.
Российский рынок.
Международный рынок.
Импорт накопителей информации в Россию.
Мировой рынок Big Data.
Список использованных источников.