Публикации
2023 г. – новый этап практического применения CXL, статья
VMware сдвигает акцент в проекте Capitola на CXL, статья
Dell Validated Design for Analytics — Data Lakehouse: интегрированное хранилище данных, статья
OCP Global Summit: решения для Computational Storage и компонуемых масштабируемых архитектур, статья
Samsung CXL MemoryySemantic SSD: 20M IOPs, статья
UCIe – открытый протокол для взаимосвязи чиплетов и построения дезагрегированных инфраструктур, статья
Omni-Path Express – открытый интерконнект для экзафлопных HPC/AI-систем, статья
GigaIO: CDI_решение на базе AMD для высшего образования, статья
Энергоэффективные ЦОД на примерах решений Supermicro, Lenovo, Iceotope, Meta, статья
От хранилищ данных и “озер данных” к open data lakehouse и фабрике данных, статья
EuroHPC JU развивает НРС-экосистему на базе RISC-V, статья
LightOS™ 2.2 – программно-определяемое составное блочное NVMe/TCP хранилище, статья
End-to-end 64G FC NAFA, статья
Computational Storage, статья
Технология KIOXIA Software-Enabled Flash™, статья
Pavilion: 200 млн IOPS на стойку, статья
CXL 2.0: инновации в операциях Load/Store вводаавывода, статья
Тестирование референсной архитектуры Weka AI на базе NVIDIA DGX A100, статья
Fujitsu ETERNUS CS8000 – единая масштабируемая платформа для резервного копирования и архивирования, статья
SmartNIC – новый уровень инфраструктурной обработки, статья
Ethernet SSD, JBOF, EBOF и дезагрегированные хранилища, статья
Compute, Memory и Storage, статья
Lenovo: CXL – будущее серверов с многоуровневой памятью , статья
Liqid: компонуемые дезагрегированные инфраструктуры для HPC и AI, статья
Intel® Agilex™ FPGA, статья
Weka для AI-трансформации, статья
Cloudera Data Platform – “лучшее из двух миров”, статья
Fujitsu ETERNUS DSP - разработано для будущего, статья
Технологии охлаждения для следующего поколения HPC-решений, статья
Что такое современный HBA?, статья
Fugaku– самый быстрый суперкомпьютер в мире, статья
НРС – эпоха революционных изменений, статья
Новое поколение СХД Fujitsu ETERNUS, статья
Зональное хранение данных, статья
За пределами суперкомпьютеров, статья
Применение Intel® Optane™ DC и Intel® FPGA PAC, статья
Адаптивные HPC/AI-архитектуры для экзаскейл-эры, статья
DAOS: СХД для HPC/BigData/AI приложений в эру экзаскейл_вычислений, статья
IPsec в пост-квантовую эру, статья
LiCO: оркестрация гибридныхНРС/AI/BigData_инфраструктур, статья
 
Обзоры
Все обзоры в Storage News
 
Тематические публикации
Flash-память
Облачные вычисления/сервисы
Специализ. СХД для BI-хранилищ, аналитика "больших данных", интеграция данных
Современные СХД
Информационная безопасность (ИБ), борьба с мошенничеством
Рынки
Развитие технологий хранения данных: прогноз от «Рэйдикс» на 2020 год

7, февраль 2020  —  «Революционные изменения маловероятны, но ряд технологий, которые сейчас встречаются не так часто, станут массовыми. » Прогнозами на будущий год делится Сергей Платонов, заместитель генерального директора компании « Рэйдикс » по стратегии.

Жесткие диски (HDD): общий объем поставляемых HDD вырастет, и серьезно подскачет спрос на ПО, которое умеет работать с SMR.

Продажи жестких дисков, выраженные в количестве, будут падать, но общий объем памяти будет тем не менее расти. Плотность производительности (IOps/TB) снижается, и у жестких дисков остается все меньше сценариев применения.

Думаю, мы увидим ренессанс технологии черепичной магнитной записи (SMR, Shingled Magnetic Recording), и уже планируем адаптировать к ней RAIDIX: постепенно большая часть ПО, ориентированного на работу с HDD, перейдет к поддержке этой технологии. Так, у Western Digital уже стали доступны диски 20  TB, и в течение 3 лет компания планирует не менее половины объема продавать на накопителях с черепичной записью.

Твердотельные накопители (Flash): ждем новые гибридные решения, которые будут состоять из быстрой памяти (типа 3DXpoint) и объемных накопителей на QLC (в том числе с поддержкой ZNS).

Мы увидели аналог Intel Optane от Micron (QuantX), а Toshiba представила XL-flash. Новые сервера и продукты будут поддерживать PCIe 4.0, который позволит увеличить пропускную способность в 2 раза. С другой стороны, увеличивается количество бит на ячейку и слоев 3D NAND памяти, что вместе с новыми форм-факторами позволит компактно размещать большие объемы flash, ориентированного на чтение. Мы в « Рэйдикс » продолжим развивать RAIDIX ERA, которая прекрасно подходит для работы с подобными устройствами и показывает отличные результаты как на чтение данных, так и на запись.

Технология Zoned Namespaces (ZNS) позволит ещё больше увеличить объём NAND накопителей . В 2020 году должны появиться первые накопители с поддержкой этой технологии, и рынок остро нуждается в ПО, которое умеет работать с ZNS и реализовывать всю производительность устройств, ориентированных на запись и низкие задержки (Optane, QuantX, XL-Flash), а также создаёт эффективный виртуальный пул, работающий поверх этих двух уровней.

Новые устройства: ожидаем появление нескольких новых готовых к внедрению устройств класса computational storage . Накопители этого класса позволяют часть задач перенести максимально близко к данным и разгрузить CPU хоста. SNIA уже работает над стандартизацией подхода, и уже представлены устройства, которые ускоряют работу таких приложений, как Hadoop и RocksDB.

SmarNICs позволят забрать часть вычислений у сервера : в 2020 году эти устройства, на наш взгляд, ждёт сильный скачок спроса при построении и модернизации ЦОД. Задачей по портированию технологии RAIDIX ERA на SmartNICs в « Рэйдикс » занимается отдельная R&D команда.

Думаю, о себе громче заявят Mellanox и Broadcom, к устройствам которых независимые разработчики выпускают ПО. К слову, мы уже наблюдаем ряд внедрений новинок от этих вендоров.

Энергонезависимая память: производителям СХД и SDS стоит позаботиться о глубокой интеграции их продуктов с устройствами persistent memory.

С появлением Intel Optane Memory все больше компаний-производителей ПО заявили о возможности использования этого типа памяти как для снижения уровня задержек при доступе к постоянному хранилищу, так и для увеличения объема оперативной памяти. Главный вопрос 2020 года звучит так: сможет ли кто-то составить конкуренцию Intel и выпустить массовый и недорогой продукт на альтернативной технологии?

Сети хранения: в 2020 году большинство компаний, выпускающих AllFlash, сделают поддержку интерфейсов доступа NVMe over Fabrics. Поддержка NVMe over Fabrics будет введена в одном из следующих релизов ПО RAIDIX.

Основной спрос на такие СХД будет со следующих рынков и задач: Media (работа с 4K и 8K видео), AI (который становится технологией общего назначения), б ольшие базы данных , Real Time аналитика , к онтейнеризация , HPC. Мы также ожидаем, что кластерные и параллельные файловые системы обеспечат полноценную NVMf и соответствующий уровень производительности.

Архитектуры : п одход Composable Storage будет продолжать развиваться в 2020 году.

Напомним, что Composable/Disaggregated Storage подразумевает выделение отдельных пулов различных ресурсов, объединенных двумя типами сетей и объедение их в виртуальные устройства для решения определенных задач. В 2020 появятся новые модели железа и новые продукты, которые строятся на основе такого подхода, а новые ЦОД буду постепенно использовать эти продукты в своих инфраструктурах .

Выводы

Нас ждет достаточно много пусть и не революционных, но значимых изменений. Чтобы правильно спланировать инвестиции в инфраструктуру, мы советуем начать с выбора платформы, основанной на программно-конфигурируемом подходе. Немаловажно, чтобы разработчики платформы видели и понимали значимость изменений, а также способы применения новых разработок для решения задач пользователей. В этом случае вы сможете получить доступ к новым технологиям без глобальной перестройки своего ЦОД или машинного зала, что позволит постепенно обновлять оборудование по мере поддержки SDS.

Компаний « Рэйдикс » (www.raidix.ru) — ведущий российский разработчик программного обеспечения для управления высокопроизводительными системами хранения данных. ПО RAIDIX основано на собственных уникальных алгоритмах помехоустойчивого кодирования. СХД на базе ПО RAIDIX востребованы в сфере видеопроизводства, проектах видеонаблюдения, инфраструктурах суперкомпьютерных вычислений и других высокотехнологичных проектах. Внедрения проведены более чем в 30 странах, в том числе в Японии, США, Великобритании, Индии, Испании, Казахстане.

Публикации по теме
Flash-память
 
Новости RAIDIX

© "Storage News" journal, Russia&CIS
(495) 233-4935;
www.storagenews.ru; info@storagenews.ru.