23, февраль 2023  — 

•  https://vastdata.com/blog/our-biggest-software-release-ever/
•  Джефф Денворт ( Jeff Denworth )

VAST Data анонсировала выпуск ПО 4.6 + 4.7, назвав его самым большим выпуском программного обеспечения в своей истории.

Группа исследований и разработок VAST, насчитывающая около 300 инженеров, представляет собой мощную организацию, которая в настоящее время достигла уровня размера, масштаба и сложности, который ставит нас плечом к плечу с некоторыми из ведущих мировых команд по проектированию инфраструктуры в области корпоративного программного обеспечения и облачной инфраструктуры. космос. Таким образом, мы изобретаем и разрабатываем VAST OS одновременно в нескольких направлениях и в нескольких измерениях. Этот новый выпуск является итогом последних 6 месяцев неустанной работы и подлинных инноваций с чистого листа.

Хорошо, хватит преувеличений… давайте перейдем к сути:

Сегодняшнее объявление раскрывает захватывающие новые возможности, которые выводят VAST и наших клиентов на новые рубежи, и будет известно как первая полноценная версия, которая начинает раскрывать более масштабную программу платформы данных VAST. Предстоит многое распаковать, и некоторые из функций могут стать центральным элементом основного выпуска функций в одиночку… поэтому, чтобы уделить им должное внимание, в течение следующих пяти недель мы представим каждую из основных возможностей с более подробной вводной частью. содержание, которое подробно объясняет каждую основную возможность. Сегодня для меня большая честь представить весь спектр инноваций и предварительно просмотреть все, что мы предлагаем.

В центре внимания каталог данных VAST

Семантический уровень и уровень данных теперь синтезированы

На протяжении десятилетий организации создавали независимую инфраструктуру баз данных вместе со своими хранилищами контента, чтобы иметь смысл неструктурированных и даже частично структурированных данных. Архивы медицинских карт PACS всегда связаны с хранилищами данных SQL. Фотосервисы сочетают в себе хранилище объектов и базы данных NoSQL. Озера данных Hadoop используют Hive для своих метахранилищ.

Распространение систем записи в современном стеке ИТ создало уровень сложности, который делает невозможным получение полного спектра информации из любого хранилища данных. ИТ-индустрия привыкла к идее, что структурированные, неструктурированные и частично структурированные хранилища данных должны быть различны только потому, что до сих пор не было разработано ни одной единой системы для достижения подлинного синтеза данных.

Каталог VAST является расширением хранилища элементов , которое теперь позволяет кластерам VAST каталогизировать каждый файл и объект, записанный в расширяемом табличном формате, который позволяет пользователям данных дополнительно обогащать и помечать данные дополнительным пользовательским контекстом (в данные формы, которые записываются в новые столбцы) и выполнять запросы к массивным наборам данных на любом уровне масштаба. Теперь пользователи и администраторы могут получить доступ к мощному инструменту, который обеспечивает глобальное понимание их обширных резервов данных с полностью синтезированным и синхронизированным каталогом данных, который не требует интеграции и где ваш каталог всегда синхронизируется с вашим хранилищем данных.

Каталог VAST позволит использовать ряд новых приложений ОС VAST:

•  Администраторы VAST будут использовать Каталог для управления емкостью и возврата платежей.

•  Приложения резервного копирования и архивирования могут использовать новый дифференциал для еще более быстрого обхода пространства имен, что приводит к более быстрому резервному копированию и быстрой миграции данных.

•  Приложения могут заменять функции POSIX операторами SQL, чтобы увидеть быстрое ускорение рутинных операций POSIX… зачем искать , когда можно выбрать * в 1000 раз быстрее? Есть потребность в скорости??? Каталог – это ваш ответ.

Классы обслуживания, логически предоставляемые вплоть до пользовательского уровня

В течение почти полувека клиенты неизменно просят у наших отделов продаж какой-либо механизм многоуровневого хранения, пока не поймут революционную экономику all-flash, которую мы предлагаем. Сказав это, мы также заметили, что многие поставщики гипермасштабируемых услуг разработали классы обслуживания путем тонкого предоставления обширных пулов оборудования, логически, в презентации, которые имеют разные характеристики классов обслуживания.

В этом новом выпуске мы расширяем наше предложение QOS за пределы концепции пулов, которую мы ранее представили, и теперь мы предлагаем дополнительную возможность создавать различные тарифные планы, которые устанавливают минимальные и максимальные ограничения на пропускную способность и IOPS для каждого пользователя VAST. или Просмотр (наш термин для общего доступа, экспорта или корзины), чтобы поставщики услуг (публичное и частное облако) могли сдерживать шумных соседей.

Представления на уровне пользователя, в частности, являются большим шагом вперед для ряда наших партнеров-поставщиков услуг, которые застряли на более ограниченных подходах, предлагаемых такими компаниями, как NetApp.

Для тех потенциальных клиентов, которые все еще хотят, чтобы многоуровневые решения предлагались их владельцам приложений, ну… просто предоставьте им различные классы обслуживания, которые можно гибко выделять (и изменять) из одного простого в управлении и масштабируемого кластера, прежде чем вы поспешите внедрить какое-то устаревшее, многоуровневый подход к хранилищу данных.

От встроенного до внешнего — шифрование стало еще более безопасным

В соответствии с вышеупомянутой ориентацией на поставщиков услуг, мы теперь применяем тот же подход к управлению внешними ключами, поддерживая KMIP 1.2. Этот стандартный API-интерфейс Key Vault позволяет подключать самые популярные системы EKM к вашим кластерам VAST, чтобы:

•  арендаторы могут приносить и управлять своими собственными уникальными ключами шифрования

•  арендаторы могут менять свои ключи с любой регулярностью, которую они хотят

•  клиенты могут контролировать, как они шифруют, сохраняя при этом экономию на инфраструктуре — благодаря нашему революционному подходу на основе подобия к глобальному сокращению данных

Для начала мы предлагаем поддержку Thales CypherTrust и IBM Key Protect. В будущем мы будем работать над расширением этой матрицы поддержки в соответствии с приоритетами наших клиентов.

Объединение пространства имен VAST из совокупности кластеров

Магазин элементов VAST всегда отличался детальным подходом к реализации моментальных снимков. Моментальные снимки резервируются без снижения производительности приложения, они представляют собой операции резервирования данных с детализацией на уровне байтов, и клиенты могут гибко делать 100 000 моментальных снимков с любой глубиной пространства имен с точностью до 15 секунд. С VAST вам никогда не придется беспокоиться о разделах или томах — каждый сервер VAST получает доступ к одному и тому же глобальному набору данных благодаря нашему дезагрегированному, совместно используемому-всему ( DASE ) Архитектура.

Начиная с этого нового выпуска, кластеры VAST теперь также поддерживают возможность совместного использования моментальных снимков и их распространения на несколько удаленных кластеров. Каждый удаленный сайт может монтировать моментальные снимки другого сайта и даже создавать клоны этих данных, чтобы превратить моментальный снимок в представление для чтения/записи. Эта возможность закладывает основу для другой работы, которую мы представим, касающейся создания глобального пространства имен от периферии до облака.

Более интеллектуальный подход к управлению мощностями глобального парка

Напоминаем, что Uplink — это наша глобальная облачная консоль управления автопарком, разработанная для того, чтобы клиенты могли легко управлять всеми своими кластерами VAST с единой панели.

Благодаря возможностям эластичных вычислений (которые поступают из облака) и небольшому количеству библиотек машинного обучения на основе Python клиенты теперь могут гораздо лучше понимать тенденции использования данных в своих кластерах и использовать преимущества прогнозов емкости, чтобы они могли опережать спроса.

Uplink теперь обеспечивает основу прогнозирования одним щелчком (настраиваемую) и горизонт прогнозирования, который построен на основе базы данных временных рядов и доступен в качестве инструмента оценки пропускной способности. Машинное обучение также помогает системе понять, как нормализовать аномалии тенденций данных, которые в противном случае привели бы к путанице в классической статистической модели, что позволяет более точно прогнозировать пропускную способность.

Мы уже упоминали поставщиков облачных услуг?

В то время как Zero-Trust является критически важной возможностью для VAST, поскольку мы становимся основой для ведущих поставщиков облачных услуг, это не менее важно для наших государственных и корпоративных клиентов, которые постоянно плывут вверх по течению, чтобы обеспечить максимальную безопасность своей инфраструктуры.

Помимо поддержки KMIP/EKM, мы также очень рады расширить программу Zero-Trust, объявив о поддержке:

•  Доступ на основе TLS для NFS (вероятно, более простой метод обеспечения шифрования во время полета)

•  PseudoFS (теперь позволяет клиентам NFS 4.1 ограничивать доступ к подмножествам каталогов)

•  Rocky Linux для ОС VAST (выход за рамки CentOS для обеспечения соответствия, STIG, FIPS)

•  Аудит S3 (добавление в NFS и SMB аудит мы уже поддерживаем)

CSI VAST теперь поддерживает различные классы хранения для постоянных и эфемерных томов, а Helm Charts теперь предоставляются для упрощения реализации CSI VAST… все это помогает упростить и упростить управление вашими локальными и частными вычислительными облаками с помощью VAST.

Итак, я люблю/ненавижу говорить, что это всего лишь список функций высокого уровня из этого выпуска.

•  С любовью, потому что я поражен усилиями нашей команды по исследованиям и разработкам и их скоростью инноваций.

•  Ненавижу, потому что у меня нет места в блоге, чтобы объяснять больше 🙂

Следите за новостями в блоге VAST в ближайшие недели, чтобы узнать подробности о каждом из этих новых выпусков функций. Впереди: каталог VAST.