17, октябрь 2023  —  На выставке GITEX GLOBAL 2023 компания Huawei представила новую модель хранилища ИИ OceanStor A310, разработанную для эпохи больших моделей ИИ. Решение обеспечивает оптимальные возможности хранения данных для базового обучения моделей и обучения отраслевых моделей. и вывод в сегментированных моделях сценариев, открывая новые возможности ИИ.

Запуск демонстрирует соответствие Huawei последним тенденциям развития искусственного интеллекта в эпоху больших моделей. Deep learning data lake storage OceanStor A310 подходит для различных отраслей и сценариев в крупных приложениях моделей искусственного интеллекта.

Питер Чжоу ( Peter Zhou ), президент линейки продуктов для хранения данных Huawei, сказал: «С OceanStor A310 мы предлагаем нашим клиентам и партнерам передовое решение для хранения данных с использованием искусственного интеллекта, которое раскрывает новые возможности искусственного интеллекта и создает ценность для различных отраслей. Посетители нашего стенда GITEX можем стать свидетелями того, как Huawei стремится ускорить эпоху интеллектуальных технологий, используя проверенную, безопасную и надежную платформу OceanStor, используемую некоторыми ведущими компаниями мира».

Предприятия сталкиваются с четырьмя серьезными проблемами при разработке и внедрении приложений для больших моделей. Во-первых , подготовка данных занимает много времени из-за рассредоточенных источников данных и медленного агрегирования. Сейчас предварительная обработка около ста терабайт данных занимает около десяти дней.

Во-вторых , для мультимодальных больших моделей, использующих в качестве обучающих наборов массивный текст и изображения, текущая скорость загрузки большого количества небольших файлов составляет менее 100 МБ/с, что приводит к низкой эффективности загрузки обучающих наборов. В-третьих , частая настройка больших параметров модели и нестабильность обучающей платформы приводят к перерывам в обучении в среднем примерно каждые два дня. Для восстановления обучения необходим механизм Checkpoint, а процесс восстановления после сбоя занимает больше суток.

Наконец , высокий порог для реализации больших моделей, построения сложных систем, сложного планирования ресурсов и использования ресурсов графического процессора обычно ниже 40%.

В контексте сценариев базовых и крупных отраслевых моделей OceanStor A310 представляет собой решение deep learning data lake storage , которое предлагает неограниченную горизонтальную масштабируемость и высокую производительность для смешанных рабочих нагрузок. Он обеспечивает комплексное управление массивными хранилищами данных для процессов ИИ, включая сбор данных, предварительную обработку, обучение и логические выводы. Оно обладает возможностями анализа данных, совместимыми с HPC и большими данными, что позволяет обрабатывать данные из аналогичных источников.

Компания Huawei является золотым спонсором GITEX GLOBAL 2023 и ведущим спонсором программы кибербезопасности мероприятия Cyber Valley. Посетите стенд Huawei в зале 22 Всемирного торгового центра Дубая на выставке GITEX GLOBAL, чтобы познакомиться с новейшими технологическими инновациями и узнать, как компания ускоряет интеллектуальные технологии.

Для получения дополнительной информации об участии Huawei в GITEX GLOBAL посетите веб-сайт Huawei GITEX GLOBAL: https://e.huawei.com/ae/events/2023/ae/gitex .