Публикации
2023 г. – новый этап практического применения CXL, статья
VMware сдвигает акцент в проекте Capitola на CXL, статья
Dell Validated Design for Analytics — Data Lakehouse: интегрированное хранилище данных, статья
OCP Global Summit: решения для Computational Storage и компонуемых масштабируемых архитектур, статья
Samsung CXL MemoryySemantic SSD: 20M IOPs, статья
UCIe – открытый протокол для взаимосвязи чиплетов и построения дезагрегированных инфраструктур, статья
Omni-Path Express – открытый интерконнект для экзафлопных HPC/AI-систем, статья
GigaIO: CDI_решение на базе AMD для высшего образования, статья
Энергоэффективные ЦОД на примерах решений Supermicro, Lenovo, Iceotope, Meta, статья
От хранилищ данных и “озер данных” к open data lakehouse и фабрике данных, статья
EuroHPC JU развивает НРС-экосистему на базе RISC-V, статья
LightOS™ 2.2 – программно-определяемое составное блочное NVMe/TCP хранилище, статья
End-to-end 64G FC NAFA, статья
Computational Storage, статья
Технология KIOXIA Software-Enabled Flash™, статья
Pavilion: 200 млн IOPS на стойку, статья
CXL 2.0: инновации в операциях Load/Store вводаавывода, статья
Тестирование референсной архитектуры Weka AI на базе NVIDIA DGX A100, статья
Fujitsu ETERNUS CS8000 – единая масштабируемая платформа для резервного копирования и архивирования, статья
SmartNIC – новый уровень инфраструктурной обработки, статья
Ethernet SSD, JBOF, EBOF и дезагрегированные хранилища, статья
Compute, Memory и Storage, статья
Lenovo: CXL – будущее серверов с многоуровневой памятью , статья
Liqid: компонуемые дезагрегированные инфраструктуры для HPC и AI, статья
Intel® Agilex™ FPGA, статья
Weka для AI-трансформации, статья
Cloudera Data Platform – “лучшее из двух миров”, статья
Fujitsu ETERNUS DSP - разработано для будущего, статья
Технологии охлаждения для следующего поколения HPC-решений, статья
Что такое современный HBA?, статья
Fugaku– самый быстрый суперкомпьютер в мире, статья
НРС – эпоха революционных изменений, статья
Новое поколение СХД Fujitsu ETERNUS, статья
Зональное хранение данных, статья
За пределами суперкомпьютеров, статья
Применение Intel® Optane™ DC и Intel® FPGA PAC, статья
Адаптивные HPC/AI-архитектуры для экзаскейл-эры, статья
DAOS: СХД для HPC/BigData/AI приложений в эру экзаскейл_вычислений, статья
IPsec в пост-квантовую эру, статья
LiCO: оркестрация гибридныхНРС/AI/BigData_инфраструктур, статья
 
Обзоры
Все обзоры в Storage News
 
Тематические публикации
Flash-память
Облачные вычисления/сервисы
Специализ. СХД для BI-хранилищ, аналитика "больших данных", интеграция данных
Современные СХД
Информационная безопасность (ИБ), борьба с мошенничеством
Рынки
INTEL ПРЕДОСТАВЛЯЕТ ДОСТУП К БОЛЬШИМ ДАННЫМ

26, февраль 2013  —  Intel объявила о выпуске программного пакета Intel® Distribution for Apache Hadoop* (Intel® Distribution), призванного предоставить доступ к возрастающим объемам информации, получившим название «большие данные». Новый продукт, включающий ПО Intel® Manager for Apache Hadoop*, обеспечит высокую производительность и поддержку расширенных опций безопасности.

Возможность управлять «большими данными» позволяет изменить мир за счет открытий, внедрения инновационных бизнес-моделей и расширения возможностей пользователей цифровых устройств. Однако объем обрабатываемой информации по-прежнему остается на низком уровне. Это связано с тем, что используемые технологии и методики неспособны адаптироваться к имеющимся типам данных либо дороги для практического внедрения. Hadoop * – программный каркас на основе открытого кода для хранения и обработки больших объемов данных с использованием кластеров. По мере того как объемы данных возрастают, система остается открытой, сохраняет возможность масштабирования и соответствие требованиям к производительности, безопасности и удобству управления.

Высокая производительность и надежная защита

Intel предлагает открытую платформу на базе Apache Hadoop *, способную соответствовать темпам развития аналитики больших данных. Система Intel Distribution стала первым решением, которое обеспечивает адекватное шифрование данных с помощью Intel ® AES New Instructions (Intel ® AES-NI) в чипах Intel ® Xeon ® . Благодаря этому в Hadoop Distributed File System * можно безопасно анализировать данные с сохранением высокой скорости работы.

Оптимизации сетевой системы и подсистемы ввода-вывода, реализованные в Intel Xeon , повышают производительность системы во время анализа информации. Анализ одного терабайта данных, который ранее занимал более 4 ч, теперь может быть выполнен за 7 мин 1 за счет объединения технологий с Intel Distribution . Согласно расчетам, в мире создается 1 петабайт (1000 терабайт) информации каждые 11 секунд (это объем данных для 13 лет просмотра видео высокой четкости). Для решения этой проблемы технологии Intel открывают большие возможности. Например, в больницах анализ информации мог бы помочь улучшить лечение, позволяя более оперативно ставить диагноз, определять эффективность терапии и взаимодействие лекарств.

Внедрение Intel ® Manager for Apache Hadoop * позволяет упростить развертывание, настройку и слежение за работой новых приложений. Intel ® Active Tuner for Apache Hadoop * выполняет автоматическую настройку конфигурации рабочих показателей системы. А ранее необходимо было выполнять отдельный анализ использования системных ресурсов каждым приложением.

Intel сотрудничает с партнерами для интеграции комплекса в различных платформах и системах следующего поколения компаний 1 degreenorth *, AMAX *, Cisco *, Colfax Corporation *, Cray *, Datameer *, Dell *, En Pointe *, Flytxt *, Hadapt *, HStreaming *, Infosys *, LucidWorks *, MarkLogic *, NextBio *, Pentaho *, Persistent Systems *, RainStor *, Red Hat *, Revolution Analytics *, SAP *, SAS *, Savvis , CenturyLink company *, Silicon Mechanics *, SoftNet Solutions *, Super Micro Computer , Inc .*, Tableau Software *, Teradata *, T - Systems *, Wipro * и Zettaset *.

Комплексный подход к большим данным

Новая разработка расширяет широкий ассортимент продуктов Intel для центров обработки данных, сетевых инфраструктур, систем хранения данных и интеллектуальных систем. Недавно представленная система Intel ® Intelligent Systems Framework включает в себя набор решений для обеспечения согласованного и масштабируемого подключения, управления и защиты интеллектуальных устройств и создает основу, которая помогает собирать, анализировать и передавать важную информацию с конечных устройств в центры обработки данных.

Intel продолжает инвестировать в развитие экосистемы «больших данных», включая разработку программного комплекса Intel ® Graph Builder for Apache Hadoop *, который представляет собой библиотеку для построения диаграмм. Intel Graph Builder оптимизирован для Intel Distribution с целью сократить время для создания программного кода. Фонд Intel Capital инвестировал значительные средства в разработку технологий распределенного анализа, включая проекты, реализованные совместно с 10 gen * и Guavus Analytics *.

(*) Другие торговые марки и товарные знаки являются собственностью их законных владельцев .

(1) По результатам внутренних испытаний Intel .

Программное обеспечение и рабочие нагрузки, использованные для тестов производительности, могли быть оптимизированы для процессоров Intel . Результаты тестов производительности, включая SYSmark * и MobileMark *, измерялись с использованием определенных компьютерных систем, компонентов, ПО, операций и функций. Любые изменения могут повлиять на результаты измерений. Необходимо использовать другую информацию и тесты производительности для принятия решения о покупке, включая информацию об использовании этой продукции с другими компонентами.

Публикации по теме
Специализ. СХД для BI-хранилищ, аналитика "больших данных", интеграция данных
Информационная безопасность (ИБ), борьба с мошенничеством
Центры обработки данных
 
Новости Intel

© "Storage News" journal, Russia&CIS
(495) 233-4935;
www.storagenews.ru; info@storagenews.ru.