Публикации
2023 г. – новый этап практического применения CXL, статья
VMware сдвигает акцент в проекте Capitola на CXL, статья
Dell Validated Design for Analytics — Data Lakehouse: интегрированное хранилище данных, статья
OCP Global Summit: решения для Computational Storage и компонуемых масштабируемых архитектур, статья
Samsung CXL MemoryySemantic SSD: 20M IOPs, статья
UCIe – открытый протокол для взаимосвязи чиплетов и построения дезагрегированных инфраструктур, статья
Omni-Path Express – открытый интерконнект для экзафлопных HPC/AI-систем, статья
GigaIO: CDI_решение на базе AMD для высшего образования, статья
Энергоэффективные ЦОД на примерах решений Supermicro, Lenovo, Iceotope, Meta, статья
От хранилищ данных и “озер данных” к open data lakehouse и фабрике данных, статья
EuroHPC JU развивает НРС-экосистему на базе RISC-V, статья
LightOS™ 2.2 – программно-определяемое составное блочное NVMe/TCP хранилище, статья
End-to-end 64G FC NAFA, статья
Computational Storage, статья
Технология KIOXIA Software-Enabled Flash™, статья
Pavilion: 200 млн IOPS на стойку, статья
CXL 2.0: инновации в операциях Load/Store вводаавывода, статья
Тестирование референсной архитектуры Weka AI на базе NVIDIA DGX A100, статья
Fujitsu ETERNUS CS8000 – единая масштабируемая платформа для резервного копирования и архивирования, статья
SmartNIC – новый уровень инфраструктурной обработки, статья
Ethernet SSD, JBOF, EBOF и дезагрегированные хранилища, статья
Compute, Memory и Storage, статья
Lenovo: CXL – будущее серверов с многоуровневой памятью , статья
Liqid: компонуемые дезагрегированные инфраструктуры для HPC и AI, статья
Intel® Agilex™ FPGA, статья
Weka для AI-трансформации, статья
Cloudera Data Platform – “лучшее из двух миров”, статья
Fujitsu ETERNUS DSP - разработано для будущего, статья
Технологии охлаждения для следующего поколения HPC-решений, статья
Что такое современный HBA?, статья
Fugaku– самый быстрый суперкомпьютер в мире, статья
НРС – эпоха революционных изменений, статья
Новое поколение СХД Fujitsu ETERNUS, статья
Зональное хранение данных, статья
За пределами суперкомпьютеров, статья
Применение Intel® Optane™ DC и Intel® FPGA PAC, статья
Адаптивные HPC/AI-архитектуры для экзаскейл-эры, статья
DAOS: СХД для HPC/BigData/AI приложений в эру экзаскейл_вычислений, статья
IPsec в пост-квантовую эру, статья
LiCO: оркестрация гибридныхНРС/AI/BigData_инфраструктур, статья
 
Обзоры
Все обзоры в Storage News
 
Тематические публикации
Flash-память
Облачные вычисления/сервисы
Специализ. СХД для BI-хранилищ, аналитика "больших данных", интеграция данных
Современные СХД
Информационная безопасность (ИБ), борьба с мошенничеством
Рынки
Впервые в отрасли: Teradata выпускает платформу с открытым исходным кодом Kylo™ для быстрого создания и управления конвейерами данных

28, март 2017  —  Корпорация Teradata (индекс NYSE: TDC ), ведущий разработчик решений в области аналитики, сообщила сегодня о новом важном вкладе в разработку программного обеспечения с открытым исходным кодом. Kylo позволит компаниям, создающим озера данных, добиться высокого уровня эффективности. Teradata представляет Kylo™, программную платформу для управления озерами данных, созданную с использованием разработок на основе открытого исходного кода - Apache® Hadoop ®, Apache Spark ™ и Apache NiFi™. Kylo представляет собой спонсируемый корпорацией Teradata проект с открытым исходным кодом, доступный по лицензии Apache 2.0. Решение Kylo создано на основе кода, полученного в результате успешной реализации проектов озер данных, выполненных принадлежащей Teradata компанией Think Big Analytics , которая будет обслуживать и поддерживать проекты с использованием Kylo™.

Обладая большим опытом разработки решений, способных обеспечить экономические преимущества для бизнеса с помощью озер данных, Teradata представляет платформу Kylo™. Платформа помогает организациям решить основные проблемы, с которыми они сталкиваются при внедрении озер данных.

Одна из ключевых проблем заключается в том, что создание озер данных занимает слишком много времени, а учитывая, что цикл их разработки составляет в среднем 6-12 месяцев, пользователи обнаруживают, что предлагаемые варианты использования утрачивают свои актуальность и значение для быстро развивающегося бизнеса. Во-вторых, несмотря на снижение стоимости программного обеспечения, расходы на разработку быстро растут. В заключение, созданное озеро данных может не вызвать интереса у пользователей из-за трудности работы с ним, и поэтому возможности остаются нереализованными.

Платформа Kylo, разработанная с учетом практики внедрения озер данных в различных отраслях, помогает решить эти проблемы, поскольку интегрирует и упрощает процесс разработки конвейеров и общие задачи управления данными. А это, в свою очередь, способствует сокращению периода окупаемости, более быстрой адаптации пользователей и повышению производительности разработчиков. При работе с Kylo программирование не требуется, а интуитивный пользовательский интерфейс платформы для самостоятельного получения, обработки и подготовки данных для их последующего анализа позволяет ускорить процесс разработки. Еще одним преимуществом решения Kylo являются шаблоны, способствующие повышению производительности.

«Многие организации считают, что реализация решений для обработки больших данных в Hadoop – сложный процесс. Технологии больших данных ориентированы в основном на инженеров и разработчиков программного обеспечения, а также на системных администраторов, – говорит Ник Руда, старший аналитик компании Enterprise Strategy Group (ESG). – Наше исследование показало, что 28% организаций продолжают испытывать трудности с привлечением в свой штат достаточного числа бизнес-аналитиков и специалистов по анализу данных, не говоря уже о специалистах по работе с большими данными и приложениями с открытым исходным кодом. 77% респондентов указывают, что период, необходимый для получения коммерчески существенной отдачи от новых инициатив в области больших данных, составляет от 7 месяцев до 3-х лет. Так не должно быть. Я высоко ценю идею Teradata сделать платформу Kylo™ открытой. Это инновационный и важный вклад».

Вобрав в себя практический опыт реализации свыше 150 озер данных, Kylo™ помогает организациям решать основные проблемы, с которыми они сталкиваются при внедрении озер данных, в том числе:

- Нехватка опытных квалифицированных разработчиков и администраторов ПО;

- Изучение и реализация передового опыта в области управления озерами данных;

- Продвижение использования озер данных за пределами круга разработчиков.

Решение этих проблем открывает для бизнеса широкие перспективы. Teradata уже помогла многим организациям сэкономить средства и создать новые источники дохода благодаря использованию озер данных:

•  Компания -производитель полупроводников смогла повысить качество выпускаемых пластин, сократив отходы, сэкономив время, увеличив объем производства и тем самым повысив эффективность своей деятельности.

•  Компания -производитель промышленного оборудования внедрила новые модели обслуживания, соглашения об уровне обслуживания, процессы разрешения проблемных ситуаций и, что более важно, обеспечила себе новые возможности извлечения прибыли.

•  Всемирно известное медицинское научно-исследовательское учреждение сократило время на подготовку пациентов, в результате чего больше больных получили лечение.

« Kylo – новый перспективный продукт с открытым исходным кодом для управления озерами данных, идеально отражающий взгляды компании Teradata на большие данные, аналитику и открытое программное обеспечение, – говорит Оливер Рацесбергер , исполнительный вице-президент и Директор по развитию продуктов компнаии Teradata . – Teradata обладает богатым опытом в области создания множества проектов с открытым исходным кодом, включая Presto, и Covalent. Мы знаем, как совместить коммерческое и открытое ПО, поэтому мы берем лучшее из обоих миров и в рамках нашей стратегии, основанной на запросах клиентов, внедряем новые подходы к открытому ПО, совершенствуя среду коммерческого и открытого ПО в общих интересах».

Клиенты, которые реализуют бизнес-потенциал благодаря использованию продуктов Teradata, высоко ценят возможности объединения коммерческого и открытого ПО.

«Мы в Discover ® Financial Services стремимся к тому, чтобы максимально эффективно использовать передовые технологии, которые помогают нам ускорить процесс вывода продуктов на рынок и одновременно обеспечить высочайший уровень обслуживания клиентов. Kylo™ содержит уникальную среду, ускоряющую процесс разработки и извлечения пользы из новых источников данных, использующих Apache NiFi, – сообщил Ка Танг, директор по вопросам корпоративной архитектуры данных. – Kylo™ открывает возможности для использования новых продуктов с открытым исходным кодом».

«Программное обеспечение с открытым исходным кодом представляет интерес для пользователей, целью которых является независимость, совместное обучение, возможность экспериментировать и способность быстро адаптироваться при внедрении индивидуальных решений, – указал Рик Фарнелл, президент компании Think Big, входящей в корпорацию Teradata. – Мы помогаем компаниям в создании масштабируемого озера данных, способного последовательно совершенствоваться параллельно с развитием их бизнес-целей, технологических данных и аналитики. Мы устраняем препятствия на пути использования данных в решении сложных бизнес-задач, призывая пользователей присоединиться к растущему сообществу Kylo™. В перспективе, основная цель компании заключается в оказании нашим клиентам поддержки в создании конкурентоспособного будущего для их бизнеса благодаря использованию аналитики, а не стандартных ресурсов. Платформа Kylo вкупе с нашим подходом к приложениям и услугам Teradata Everywhere – это отличный пример нашей инновационной стратегии будущего».

К настоящему времени одна из крупных телекоммуникационных компаний внедрила платформу Kylo™ после того, как группа из 30 ее разработчиков потратила несколько месяцев на написание программного кода конвейеров получения и обработки данных. С помощью Kylo одному человеку потребовалось менее недели на получение, очистку, классификацию и оценку того же самого объема данных. Платформа Kylo™ не только позволила повысить эффективность обработки данных, но и дала возможность остальным специалистам-разработчикам сосредоточиться на решении других важных бизнес-задач.

Программное обеспечение, документация и учебные материалы по Kylo доступны через сайт проекта Kylo™: www . kylo . io - или сайт GitHub: -- https :// github . com / Teradata / kylo .

При необходимости, компания Think Big оказывает следующие дополнительные услуги:

•  Поддержка платформы Kylo ™

•  Поддержка при внедрении Kylo ™

•  Обучение работе с платформой Kylo™

•  Управляемые услуги Kylo ™

« Kylo предлагает инструментальные средства в дополнение к инструментам, доступным в приложении Apache NiFi, что ускоряет и упрощает перенос данных в ваше озеро данных, – сообщил Скотт Гнау, технический директор компании Hortonworks. – Hortonworks с удовольствием объявляет о сертификации платформы Kylo в Hortonworks DataFlow, а также о расширении нашей совместной поддержки приложения NiFi.»

Корпорация Teradata будет обеспечивать общее руководство и управление, а также курировать формирование сообщества пользователей приложения с открытым исходным кодом Kylo™.

Ссылки по теме

О компании

Teradata помогает компаниям достигать высокой эффективности в ведении бизнеса. Мы специализируемся на аналитических бизнес решениях, которые, соединяясь с   ведущими для нашей   индустрии технологиями   и экспертизой в IT-архитектуре, помогают реализовать потенциал великих компаний. Подробности на сайте teradata.com.

Kylo является товарным знаком, а Teradata, Aster и логотип Teradata являются зарегистрированными товарными знаками корпорации Teradata и/или ее аффилированных компаний в США и других странах. Apache, Hadoop, Spark и NiFi являются товарными знаками фонда Apache Software Foundation.

Публикации по теме
Специализ. СХД для BI-хранилищ, аналитика "больших данных", интеграция данных
 
Новости Teradata

© "Storage News" journal, Russia&CIS
(495) 233-4935;
www.storagenews.ru; info@storagenews.ru.