IBM, Hortonworks e Pivotal se unem para plataforma de big data em Hadoop

Grande provedores de soluções de big data↳Big data16 conteúdosResolvendo desafios de Big Data com Ciência de Dados na UberData · abr 2019Segurança “Data-Driven”: como big data e IA estão redefinindo a detecção de ameaças em tempo realDevSecOps · jan 2026USP lança MBA em Inteligência Artificial e Big DataAI · mar 2024Ver tudo em Data → se uniram para especificar uma plataforma unificada com base em Hadoop. A iniciativa, batizada de Open Data Platform, traz entre seus membros nomes de empresas como IBM, Hortonworks e Pivotal.

A aliança tem a missão de identificar versões específicas e suportar um conjunto de trabalho focado em grandes volumes de dados. A expectativa é que isso reduza o esforço na construção e manutenção de sistemas de análise de dados complexos baseados em Hadoop.

“À medida que o valor de negócios do Apache Hadoop ganha reconhecimento por parte das empresas, cresce a necessidade de ambientes rigorosamente testados, consistentes e bem definidos providos por um ecossistema sólido”, comentou Raymie Stata, CEO da Altiscale, em comunicado. A ideia é que o grupo crie uma base comprovada de soluções de classe corporativa.

O código base para o Hadoop é gerenciado pela Apache Software Foundation e, assim como o que ocorre no mundo Linux↳Linux34 conteúdosKali Linux em um Servidor VPS: como, quando e por que usar?DevSecOps · dez 2024Construindo um Windows Service ou Linux Daemon com Worker Service & .NET Core – Parte 2Dev (Back & Front) · jul 2020Criando uma WebApi utilizando .NET, Linux e VSCodeDev (Back & Front) · ago 2019Ver tudo em DevSecOps →, é empacotado por múltiplos vendors em distribuições comerciais. Muitas dessas versões não são compatíveis entre si.

O cenário fica mais complexo ainda devido ao número de outros sistemas paralelos, como Hive, Ambari e ZooKeeper, que podem pegar trabalhos integrados ao Hadoop.

Com o estabelecimento de uma biblioteca base comum, o Open Data Platform alinhará os processos permitindo melhor compreensão sobre quais tecnologias, e quais versões dessas tecnologias, trabalham melhor umas com as outras.

Tal modelo de organização possibilitará integração mais simples, bem como será mais simples que sistemas rodem componentes dentro das plataformas.

Além de IBM, Hortonworks e Pivotal, outras companhias assinaram o acordo da iniciativa. Entre elas estão General Electric, Infosys, SAS, Altiscale, Capgemini, CenturyLink, EMC, Splunk, Verizon Enterprise Solutions, Teradata e VMware.

***

Com informações de Computer World