Cloudera AI é a divisão de inteligência artificial empresarial da Cloudera, Inc., uma empresa americana de software para data lakes. Ela se concentra em operacionalizar IA e gerenciar grandes modelos de linguagem dentro da Cloudera Data Platform, um conjunto de serviços em nuvem para processamento e análise de dados. A divisão foi estabelecida após a aquisição da Verta, uma startup de IA, pela Cloudera em junho de 2024, e é liderada pelo Chief Business Officer Abhas Ricky.
A Cloudera, Inc. foi fundada em 27 de junho de 2008, em Burlingame, Califórnia, por Christophe Bisciglia, Amr Awadallah, Jeff Hammerbacher e Mike Olson. Os fundadores trouxeram experiência do Google, Yahoo!, Facebook e Oracle, e foram acompanhados em 2009 por Doug Cutting, cofundador do Hadoop. A empresa inicialmente ofereceu um produto gratuito baseado em Hadoop, obtendo receita por meio de suporte e consultoria, e começou a distribuição comercial em março de 2009. Nos anos seguintes, a Cloudera levantou financiamento significativo, incluindo um investimento de US$ 5 milhões da Accel Partners em 2009, uma rodada de US$ 25 milhões em outubro de 2010 e uma rodada de US$ 40 milhões em novembro de 2011. Em março de 2014, a Intel investiu US$ 740 milhões por uma participação de 18%, avaliando a empresa em US$ 4,1 bilhões. A Cloudera abriu seu capital em 28 de abril de 2017, mas o preço de suas ações caiu devido à queda nas vendas e à concorrência dos serviços de nuvem pública. Em outubro de 2018, a Cloudera anunciou uma fusão com a Hortonworks, concluída em janeiro de 2019. Após mudanças na liderança, incluindo o CEO Rob Bearden em janeiro de 2020, a empresa voltou a ser privada em outubro de 2021 por meio de uma aquisição de US$ 5,3 bilhões pela KKR e Clayton, Dubilier & Rice.
Cloudera Data Platform e Integração de IA
A Cloudera Data Platform (CDP) é o principal conjunto de produtos, fornecendo serviços em nuvem para processamento e análise de dados. Ela suporta implantações em nuvem pública em provedores como Amazon Web Services e Microsoft Azure, bem como assinaturas de nuvem privada. A Cloudera comercializa a CDP para machine learning e análise de dados, adotando o termo "data lakehouse" para descrever sua arquitetura, que combina elementos de data lakes e data warehouses. Em 2022, a Cloudera anunciou suporte ao Apache Iceberg, um formato de tabela aberto para grandes conjuntos de dados analíticos.
A Cloudera AI se baseia nessa plataforma para oferecer capacidades de IA operacional. A aquisição da Verta, uma startup especializada em gerenciar large language models, foi um movimento estratégico para fortalecer essas capacidades. A tecnologia da Verta permite o gerenciamento do ciclo de vida de modelos, incluindo implantação, monitoramento e governança, que são críticos para aplicações empresariais de IA.
Estratégia de IA Empresarial e Parcerias
Sob a liderança de Abhas Ricky, a Cloudera AI desenvolveu um ecossistema de parceiros para apoiar a adoção de IA empresarial. Os parceiros incluem grandes provedores de nuvem e empresas de IA, como AWS, Nvidia, Anthropic, Google, Mistral, ServiceNow e VAST. Essas parcerias visam integrar a plataforma de dados da Cloudera com modelos e infraestrutura de IA líderes, permitindo que os clientes construam e implantem soluções de IA em escala.
A Cloudera AI se concentra em casos de uso como análise preditiva, processamento de linguagem natural e tomada de decisão em tempo real. Ao aproveitar o data lakehouse, as organizações podem acessar e preparar dados para treinamento e inferência de IA sem mover dados para sistemas separados, reduzindo complexidade e latência.
Tecnologia e Inovação
A Cloudera AI incorpora técnicas modernas de IA, incluindo deep learning e generative AI. A plataforma suporta modelos baseados em transformer, que são fundamentais para grandes modelos de linguagem. A Cloudera fornece ferramentas para treinamento, ajuste fino e serviço de modelos, com integrações para frameworks populares como TensorFlow e PyTorch.
A empresa também enfatiza model pruning e otimização para executar IA de forma eficiente na infraestrutura empresarial. Isso inclui suporte para aceleração por GPU e otimização de inference, garantindo que os modelos de IA possam operar dentro das restrições de custo e desempenho.
Posição de Mercado e Concorrência
A Cloudera AI opera em um cenário competitivo que inclui Databricks, Snowflake e Amazon SageMaker. Essas plataformas também oferecem serviços de dados e IA, muitas vezes com capacidades integradas de machine learning. A Cloudera se diferencia por sua abordagem de nuvem híbrida, permitindo que os clientes implantem localmente ou na nuvem, e por seu foco em governança e segurança de dados.
A história de litígios de patentes da Cloudera, incluindo um veredito de júri de US$ 240 milhões contra a empresa em outubro de 2023, tem sido um desafio. No entanto, a empresa continua a investir em inovação em IA e parcerias para manter sua posição.
Perspectivas Futuras
Em 2025, a Cloudera AI está posicionada para crescer no mercado de IA empresarial. Espera-se que a integração da tecnologia da Verta e a expansão das parcerias impulsionem a adoção. A Cloudera visa permitir que as organizações operacionalizem IA em seus ativos de dados, desde a preparação de dados até a implantação e monitoramento de modelos. O foco da empresa em padrões abertos como Apache Iceberg e sua flexibilidade de nuvem híbrida provavelmente continuarão sendo pontos fortes importantes.
Ver Também
- Cloudera
- Data lakehouse
- Apache Hadoop
- Machine learning
Referências
- Artigo da Wikipédia sobre Cloudera, Inc. (CC BY-SA).
- Site oficial da Cloudera e comunicados à imprensa.