Databricks Mosaic refere-se à empresa de IA generativa MosaicML, que foi adquirida pela Databricks em junho de 2023 por US$ 1,4 bilhão. A MosaicML especializava-se na construção de sistemas eficientes para treinamento e implantação de grandes modelos de linguagem (LLMs), oferecendo uma plataforma que permitia às organizações criar modelos de IA personalizados usando seus próprios dados. A aquisição integrou a tecnologia da MosaicML à arquitetura lakehouse da Databricks, formando a base de sua Plataforma de Inteligência de Dados e aprimorando suas capacidades de IA generativa.
A MosaicML era conhecida por seus modelos de código aberto, incluindo MPT (Mosaic Pretrained Transformers), que foram projetados para serem econômicos e acessíveis para empresas. As ferramentas da empresa permitiam aos usuários treinar, ajustar e servir LLMs em escala, atendendo à crescente demanda por soluções de IA privadas e personalizáveis. Após a aquisição, a Databricks aproveitou a experiência da MosaicML para desenvolver produtos como Dolly, um modelo de linguagem de código aberto com 6 bilhões de parâmetros, e integrar modelos de terceiros de provedores como OpenAI e Anthropic à sua plataforma.
Histórico e Fundação
A MosaicML foi fundada em 2021 por Naveen Rao e Hanlin Tang, ambos com experiência prévia em IA e hardware. Rao cofundou anteriormente a Nervana Systems, uma startup de hardware de aprendizado profundo adquirida pela Intel em 2016. Tang trabalhou na Intel e possuía um PhD em neurociência. A empresa tinha sede em São Francisco, Califórnia, e rapidamente ganhou atenção por seu foco em tornar o treinamento de LLMs mais eficiente e acessível.
A startup levantou financiamento significativo de empresas de capital de risco, incluindo uma rodada da Série B de US$ 64 milhões em 2022 liderada pela Tiger Global Management. A plataforma da MosaicML foi construída com base em princípios de aprendizado de máquina, enfatizando técnicas de treinamento distribuído e otimização que reduziam os recursos computacionais necessários para modelos de grande escala.
Tecnologia e Produtos
A oferta principal da MosaicML era um serviço gerenciado para treinamento e implantação de LLMs, que suportava arquiteturas populares como o Transformer. A plataforma incluía ferramentas para preparação de dados, treinamento de modelos e inferência, todas projetadas para rodar em infraestrutura de nuvem de provedores como Amazon Web Services, Microsoft Azure e Google Cloud.
Uma das principais inovações da MosaicML foi sua família de modelos de código aberto, MPT, que incluía MPT-7B e MPT-30B. Esses modelos foram lançados em 2023 e eram notáveis por seu desempenho competitivo em relação a modelos proprietários maiores, alcançado por meio de técnicas de treinamento eficientes. A MosaicML também desenvolveu o Composer, uma biblioteca baseada em PyTorch para treinamento de redes neurais, e o Streaming, uma biblioteca de streaming de conjuntos de dados que facilitava o carregamento eficiente de dados.
Aquisição pela Databricks
Em junho de 2023, a Databricks anunciou sua intenção de adquirir a MosaicML por US$ 1,3 bilhão, com o negócio sendo concluído no final daquele ano. A aquisição fazia parte da estratégia mais ampla da Databricks para expandir suas capacidades de inteligência artificial, particularmente no âmbito da IA generativa. A Databricks integrou a tecnologia da MosaicML à sua plataforma lakehouse, permitindo que os clientes construíssem e implantassem LLMs personalizados junto com suas cargas de trabalho de análise de dados.
A aquisição também levou ao desenvolvimento da Plataforma de Inteligência de Dados da Databricks, que combina gerenciamento de dados com treinamento e serviço de modelos de IA. As ferramentas da MosaicML foram renomeadas como capacidades de treinamento e serviço de modelos fundacionais da Databricks, e a empresa continuou a lançar modelos de código aberto sob o nome MPT.
Impacto e Legado
A aquisição da MosaicML pela Databricks foi um evento significativo na indústria de IA, destacando a crescente importância do treinamento eficiente de LLMs e a tendência de plataformas de dados integrarem IA generativa. A tecnologia contribuiu para a capacidade da Databricks de oferecer um ambiente seguro para empresas treinarem modelos em dados proprietários, um diferencial importante contra concorrentes como Google DeepMind e OpenAI.
Sob a Databricks, o legado da MosaicML continuou por meio de produtos como Dolly e a integração de modelos da Anthropic e OpenAI na plataforma Databricks. A aquisição também influenciou o crescimento financeiro da Databricks, contribuindo para que sua avaliação alcançasse US$ 188 bilhões até julho de 2026, após uma rodada de financiamento de US$ 3 bilhões liderada pela Coatue Management.
O foco da MosaicML em modelos de código aberto e métodos de treinamento eficientes teve um impacto duradouro na comunidade de IA, incentivando um acesso mais amplo à tecnologia de LLMs e fomentando a inovação na otimização de modelos.