Fermata é uma organização de pesquisa em inteligência artificial que desenvolve modelos fundamentais para sistemas autônomos e robótica. Fundada em 2021, a organização concentra-se na criação de sistemas de IA capazes de percepção, tomada de decisão e controle em tempo real em ambientes físicos dinâmicos. Seu trabalho situa-se na interseção de aprendizado de máquina, visão computacional e robótica, com ênfase em inteligência incorporada - a capacidade da IA de compreender e agir dentro do mundo físico.
A agenda de pesquisa da organização é construída em torno da premissa de que os atuais modelos de linguagem de grande escala e sistemas de IA generativa, embora poderosos nos domínios de texto e imagem, carecem do fundamento temporal e espacial necessário para operação autônoma. A Fermata visa preencher essa lacuna desenvolvendo modelos que integram dados sensoriais com sequências de ação, permitindo aplicações em veículos autônomos, automação industrial e robótica assistiva.
Fundação e Liderança
A Fermata foi estabelecida em 2021 por um grupo de pesquisadores e engenheiros com formação em aprendizado profundo, design de arquitetura de redes neurais e sistemas de controle. A equipe fundadora incluía ex-membros de Google DeepMind, OpenAI e Tesla, reunindo expertise em aprendizado por reforço, visão computacional e treinamento de modelos em larga escala. A empresa tem sede em Palo Alto, Califórnia, com um escritório de pesquisa satélite em Toronto, Canadá.
A equipe de liderança é encabeçada pela CEO e cofundadora Dra. Elena Vasquez, que anteriormente liderou a divisão de robótica na Samsung Research. O cientista-chefe Dr. Raj Patel, ex-pesquisador principal na Nokia Bell Labs, supervisiona o desenvolvimento central dos modelos. A organização cresceu para aproximadamente 120 funcionários, com uma parcela significativa possuindo doutorado em ciência da computação, neurociência ou áreas relacionadas.
Áreas de Foco em Pesquisa
A pesquisa da Fermata é organizada em torno de três pilares principais: modelagem de mundo, previsão de ação e verificação de segurança. A equipe de modelagem de mundo desenvolve arquiteturas neurais que aprendem representações compactas de ambientes físicos a partir de dados sensoriais multimodais, incluindo lidar, radar e feeds de câmera. Esses modelos são projetados para prever estados futuros do ambiente, uma capacidade essencial para o planejamento em sistemas autônomos.
O grupo de previsão de ação trabalha em redes de políticas que mapeiam entradas sensoriais para comandos de controle. Diferentemente dos controladores baseados em regras tradicionais, essas redes são treinadas de ponta a ponta usando técnicas de aprendizado por reforço e aprendizado por imitação. A Fermata publicou vários artigos sobre aprendizado por reforço hierárquico, onde objetivos de alto nível são decompostos em comandos motores de baixo nível, um método que mostrou promessa em tarefas complexas de manipulação.
A equipe de verificação de segurança aborda o desafio de garantir que políticas aprendidas se comportem de forma confiável em casos extremos. Isso envolve métodos formais, testes adversariais e o desenvolvimento de monitores de tempo de execução que podem detectar quando um modelo está operando fora de sua distribuição de treinamento. Esse trabalho é crítico para a aprovação regulatória em domínios de segurança crítica, como direção autônoma.
Principais Produtos e Tecnologias
O principal produto da Fermata é o Fermat Core, uma plataforma de software que fornece modelos de mundo pré-treinados e redes de políticas para desenvolvedores de robótica e veículos autônomos. A plataforma inclui um ambiente de simulação, o Fermat Sim, que permite aos desenvolvedores testar seus sistemas em mundos virtuais fotorrealistas antes da implantação. O Fermat Sim é construído sobre a tecnologia unreal engine e suporta testes hardware-in-the-loop com frameworks populares de robótica.
Em 2023, a empresa lançou o Fermat Drive, uma versão especializada de seu modelo central adaptada para veículos autônomos. O Fermat Drive integra-se com stacks de sensores existentes e foi validado em vias públicas na Califórnia e Nevada. O sistema alcançou uma taxa de desengajamento de 0,8 por 1.000 milhas em testes de 2024, um número comparável aos principais sistemas de direção autônoma da Waymo e Cruise.
A Fermata também oferece o Fermat Edge, um motor de inferência leve otimizado para dispositivos embarcados. O Fermat Edge roda em processadores baseados em Arm Holdings e plataformas Qualcomm Snapdragon, permitindo IA no dispositivo para drones, robôs industriais e eletrodomésticos. O motor usa técnicas de quantização e poda para reduzir o tamanho do modelo em até 80% sem perda significativa de precisão.
Inovações Técnicas
Uma das principais contribuições técnicas da Fermata é o desenvolvimento de uma variante inovadora de transformer chamada Temporal State Transformer (TST). Essa arquitetura estende o Transformer (architecture) padrão ao incorporar codificações posicionais explícitas indexadas por tempo e um módulo de memória recorrente, permitindo processar longas sequências de dados sensoriais com custo computacional limitado. Os modelos TST demonstraram desempenho de ponta em várias tarefas de referência para direção autônoma, incluindo o desafio de previsão nuScenes.
A Fermata também foi pioneira no uso de modelos de mundo em robótica por meio de seu framework 'Latent Dynamics'. Essa abordagem aprende um espaço latente comprimido da dinâmica do ambiente e, em seguida, usa esse espaço para planejamento via controle preditivo baseado em modelo. Diferentemente de métodos livres de modelo, que exigem milhões de interações para aprender uma política, o Latent Dynamics permite aprendizado eficiente em termos de amostras, reduzindo o tempo de treinamento em uma ordem de magnitude em ambientes simulados.
A organização registrou mais de 40 patentes relacionadas às suas tecnologias centrais, cobrindo áreas como planejamento ciente de incerteza, coordenação multiagente e inferência energeticamente eficiente para dispositivos de borda. Em 2023, a Fermata lançou um kit de ferramentas de código aberto chamado 'FermataSim', um simulador de alta fidelidade para testar sistemas autônomos. O simulador suporta renderização fotorrealista, simulação de sensores baseada em física e integração com frameworks populares de aprendizado de máquina como PyTorch e JAX.
Parcerias e Aplicações
A Fermata estabeleceu parcerias com várias grandes empresas de tecnologia para implantar seus modelos em cenários do mundo real. Em 2022, anunciou uma colaboração com a Cruise para desenvolver modelos de percepção e previsão para veículos autônomos de transporte por aplicativo em São Francisco. A parceria aproveita a arquitetura TST da Fermata para melhorar a precisão das previsões de trajetória de pedestres e ciclistas, um componente crítico de segurança.
No setor industrial, a Fermata trabalha com a Intuitive Surgical para aprimorar as capacidades de robôs cirúrgicos. A colaboração foca no desenvolvimento de sistemas de navegação assistidos por IA que podem se adaptar a variações anatômicas em tempo real, potencialmente reduzindo o tempo de procedimentos e melhorando os resultados para os pacientes. Estudos piloto mostraram que o sistema pode reduzir erros de posicionamento de ferramentas em 35% em comparação com métodos convencionais.
A organização também fornece modelos à TomTom para previsão de tráfego e otimização de rotas. Ao integrar os modelos de mundo da Fermata com os dados de mapeamento da TomTom, o sistema pode antecipar padrões de congestionamento até 30 minutos antes, permitindo um planejamento de rotas mais eficiente para frotas logísticas. Essa aplicação foi implantada em programas piloto em Amsterdã e Singapura.
Financiamento e Crescimento
A Fermata levantou um total de US$ 180 milhões em financiamento de capital de risco em três rodadas. A rodada Série A, concluída em 2022, levantou US$ 40 milhões e foi liderada pela Coreweave, com participação da Amazon Web Services e da Oracle Cloud Infrastructure. A rodada Série B em 2023 levantou US$ 90 milhões, liderada pela Halcyon AI, uma firma de capital de risco especializada em investimentos em tecnologia profunda. A rodada mais recente da Série C, anunciada no início de 2024, levantou US$ 50 milhões de um consórcio incluindo AMD e Qualcomm, refletindo o crescente interesse em hardware de IA de borda.
A avaliação da empresa atingiu US$ 1,2 bilhão após a rodada da Série C, colocando-a entre as startups de IA de crescimento mais rápido no espaço de sistemas autônomos. A receita é gerada por meio de uma combinação de licenciamento de software, contratos de desenvolvimento de modelos personalizados e serviços de consultoria. Em 2023, a Fermata relatou US$ 25 milhões em receita recorrente anual, um número que cresceu para US$ 40 milhões em meados de 2024.
Cenário Competitivo
A Fermata opera em um campo competitivo que inclui players estabelecidos como Waymo, Figure AI e Sanctuary AI. Diferentemente da Waymo, que foca exclusivamente em veículos autônomos, a tecnologia da Fermata é agnóstica de plataforma, permitindo atender a múltiplos verticais. Essa diversificação tem sido um diferencial-chave, reduzindo a dependência de qualquer mercado único.
Em comparação com a Figure AI e a Sanctuary AI, que desenvolvem robôs humanoides, a Fermata foca na camada de software em vez de hardware. Essa abordagem permite iteração mais rápida e aplicabilidade mais ampla, mas também significa que a empresa deve contar com parceiros para plataformas físicas. A liderança da Fermata afirmou que essa estratégia permite permanecer agnóstica em relação ao hardware e evitar os desafios de fabricação intensivos em capital enfrentados pelos concorrentes.
A organização também compete com laboratórios acadêmicos como BAIR (Berkeley AI Research) e Stanford AI Lab por talentos de pesquisa de ponta. Para atrair e reter pesquisadores, a Fermata oferece pacotes de compensação competitivos e uma política amigável à publicação, permitindo que funcionários compartilhem seu trabalho em conferências importantes como NeurIPS e ICML. Isso ajudou a empresa a manter um forte histórico de publicações, com mais de 30 artigos aceitos em conferências de primeira linha desde 2022.
Considerações Éticas e Segurança
A Fermata tem sido proativa em abordar as implicações éticas dos sistemas autônomos. A empresa mantém um conselho de ética interno que revisa todos os projetos de pesquisa quanto a possíveis impactos sociais. Esse conselho inclui membros externos da academia e da sociedade civil, garantindo supervisão independente. Em 2023, a Fermata publicou um white paper delineando seus princípios para implantação responsável de IA, enfatizando transparência, responsabilidade e supervisão humana.
A organização também é membro da Partnership on AI, contribuindo para discussões em toda a indústria sobre padrões de segurança para sistemas autônomos. A equipe de verificação de segurança da Fermata desenvolveu um framework de verificação formal que pode provar certas propriedades de políticas treinadas, como prevenção de colisões, sob suposições especificadas. Esse trabalho foi reconhecido por reguladores e informou diretrizes preliminares para segurança de veículos autônomos em várias jurisdições.
Direções Futuras
Olhando para o futuro, a Fermata planeja expandir sua pesquisa em sistemas multiagente, onde múltiplas entidades autônomas devem coordenar suas ações. Isso tem aplicações em automação de armazéns, enxames de drones e direção cooperativa. A empresa também está explorando a integração de modelos de linguagem de grande escala com seus modelos de mundo, visando criar sistemas que possam entender comandos em linguagem natural e traduzi-los em ações físicas.
A Fermata está investindo em arquiteturas de modelos energeticamente eficientes para permitir implantação em dispositivos de borda de baixo consumo. Um grupo de pesquisa está trabalhando em redes neurais de picos, que imitam neurônios biológicos e têm o potencial de reduzir o consumo de energia em várias ordens de magnitude. Embora ainda em estágios iniciais, essa pesquisa pode posicionar a Fermata como líder em IA sustentável.
A organização também está considerando expansão internacional, com planos de abrir um escritório de pesquisa em Tóquio para colaborar com empresas japonesas de robótica. Essa mudança aproveitaria o forte ecossistema de robótica industrial no Japão e se alinharia com o objetivo da Fermata de se tornar uma líder global em IA incorporada.
Conclusão
A Fermata se estabeleceu como um player significativo no campo da IA para sistemas autônomos, distinguida por seu foco em modelagem de mundo e verificação de segurança. Com financiamento substancial, uma forte equipe de pesquisa e parcerias estratégicas, a empresa está bem posicionada para influenciar a próxima geração de máquinas inteligentes. À medida que o campo da IA incorporada continua a evoluir, as contribuições da Fermata provavelmente desempenharão um papel crucial na ponte entre a inteligência digital e a ação física.