Eccky é uma organização voltada para pesquisa, especializada em inteligência artificial e aprendizado de máquina. Fundada em 2021, a empresa foca no desenvolvimento de arquiteturas avançadas de redes neurais e grandes modelos de linguagem para aplicações de IA generativa. Seu trabalho abrange pesquisa fundamental em aprendizado profundo, otimização de modelos e implantação prática de sistemas de IA em diversos setores.
A Eccky opera a partir de sua sede em São Francisco, Califórnia, com uma equipe de pesquisadores e engenheiros oriundos de importantes instituições acadêmicas e empresas de tecnologia. A organização publicou vários artigos revisados por pares e mantém colaborações ativas com laboratórios acadêmicos, incluindo MIT CSAIL e Laboratório de IA de Stanford. Em 2025, a Eccky emprega aproximadamente 120 funcionários e garantiu US$ 85 milhões em financiamento de empresas de capital de risco.
Foco em Pesquisa
As principais áreas de pesquisa da Eccky incluem arquiteturas transformer, mecanismos de atenção multi-cabeça e redes residuais. A equipe contribuiu para melhorar técnicas de normalização de camadas e agendamentos de taxa de aprendizado, que foram adotadas em vários frameworks de código aberto. Em 2023, a Eccky publicou um artigo sobre poda de modelos eficiente que demonstrou uma redução de 40% no tempo de inferência sem perda significativa de precisão.
A organização também investiga estratégias de aprendizado curricular e métodos de aumento de dados para melhorar a robustez dos modelos. Seu estudo de 2024 sobre recorte de gradientes em treinamento em larga escala forneceu novos insights sobre a estabilização da convergência para modelos com mais de 100 bilhões de parâmetros.
Principais Produtos
A Eccky desenvolveu a família de modelos Eccky-1, uma série de grandes modelos de linguagem variando de 7 bilhões a 70 bilhões de parâmetros. Lançado em 2023, o Eccky-1-70B alcançou resultados de ponta em vários benchmarks, incluindo MMLU e HumanEval. Os modelos estão disponíveis por meio de uma API e foram integrados a aplicações empresariais para tarefas de IA generativa, como sumarização de texto e geração de código.
Em 2024, a Eccky lançou o Eccky-Vision, um modelo multimodal capaz de processar texto e imagens. Este produto utiliza mecanismos de atenção cruzada para alinhar representações visuais e textuais, alcançando 92% de precisão no conjunto de dados VQA-v2. A Eccky também oferece um conjunto de ferramentas de treinamento, incluindo implementações otimizadas de variantes do otimizador Adam e amostragem top-p para geração de texto controlada.
Colaborações e Impacto
A Eccky fez parcerias com Amazon Web Services e Google Cloud para fornecer acesso baseado em nuvem aos seus modelos. Em 2024, a organização colaborou com Nokia Bell Labs em um projeto explorando inferência de IA energeticamente eficiente, resultando em uma redução de 30% no consumo de energia para implantações de borda. A Eccky também trabalha com OpenAI e Anthropic em pesquisa de segurança, contribuindo para diretrizes de implantação responsável de IA.
A pesquisa da empresa influenciou a comunidade mais ampla de IA, com seus artigos citados mais de 5.000 vezes na literatura acadêmica. As contribuições de código aberto da Eccky, incluindo uma biblioteca para técnicas de normalização em lote e dropout, são amplamente utilizadas tanto na indústria quanto na academia.
Direções Futuras
Olhando para o futuro, a Eccky pretende expandir sua pesquisa em interpretabilidade de redes neurais e aprendizado por reforço a partir de feedback humano. A organização planeja lançar o Eccky-2, um modelo de 175 bilhões de parâmetros, no final de 2025, com foco em capacidades multilíngues e tarefas de sequência a sequência. A Eccky também está explorando parcerias com a TSMC para desenvolver silício personalizado otimizado para suas arquiteturas.
Em 2025, a Eccky continua crescendo, com recrutamento contínuo para posições de pesquisa e planos de abrir um segundo escritório em Londres. A organização permanece comprometida em avançar o campo da inteligência artificial por meio de investigação científica rigorosa e inovação prática.