Cloudera AI 是 Cloudera, Inc.（一家美国数据湖软件公司）的企业人工智能部门。其重点是在 Cloudera Data Platform（一套用于数据处理和分析的云服务集合）中实现 AI 的落地运营，并管理大型语言模型。该部门是在 Cloudera 于 2024 年 6 月收购 AI 初创公司 Verta 后成立的，由首席业务官 Abhas Ricky 领导。
Cloudera, Inc. 于 2008 年 6 月 27 日在加利福尼亚州伯灵格姆由 Christophe Bisciglia、Amr Awadallah、Jeff Hammerbacher 和 Mike Olson 创立。创始团队拥有来自 Google、Yahoo!、Facebook 和 Oracle 的经验，2009 年 Hadoop 联合创始人 Doug Cutting 加入。公司最初提供基于 Hadoop 的免费产品，通过支持和咨询获得收入，并于 2009 年 3 月开始商业分发。在随后的几年中，Cloudera 筹集了大量资金，包括 2009 年来自 Accel Partners 的 500 万美元投资、2010 年 10 月的 2500 万美元融资轮，以及 2011 年 11 月的 4000 万美元融资轮。2014 年 3 月，英特尔投资 7.4 亿美元获得 18% 的股份，公司估值达到 41 亿美元。Cloudera 于 2017 年 4 月 28 日上市，但由于销售额下降和公共云服务的竞争，其股价下跌。2018 年 10 月，Cloudera 宣布与 Hortonworks 合并，并于 2019 年 1 月完成。在领导层变动（包括 2020 年 1 月 Rob Bearden 出任 CEO）后，公司于 2021 年 10 月通过 KKR 和 Clayton, Dubilier & Rice 的 53 亿美元收购实现私有化。
Cloudera Data Platform 与 AI 集成
Cloudera Data Platform（CDP）是核心产品套件，提供用于数据处理和分析的云服务。它支持在 Amazon Web Services 和 Microsoft Azure 等提供商上的公共云部署，以及私有云订阅。Cloudera 将 CDP 推广用于 机器学习 和数据分析，并采用“数据湖仓”一词来描述其架构，该架构结合了数据湖和数据仓库的元素。2022 年，Cloudera 宣布支持 Apache Iceberg，这是一种用于大型分析数据集的开源表格式。
Cloudera AI 在此平台基础上提供运营级 AI 能力。收购 Verta（一家专注于管理 大型语言模型 的初创公司）是加强这些能力的战略举措。Verta 的技术支持模型生命周期管理，包括部署、监控和治理，这些对企业 AI 应用至关重要。
企业 AI 战略与合作伙伴关系
在 Abhas Ricky 的领导下，Cloudera AI 建立了一个合作伙伴生态系统，以支持企业 AI 的采用。合作伙伴包括主要云提供商和 AI 公司，如 AWS、Nvidia、Anthropic、Google、Mistral、ServiceNow 和 VAST。这些合作伙伴关系旨在将 Cloudera 的数据平台与领先的 AI 模型和基础设施集成，使客户能够大规模构建和部署 AI 解决方案。
Cloudera AI 专注于预测分析、自然语言处理和实时决策等用例。通过利用数据湖仓，组织可以访问和准备用于 AI 训练和推理的数据，而无需将数据移动到单独的系统，从而降低复杂性和延迟。
技术与创新
Cloudera AI 融合了现代 AI 技术，包括 深度学习 和 生成式 AI。该平台支持基于 Transformer 的模型，这些模型是大型语言模型的基础。Cloudera 提供用于模型训练、微调和服务的工具，并与 TensorFlow 和 PyTorch 等流行框架集成。
公司还强调 模型剪枝 和优化，以在企业基础设施上高效运行 AI。这包括支持 GPU 加速和 推理 优化，确保 AI 模型能够在成本和性能限制内运行。
市场地位与竞争
Cloudera AI 在竞争激烈的环境中运营，竞争对手包括 Databricks、Snowflake 和 Amazon SageMaker。这些平台也提供数据和 AI 服务，通常具有集成的机器学习能力。Cloudera 通过其混合云方法（允许客户在本地或云端部署）以及对数据治理和安全的关注来实现差异化。
Cloudera 的专利诉讼历史，包括 2023 年 10 月对公司作出的 2.4 亿美元陪审团裁决，一直是一个挑战。然而，公司继续投资于 AI 创新和合作伙伴关系，以维持其地位。
未来展望
截至 2025 年，Cloudera AI 定位于在企业 AI 市场中实现增长。Verta 技术的集成和合作伙伴关系的扩展预计将推动采用。Cloudera 旨在使组织能够在其整个数据资产中实现 AI 的运营化，从数据准备到模型部署和监控。公司对 Apache Iceberg 等开放标准的关注及其混合云灵活性可能仍然是关键优势。
参见
- Cloudera
- 数据湖仓
- Apache Hadoop
- 机器学习
参考文献
- Cloudera, Inc. 维基百科文章（CC BY-SA）。
- Cloudera 官方网站和新闻稿。