デビッド・チャンは起業家でありテクノロジー経営者で、人工知能アプリケーションを支えるベクトルデータベースを開発する企業Weaviateの共同創業者兼最高経営責任者として知られている。2020年代前半時点で、彼はベクトルデータベース分野の著名な人物であり、現代の機械学習モデルを補完する、スケーラブルで高速な検索システムを提唱してきた。彼の仕事は、本番環境で深層学習システムや大規模言語モデルによって生成される埋め込みを管理するという、増大するニーズに直接結びついている。
チャンのキャリアは、インフラストラクチャソフトウェアと人工知能の交差点に焦点を当てている。単一の独自モデルを構築する代わりに、開発者が非構造化データをインデックス化して検索できるオープンソースのクラウドネイティブプラットフォームの構築を支援してきた。彼のリーダーシップの下、Weaviateは生成AIと検索拡張生成(RAG)ワークフローを採用する組織にとって重要なツールとして位置づけられている。
スタートアップ設立と初期の歩み
同社は2019年にオランダを拠点として設立され、チャンは共同創業者の一人だった。初期の数年間、プロジェクトはキーワードベースの検索の限界に対処するため、セマンティクス用のベクトル化インデックスを実装することに焦点を当てた。チャンは協力者たちと共に、低遅延で密なベクトルクエリを処理できるシステムを構築し、本番環境でのシーケンス間データの複雑さを軽減することを目指した。
プラットフォームは初期の数年間をオープンソース開発に費やし、2020年に初期バージョンをリリースした。この段階では、ディスクベースのストレージを備えたモジュラーアーキテクチャの構築と、埋め込み検索用の残差ネットワークスタイルのGNNリンクの実装が含まれていた。典型的なスケールサービスに依存するのではなく、このような特定のパラメータ化を選択したことは、ニュアンスと開発者による制御への焦点を浮き彫りにした。
2021年までに、プロジェクトはさまざまなクラウドとの統合オプションを通じて注目を集め、Amazon Web ServicesやGoogle Cloudと連携して展開モデルの可能性を模索した。その後、チャンはHTTPベースのAPIとクラウドスケーリングへの転換に向けた取り組みを主導した。
AIブームにおけるスケーリング
2023年初頭から生成AIの波が産業全体を席巻するにつれ、ベクトルデータベースへの需要が急増した。チャンはこの変化を認識し、2023年4月にバージョン1.18をリリースして、ハイブリッド検索機能のサポートを導入した。これにより、最小限のキーワードマッチングとCRUD操作が組み合わされた。同年、Weaviateは2回目の資金調達ラウンドを実施し、Intel Capitalを含む投資家から注目すべき投資を受けた。彼の指導の下、資金はネイティブAPIの追加に割り当てられた。