パトリック・エスは、動画制作に特化した生成人工知能を手がける企業、ランウェイの共同創業者であり、テクノロジー起業家である。ランウェイは、ユーザーがテキストプロンプトや画像を用いて動画コンテンツを生成・編集できる機械学習モデルを開発しており、メディア制作における生成AI運動の最前線に位置している。
エスは、2018年にニューヨーク大学のAI研究所出身の他の技術者たちとともに、ランウェイを立ち上げた創業チームの一員であった。同社は当初、アーティストやデザイナー向けの研究ツールに注力していたが、後に2020年代初頭に広く注目を集める商業製品をリリースした。ランウェイの活動は、クリエイティブ産業における深層学習の実用的応用を示す上で影響力を持っている。
初期の経歴とランウェイの創業
ランウェイを創業する前、パトリック・エスはコンピュータサイエンスと人工知能の研究に携わり、ニューヨーク大学の学界とのつながりを持っていた。同社は、生成モデルを映画や動画制作に活用する方法を探る研究プロジェクトから生まれた。2018年、エスと共同創業者たちはランウェイを法人化し、当初は深い技術的専門知識を必要とせずにアーティストが機械学習モデルを試せるプラットフォームを提供した。
初期のプラットフォームは、スタイル変換や画像生成などのタスク用の事前学習モデルへのアクセスを提供し、クリエイティブ専門家の間でユーザーベースを築くのに役立った。2020年までに、ランウェイはラックス・キャピタルやクライナー・パーキンスなどの投資家からシード資金を調達し、チームは研究開発の取り組みを拡大することができた。
生成動画モデルの開発
ランウェイの大きな躍進は、Gen-1およびGen-2モデルのリリースによってもたらされた。2023年初頭に発表されたGen-1は、ある動画の視覚スタイルを別の動画に適用することを可能にし、これはビデオ・トゥ・ビデオ変換として知られる技術である。続いて2023年3月にはGen-2が登場し、テキストから動画を生成する、つまり書かれた説明から直接短いクリップを作成することを可能にした。これらのモデルは、ランダムノイズを一貫した画像や動画フレームへと反復的に精緻化するNeural networkの一種である拡散ベースのアーキテクチャに依存していた。
基盤となる技術は、Deep learningとGenerative AIの進歩、特に自然言語処理に革命をもたらしたトランスフォーマーアーキテクチャを活用していた。ランウェイのモデルは、大規模な動画クリップのデータセットで訓練され、Machine learning技術を用いて時間的一貫性と視覚的リアリズムを学習した。同社はまた、インペインティングやモーショントラッキングなどの動画編集用のカスタムツールも開発し、これらは商業プラットフォームに統合された。
商業的成長と業界への影響
Gen-2の成功に続き、ランウェイは急速な成長を遂げた。2023年6月、同社はグーグルが主導する1億ドルのシリーズC資金調達ラウンドを発表し、NVIDIAやセールスフォースなどの既存投資家も参加した。この評価額は15億ドルと報告され、ランウェイは生成AI分野で最も価値のあるスタートアップの一つとなった。この資金は、さらなるモデル開発とクラウドベースの動画編集スイートの拡張を支援することを目的としていた。
ランウェイの技術は、映画製作者、広告主、コンテンツクリエイターに採用されており、そのツールは注目すべきプロジェクトで使用されている。例えば、2023年の映画『エブリシング・エブリウェア・オール・アット・ワンス』の視覚効果では、特定のシーン強化にランウェイのAIが使用された。同社はまた、トレーニングと推論のためのスケーラブルな計算リソースを提供するためGoogle Cloudと提携し、コスト効率の高いモデル展開のためにAWS Trainiumチップの初期顧客でもある。
AI研究コミュニティでの役割
パトリック・エスは、NeurIPSやCVPRなどの主要会議で発表されたランウェイの研究論文に貢献してきた。同社の動画生成に関する研究は学術文献で引用され、OpenAIの後の動画モデルSoraを含む、この分野の他のスタートアップに影響を与えた。ランウェイはまた、研究者が画像生成モデルを動画用に適応させることを可能にするAnimateDiffフレームワークなどのオープンソースツールもリリースし、より広範な革新を促進した。
エスは、生成動画の倫理的影響について公に発言し、責任ある使用とAI生成コンテンツへの透かしの重要性を提唱している。ランウェイは、ディープフェイクや誤情報に関する懸念に対処する業界の取り組みに沿って、コンテンツモデレーションシステムや合成メディアを検出するツールを実装している。
その後の展開と現在の状況
2024年現在、ランウェイはモデルの反復を続けており、2024年6月にGen-3 Alphaをリリースし、動画品質と時間的コヒーレンスを改善した。同社は製品ラインナップをモバイルアプリやメディア企業向けのエンタープライズソリューションに拡大している。パトリック・エスは、技術のスケーリングと、大手テック企業や他のスタートアップに対するランウェイの競争力を維持することに焦点を当て、同社の戦略的方向性に引き続き関与している。
生成動画のより広い分野は急速に成長しており、Google DeepMindやAnthropicなどの競合他社も同様の能力を模索している。ランウェイの先発者優位と強力な研究チームは、その関連性を維持するのに役立っているが、計算コストや市場競争という課題に直面している。エスの芸術と技術の両方における背景は、AIをクリエイティブ専門家にアクセスしやすくするというランウェイの使命の中心となっている。