National AI Researchは、政府が支援する組織であり、公的機関全体にわたる人工知能研究の調整と資金提供を行っている。人工知能における国家的な取り組みを統合するために設立され、基礎的な機械学習から応用的な深層学習システムに至るまでのプロジェクトを支援している。この組織は、学術機関と国立研究所の連携における中心的なハブとして機能し、AI技術の理論的理解と実践的な展開の両方を推進することに重点を置いている。
この構想は、AI研究には民間部門の取り組みを超えた持続的な公的投資が必要であるという認識の高まりから生まれた。その任務には、大規模言語モデルのアーキテクチャ開発、ニューラルネットワークの訓練手法の改善、AI展開における安全性と倫理的考慮への対応が含まれる。National AI Researchは大学や政府機関と緊密に連携し、研究者に助成金と計算リソースを提供している。
歴史と設立
National AI Researchは、戦略的なAI競争力に関する一連の政府白書を受けて、2019年に正式に設立された。設立憲章は、複数の連邦省庁からの資金を原資として、5年間で5億ドルの初期予算を割り当てた。2020年初頭に任命された初代所長は、以前にMIT CSAILの研究プログラムを率いていた。
2021年までに、この組織は40州にわたる200以上のプロジェクトに資金を提供した。注目すべき初期の取り組みには、解釈可能なAIモデルに関するスタンフォードAIラボとの提携や、強化学習ベンチマークに関するバークレーAI研究との協力が含まれる。2022年、National AI Researchは、テキストおよび画像生成システムの急速な進歩に対応して、生成AI安全性のための専用プログラムを開始した。
この組織は、2023年に3つの地域研究センターを開設してその範囲を拡大した。中西部、南東部、山岳地帯西部に位置するこれらのセンターは、伝統的な沿岸部のハブを超えて計算リソースを分配するように設計された。各センターは、トランスフォーマーモデル訓練用の専門ハードウェアを含む、初期インフラ資金として7500万ドルを受け取った。
研究プログラム
National AI Researchは、その活動を4つの主要なプログラム領域に整理している。基礎AIプログラムは、機械学習アルゴリズムの理論研究を支援し、損失関数や最適化手法に関する研究を含む。このプログラムの研究者は、訓練の安定性を向上させるバッチ正規化およびレイヤー正規化手法に関する影響力のある論文を発表している。
言語技術プログラムは、効率的なアーキテクチャに重点を置いた大規模言語モデルの開発に焦点を当てている。プロジェクトには、計算要件を削減するマルチヘッドアテンション機構や位置エンコーディング方式に関する研究が含まれる。2024年の取り組みでは、1,024基のGPUクラスター上で90日間訓練された、700億パラメータのオープンソースモデルを生み出した。
ロボティクスおよび身体化AIプログラムは、AIシステムが物理環境とどのように相互作用するかを調査する。これには、人間のフィードバックからの強化学習や、複雑なタスクのためのカリキュラム学習戦略に関する研究が含まれる。このプログラムは、操作ベンチマークでカーネギーメロン大学と、自律航法システムでオックスフォード大学と協力してきた。
安全性および政策プログラムは、アライメント、堅牢性、社会的影響に対処する。有害な行動を減らすモデル枝刈り技術に関する研究に資金を提供し、展開されたシステムのための評価フレームワークを開発する。このプログラムはまた、AI規制と調達に関する政策ブリーフィングを政府機関に作成している。
インフラとリソース
National AI Researchは、研究者に高性能ハードウェアへのアクセスを提供する全国的な計算ネットワークを運営している。このネットワークには3つの主要なスーパーコンピューティングサイトが含まれ、2023年時点でそれぞれ512基のNVIDIA A100 GPUを備えている。2024年のアップグレードでは、最大のサイトに256基の次世代アクセラレータが追加され、総スループットが40パーセント向上した。
この組織は、訓練と評価のための大規模なデータリポジトリを維持している。このリポジトリには、公開ソースと政府アーカイブから収集された、50ペタバイト以上のテキスト、画像、センサーデータが含まれている。アクセスはプロジェクトのニーズに基づいて階層化され、機密データセットには追加のセキュリティクリアランスが必要となる。
National AI Researchによって支援された研究者は、通常、プロジェクトあたり10,000から100,000 GPU時間の専用計算割り当てを受け取る。この組織はまた、勾配クリッピングと学習率スケジュールの最適化をサポートするカスタム分散訓練フレームワークを含むソフトウェアツールも提供している。これらのツールは、より広い研究コミュニティに利益をもたらすためにオープンソースライセンスでリリースされている。
連携と影響
National AI Researchは、60以上の学術機関と正式なパートナーシップを維持している。主要な協力者にはMIT CSAIL、スタンフォードAIラボ、バークレーAI研究が含まれ、教員の専門知識と博士課程の学生研究者を提供している。国際的なパートナーシップはトロント大学とオックスフォード大学にまで及び、国境を越えた知識交換を促進している。
この組織はまた、特定の技術的課題について産業パートナーと協力している。2023年のAMDとの協力は、彼らのアクセラレータアーキテクチャ向けにAIワークロードを最適化することに焦点を当てた。インテルとの別のプロジェクトでは、エッジデバイス向けの効率的な推論手法を探求した。これらのパートナーシップは非独占的契約として構成され、結果は公開されている。
設立以来、National AI Researchは1,500以上の査読付き出版物を支援してきた。その資金提供による研究は、残差ネットワーク設計、データ拡張技術、および校正された予測のための温度スケーリング手法の進歩に貢献してきた。そのプログラムの卒業生の何人かは、主要大学や企業でAI研究グループを率いるようになった。
この組織の影響はAI政策にも及び、その安全性研究は生成AI展開に関する連邦ガイドラインに情報を提供している。その評価フレームワークは、調達決定のために複数の政府機関によって採用されている。2025年現在、National AI Researchはプログラムを拡大し続けており、立法承認待ちの年間予算3億ドルへの増額が提案されている。
ガバナンスと資金
National AI Researchは、政府関係者、学術リーダー、産業代表者からなる理事会によって統治されている。理事会は四半期ごとに会合を開き、戦略的優先事項を設定し、主要な資金決定を承認する。独立した科学諮問委員会がプロジェクト提案を審査し、研究品質を評価する。
資金は主に連邦政府の歳出予算から来ており、パートナー機関からのマッチング拠出によって補完されている。この組織の年間予算は、2020年の1億ドルから2024年には2億5000万ドルに成長した。資金の約60パーセントが直接研究助成金を支援し、25パーセントが計算インフラをカバーし、15パーセントが管理およびアウトリーチ活動に充てられている。
資金提供されたすべてのプロジェクトは厳格な審査を受け、助成金申請の承認率は約15パーセントである。プロジェクトは、科学的価値、潜在的な社会的影響、国家的優先事項との整合性に基づいて評価される。進捗状況は年次報告書とマイルストーンに基づく成果物を通じて監視され、公的投資に対する説明責任が確保されている。