2023年6月14日、イーロン・マスクがカリフォルニア工科大学の第130回卒業式で行ったスピーチ

今日、NVIDIAは3.34兆ドルの時価総額で世界で最も価値のある企業となりました。(私とは全く関係ありません、なぜなら私はNVIDIAの株を持っていないほど貧乏だからです;または逆に、NVIDIAの株を持たないために貧乏だということもできます 🐶)、しかし、丁度今日は時間が取れたので、Paula社長が推薦してくれた黄氏(Jensen Huang)が6月14日にカリフォルニア工科大学(Caltech)の卒業式で行ったスピーチを聞くことができ、とても適切なタイミングでした。

スピーチの概要内容:

まず、定型的な挨拶から始まり、Caltechへの称賛を行いました:

リチャード・ファインマン、リナス・ポーリング、カーヴァー・ミードなど、半導体産業および黄氏自身に大きな影響を与えた人々がCaltechの出身です。

小雨注

  • リチャード・ファインマン - 量子電気力学への貢献により1965年にノーベル物理学賞を受賞したアメリカの著名な理論物理学者
  • リンス・ポーリング - 化学結合の構造に関する研究で1954年にノーベル化学賞を、核実験に反対した功績で1962年にノーベル平和賞を受賞したアメリカの著名な化学者
  • カーバー・ミード - 集積回路設計やシリコンコンピュータ技術の発展に大きな貢献をし、超大規模集積回路(VLSI)設計の先駆者として知られるアメリカの著名なコンピュータ科学者および電子工学者

黄氏は、卒業生たちがカルテックでの経験を通じて夢のために行った犠牲、示した性格、決意、意志について言及しました。人生においても苦しみや葛藤を乗り越える力が必要です。NVIDIAのチーフサイエンティストの多くがカルテック出身であり、彼は皆にNVIDIAで働くことを歓迎しています。今日はNVIDIAとカルテック卒業生たちにとって共通の輝かしい瞬間であり、卒業生たちは将来さらに多くの頂点を迎えるでしょう。黄氏は自身も継続的に努力し、今後会社がさらに多くの栄光の瞬間を迎えられることを望んでいます。

黄氏は現在、在任期間が最も長いテクノロジー企業のCEOであり、31年間にわたり会社が倒産しないように、自分自身が退屈しないように、解雇されないように努めてきました。CEOであり創設者として、NVIDIAをゼロから今日の地位まで成長させることができたことは、一種の特権であると言っています。

小雨注

これも私が未来に向かって努力すべき方向だと感じています。起業は個人的な利益の観点から見ると、ROI(投資対効果)はまだ低いですが、それでも続ける動機は何でしょうか?心理学の認知理論では、行動の動機を内発的動機と外発的動機に分けます。内発的動機とは、タスク自体への興味や快楽によって生じる動機であり、外発的動機には金銭、成績、強制、罰、競争などが含まれます。

私は個人的に起業が非常に面白いと思います。特に「知能」に挑戦できることに大きな満足感を得ています。

チャーリー・マンガーはUSCでの講演で、「知恵を得ることは一種の道徳的責任である」と述べました。彼は法学部出身でしたが、生活や学習において成功するための最良の方法は、複数の分野の知識を掌握することだと言っています。

絶えず学び、実践の中で検証し、改善し、向上させていくことができるのは私にとって一種の特権(privilege)です。

1年前の台湾大学での講演内容を振り返りました:

  • CUDAは20年前に発明され、それが今日の計算における革新につながっています。
  • セガのゲームコンソールプロジェクトについて言及しました。
  • リチャード・ファインマンが述べたように、知的誠実さ(intellectual honesty)と謙虚さ(humility)が会社を救いました。
  • 黄氏(ジェンスー・ホアン)は、卒業生たちにAIに関わることを勧めました。それは私たちの時代において最も重要な技術です。結果は予想外のもので、時には驚きに満ち、時には失望をもたらすかもしれませんが、それに参加し楽しむ必要があります。なぜなら、その進歩は非常に速いからです。黄氏が知る限り、これは複数の指数が同時に増加する唯一の技術です。したがって、技術の変化は非常に非常に速く進んでいます。そのため、黄氏は台湾大学の学生たちに呼びかけ、ただゆっくり歩くだけでなく、AI革命に積極的に飛び込むよう勧めています。

小雨注:CUDAはNVIDIAが作成した並列計算プラットフォームとアプリケーションプログラミングインターフェースモデルで、開発者がNVIDIA GPUを一般処理に利用できるようにします。これはNVIDIAの競争優位性を守る重要な要素です。しかし、以前Google Cloudの人と交流した際、彼らはGoogleのTPUにはCUDAのような中間層が必要ないと言っていたため、多くのことがTPUレベルで解決されており、TensorFlowなども組み込まれているとのことです。

1年前に台湾大学で行ったプレゼンテーション、そして1年後にカリフォルニア工科大学(Caltech)で行ったプレゼンテーションについて話しました。

1年間でAI業界では多くの変化がありました。コンピュータ業界は根本的な部分から変わりつつあります。本当に基礎からです。すべての層が変わり、その速度は非常に速く、すべての業界が変革されようとしています。理由は明らかで、今日のコンピュータは知識を得るための最も重要なツールであり、すべての業界や科学分野の基盤となっています。それはまた、すべての業界に影響を与えるでしょう。

NVIDIAのGPUとAIの歴史について説明しました。

  • 現代のコンピュータはIBM System/360にまで遡ることができ、その基本的な理念、アーキテクチャ、戦略は今日のコンピュータ業界においても依然として大きな役割を果たしています。
  • 1980年代、黄氏はMeadとConwayの画期的な教科書から学んだ第一世代のVLSIエンジニアの一人でした。この教科書は、カルバート・ミードがカリフォルニア工科大学で行ったチップ設計方法論の先駆的な研究に基づき、集積回路設計を完全に改革しました。これにより、黄氏の世代はスーパーギガスケールのチップを設計し、最終的にCPUを開発することができました。
  • CPUは計算能力の指数関数的成長を牽引しました。そのパフォーマンスと信じられない技術革新、いわゆるムーアの法則によって、情報技術革命が推進されました。世界がかつて見たことのないものを大量生産しました——目に見えず、簡単に複製できるソフトウェアです。これが3兆ドル規模の産業を生み出しました。以前はソフトウェアの販売で利益を得られると考えるのが幻想だとされていました。しかし今日では、それが私たちの業界が生み出す最も重要な商品であり、最も重要な技術や製品の一つとなっています。
  • しかし、NARDスケーリング、トランジスタスケーリング、命令レベル並列性の限界により、CPU性能の向上は鈍化しました。計算需要が引き続き指数関数的に増加している一方で、CPU性能の向上は遅れています。この計算需要と計算能力の間の急速に拡大するギャップに対処しなければ、計算にかかるエネルギー消費とコストの上昇が最終的に各業界を窒息させる結果となるでしょう。
  • NVIDIAのアクセラレーテッドコンピューティングは道を示しています。時間を費やすアルゴリズムを並列処理に特化したGPUにオフロードすることで、10倍、100倍、場合によっては1000倍の加速を実現し、資金、コスト、エネルギーを節約します。現在、我々が加速しているアプリケーション領域は、コンピュータグラフィックスやレイトレーシングから、ゲノム配列決定、科学計算、天文学、量子回路シミュレーション、SQLデータ処理、さらにはデータサイエンスにおけるPandasにまで及びます。
  • 時間、コストまたはエネルギーにおいて百倍の節約をもたらすアクセラレーテッドコンピューティングは、他の場所で新しい発展を引き起こします。しかし、それが何かはディープラーニングが登場するまで知りませんでした。
  • ジェフ・ヒントン、アレックス・クルーズウェスキー、そしてイリヤ・サッツケーバーは、NVIDIA CUDA GPUを使用してAlexNetを訓練し、2012年のImageNetチャレンジでコンピュータビジョン界を驚かせました。これがディープラーニングの始まりでした。
  • 2016年、NVIDIAは初のAIスーパーコンピュータDGX-1を発表し、その最初の一台をサンフランシスコに本社を置くスタートアップ企業に納品しました。この会社については誰も知りませんでしたが、彼らは人工知能研究を行う友人たちのグループで、OpenAIと名付けられていました。
  • 2022年、今日から十年前のことですが、計算能力が約百万倍向上した後、OpenAIはChatGPTを発表し、AIが主流となりました。
  • この10年間で、NVIDIAは当初多くの人が知っていたグラフィックス会社、主にGPUを製造する会社から、大規模なデータセンター用スーパーコンピュータを製造するAI会社へと変貌を遂げました。
  • NVIDIAは自社だけでなく、計算そのものを根本的に変革しました。現在、計算方法は完全に変わりました。

AIが登場した今日と未来への予測:

  • 現在の計算スタックは、プログラマが書いた命令をCPUで処理する代わりに、スーパーコンピュータ上で訓練された大規模な言語モデルにGPUを使用して処理します。私たちは、誰も書くことのできないソフトウェアを作り出しており、10年前には誰も想像できなかったことを実現しています。
  • コンピュータは今や命令駆動ではなく、意図駆動です。コンピュータにあなたが何を望んでいるか伝えれば、それがそれをどのように実現するかを考えます。人間と同じように、AIアプリケーションはタスクを理解し、推論し、計画を立て、一連の大規模な言語モデルを調整してタスクを実行します。
  • 将来的なアプリケーションは、私たちが物事を行う方法に非常に似た形で動作し、専門家チームを編成し、ツールを使用し、推論と計画を行い、タスクを遂行します。ソフトウェアとその機能は完全に変わりました。
  • 私たちの業界は、変革を通じてかつてない新しい産業を創造しました。AIの入力と出力はトークンであり、これらは知能が埋め込まれた浮動小数点数です。
  • 会社は現在、以前には存在しなかった新しいデータセンターを構築しており、これはスマートトークンの生成に特化したものです。本質的には、これがAI工場です。

AI革命を電気駆動の産業革命と比較しました:

ニコラ・テスラが発明した交流発電機が過去の産業革命を推進したように、私たちは今、AIトークンジェネレーターを持っています。それらは新しい産業革命の工場となるでしょう。過去には大規模な工業がエネルギーや電力を生産していましたが、今は見えないソフトウェアを生産する大規模な工業があります。近い将来、私たちは知能的なトークンやAIジェネレーターを生産する工業を持つようになるでしょう。新しい計算モデルが出現し、新しい産業が形成されています。すべてはNVIDIAが基本原理から出発し、未来への信念を持ち、それを行動に移した結果です。

次のステージのAIブーム

次のAIブームはロボティクス分野です。この分野では、AIは言語モデルだけでなく、物理世界のモデルも持ちます。NVIDIAは数百の企業と協力し、ロボット、ロボット車両、ピックアンドプレースロボットアーム、ヒューマノイドロボット、さらには巨大なロボット倉庫まで開発しています。

しかし、NVIDIAのAIファクトリ戦略や経験とは異なり、AIは推論と熟考された行動を通じて形成される一方で、NVIDIAのロボティクスの旅路は一連の挫折を経て来たものである:

  • 2000年、NVIDIAはGPUとプログラマブルシェーディングを発明し、AMD CPU向けの統合グラフィックスチップを発表した。AMDはPC内のすべての技術を支配しようとしたが、NVIDIAは独立を維持したいと考えていたため、ATIを買収し、NVIDIAを排除した。
  • NVIDIAはインテルに接近し、インテルCPUとの接続ライセンスを取得する交渉を行った。アップルはNVIDIAが開発している製品に興奮し、初代MacBook Airの共同開発を依頼した。結果として、インテルはこれを不快に思い、NVIDIAとの契約を打ち切った。
  • NVIDIAはARMのライセンスを取得し、低消費電力のSoCを開発した。これはモバイル用のSoCであり、完全なコンピュータだった。NVIDIAのチップはGoogleの関心を引いたため、新デバイスの共同開発を行い、それが最終的にAndroidモバイルデバイスとなった。しかし、Qualcommが不満を感じ、自社モデムへの接続をNVIDIAに許可しなかった。当時他のLTEモデム会社がなかったため、NVIDIAはモバイル市場から撤退せざるを得なかった。
  • 市場転換の余地がない中、NVIDIAは顧客が存在しないものを開発することを決定した。なぜなら、確実に顧客がいない場所では競争相手も存在せず、誰もあなたを気にかけないからだ。そこで、NVIDIAは顧客のいない市場、つまり価値ゼロドルの市場、すなわちロボット市場を選んだ。
  • NVIDIAは、当時誰も理解していなかったディープラーニングというアルゴリズムを処理する世界初のロボットコンピュータを開発しました。

この過程での学習

これはもう10年以上前のことです。黄氏(ジェンスン・황)は、NVIDIAが開発した技術と次のAI波を作り出すチャンスに非常に満足していました。さらに重要なのは、NVIDIAが俊敏性と回復力のある文化を育てたことです。何度も挫折しながらも、NVIDIAは埃を払い落とし、次の機会を探してきました。

その都度、スキルを獲得し、会社の品格を強化してきました。NVIDIAを気紛れさせることは難しく、挫けさせることも難しいです。そして今、黄氏にとってどんな挫折も機会のように感じています。皮肉なことに、NVIDIAが現在開発しているロボットコンピュータにはグラフィックス処理が必要ない場合もありますが、それがNVIDIAの旅が始まった理由でもあります。

The world is uncertain and the world can be unfair and deal you with tough cards.

-- Richard Feynman

しかし、常に別の機会があり、またはそれを創出することができます。

小さな物語

ある暑い夏の日、黄教主(オウきょうすう)一家は京都を訪れ、銀閣寺を見学しました。黄教主は一人で働いている庭師に気づきました。彼はそこにしゃがみ込み、竹のつまみ箸を使って苔を慎重に取り除き、それを竹のカゴに入れていました。竹のカゴはほとんど空のままです。そこで黄教主は彼に近づいて尋ねました。「あなたは何をしているのですか?」彼は英語で答えました。「枯れた苔を取り除いています。私の庭を手入れしているのです。」黄教主は言いました。「でもあなたの庭はとても広いですね。」彼は答えました。「私はこの庭を25年間手入れしてきました。時間はたっぷりあります。」

これは黄教主にとって人生の中で最も深い学びの一つでした。それは黄教主にこう教えてくれました:自分の事業に集中すればするほど、自分には時間がたっぷりあることに気づくでしょう。

黄教主の一日

黄教主は毎朝、同じ方法で一日を始めます:まず最も重要な仕事を処理します。黄教主には非常に明確な優先事項リストがあり、毎日その中で最優先の仕事を最初に行います。オフィスに到着する前であっても、黄教主の一日はすでに成功したとみなせます。なぜなら、最も重要な仕事を終わらせているので、その後は他人を助けることに集中できます。誰かが邪魔をして謝ったとき、黄教主はいつも「私は時間があるよ」と言います。そして本当にその通りなのです。

最後のアドバイス

誰もが何か不思議で未開拓のものに信じる権利がありますが、それは証拠と理性に基づいていなければなりません。そしてそれを実現するために全力を尽くしてください。そうすれば、あなたのGPU、CUDA、生成型AI、NVIDIAを見つけるかもしれません。挫折を新しい機会として捉えてほしいと思います。苦しみや試練は、あなたの品格、忍耐力、俊敏性を強化し、それこそが最も強力な超能力です。

黄教主(ジェンスン・ホアン)が重視するすべての能力の中で、知恵が最も重要だとは限りません。彼が最も重視するのは、苦しみや困難を耐え抜く力、長期間にわたって何か一つのことに集中する力、挫折を処理して次の角を曲がった先にあるチャンスを見る力です。黄教主はこれらこそが自分の超能力であり、それが皆さんの超能力でもあることを願っています。

何か一つの技芸を見つけてほしいと思います。最初の日に決める必要はありませんし、急いで決める必要もありません。しかし、一生かけて磨き続けたいと思う技芸を見つけ、それを生涯の仕事にしてほしいと思います。

最後に、生活を優先順位付けしてください。やるべきことが多く、タスクも多いですが、重要なことから優先的に処理することで、十分な時間を確保できるでしょう。

小雨注

時として、人はより大きなビジョンを必要とし、そうすることで眼前の些細なことに囚われず前進できる。遭遇するすべての挫折はプレッシャーテストであり、私たちにシステムを改善・最適化させ、潜在的な問題やボトルネックを見つけ出し、全体の耐圧性と品質を向上させる機会を与えてくれる。

自分が好きなことを長期間にわたって集中して取り組もうとするとき、多くの時間を手に入れることができる。ゆっくり進めばいいし、なぜなら何が重要か、また何がそれほど重要でないかを知っているため、優先順位をつけられる。その結果、FOMO(見逃したくないという焦り)を感じることもなく、慌ただしく生きることもない。