スマホのAIとは アップルは約30億パラメータのモデルを1つの重みあたり2ビットに縮めて端末で動かす
スマホのAIは、端末の中で動かす小さなモデルとクラウドの大きなモデルを使い分けます。アップルは、約30億パラメータの端末用モデルを、1つの重みあたり2ビットまで縮めて動かしています。
- スマホのAIは、端末の中の半導体(NPUなど)で動かす処理と、クラウドに送って動かす処理を、内容によって分けます。
- アップルの端末用の言語モデルは約30億パラメータで、学習の段階から2ビットに縮めることを前提に学ばせています。
- 重い処理は、アップルが自社の半導体で組んだサーバー「Private Cloud Compute」で動かします。
- Apple Intelligenceは、iPhone 15 Proと16以降などに限られ、端末の保存領域を最大8〜14GB使います。
スマホのAIとは、スマートフォンに入ったAIの機能と、それを動かす仕組みのことです。文章の要約、写真の編集、音声の聞き取り、翻訳などを、端末の中かクラウドで処理します。
端末とクラウドの使い分け
スマホは電池で動き、冷やすファンもありません。メモリも数GB〜十数GBです。そのため、大きなモデルは端末に入りません。各社は、よく使う軽い処理を端末の中の小さなモデルで済ませ、難しい処理だけをクラウドの大きなモデルに送る作りにしています。端末の中で済めば、通信がいらず、データを外に出さずに済みます。
端末の中でAIを動かすのは、スマホのSoCに入ったNPUです。アップルはNeural Engine、クアルコムはHexagon、メディアテックはAPUと呼んでいます。
アップルの例:小さく縮める工夫
| 項目 | 端末用モデル | サーバー用モデル |
|---|---|---|
| 大きさ | 約30億パラメータ | 小さなモデルを並べたMoE(PT-MoE) |
| 重みの縮め方 | 1つの重みあたり2ビット(学習の段階から想定) | ― |
| 途中の記憶(KVキャッシュ) | 層の間で共有し37.5%削減 | ― |
| 動かす場所 | iPhone、iPad、Mac | Private Cloud Compute |
| 対応する言語 | 15言語 | |
パラメータ1つを16ビットで持つと、30億パラメータで約6GB(計算)になります。2ビットにすると約0.75GB(計算)で、8分の1の大きさです。アップルは、ただ後から縮めるのではなく、縮めた状態でも精度が落ちないように学習の段階から調整しています。アプリの開発者は、「Foundation Models」の仕組みを通じて、この端末用モデルを直接呼び出せます。
対応機種と半導体の条件
アップルのサポートページによると、Apple Intelligenceが使えるiPhoneは、iPhone 15 Pro、15 Pro Max、iPhone 16以降の各機種、iPhone Air、iPhone Duoです。iPadとMacは、主にM1以降のチップを積む機種が対象です。端末の保存領域は、iPhone 17 Pro以降、iPhone Air、iPhone Duoで最大14GB、その他の対応機種で最大8GBを使います。
機能を使うのに新しいチップと一定のメモリが要るため、スマホのAIは、端末の更新と、NPUとメモリの大きいSoCの需要に結びつきます。日本語は、対応する言語に入っています。
関連する用語
- NPU:AIの推論に特化した回路。
- 量子化:モデルの数値の桁を減らし、メモリと計算を軽くすること。
- KVキャッシュ:言語モデルが前の語の計算結果を覚えておくメモリ。
- エッジAI:機器の中でAIを動かすこと。
Apple Intelligenceの保存領域の使用は、ソフトの更新の前後で一時的にこれを超えることがあるとアップルは注記しています。
この記事は公開資料をもとに作成しています。売買をすすめるものではありません。誤りを見つけたら訂正します(編集方針)。
関連する記事
エッジAIとは ロボット用のJetson Thorは最大130Wで、前の世代の7.5倍の性能
エッジAIは、現場の機械の中の半導体でAIを動かすことです。エヌビディアのロボット向けのJetson AGX Thorは、消費電力40〜130ワットで、前の世代のAGX Orinの7.5倍の性能があるとしています。
PCとは 7〜9月の世界出荷は6270万台で20.1%減、メモリ高で値上げ前の先回りが響く
PCは、CPUやメモリなどの半導体を1台にまとめた個人用の計算機です。IDCの速報では、2026年7〜9月の世界のPCの出荷台数は6270万台で、前年同期比20.1%減でした。
オープンウエイトモデルとは gpt-ossは1170億パラメータを80GBのGPU1基で動かす
オープンウエイトモデルは、学習済みの重みのファイルを公開したAIのモデルです。OpenAIのgpt-oss-120bは総パラメータ1170億で、80GBのGPU1基に収まるとしています。
建設のリードタイムとは TSMC熊本は着工から開所まで約1年10か月、アリゾナは発表から量産まで約4年半
建設のリードタイムとは、工場やデータセンターの着工から稼働までにかかる時間です。TSMCの熊本の第1工場は2022年4月に着工し、2024年2月に開所式を開きました。