アムダールの法則とは
読み: アムダールのほうそく Amdahl's Law AI計算資源・大規模モデルの用語
アムダールの法則とは、計算機の数を増やしても、並列化できない部分が残るかぎり高速化には上限があることを示す式。処理の9割を並列化できても、得られる倍率は10倍までにとどまる。1967年にジーン・アムダールが示した。AIの設備では、リクエストの受け付け、前処理、入出力がこの部分にあたる。
3段で深く知る — 基礎・高級・投資家視点
1行の定義から、体系解説の該当箇所へそのまま降りられる。各段の抜粋は解説本文の冒頭で、続きはリンク先にある。
processors 2. 速さは「どこで詰まるか」で決まる — 4つの壁とルーフライン
ひとことで言うと — 料理の速さは包丁の速さだけでは決まらない。冷蔵庫から材料を運ぶ速さ、厨房どうしの受け渡し、ガスの容量のどれかが先に上限に当たる。計算機も同じで、演算・記憶・通信・電力の4つのうち、最初に上限に当たった場所が全体の速さを決める。 4つの壁 壁何が上限になるか当たりやすい仕事解きにいく設計 表4 4つの壁。記憶の壁は1995年の論文が名付けた古い問題で、演算器の速さが年に約6割伸びた時代に、記憶の速さが1割弱しか伸びなかったことから生じた。電力の壁は、微細化しても電力密度が下がらなくなった2005年前後から設計の前提になった。 ルーフライン — 1本の不等式で詰まる場所を読む 演算と記憶のどちらで詰まっているかは、2009年にカリフォルニア大学バークレー校の研究者が示した簡単な図で読める。横軸に演算密度 (記憶から1バイト運ぶごとに何回の演算をするか)、縦軸に到達できる速…
processors 3. CPU — 実行しながら判断する背骨。指揮と前処理の装置
ひとことで言うと — CPUは「次に何をするか」を実行しながら決められる唯一の計算機である。条件によって行き先が変わる仕事、順番を守らなければならない仕事、種類がばらばらの仕事は、今もCPUが最も速い。 CPUの5段の流れは、利用者の要求を受け、予定を組み、適切な処理装置へ振り分け、入出力を管理し、結果を返す、である。5段のどれも行列の掛け算ではない。要求の中身を読んで分岐し、待ち行列を管理し、ストレージと網の完了を待ち、形式を整える。どの段も「前の結果を見て次を決める」仕事で、並列にしにくい。第2節のアムダールの式でいう (1 − p) の部分をCPUが受け持っている。 単一の核を速くする5つの仕組み 仕組み何をするか代償と含意 表6 CPUが単一の核の性能を高める仕組み。行列命令 (AMX) の8倍はインテルの公表による、従来の8ビット整数向け命令との比較。 この5つに共通するのは、回…
関連する用語
出典・注記: 第IX部 計算機 の新設に伴い採用 (2026-09-17)
🧰 ツール・特集の入口
一次データで動く 11 本 — 銘柄の絞り込み・供給網・比較・一次データの台帳・解説・規制レンズ (すべて無料)