八角形の形は法隆寺の夢殿をモデルに、屋根は富士山を模して造られた。屋根の上の金色の玉ねぎのようなものは魔除け。
東京オリンピック(1964年)の柔道競技会場として建設された。
武道館の奥にいくと、北の丸公園、科学技術館などがあります。