1583 میں تویوتومی ہیدیوشی، جس جنگجو سردار نے پورے جاپان کو اپنی حکومت میں لایا، نے ایک پرانے مندر نما قلعے کی جگہ اوساکا قلعہ شروع کیا۔ اس کا برج سونے کے ورق سے سجا تھا، اور اس کے گرد پتھر کی بڑی دیواریں اور خندقیں تھیں۔
ہیدیوشی کی وفات کے بعد توکوگاوا ایئیاسو نے 1614 اور 1615 میں قلعے کا محاصرہ کر کے تویوتومی خاندان کو ختم کر دیا۔ توکوگاوا نے قلعہ اس سے بھی بڑے پیمانے پر دوبارہ بنایا، جس کی دیواروں میں جاپانی قلعوں کے سب سے بڑے پتھر لگے ہیں۔
1665 میں آسمانی بجلی گرنے سے برج جل گیا۔ آج کا برج 1931 میں اوساکا کے لوگوں کے چندے سے دوبارہ بنا، اور اس میں ہیدیوشی اور قلعے کی تاریخ کا عجائب گھر ہے۔
