برخی مورخین معتقدند قلعه آگره ابتدا متعلق به دودمان لوریس بوده و در سدهٔ شانزدهم میلادی به وسیله اکبر پادشاه بزرگ گورکانی تصرف شدهاست. اکبر در دوره حکومت نسبتاً طولانی خود مرکز حکمرانی را از دهلی به اگره تغییر داد و این قلعه یا ارگ یکی از ارکان حکومتی او بود.
چنانچه از بناهای این دوران برمیآید اکبرشاه علاقه زیادی به سنگ ماسه سرخ داشت و برای عمارتهای این بنا از این سنگ استفاده کرد به همین دلیل امروزه به آن قلعه سرخ یا ارگ سرخ آگره نیز گفته میشود که نباید با قلعه سرخ در دهلی اشتباه گرفت.[۱]