دژ برازجان یا کاروانسرای مشیرالملک یکی از آثاری تاریخی این شهر است که قدمت آن مربوط به دوران قاجار می شود. این دژ دارای 4 برج و 68 اتاق بوده و در ساخت آن از مصالح مختلفی از جمله گچ و سنگ و ساروج استفاده شده است. کاروانسرای مشیرالملک در دوره دوم پهلوی در اختیار شهربانی بود و از آن به عنوان زندان بهره برداری می شد. به همین علت این بنا علاوه بر جنبه تاریخی از لحاظ سیاسی نیز حایز اهمیت می باشد.
دژ برازجان به دلیل قرارگیری بر سر راه بوشهر و شیراز به عنوان محلی برای استراحت کاروان های تجاری شناخته می شده است. این دژ تاریخی در حال حاضر نماد اصلی شهر برازجان بوده و در مرکز آن واقع شده است. این کاروانسرای تاریخی در فهرست آثار ملی کشورمان به ثبت رسیده و جزو نقاط گردشگری جالب توجه جنوب کشور می باشد.