علاوه بر استحكامات شهر در ۱۰ كیلومتری تون قلعه ای بوده كه با توجه به قرارگیری آن در قله كوه به كوه قلعه مشهور می باشد كه این قلعه از قلعه های اسماعیلی جنوب خراسان می باشد.
این قلعه از نظر وسعت و نقشه یكی از مهمترین قلعه های اسماعیلی در منطقه قهستان است. قلعه در شش سطح و به صورت پلكانی بر كوهی در جنوب فردوس بنا شده است. پلان چهار ایوانی موجود در شاه نشین قلعه و فضاهای مسكونی آن از زیباترین بخش های این قلعه می باشد. قلعه از سه طرف به پرتگاه منتهی می گردد و تنها راه دسترسی به قلعه از طریق تنگه جنوب غربی كوه كه شیب كمتری دارد امكان پذیر می باشد.
این قلعه زمانی كه پابرجا بوده دارای دو دیوار و حصار تو در تو و چند برج دیده بانی بوده كه بر روی دیوارها و برج ها حفره های تیركش قرار داشته است. ارتفاع برج های قلعه به حدود ۵ متر می رسد كه با سنگ لاشه و ملات گچ بنا شده است
در قسمت های پایین تر قلعه آثاری از حوض های آب دیده می شود كه در صخره ها كنده شده است و امكان ذخیره آب باران و برف برای آن ممكن می گردد.
