در وسط هر ضلع طاق نماهایی با قوس های نیزه دار برپا گشته در بالای طاق نما و زیر سقف رس های قاب مانندی از خشت ساخته شده .سقف این برج مخروطی بوده كه بر اثر سوانح طبیعی ویران شدهبه عقیده مردم سمنان برج چهل دختر یكی از بناهای شوهر یاب استان سمنان است بدین صورت كه دختران دم بخت برای باز شدن بخت خود و پیدا كردن شوهر به داخل برج می روند و سه یا هفت سنگ از داخل به خارج پرتاب می كنند اگر همه سنگها به بیرون بیفتند بخت آنها باز می شود و همان سال ازدواج می كنند در غیر این صورت باید یك سال دیگر در منزل بمانند .ارتفاع این برج ۱۲ متر و ضخامت دیوارها ۵۰ تا ۶۰ سانتیمتر می باشد برج ۸ ضلعی بوده و طول هر ضلع در خارج ۵/۴ متر می باشد و با توجه به اینكه برج در كنار دو محله كوشمغان (كوشك مغان) و زاوغان (زاویه مغان) قرار دارد می توان اطمینان داشت برج مذكور زمانی آتشكده و از اماكن متبركه زرتشتیان بوده است.محل قرار گرفتن برج در اواسط خیابان حكیم الهی و بر سر محلات ثلاث ( كوشمغان، زاوغان، كدیور) می باشد. عده ای از مردم سمنان معتقدند برج به وسیله چهل دختر كه دست از تجملات و مادی گرایی كشیده و تارك دنیا شده بودند با خشت و گل ساخته شده و تاریخ برج مربوط به قبل از اسلام می باشد.