كاروانسرای شاه عباسی در وسط شهر آوج قرار دارد و وسعت تقریبی آن ۵۵×۵۸ متر می‌باشد و دارای طرح دو ایوانی است. شالوده كاروانسرا از سنگ‌های لاشه و قلوه سنگ بنا شده و روی آن آجرچینی شده است. كاروانسرا از داخل دارای دو ایوان و ۲۴ ایوانچه است و در پشت اكثر آن‌ها، حجره‌ها واقع شده‌اند كه چهار عدد از آن‌ها به شترخان كاروانسرا راه دارند. شترخان به صورت راهرویی طویل با پوشش طاق و تَویزه است و زیر هر طاق نمای آن سكویی جهت باراندازی قرار دارد.
این كاروانسرا از جمله منزلگاه‌هایی است كه در مسیرهای اصلی كشور و به دستور شاه عباس صفوی بنا شده و در سال ۱۰۴۰ هجری قمری در زمان پادشاهی شاه صفی به پایان رسیده است. متأسفانه این بنا در زلزله تیر ماه سال ۱۳۸۰ خورشیدی آسیب‌های جدی دید.
