باغ نظر یکی دیگر از شاهکارهای دوران زندیه می باشد که بین سال‌های 1179 تا 1193 هجري قمري ساخته شد. این مکان به نام‌های باغ موزه، باغ حکومتی، عمارت کلاه فرنگی و آرامگاه کریم‌خان زند نیز مشهور است. این عمارتِ هشت ضلعی در زمان کریم‌خان زند محل پذیرایی ميهمانان داخلی و خارجی و مرکز عمده تشریفات سیاسی مورد استفاده قرار می‌گرفته است.
عمارت كلاه فرنگي باغ نظر دربرگيرنده یک تالار مرکزی و چهار شاه‌نشین جانبی است. در سال 1206 هجري قمري آقا محمدخان قاجار، جسد کریم‌خان زند را که در شاه‌نشین شرقی به خاك سپرده شده بود را به تهران منتقل کرده و در زیر راه پله‌های کاخ گلستان، محل رفت و آمد دائمی خود دفن كرد.
تا سال 1315 خورشيدي اطلاع درستي از جای اصلی قبر در دست نبود. در همان سال، هنگام تعمیر بنای کلاه‌فرنگی در شاه‌نشین شرقی موزه، قبر ساخته شده‌ای نمودار شد که خالی از اسکلت بود و تنها شامل تکه‌های مختصر چرمی بود. اکنون قبر بازسازی شده در محل شاه‌نشین شرقی قرار دارد.
باغ نظر در اوایل دوران قاجار نيز مورد توجه فرمانروایان قاجار بود. در سال 1230 هجري قمري، حسین علی میرزا (پسر فتحعلی شاه قاجار) حاکم فارس این باغ را مقر حکومت خود قرار داد و در شمال غربی آن، عمارتي زیبا به نام «کاخ همایون» ساخت و قسمت‌هایی از آن را به نام عمارت «باغ خورشید و آیینه» نام‌گذاری کرد. هم اکنون از اين عمارت اثری نیست. اين مجموعه در سال 1315 خورشيدي به موزه پارس تبدیل شد.