یکی از بناهای زیبا و دیدنی شهرسمنان، عمارت باغ امیر می باشد که قدمت آن به اواخر حکومت قاجاریه بر می گردد . بنای فوق بین سالهای  ۱۲۷۵ تا ۱۲۸۵ توسط استاد معمار باشی و بدستور و هزینه صاحب بناحاج میرزاآقا فامیلی احداث گردیده است.حاج میرزاآقا ازتجار ومعتمدین وخیرین بنام سمنان بوده،که نقش مهمی را درشکوفایی اقتصادشهر ایفا نمودند.از مهمترین کارهای ایشان می توان به واگذاری زمین وسرمایه جهت احداث کارخانه ریسمانریسی سمنان به حاج علینقی کاشانی ( پدر بزرگ دکتر ظریف وزیر امور خارجه دولت دهم ) اشاره نمود  .