بدأ إسماعيل باشا المفتش حياته الوظيفية في الدائرة السنية، وظل الخديوي يرقيه حتى حصل على رتبة الباشوية، وبعد ذلك عينه مفتشاً عاماً لأقاليم القطر المصرى، وطوال تولى إسماعيل المفتش وزارة المالية (1868 - 1876م) كان حائزاً على رضاء الخديوي، لدرجة بأن منحه 4 منازل بعابدين قيمتها 30 ألف جنيه، كما منحه أرضا بنى عليها قصره بعد ذلك، وفور تعيينه وزيراً للمالية أمر إسماعيل المفتش بتشييد قصر فخم مقرا له، وتم تشييده بين عامى (1868 - 1870م) وفقاً لأسلوب عمارة الباروك التي تتميز بالمبالغة في العناصر الزخرفية المجملة للواجهات، حيث يتكون القصر من جزأين، وهما الجزء الخاص بالسكن، والجزء الخاص بالعمل، كما أن طراز البناء ينتمى إلى طراز التوليف المتكون من عدة طرز مختلفة اشتهرت بها العمارة الأوروبية في القرنين التاسع عشر والعشرين وتتبع لمدرسة ألبوزار الفنية.ويتكون القصر من 3 أدوار تضم 18 غرفة رئيسية و42 غرفة صغيرة للحريم وفناءً واسعًا، والقصر عبارة عن جزأين، جزء شمالى وآخر جنوبى، كما يتوسط القصر نافوره جميلة.