به اساس نقل قول محمد ایوب خان فرزند سرورخان پروانی قاضی خانی، که در زمان اعمار این قصر مسئولیت امور مالی و نظارت کار آن را داشت، زمین این کاخ حین مراجعت امیر عبدالرحمن خان ازبخارا در سال ١٨٨۰ میلادی به درخواست وی از سوی رفیق و یار همرزمش سرورخان پروانی به وی بخشش شده بود، چون وقتی امیر عبدالرحمن خان به جبل السراج اقامت داشت رو به سرورخان پروانی کرده گفت: (برادر سرورخان اگر در کابل به مشکل برخوردیم، چی تدبیر داشته باشیم و کجا بود وباش کنیم  ؟
beː ˈaːsˈɑs nˈaq1l q1ˈoːl mohˈammad ˈajjub xˈɑn fˈarzand sarvˈarxɑn porvˈɑni q1ˈɑzi xˈɑni kˈeː dˈar zamˈɑn eʔmˈɑr iːn q1ˈasr mˌasʔuːlˈiːjat ˈomur mˈɑli vˈa nezˈɑrat kˈɑr ɑn rɑ dˈɑʃt zˈamin iːn kˈɑx hˈejn mˌorɑdʒˈeʔat ˈamir ˌabdolrˈahman xˈɑn ˈaːzbaxˈɑrˈɑ dˈar sˈɑl jˌek hezˌɑro hˌaʃtsaːdo hˈaʃtɑd milˈɑdi beː dˈarxɑst vˈej az sˈuːj rˈafiq1 vˈa jˈɑr hamrˈazmaʃ sarvˈarxɑn porvˈɑni beː vˈej bˈaxʃeʃ ʃˈodeː bˈuːd tʃˈon vˈaq1ti ˈamir ˌabdolrˈahman xˈɑn beː dʒˈabl alsˈerɑdʒ eq1ˈɑmat dˈɑʃt rˈu beː sarvˈarxɑn porvˈɑni kˈardeː ɡˈoft: barˈɑdar sarvˈarxɑn ˌaɡˈar dˈar kˈɑbl beː mˈoʃkel barxˈordim tʃi tˈadbir dˈɑʃteː bˈɑʃim vˈa kˈodʒɑ bˈuːd vabˈɑʃ kˈonim