1786 йылда йорт урынлашҡан  участканы  Екатерина II генерал-майор А.П. Ермоловҡа бүләк итә.  1788 йылда Ермолов ерҙе Медицина коллегияһы президенты И.Ф. Фитингофҡа һата. Уның  заказы буйынса архитектор Д Кваренги йорт төҙөй (ҡала йортоноң баҡсаһы булмай, әммә ихата менән). 1792 йылда И. Ф. Фитингофтың вафатынан һуң йорттоң киләһе  хужаһы   граф А.Н. Самойлов, Г. А. Потемкиндың туғаны була.  1804 йылда йорт ҡаҙнаға һатып алына һәм  1804—1805 йылда уны архитектор А.А. Михайлов үҙгәртеп ҡора. 1804 йылда йортҡа   Санкт-Петербург хакимиәте күсә, һәм бина Губерна йәмәғәт урындары йорто кеүек билдәле була.