Этот дворец был построен в Гродно еще в далеком XVII столетии. Изначальная форма и архитектура зданий не сохранилась, поскольку в результате нескольких пожаров здание было полностью разрушено и его реконструировали. Два серьезных пожара произошли в 1753 и 1782 годах, после чего здания реконструировали и изначальная архитектура зданий была изменена и чувствуется влияние более поздних архитектурных стилей.
Князья Масальские происходили из старинного и благородного рода, они активно занимались торговлей и политикой. После того как умер очередной владелец дворца - Якуб Игнаций Масальский - здание вновь было перестроено и во внешнем виде появились черты классицизма. Как дворцовый комплекс здания сформировались примерно в этот же период: ближе к середине XVIII столетия.
Позднее поместье перешло практичному и зажиточному еврейскому торговцу, который в свою очередь сдал здание в аренду почтовому ведомству на несколько десятилетий.
Ныне же этот дворец пользуется любовью отечественных режиссеров, которые часто снимают здесь некоторые сцены и эпизоды. Например, именно здесь была снята картина «Следы Апостолов». Эта достопримечательность находится в центре города и пользуется популярностью среди туристов.