Поганкины палаты были построены в XVII веке для известного и очень богатого псковского купца Сергея Ивановича Поганкина. Сергей Поганкин управлял денежным двором и таможней в Пскове, был кабацким головою, занимался торговлей.
Комплекс построек П-образной формы выстраивался одновременно. Трехэтажное здание было предназначено семье самого хозяина, двухэтажное здание строилось для его взрослого сына, а в одноэтажной постройке размещалась поварня.
В 1710 году род Поганкиных пресёкся, в 1711 году Поганкины палаты были переданы ведомству Главной провиантской канцелярии для размещения продовольственных складов.
В 1900 году, под влиянием общественности, комплекс зданий отошел Псковскому археологическому обществу. Был проведен ремонт, и в 1902 году здесь открылся краеведческий музей. В экспозициях музея имеются иконы, церковная утварь, живопись и многое другое.
Раньше это место называли Красным крестом, что означало «красивый перекрёсток». На нем сходились самые красивые улицы города — Великая и Большая.
Сегодня Поганкины палаты выглядят достаточно сурово, чего раньше не было. К сожалению, до наших дней не дошли крылечки, балкон, называемый вислое крыльцо), гульбища, светлицы, башенки и два верхних деревянных этажа.