В XIII столетии для защиты Моравии от вражеских войск король Пржемысл Отакар приказал возвести крепость. Замок Шпильберг, построенный в готическом стиле, являлся одним из мощнейших оборонительных сооружений. Взять его штурмом не удалось даже шведам, которых было намного больше, чем чехов, но 1809 году время крепость утратила военное значение, часть укрепления приказал разрушить Наполеон.
В XVIII веке замок превратился в тюрьму. Ее узниками стали итальянские карбонарии, революционеры из Франции, венгерские бунтари, участники польского восстания. В казематах крепости содержали и опасных преступников.
История замка хранит много тайн. Если верить легендам, в стенах Шпильберга замуровывали женщин, изменявших мужьям. Они умирали долго и мучительно.
Крепостное сооружение пострадало в пожаре, который произошел в XVI веке, и изменило первоначальный вид. В 60 годы «Темницу народов» превратили в музей. Замок считается памятником культуры. После реконструкции в казематах проводятся экскурсии, организовываются выставки, экспозиции, которые знакомят туристов с историей Шпильберга, с архитектурой города Брно. Летом во дворце проходят концерты, выступают артисты театра.