Historie tohoto domu sahá až do druhé poloviny 15. století. Dům zvaný Špulířovský koupil v 16. století Petr Vok z Rožmberka. Petr Vok zakoupil také dva sousední domy, spojil je v jeden architektonický celek a vznikl tak pohodlný palác, určený k četným pobytům Petra Voka v Soběslavi. Krátce před smrtí odkázal Petr Vok tento dům někdejší služebnici a společnici zesnulé manželky Petra Voka Kateřiny Rožmberské z Ludanic Zuzaně Vojířové. Již od roku 1904, kdy Rožmberský dům zakoupilo město pro někdejší městské muzeum (založené 1898) slouží tento zajímavý objekt nedaleko náměstí muzejním účelům. V současné době je v Rožmberském domě umístěna stálá expozice Příroda Táborska.
