Het huis werd gebouwd door een prominente familie uit Sarajevo, de Glođos, waarvan een lid kadi was - islamitische rechter-administrateur - Munib effendi Glođo, beroemd om zijn betrokkenheid bij de strijd van Bosnië voor autonomie binnen het Ottomaanse rijk. Het gezin faalde wegens gebrek aan een mannelijke erfgenaam, en het bezit ging door huwelijk over naar een andere prominente familie Sarajevo, Svrzo. Svrzo’s huis is een typisch voorbeeld van de architectuur van die periode, met zijn indeling in de selamluk of openbare vertrekken en de haremluk of particuliere, familiekamers. Het werd gekocht van de familie Svrzo, gerenoveerd en voor het publiek geopend in de jaren zestig. Na de belegering van Sarajevo werd het huis gerenoveerd en opnieuw geopend voor het publiek in 1997. Verdere ingrijpende renovaties werden aan het huis uitgevoerd in 2005, toen het dak werd gerepareerd, de kasseien werden afgelost, verouderde service-installaties werden vervangen en de de geverfde decoratie op de musandera (ingebouwde kasten) in de halvat (salon), die door de jaren heen was vervaagd, werd hersteld. Het museum heeft een tweetalige - Bosnische en Engelse - monografie gepubliceerd over het huis van Svrzo.