A Schmall Henrik által tervezett neogótikus épület 1901-1902-ben épült. Eredeti funkcióját tekintve püspöki jószágkormányzóság volt. A megyei könyvtár 1968 óta használja az épületet. Az utolsó nagy felújítása és korszerűsítése 1996-1998 között történt, ekkor nyerte el mostani formáját. 2023-ban egy korábban használaton kívüli, rossz állapotú helyiség átalakításával Zug néven megnyílt egy új fiatalos tér, benne közösségi irodával és podcast helyiséggel.