Het voormalige Rijks HBS is met drie vleugels om een binnenplaats gebouwd in Neogotische stijl van 1887-1889. De ingang ligt op de hoek van het Mgr. Nolensplein en de Sint Martinusstraat op de plek van de oude stadsmuur, welke overigens zichtbaar is gemaakt op de binnenplaats.
Het complex is na opdracht van het Rijk in 1880 in twee fases tot stand gekomen. De vleugel aan het Mgr. Nolensplein en aan de Sint Martinusstraat vormen de kern van het gebouw en zijn gebouwd tussen 1887-1889. Na toestemming van de minister is in 1914 een nieuwe vleugel gerealiseerd welke dwars staat op de vleugel aan de Sint Martinusstraat. De architect van de school was Rijksbouwmeester J. van Lokhorst.
In de tweede wereldoorlog werd het gebouw gevorderd door de Duitsers. Na afloop van de oorlog heeft het gebouw een periode van leegstand en kantoorfunctie gekend. In 1993 is de Rijks HBS ingrijpend gerenoveerd en verbouwd tot appartementen.