A püspökvár központi részén lévő középkori palota a 16. századi ostromok, majd a 17. századi fejedelmi építkezések áldozatává vált.
1692 után a Sebes Körös jobb partján, Váradolaszi városrészben épült fel az újkori püspökség első székháza (az épület ma már nem létezik). A kisméretű, a kor viszonyaihoz mérten is szerény épületet az 1740-es években az Újváros nevű városrész központjában felépített új püspöki rezidencia váltotta fel. Ezt az épületet 1778-tól a katolikus főgimnázium és a királyi akadémia vette birtokba. A 20. század legelején bontották le, helyén épült az impozáns városháza.
A birtokait, jövedelmeit visszaszerző püspökség reprezentatív, barokk stílusú palotája Franz Anton Hillebrand bécsi építész tervei alapján 1762–1776 között készült el.
A második világháborút követően (1948-ban) az államhatalom lefoglalta, és különböző intézmények használatában volt a legutóbbi időkig. Újbóli birtokbavétele utáni felújítása, hasznosítása a főhatóság egyik legfontosabb feladata.