Az egykor itt állt vár bástyáját (lakótornyát) beépítették a mai, barokk stílusú palotába. A palota kápolnáját és dísztermét Maulbertsch freskói díszítik. Itt található az érseki könyvtár és kincstár. Az Érseki Kincstárban a kincsek mellett több ritkaság is található a középkorból, közismert a 13. századi vörös márványból készített "kalocsai királyfej".
A palotát Batthyány József érsek kezdte építtetni 1775-ben Oswald Gáspár tervei alapján. Utána Patachich Ádám érsek építtette a könyvtári szárnyat, ezzel megalapította a nevezetes főszékesegyházi könyvtárat. A könyvtár és kabinet faburkolata rokokó stílusú. A XVII. század utolsó évében született a nyugati szárny. A palota dísztermében áll többek között Liszt Ferenc zongorája, amelyen több hangversenyt adott.
Dísztermében és a kápolna mennyezetén barokk falképek láthatóak az 1783-1784-es évekből (F.A. Maulbertsch művei). A könyvtár és a kabinet faburkolata rokokó stílusú. Kertje védett természeti érték.
