Chounradus de Hirzperch wird im Jahr 1180 zum ersten Mal in einer Urkunde genannt. Sein Geschlecht stirbt wohl schon um 1200 aus, danach geht die Burg an die Grafen von Grögling bei Dietfurt, deren Ministeriale er wohl war. Die Grafen waren in Dollnstein bei Eichstätt und Ottenburg bei Eching begütert und Stiftsvögte des Bistums Eichstätt. Erster Vertreter war Hartwig, der 1068 starb. 1129 gründete Gebhard (II.) von Grögling und Ottenburg, Bischof von Eichstätt, zusammen mit seinem Bruder Graf Ernst das nahe Kloster Plankstetten. 1188 erbten die Gröglinger einen Teil der umfangreichen Besitzungen der Grafen von Sulzbach, dazu kommen zeitweise Ländereien in der Grafschaft Tirol im Pitztal, Wipptal und oberen Inntal. Ab 1205 nannte sich das mächtige Geschlecht nach ihrer neuen Burg in Hirschberg.
Im 13. Jahrhundert ergaben sich aus der engen Verzahnung der Hirschberger mit dem Bistum Eichstätt immer wieder handfeste Streitigkeiten um Steuereinnahmen und Richterämter, so zum Beispiel die Belagerung der bischöflichen Burg Nassenfels 1245, bei der Graf Gebhard VI. ermordet wird. 1305 stirbt der letzte Graf Gebhard (VII.), seine Besitzungen vermacht er dem Hochstift Eichstätt. Die Bischöfe nutzen in der Folge Hirschberg als Jagdschloss und bauen es später zur barocken Residenz aus. 1632 brennen die Schweden das Schloss nieder, es wird wieder aufgebaut. Ab 1760 dann Ausbau zum Rokoko-Schloss durch Fürstbischof von Strasoldo. Sanierung 1992, seitdem Bistumshaus.
Beschreibung
Die große Anlage hat heute noch viele mittelalterliche Teile zu bieten: eine ausgedehnte spätmittelalterliche Vorburg, einen tiefen, ausgemauerten Graben und den Eingangsbereich der hochmittelalterlichen Grafenburg. Beeindruckend sind vor allem die beiden Türme aus Buckelquadern mit später aufgesetzten gotischen Treppengiebeln, heute das Wahrzeichen Hirschbergs. Vor allem der bullige rechte Torturm mit den beiden halbrunden Ausbuchtungen an der Basis ist außergewöhnlich - eine Mischung aus Bergfried und Torturm. Der gedrungene Torbau ganz rechts stammt aus einer späteren Bauphase im 14. oder 15. Jahrhundert, als der Eingang dorthin verlegt wurde - wohl weil der Durchgang im Bergfried zu schmal war.
Die Kernburg, von der nichts übrig geblieben ist, bestand aus einem runden Wohnturm und einem riegelartigen Palasgebäude. Sie wurde im 18. Jahrhundert durch das große dreiflügelige Rokokoschloss ersetzt.
