August Sedláček befand sich in Žihobce wahrscheinlich bereits im 14. Jahrhundert ein Fort, das den Gutsherren von Žihobce gehörte. In den Jahren 1350 - 1368 wird Racek von Žihobce als Mitpatron der Kirchen in Bukovník und Kadov schriftlich erwähnt. Die lokale Pfarrchronik vom Ende des 18. Jahrhunderts belegt, dass "bei einer Belagerung der Burg Rabí der Feldherr Žižka die Besitzer und Priester aus Žihobce ermorder und das dortige Fort entwurzelt habe".

Über den Besitz der Liegenschaften von Žihobce verfügten mehrere Gutsherren, unter ihnen z.B. Familie Koc von Dobrš, Familie Lokšan sowie der Abenteurer und Soldat Martin de Hoef Huerta. Ende des 17. Jahrhunderts lies Ferdinand Iselin, Freiherr von Lanau, in Žihobce ein Barockschloss erbauen, das sich bis heute erhalten hat. 1710 ging die Gemeinde schließlich in den Besitz der Fürsten von Lamberg über und wurde an deren Herrschaftsgut in Rabí und Žichovice angeschlossen.

Lamberg ist der Name eines alten Kärntener - Krainer Geschlechtes, dessen Ursprung sich bis zum Anfang des 13. Jahrhunderts zurückverfolgen lässt. Wenige Jahre vor seinem Tode erwarb der Fürstbischof von Passau, Kardinal und Diplomat Johann Philipp von Lamberg (1651 - 1712), Ländereien in Südwestböhmen, darunter auch Rabí, Žichovice und Žihobce. Aus der Adelsfamilie Lmaberg wurde jedoch - wohl dank dem Buch "Fürstin Káča" (Fürstin Kathi) des in Žihobce geborenen Mittelschulprofessors František Procházka - Gustav Joachim (1812 - 1862 der bekannteste, der den Landbesitz im Vorwald des Böhmerwaldes bewohnte und mit dem Deutsch schreibenden Schriftsteller Adalbert Stiefter befreundet war.Der Fürst Gustav Joachim verliebte sich in ein anmutiges Mädchen aus dem Dorf namens Kateřina Hrádková (1824 - 1889), Tochter eines Schaffers aus Čejkovy. Trotz dem Widerwillen der Verwandten zog er mit seiner Geliebten in die Schlösser in Žichovice und Žihobce und hatte mit ihr neun Kinder. Der Fürst war bei den Landleuten sehr beliebt und als Wohltäter bekannt. Kateřina wurde vom Volk "Fürstin Káča" ("Fürstin Kathi") genannt. Sie war eine intelligente Frau und genoss eine umfassende Ausbildung einschließlich Fremdsprachen. Das Verhältnis zu Kateřina versuchte der Fürst zu legalisieren und heiratete sie 1855. Zu dieser Zeit wurde Kateřina bereits hinlänglich von der aristokratischen Gesellschaft akzeptiert und die Entscheidung des Fürsten daher bewilligt. Nach der Hochzeit wurde ihr letztes und zehntes Kind geboren. Unter den zehn Nachkommen Gustavs befanden sich acht Söhne. Erst nach der Heirat der Eltern wurden sie legitimiert und als Grafen von Lamberg anerkannt.

Das Zentrum der Gemeinde Žihobce wird von einem Schloss und einer Kirche geprägt. Das Schloss - ein frühbarockes einstöckiges Gebäude längsrechteckigen Grundrisses mit einem erhöhten Erdgeschoss und leicht hervorragenden Seitenrisaliten - beeindruckt mit der Gestaltung seiner Fassade und einer markannten Inschrift auf einer Steinplatte aus dem Jahre 1688. In den Innenräumen sind zahlreiche, ursprüngliche Tonnengewölbe sowie Spiegelgewölbe zu sehen, die unterhalb der Scheitellinie von Plafondmalereinen geschmückt werden. Die Parkanlage hinter dem Schloss trägt bis heute lesbare Spuren der Pflege ihres gebildeten Gründers, dem Fürsten Gustav Joachim von Lamberg.