Die Gemeinde Varvažov liegt etwa 6 km südöstlich von Čimelice und etwa 13 km nördlich von Písek, am Fluss Skalice, in der 426 m Seehöhe.

Varvažov war ein Bestandteil des Eigentums vom Malteserritterorden. Hier gab es ein Gut und ein Schloss, bei dem 1734 die Kaplanstelle gegründet wurde. Seit 1847 war es im Besitz der Herren von Schwarzenberg.

In der Gemeinde steht das Barockschloss aus dem 18. Jh. In seiner Nachbarschaft befindet sich die frühgotische Kirche St. Katharina aus dem 13. Jh., deren Architektur vereinzelt ist.
Zu den Sehenswürdigkeiten gehört auch die Steinbrücke über den Fluss Skalice aus dem Jahr 1781.

Nicht weit von der Gemeinde liegt am Zusammenfluss von Lomnice und Skalice das Schutzgebiet "V Obouch".