Holzhau befindet sich im oberen Tal der Freiberger Mulde. Zudem befindet sich in dem Ort der Endhaltepunkt der Freiberger Eisenbahn, welche den Abschnitt erst seit einer Sanierung im Jahr 2000 wieder in Betrieb genommen hat.