In der noch eigenständigen Gemeinde Paunsdorf gründeten Einheimische um den ersten Vorsitzenden Karl Heinze am 9. April 1919 entlang des Lehdenweges den KGV. Der Name „Freiland“ könnte sich auf das einst noch frei liegende Areal beziehen. Von Ferne ist die Anlage gut zu lokalisieren aufgrund der Nähe zum Wasserturm. 1921 entstand das bewirtschaftete Vereinshaus. Zahlreiche Veranstaltungen fanden hier bis Ende der 1950er Jahre statt. Besonders der Kinder- und Jugendpflege fühlte sich der KGV verbunden. Auch Fachvorträge wurden abgehalten. Nach externen Nutzungen renovierten die Gartenfreunde ausgangs der 1990er Jahre einen Teil der Räume. Mit Gründung des KGV erfolgte auch die Wasserversorgung. Anfang der 1980er Jahre verlegten die Gartenfreunde Elektrokabel im Vereinsgelände und in ihre Parzellen.