Kannawurf gehörte im 15. Jahrhundert zum Amtsgebiet Sachsenburg, das sich im Eigentum der Thüringer Landgrafen und der Herzöge von Sachsen befand.
Georg II. Vitzthum von Eckstädt, aus einem alten und weit verzweigten thüringischen Adelsgeschlecht stammend, war als Marschall in Diensten Herzog Georg von Sachsen tätig und erhielt Kannawurf als Lehen. Und so erscheint es als geradezu folgerichtig, dass sich die jetzige Schlossanlage, zwischen 1560 und 1570 unter Einbeziehung von Resten eines Vorgängerbaues erbaut, an sächsischer Residenzarchitektur der Renaissance wie z. B.an dem um 1547 begonnen Dresdener Schloss orientierte. Der Bauherr wählte in Kannawurf den im 16. Jahrhundert beliebten Kastelltyp und ließ eine dreigschossige Dreiflügelanlage mit den charakteristischen Ecktürmen und Zwerggiebeln errichten. In den historischen Räumen befindet sich unter anderen der repräsentative Festsaal mit Resten bauzeitlicher Farbfassungen.
Von besonderem kultur- und gartenkünstlerischem Wert ist die von Landpfarrer und Gartengestalter Johann Peschel entworfene GARTEN-ORDNUNG, die er 1597 dem Schlossherren Georg V. Vitzthum widmete und die als eine Art Musterbuch bei der Anlage von Renaissancegärten zu verstehen ist. Das als ältestes europäisches Gartenbuch bewertete Werk dient den heutigen Schlossherren, dem Künstlerhaus Thüringen e. V., bei der Neugestaltung des Gartens als Anregung und ist nicht als Rekonstruktion der historischen Anlage zu verstehen.
Der Verein hat in den letzten Jahren bei der Sanierung und Restaurierung des Schlosses Unglaubliches geleistet und dabei Menschen mit Ideen und Visionen an diesem besonderen Ort vereint einschließlich der kleinen Kommune.