A antiga casa de vinhedo no Parque do Ilm, provavelmente construída por volta do final do século XVI, foi a primeira casa adquirida por Johann Wolfgang Goethe em Weimar em 16, poucos meses após sua chegada a Weimar, juntamente com o jardim circundante. A compra foi financiada pelo duque Carl August de Saxe-Weimar-Eisenach. O Gartenhaus era a principal residência e local de trabalho de Goethe até que ele se mudou para a Frauenplan em junho de 1776.
Ele trabalhou para o Conselho Privado, a autoridade governamental mais alta do Ducado, e desempenhou outros cargos a ele confiados a partir daí. Grande parte de suas obras literárias que datam desse período também foram escritas lá, incluindo a balada do Erlkönig e o poema À Lua.
Casa Gartenhaus de Goethe (casa de verão).
Depois de comprar a casa, Goethe começou a consertá-la e redesenhar o jardim imediatamente. Ele a dividiu em três partes que ainda hoje são reconhecíveis: a encosta parecida com um parque atrás da casa, o pomar ensolarado e a parte inferior do jardim onde se encontram os canteiros. Além de abastecer a família com frutas e verduras, a horta também foi palco de eventos sociais.
Depois de se mudar para a Frauenplan, Goethe fez apenas visitas ocasionais à propriedade. Quando chegou à velhice, o Gartenhaus voltou a ser um importante refúgio onde poderia trabalhar sem ser incomodado. Em 1830, Goethe mandou construir o clássico portão branco do jardim e os mosaicos de seixos dispostos de acordo com o modelo de Pompeia.
Casa Gartenhaus de Goethe (casa de verão).
Após a morte de Goethe, o Gartenhaus tornou-se local de peregrinação de seus admiradores, tendo sido aberto ao público como memorial em 1886. Desde a restauração em 1995/1996, o interior volta a brilhar com as cores escolhidas por Goethe.