W 1818 r. na szczycie wzgórza Ziegelberg został wybudowany domek winny, na użytek przemysłowca Augusta Gremlpera - właściciela słynnej zielonogórskiej fabryki win i szampanów.
W 1956 r. do domku dobudowano szklany pawilon z egzotyczną roślinnością, następnie (w 1961 r.) otwarto kawiarnię i restaurację Palmiarnia.
W związku z ciasnotą w 1964 r. dobudowano skrzydło od strony ul. Podgórnej, zaś w 1968 r. kolejne od południowego-wschodu.
Wzrost roślin wymógł przebudowę (podwyższenie) konstrukcji, która została wykonana w 1985 r. Z tej samej przyczyny w latach 2006-2008 wykonano koleją przebudowę do formy, która widoczna jest dzisiaj.