Luksusowa willa wzniesiona została według projektu Hilarego Majewskiego, na zlecenie Rudolfa Kellera.
Był to imigrant z terenów pruskich, który początkowo, w roku 1882, wzniósł na tej parceli zabudowania fabryki wstążek, tasiemek i koronek. W 1907 roku, wraz z przylegającą fabryką, pałac został sprzedany Emilowi Eisertowi, a od 1922 do wybuchu wojny był własnością „Spółki Akcyjnej Emila Eiserta i Braci Schweikertów”. W okresie PRL przez wiele lat w pałacu mieścił się przyzakładowy żłobek Zakładów Przemysłu Pasmanteryjnego „Lenora” (d. fabryki Kellera).
Po roku 1989 został zlikwidowany, a obiekt kupiła włoska spółka prawa handlowego. Na początku 2005 pałac wyceniany był na kwotę 400 tys. euro. W 2008 obiekt nabył amerykański aktor z zamiarem przeprowadzenia kapitalnego remontu budowli i uruchomienia w niej pensjonatu.
W nocy z 31 marca na 1 kwietnia 2010 w niszczejącym od lat zabytku wybuchł pożar, który pochłonął część dachu oraz uszkodził charakterystyczną wieżyczkę. Do listopada 2014 plany remontu nie zostały zrealizowane, a właściciel od połowy 2012 próbuje sprzedać zniszczony w coraz większym stopniu obiekt.
