Stara, średniowieczna miejscowość Rychwałd, w 1810 roku zakupiona została przez Stanisława Milieskiego. Niedługo potem, bo w roku 1814 majątek przejął Walenty Milieski. On to, w 1830, wzniósł w Rychwałdzie dwór, według projektu architektonicznego Bogumiła Trennera. W rękach rodziny Milieskich (Alfreda, a od 1908 r. Witolda) tutejszy majątek pozostał do roku 1940, kiedy to został skonfiskowany przez niemieckich okupantów. Rok 1945 przyniósł początek stopniowej dewastacji. W PRL dwór użytkowany był, kolejno, przez Spółdzielnię „Iskra” z Łodygowic, Stację Nasiennictwa z Krzeszowic, Wojewódzkie Przedsiębiorstwo Komunikacyjne z Katowic, a wreszcie przez kopalnię „Budryk” z Ornontowic, która, co trzeba przyznać, wreszcie podjęła jakieś prace remontowe. Zespół dworsko-parkowy znajduje się w południowej części miejscowości, na wysokości ok. 450 m n.p.m., u podnóży lesistego wzniesienia o nazwie Łyska (640 m n.p.m.). Dwór, utrzymany w stylu klasycystycznym, otoczony jest dwuhektarowym parkiem ze starodrzewem. W 2002 roku budynek zakupiony został przez prywatnych właścicieli, którzy po remoncie i modernizacji, urządzili w nim bazę wypoczynkową z noclegami i gastronomią. W położonym wśród beskidzkich krajobrazów, odrestaurowanym zespole dworsko-parkowym istnieje także możliwość organizacji imprez rodzinnych, szkoleń, konferencji, spotkań integracyjnych, kolonii. Na terenie ośrodka, oprócz 96 miejsc noclegowych oraz restauracji, znajdują się między innymi korty tenisowe, boiska, sauna i letni basen.