Első földesura Apponyi György, 1927-ben Apponyi Károly örökli az uralmat, aki 1928-ban építette meg a pálfai kastélyt azzal a szándékkal, hogy majd a környék lovaglásra alkalmas teret biztosít számára.
A kastélyt jelenleg a Tolna megyei Önkormányzat üzemelteti, 1954-től egészségügyi gyermekotthonként működik, majd rehabilitációs intézet és fogyatékosok otthona. Forrás