Hørbygaard Kendes første gang fra ca 1320 hvor Esben Tuesen nævnes som ejer af Hørbygaard. Kirken nævnes første gang i 1200tallet. I middelalderen er der en lang række ejerere, men Hørbygaard overgår ca 1420 til Roskilde Stift. Ved reformationen tager Kronen Hørbygaard og ejendommen gives til fortjeneste til en række ejere og familier. Den sidste er lensbaron van der Lühe der tilsyneladende var en dygtig hofmand men uden megen interesse