In een landschapspark in het centrum van het dorp Scherpenzeel staat Huis Scherpenzeel met bijbehorende poortwoning en koetshuis. Dit oorspronkelijk versterkte huis dateert uit de middeleeuwen, uit de tijd dat er tussen de hertog van Gelre en de bisschop van Utrecht regelmatig strubbelingen voorkwamen. Het huidige witgepleisterde huis bestaat uit twee beuken met elk een zadeldak en trapgevel, wat het bouwwerk een symmetrisch karakter geeft. Het geheel is omgeven door een gracht en voorzien van een toegangsbrug. In de achtergevel bevindt is nog de veertiende-eeuwse toren te herkennen, waarmee de bouw van het kasteel begon.Scherpenzeel, strategisch gelegen op de grens van Gelre en het Sticht, werd in de loop der eeuwen herhaaldelijk heen en weer geslingerd tussen Utrecht en Gelderland. Vanaf de dertiende of veertiende eeuw was huis Scherpenzeel eigendom van de familie Van Scherpenzeel. Na 1636 waren respectievelijk de families Westerholt, Van Naamen en Royaards eigenaar.
