I conti ("Thanes") di Cawdor costruirono il castello e vi abitarono a partire dal XIV sec. Cawdor Castle tuttavia conobbe molte aggiunte ulteriori e diverse trasformazioni. Dal ponte levatoio, lo sguardo abbraccia la torre centrale del XIV secolo e le ali a destra del XVII secolo. Tre giardini ornano i luoghi: il Walled Garden serve da orto; il Wild Garden mescola varie essenze di tutte le origini; il Flower Garden svela tutto il proprio splendore all'inizio della primavera o alla fine dell'estate.