Nel 1834, Augustus Smith fece costruire una dimora in stile neogotico vittoriano, utilizzando le pietre dell'isola e le assi delle imbarcazioni naufragate. Creò inoltre questo giardino a partire da piante e semi originari del Mediterraneo e delle isole Canarie. I suoi successori estesero la collezione. Dalle terrazze si gode una vista magnifica sui giardini e sul mare.