Los jardines se extienden sobre terrenos próximos al borde de un acantilado en una zona particularmente bella de la Costa Brava. Su construcción se inició en 1927 por el Dr. Raúl Roviralta, con la colaboración de Nicolás María Rubió i Tudurí, que supo sacar provecho de la privilegiada situación, utilizando con gran acierto las fuertes pendientes y la accidentada topografía inicial. Desde la explanada de la casa se establecen tres grandes ejes visuales, siendo el más importante una gran escalera verde con esculturas de sirenas de María Llimona. Todos los caminos, paseos, plazoletas y escaleras se definen por setos recortados que forman una espléndida arquitectura verde.