Museum Terra Maris is gevestigd in de orangerie van Kasteel Westhove, dat gelegen is in de Manteling, een prachtig natuurgebied tussen Domburg en Oostkapelle. Het kasteel werd in een oorkonde van 1277 van graaf Floris V vermeld als zijnde eigendom van de abdij te Middelburg, maar het is niet duidelijk hoe oud het kasteel toen was. In de 2,5 grote Landschapstuin van het museum is een reconstructie van een 12e -eeuws Mottekasteel gebouwd.