Den naturliga bukten var länge en populärt tillhåll för valfångare.