Дворец (Palazzo а Маге) представляет собой любимую морскую виллу Августа, построенную в районе Марина Гранде. Зодчим дворца, но всей вероятности, был выдающийся придворный мастер Масгаба, которому принадлежит большинство каприйских сооружений императорской эпохи.
Ансамбль палаццо, в основе композиции которого лежали традиционные архитектурные формы такого рода строений, занимал обширный район, спускаясь террасами к морю. Вероятно, он содержал жилые апартаменты, службы и приморскую часть, к которой вели ступени. Последняя состояла из нимфеев, купален, небольшого причала и цистерн для рыбоводства.
В состав виллы входили также гигантские резервуары для воды и обширные сады, простиравшиеся до территорий, занятых ныне спортивными площадками. От морской секции виллы остались внушительные развалины, т.н. Термы Тиберия, от других участков — практически ничего. Во многом исчезновение построек произошло по вине австрийского коммерсанта Норберта Хадравы, который, получив разрешение от Фердинанда Бурбона, на рубеже XVIII-XIX вв. вывез отсюда 14 тонн античных мраморов и произведений искусства, частью ставших музейными экспонатами, частью ушедших на отделку новых построек и даже на изготовление извести. Кроме того, английские и французские военные в начале XIX в. сравняли с землёй парковую зону виллы с целью устройства здесь плаца.