До начала XVII века на скалистом острове стояли рыбацкая деревушка и две церкви. В 1632 году маркиз Карл III Борромей приступил к строительству на острове роскошной загородной резиденции[1]. Это был подарок для его жены Изабеллы, или Беллы (отсюда название). Поначалу строительством заведовал Анджело Кривелли, а заканчивал строительные работы Карло Фонтана.

В течение XVIII века уединённая резиденция и театр при ней манили на остров аристократов со всей Европы. Здесь гостили английские лорды, Наполеон и Жозефина, историк Эдуард Гиббон. Рассказывают, что Каролина Великобританская была настолько очарована дворцом, что просила его владельца Джиберто Борромея продать ей остров и, только получив отказ, приняла решение обосноваться на вилле д'Эсте в Черноббио.