Na podlagi starodavnih običajev njihovega reda so konventualni frančiškanski menihi zgradili svojo cerkev in samostan na najlepšem položaju Visa in ga na začetku 16. stoletja posvetili dalmatinskemu zavetniku, svetemu Jeronimu. Zunanjost cerkve je okrašena z renesančnimi elementi tega obdobja. Samostan ima nenavadno, nagnjeno in delno polkrožno obliko, saj je bil zgrajen na lokih in na zunanji steni avditorija rimskega gledališča. Del avditorija lahko vidimo v samostanskih kleteh in na njegovi severni zunanji steni. Terasam in renesančnemu in baročnemu zvoniku so dodali neoznačeno stavbo z majhnimi poznejšimi obzidanimi kragarskimi okni, ki niso imela prostorov ali samostanskih postav. Uporaba ostankov rimskega gledališča, velik vrtni prostor in namen, da bi bila cerkev dostopna za čolne iz morja, so pogojevali nenavadno razdaljo med cerkvijo in samostanom z njenim zvonikom.