Franjevački samostan Gospe osnovana je krajem 15. stoljeća, kada su franjevci stigli u Makarskoj i naselili izvan sela, u blizini crkve Svete Marije. U 1572, kada su Mlečani su sudjelovali u ratu s Turcima, samostan je pretrpio ozbiljnu štetu. Osta opet je uništen u ratu u 17. stoljeću, kada su Turci zapalili dio samostana s crkvom, a drugi dio je uništen u potresu 1667. godine.

Međutim, redovnici napustili samostan, čak i kada je obnovljena zgrada samostana nakon rata. Godine 1944. samostan je oduzet od strane vlade i pretvorena u wellness centru.

Nakon potresa 1962. stari dio samostana je uništeno, ali ubrzo oporavio. Kada je 1980. godine, zdravstveni centar preselio u novu zgradu, to je puno vremena prije nego što je samostan je vraćen sve zgrade. To se dogodilo tek 2002. godine. Sada je samostan muzej školjaka.