Крепость была построена в 3000 году до н.э. ионийцами, тогда Мармарис еще носил название Фискос. Если верить историкам, именно со строительства крепости в центре полуострова на холме, откуда возможен обзор бухты, началось развитие древнего города Фискоса. Крепость часто отстраивали. Последняя реконструкция крепости проводилась в 1522 году под руководством султана Сулеймана Великолепного после его удачной оккупации Родоса. Основными украшениями крепости служили башня, мощные зубчатые стены и пушки, которые охраняли бухту и город. Некоторые из пушек сохранились до наших дней.
Стараясь максимально воссоздать былое величие крепости, с 1979 года начали проводиться реставрационные работы. По решению Министерства Культуры крепость переоборудовали для музея. Внутренний дворик превратился в сад, который украшают яркие цветы и древние надписи со скульптурами. Около входа разместились фрагменты мраморных барельефов. Большую часть из 7 галерей музея используют в качестве выставочных залов для художников и скульпторов Турции. Помимо регулярных выставок, в музее-крепости нередко проходят культурные и художественные мероприятия. Здесь проводят уроки по истории края для школьников.