Фортеця розташована на стародавньому кораловому рифі, що є конусоподібною горою (Киз-Кулле-Буру). Більшість будівель Судацької фортеці, що збереглись до наших днів, належать генуезькому періоду, тому її іменують «генуезькою».