La fortaleza fue diseñada por el arquitecto italiano, Giovanni Battista Cairatti, quien fue el arquitecto jefe de las posesiones portuguesas en oriente, el maestro de obras fue Gaspar Rodriguez. Cubre una superficie de 2.36 hectáreas, que incluye el foso y sus alrededores.
La planta del fuerte sigue la forma de un cuerpo humano. Está rodeado de una enorme muralla con foso. Tiene cuatro bastiones: San Mateo, San Matías, San Alberto y San Felipe. Su diseño resistía los posibles ataques de cañones de esa época. Eres una construcción a la vanguardia de la ingeniería militar del momento.
En la parte alta de la muralla hay almenas y también nichos o arcos, para el disparo de cañones y otros para rifles. Hay un área en ruinas donde estuvo la iglesia y las barracas. Más adelante la zona de los baños. La Casa Omani, de dos pisos, está buen conservada. Se exhiben unos murales realizados por soldados entre 1634 y 1639. Se han restaurado y movido del lugar original, para su conservación. Son figuras de barcos de diverso estilo. En diversas pares del edificio hay puertas del estilo Omani. El patio central, el torso y pies de la figura humana, es de grandes dimensiones.
