En 1739, según un informe redactado por el administrador del marqués de Elche, dentro de las
murallas del
castillo se encontraban la
iglesia de la
Virgen de Loreto y 29
casas donde residían 21
familias de soldados, pese a haber desaparecido ya el peligro pirata. En 1761 el Veïnatge d'Elx señala 15 soldados en el castillo y 26 vecinos de dicho castillo (unos 100 hab.), que habitaban la población que ya se iba formando alrededor del fuerte y que aparecía ya claramente definida en 1766 en un plano del "Lugar nuevo de
Santa Pola" en el que se señalaban unas tres docenas de casas además del cuartel.