Pero comenzaron a tener malas relaciones con el cacique indígena, ante lo que Colón decide hacerlo prisionero. El cacique logró escapar y levantó a su pueblo en armas. Cuando se aprestaban a partir, dejando una guarnición de 20 hombres comandados por su hermano Bartolomé, unos 400 indígenas atacaron el fuerte, por lo que la tripulación de los barcos debieron prestar socorro a los habitantes del fuerte. Durante 8 días, los indígenas continuaron hostigándolos, por lo que Colón debió dar la orden de abandonar el fuerte.
El 16 de abril de 1503, zarpan de la barra del Belén con rumbo a Santo Domingo, abandonando el fuerte y una de las carabelas, que había quedado varada en la barra. En el camino, debido al mal estado del casco, abandonan otra carabela, por lo que la tripulación de las cuatro carabelas se reparten ahora en dos. El primero de mayo abandonan el abrigo de la costa y ponen rumbo norte. Diez días después llegan a Jamaica. El 25 del mismo mes, deben abandonar ambas naves y establecerse en la costa, donde residen por un año. En conjunto con los indígenas del lugar, deciden realizar una travesía en canoa hasta La Española, para pedir socorro. El viaje se hizo muy duro, pero logran llegar a la isla y solicitar ayuda al gobernador Ovando.
El 16 de abril de 1503, zarpan de la barra del Belén con rumbo a Santo Domingo, abandonando el fuerte y una de las carabelas, que había quedado varada en la barra. En el camino, debido al mal estado del casco, abandonan otra carabela, por lo que la tripulación de las cuatro carabelas se reparten ahora en dos. El primero de mayo abandonan el abrigo de la costa y ponen rumbo norte. Diez días después llegan a Jamaica. El 25 del mismo mes, deben abandonar ambas naves y establecerse en la costa, donde residen por un año. En conjunto con los indígenas del lugar, deciden realizar una travesía en canoa hasta La Española, para pedir socorro. El viaje se hizo muy duro, pero logran llegar a la isla y solicitar ayuda al gobernador Ovando.