Tras varios intentos de fundación, la orden dominica, en 1639, fundó el primer convento en Cádiz y el lugar elegido fue el conocido como "del Boquete", donde los agresores angloholandeses, en 1596, habían arrojado la imagen de la Virgen. del Rosario. La construcción de este conjunto monástico se inició en 1645, con el apoyo económico del comerciante vasco Domingo de Munárriz.