Junto a la barroca iglesia de San Miguel, de la que tanto se ha hablado y escrito a lo largo de la historia, se encuentra el Convento de San José de la orden de las Clarisas Descalzas. La presencia omnipotente de la parroquia contrasta con la sencillez y sobriedad de la portada monacal que pasa desapercibida para el transeúnte. Esta se compone de una sencilla puerta rectangular con un pequeño escudo de la Orden y una placa moderna con el nombre del cenobio jerezano como únicos elementos identificativos.
Tras el zaguan, se abre el atrio de la iglesia, un pequeño espacio cuadrado. Este presenta galería porticada en dos de sus lados, con arcos que apean sobre columnas toscanas de mármol blanco. A pesar de la abundante ornamentación de tipo vegetal, el compás es el mejor reflejo de la pobreza en la que se desenvuelve la vida de las religiosas. Pobreza que es uno de los pilares de la "Primera Regla de la Orden de Santa Clara", a la que siguen las religiosas jerezanas, y que había sido redactada por la propia santa y aprobada el 9 de agosto de 1253 por el Papa Inocencio IV, dos días antes de la muerte de la fundadora. Desde la entrada se observa el torno, donde se pueden adquirir los dulces de las hermanas y junto a este la puerta que nos introduce en el locutorio.
Las dependencias monacales se organizan en torno a los patios, siendo en el claustro principal donde más claramente aparece reflejada la actitud protectora que los patronos han dispensado al convento, pues su organización y decoración recuerda al patio que los Ponce de León tenían en su palacio sevillano.
Pero el mayor énfasis y preocupación de los patronos fue la decoración de la pequeña iglesia de la comunidad, que se convertiría en sede del panteón familiar. Junto al presbiterio, aún se observa la lápida sepulcral con los escudos de las familias de la Cerda y Ponce de León, en la que se puede leer "Aquí yace el señor don Luis Ponce de León, Marqués del Castillo del Valle, marido de la señora doña Isabel de la Cerda, Marquesa de dicho título, patronos de este convento".