Su construcción, sin remontarnos a etapas anteriores, debió realizarse en torno a la primera mitad del siglo XIII.

Los Caballeros Templarios construyen sus muros hasta el punto que ya en 1283 se hace mención expresa del castillo jerezano, e incluso, de dos maestres templarios.
Pero el trabajo templario desaparece con la extinción de la orden en 1312 y sus posesiones pasan a la corona castellana.