Situada cercando el foro romano, la Torre de la Yerba es una construcción de tapial (adobe prensado) de origen árabe. Al igual que otras muchas construcciones del conjunto histórico de Cáceres está levantada sobre sillares romanos. Está unida por un lienzo de pared a la muralla, lo que mejoraba su defensa.
Data del siglo XII y es una de las últimas construcciones que nos dejó el pueblo árabe antes de la conquista de la ciudad por las tropas del rey Alfonso IX de León.