En el siglo XII se instalan los monjes cluniacenses en Santa María de Abajo de la desaparecida villa de La Cabeza. En estos momentos fue cuando cierto número de nórdicos o rubios europeos, venidos a la península para luchar contra el Islam, guerreros de Alfonso VII, se afincaron en este lugar (la villa árabe), pasando a llamarse Casas de los Rubios: Casarrubios del Monte.

Muy pronto empiezan a distinguirse estos primeros casarrubieros. Se lee en los archivos que López de Salcedo de Casarrubios y sus huestes se distinguieron con señalado valor en la batalla de Baeza el día de San Andrés de 1227. No es de extrañar que en su recuerdo se erigiera una iglesia-fortaleza que preservara el lugar de posibles ataques o razzias del Islam. Nace el templo de San Andrés en lo que hoy se conoce como El Campillo. Los monjes cluniacenses de Santa María de Abajo son reemplazados por Agustinos, quienes, a mediados del siglo XIV, se trasladarán a Casarrubios donde construyen su definitiva iglesia y convento de San Agustín junto al gran templo de San Andrés en 1388. Aquí permanecen ininterrumpidamente hasta la Desamortización de Mendizábal en 1835.