Parte da história deste monumento arqueológico está intimamente ligada à povoação de Vila de Frades. A povoação nasceu da paróquia de São Cucufate, em 1255. Pertencia ao Mosteiro de S. Vicente de Fora em Lisboa, que recebeu do rei D. Afonso III a doação do edifício e terras circundantes da antiga villa romana.

Perto de Pedrógão podem ser admiradas vários monumentos rochosos que datam da época pré-histórica também conhecida como período da pedra lascada. São vestígios da existência humana nesta região, que sobreviveram a milhares de anos de alterações climatéricas e geográficas.