La morfología urbana de Buitrago guarda estrecha relación con su circunstancia histórica. El núcleo más antiguo es "la Villa", es decir, la parte más alta dentro del recinto amurallado. La rápida saturación de este recinto dio lugar a la aparición de dos arrabales: uno al sur llamado San Juan y otro al norte, en la otra orilla del Lozoya, conocido como Andarrío. Esta estructura urbana que Buitrago mantiene hasta hoy estuvo plenamente consolidada en la Baja Edad Media. Las parroquias actuaron como hitos de referencia y elementos generadores de la trama urbana. En la Villa, la Iglesia de Santa María del Castillo, única que se mantiene de las cuatro que todavía existían en el pueblo en el siglo XVI.