Rione Montecavallo era la zona del paese occupata dai Colonna ai tempi delle lotte con la famiglia Orsini.
Si tratta di un rione molto caratteristico, ricco di Palazzi nobiliari antichi con portali in travertino. In via Montecavallo 2 vi è Palazzo Palica o Castellani, con due piccole teste di marmo bianco di epoca romana murate sopra due porte. Al civico 9 si trova invece il seicentesco Palazzo Palma, con portale sul cui architrave figurano due colombe con palme di olivo nel becco. Al civico 16 un altro palazzo interessante: il cinquecentesco Palazzo Orsini.
In questo rione si trovano inoltre due delle tre chiese di Toffia: la Chiesetta della Madonna di Loreto o Santa Maria in Criptula (oggi Grottuccia) e la Chiesa di Santa Maria Nova.
In un angolo di Piazza Lauretana troviamo il Marmo di Piazza, una grossa pietra di epoca romana proveniente presumibilmente da un sepolcro lungo la Salaria.
La parte più antica del borgo è Via Castel di Dentro, scelta da Teobaldo per la costruzione del Castello. Al civico 18 vi è Palazzo Gabrielli, dotato di una sala delle torture e di un pozzo con trabocchetto: è stato la residenza dei vescovi sabini per circa 60 anni, dopo la distruzione della sede originaria di Fornovo. Al civico 14 un altro palazzo, Palazzo Castellani.
