Castel dei Fabbri è un agglomerato fortificato di origine medievale posto su un rilievo a circa 600 m s.l.m. in sinistra idrografica della stretta valle del Torrente Auro.

La storia di Castel dei Fabbri, come quella del limitrofo borgo di Palazzo Mucci, è legata a quella dei vicini castelli medievali che formavano il vicariato di Lamoli all'epoca in cui esisteva la "Provincia" di Massa Trabaria.
Tali castelli, prima contesi dal duca di Urbino, poi minacciati dai Brancaleoni, furono infine riconquistati dalla Chiesa.

Del piccolo borgo sono ancora visibili la vecchia torre di guardia ed i resti della cinta muraria, a difesa del vicino palazzo Mucci.
Degna di nota è la piccola Chiesa di San Bartolomeo, con il suo bel portale scolpito in pietra arenaria risalente al 1426. La chiesa è in rovina, col tetto crollato (SACCO, 2007). All'altare maggiore si trova un affresco di scuola mercatellese del XIV secolo, raffigurante la Crocifissione.