La chiesa è situata appena fuori dalle mura urbiche, dove secondo la tradizione si fermò un carro trainato da due buoi chianini con la salma del Beato Giacomo Villa, un importante personaggio della storia e della tradizione pievese. Nato a Città della Pieve nel 1270 studiò legge e divenne avvocato dedicandosi alla difesa dei poveri e degli oppressi per questo conosciuto anche come il “martire della giustizia” o “Elemosiniere”.
Qui sono conservate le sue spoglie è vi è un dipinto realizzato da Pomarancio che lo raffigura in ginocchio, supplicante la Vergine Maria seduta tra nuvoloni grigi e cupi simbolo di pestilenza. Sullo sfondo una città richiamante Città della Pieve.

La chiesa conserva un ricco interno barocco, a pianta ellittica, che rimanda ad atmosfere borrominiane.