Dal 1348 viene chiamato "grancia", ovvero luogo di raccolta e di smistamento di materie prime provenienti dai vari poderi del paese e destinate allo xenodochio senese. Nel corso dei secoli il complesso venne ampliato fino a raggiungere l'attuale strutturazione; era dotato anche di una torre, databile al 1350 circa e fortemente ispirata a quella del Mangia, che fu fatta saltare dalle truppe tedesche in ritirata il 30 giugno 1944. Nel 1775 la Grancia insieme ad altri beni dell'ospedale furono messi in vendita dal granduca Pietro Leopoldo; il fabbricato principale fu acquistato nel 1778 da Giacomo Mannucci. Presenta la facciata scenograficamente situata all'apice di una rampa. Il piccolo campaniletto merlato ospita la campana detta “Martinella”, che suona una volta all'anno, prima della Giostra di Simone. All'interno della Grancia si trova anche il piccolo teatro.

Accessibile a tutti, non sono presenti barriere architettoniche.