Il paesaggio si fonde con la vista di due antichi castelli che sovrastano il borgo, Radi di Montagna (anno 1130) e Palazzo al Piano (anno 1270), e con i vicini insediamenti medievali che ci riportano ad un prestigioso passato. Il Borgo risale all’anno 1330 e la sua storia si può considerare degna di nota per l’importante costruzione ricca di antichi interventi architettonici. Da ricerche storiche rileviamo che nell’anno 1380 la parte più vecchia era l’avamposto del castello di Palazzo al Piano, posseduto dall’inizio del 1300 da Giacomo di Andrea Tolomei esponente di un’antichissima famiglia patrizia senese, le cui origini risalgono alla spedizione italiana di Carlo Magno. Alla fine del 1770, l’intera proprietà passò ai Chigi Conti D’Ardenghesca, i grandi signori di castelli della maremma senese, che furono insigniti in Roma del titolo di Principi del Sacro Romano Impero (anno 1659).

In principio il castello di Palazzo al Piano fungeva da fortilizio di difesa del comune di Pieve a Molli; in seguito Il Poggiaccio fu adibito a dogana e vi si controllavano merci e persone in transito, facendo pagare la famosa Gabella, e da ciò ne scaturisce la sua denominazione spregiativa. Il Poggiaccio fu in seguito un piccolo borgo autosufficiente che, come tale, disponeva di una propria scuola, una bottega del fabbro, una bottega del falegname e una bottega del fornaio ecc.