Badia Agnano sorge nella parte più elevata di una modesta collinetta affacciata sulla valle della Trove. L’abitato sorge quasi totalmente su pochi resti dell‘antico castello, del quale si distinguono solamente pochi dei suoi resti, quali la cinta muraria e una porta di ingresso. L’origine della Badia di Agnano viene data intorno all’anno Mille, legata soprattutto alla nobiltà feudale toscana. Nel XI secolo la Badia ebbe una nuova fondazione, dopo essere stata originata dai benedettini susseguirono quelli dell’ordine camaldolese, la quale ampliò in poco tempo tutto il patrimonio fondiario e il controllo su numerose chiese in un ampio territorio che oltre la Valdambra interessava il Valdarno, la Valdichiana e il senese.