Il castello fu costruito nel 1442 con una funzione difensiva per gli abitanti del paese. Fino al 1350 Ugolino VIII Trinci aveva eretto a Pale una fortezza con mura poderose, probabilmente ampliando ciò che c’era di più antico. All’interno accanto all’antica cartiera c’è la piccola Chiesa di S. Andrea con elegante facciata in cotto (fine XVII secolo).
0