Del Castello Orsini, che racchiude oggi il centro storico di Configni, rimangono due Torri, le mura di cinta e l'arco d'ingresso. Proprio vicino alla porta d'ingresso, al di sopra di un portale della torre campanaria vi è lo stemma degli Orsini. Nei primi anni del XVI secolo Configni era feudo della Famiglia Orsini. Gli statuti furono armati il 20 Maggio del 1539, quando Signori e Padroni del Castello di Configni e dei suoi territori erano Federico Orsini, duca di Gravina e conte di Gerusalemme, ed il fratello germano Giovanni.