Edificato nel XII secolo dai Ventimiglia, il Castello Normanno a Castel di Lucio si eleva a più di 350 m dal fondo valle. Una fortificazione in origine protetta da una cinta muraria e con due torri cilindriche sul lato più vulnerabile. Il nome originario deriva proprio dal castello, ossia Castelluzzo.
Oggi quel che resta sono soltanto pochi ruderi che dominano l’abitato e che comprendono una torre circolare posta sulla vetta più alta del paese.