Edificato in epoca medioevale, il Castello di Viggiano è stato gravemente danneggiato dal terremoto del 1857.
Dai resti se ne può intuire la maestosità: parte delle mura e due delle tre torri angolari sono rimaste, infatti, intatte.
Il panorama godibile da lassù, il punto più alto del paese che si affaccia sulla Valle del fiume Agri, è una meraviglia per gli occhi.