Il centro storico di Carovigno è ricco di storia e di splendide architetture, una piccola cittadella medievale fortificata, con un dedalo di stradine tra case dipinte a calce, piccole e antiche chiese, botteghe artigiane e torri difensive. ed è conosciuto come Rione Terra. Il Castello Dentice di Frasso che sorge nel centro del paese, nel punto più alto, con le sue caratteristiche tre torri diverse tra loro e tra le architetture più importanti e interessanti.