UtrikesStatyer över skådespelaren ska rivas ner - eftersom han inte kände skuld för slaveriet.