Le château de Clermont, une tour