Clément V, Villandraut et son château