Hertog Karel de Stoute, zoon van Filips de Goede, laat het hoofdgebouw verbouwen en onder meer een grote traptoren optrekken. Zijn vroegtijdige dood na 10 jaar bewind heeft zeker belet dat er nog verder gaande ingrepen plaatsvonden.