María Teresa, autoritaria y orgullosa, le hace la vida imposible a su marido. En 1785 el Infante enferma y renuncia volver al palacio de Boadilla sin su familia, algo que el rey prohíbe. Al morir, Carlos III tampoco respeta el deseo de su hermano de ser enterrado en su palacio y lo hace en Arenas de San Pedro.