De Ligt, il Barcellona ha perso la pazienza