Comment nettoyer du joint de plaquettes de parement sec ?

Bonjour, tout est dans le titre. J'ai posé et jointé mes plaquettes de parement. Malheureusement, je n'ai pas nettoyé le joint qui avait débordé aussitôt et maintenant c'est la galère pour le faire partir et avoir un aspect propre.
Avez vous des idées ?
Merci