Hello,
Si c'est toute la ligne qui rentre en doublon/triplon, alors "sort | uniq" ou le condensé "sort -u" sont tes amis.
Sinon, à voir en fonction de la tête de ton fichier... (d'ailleurs je pense qu'il serait préférable de mettre un exemple pour qu'on puisse tous mieux visualiser de quoi tu parles, quitte à ce que tu remplaces le texte si jamais c'est sensible...).
l0f4r0