Deux commandes simples qui permettent :
pour la première de trier (par ordre alphabétique par défaut)
et la seconde de dédoublonner (sur exact match par défaut).
Vous pouvez améliorer leur efficacité ou les spécialisées pour vos besoins avec des options. (sort –help et uniq –help pour les voir)