Salut,

Si j'ai un fichier avec le format xml, je voudrais supprimer des dossiers en double et à mettre un nouveau fichier. ... Est-il possible d'écrire le script de le faire?

Essayer

uniq inputfile

Je ne sais pas si il est possible de leur coquille, mais il est possible de Perl. Ne considérer cette option si vous le pouvez.

Est-ce que le Perl peut fonctionner sous Unix ksh?

Aussi, le bilan est un peu la différence ... il ressemble à

record1:
ce teste
mon id est 2001
fin:
record2:
ce n'est testing2
mon id est 2002
fin:
record3:
ce teste
mon id est 2002
fin:
record4:
ce n'est testing2
mon id est 2002
fin:

Pour ce qui précède, le dossier 2 et 4 est dupliqué. En raison de la "id" et "testing2" est le même. si une seule ligne est le même qui n'est pas appelé en double ..

Ainsi Perl ou ami peut vous aider pour le script?

I havent testé, mais s'il vous plaît vérifier

paste -s -d"\t\t\t\n" filename|sort -u |tr "\t" "\n"

Vous pouvez essayer d'utiliser awk.
Créez le script suivant awk uniq.awk :

/^end:/ {
   if (! (Record in Records)) {
      Records[Record];
      print RecordLabel ":";
      print Record;
      print $0;  
      Record = "";
   }
   next;
}
$1 ~ /^.*:/ {
   sub(/:.*/, "", $1);
   RecordLabel = $1;
   next;
}
{
   Record = (Record ? Record "\n" : "") $0;
}

$ awk -f uniq.awk filename
record1:
this is testing
my id is 2001
end:
record2:
this is testing2
my id is 2002
end:
record3:
this is testing
my id is 2002
end:
$

Cher Monsieur,

Il serait très utile si vous pouvez décrire le code ci-dessous en détail, je viens de commencer à apprendre sur awk, et je peux dire que la compréhension du code suivant dans une manière claire m'aiderait beaucoup à l'avenir.
Merci d'avance.