eliminar la duplicación de XML en un archivo de registro en virtud de unix

happyv · #1 (**Enlace permanente**) 09-20-2006

Hola,

Si tengo un archivo con formato xml, me gustaría eliminar la duplicación de registros y guardarlos en un archivo nuevo. ... ¿Es posible escribir scripts para hacerlo?

tayyabq8 · #2 (**Enlace permanente**) 09-20-2006

Intentar

Código:

uniq inputfile

Yogesh Sawant · #3 (**Enlace permanente**) 09-20-2006

No sé si es posible con cáscara o no, pero es posible en Perl. Considere la opción de que si puede.

happyv · #4 (**Enlace permanente**) 09-20-2006

Es el Perl ksh puede correr bajo Unix?

Además, el registro es un poco la diferencia que parezca ...

record1:
esta es la prueba
mi id es 2001
final:
record2:
esto es testing2
mi id es 2002
final:
record3:
esta es la prueba
mi id es 2002
final:
record4:
esto es testing2
mi id es 2002
final:

Por lo anterior, el registro 2 y 4 se duplica. Debido a la "id" y "testing2" es el mismo. aunque sólo una línea es la misma que no se llama duplicado ..

Tan Perl o cualquier amigo puede ayudar para el script?

ranj @ CHN · #5 (**Enlace permanente**) 09-20-2006

I HAVENT probado esto, pero por favor, compruebe que

Código:

paste -s -d"\t\t\t\n" filename|sort -u |tr "\t" "\n"

Aigles · #6 (**Enlace permanente**) 09-20-2006

Puede intentar usar awk.
Cree el siguiente script awk uniq.awk :

Código:

/^end:/ {
   if (! (Record in Records)) {
      Records[Record];
      print RecordLabel ":";
      print Record;
      print $0;  
      Record = "";
   }
   next;
}
$1 ~ /^.*:/ {
   sub(/:.*/, "", $1);
   RecordLabel = $1;
   next;
}
{
   Record = (Record ? Record "\n" : "") $0;
}

y lo ejecutamos:

Código:

$ awk -f uniq.awk filename
record1:
this is testing
my id is 2001
end:
record2:
this is testing2
my id is 2002
end:
record3:
this is testing
my id is 2002
end:
$

Jean-Pierre.

nervioso · #7 (**Enlace permanente**) 09-20-2006

Estimado Sr. Presidente,

Sería de gran ayuda si usted puede describir el código en detalle más adelante, he comenzado a aprender acerca de awk y puedo decir que la comprensión de código siguiente en una manera clara me ayudaría mucho en el futuro.

Cita:

/ ^ fin: / (
if (! (Registro de documentos)) (
Documentos [Grabar];
imprimir RecordLabel ":";
Registro de impresión;
print $ 0;
Record \u003d "";
)
próximo;
)
$ 1 ~ (/^.*:/
sub (/:.*/, "", $ 1);
RecordLabel \u003d $ 1;
próximo;
)
(
Record \u003d (Actas? Grabar "\ n": "") $ 0;
)

Gracias de antemano.

Más UNIX y Linux Foro Temas usted puede encontrar útiles
Hilo	Hilo para principiantes	Foro	Respuestas	Último mensaje
cómo leer disco de registro de un archivo en unix	raoscb	UNIX for Dummies Preguntas y Respuestas	1	05-16-2008 06:30 AM
eliminar la duplicación de columnas	kamel.seg	Programación de scripts de shell y	6	02-21-2008 07:36 AM
Primera y Última Eliminar Registro de un archivo	ravikuc	UNIX for Dummies Preguntas y Respuestas	1	10-11-2007 03:35 AM
eliminar la duplicación de líneas sin clasificar	lalelle	Programación de scripts de shell y	6	08-21-2007 07:44 AM
comando para eliminar último registro en el archivo	mheinen	UNIX for Dummies Preguntas y Respuestas	4	01-09-2007 04:39 PM

Herramientas de hilo	Buscar en este Hilo
Mostrar Versión para imprimir Enviar esta página	Buscar en este Hilo: Búsqueda avanzada
Modos de visualización	Vota a este hilo
Cambiar a modo lineal Modo híbrido Cambiar a modo de línea	Vota a este hilo:


	Powered by