Fjern Lignende linjer fra en fil

Nysif Steve · #1 (**permalink**) 08-31-2007

Jeg har en loggfil "logreport" som inneholder flere linjer som vist under:

04:20:00 / usr / lib / SNMP / snmpdx: [ID 702911 demonen. feil] Agent snmpd dukket opp døde, men svarte på ping
06:38:08 / usr / lib / SNMP / snmpdx: [ID 702911 demonen. feil] Agent snmpd dukket opp døde, men svarte på ping
07:11:05 / usr / lib / SNMP / snmpdx: [ID 702911 demonen. feil] Agent snmpd dukket opp døde, men svarte på ping

Jeg ønsker å redigere rapporten til å fjerne innlegg som rapporterer dupliser hendelser (event blir den delen uthevet i rødt). Jeg har ingen kunnskap om hva de vil være eller hvor lenge de er. Jeg prøver å lage en utgang nær det som er sett under:

04:20:00 / usr / lib / SNMP / snmpdx: [ID 702911 demonen. feil] Agent snmpd dukket opp døde, men svarte på ping
Denne feilen ble gjengitt 2 ganger

aigles · #2 (**permalink**) 09-02-2007

Prøv og tilpasse følgende awk programmet.
steve.awk :

Code:

{
   if (match($0, /\[/) == 0) {
      Lines[++LinesCount] = $0;
      LineIds[LinesCount] = ""
      next;
   }

   id  = substr($0, RSTART);

   if (++Ids[id] == 1) {
      Lines[++LinesCount] = $0;
      LineIds[LinesCount] = id;
   }
}

END {
   for (i=1; i<=LinesCount; i++) {
      print Lines[i];
      if (id = LineIds[i]) {
         if (Ids[id] > 1) {
            print "This Error was reproduced", Ids[id], "times";
         }
      }
   }
}

Utfør awk program:

Code:

awk -f steve.awk logreport

Jean-Pierre.

namishtiwari · #3 (**permalink**) 09-03-2007

Du kan bruke --

cat logfile | sort | Unike-c> newlogfile

Takk
Namish

Nysif Steve · #4 (**permalink**) 09-04-2007

Jeg endte opp med å bruke kode:

Code:

cat logfile | sort | uniq -c -n6 >> logreport

For Unike kommandoen i-c flagg skriver antall forekomster før hver linje mens-n6 flagg ignorerer de første 6 feltene for sammenligning. Sluttresultatet er akkurat det jeg trengte. Takk for hjelpen alle.

uniesh · #5 (**permalink**) 03-13-2009

cat file1 | sort | Unike-c | cut-F2> file2

Mer UNIX og Linux Forum Emner Du kan finne nyttig
Tråd	Tråd startet	Forum	Svar	Siste innlegg
Fjern Lignende oppføringer i en fil	Nysif Steve	UNIX for Advanced & ekspertbrukere	2	03-13-2009 03:50
vi å fjerne linjer i filen	kjbaumann	UNIX for Dummies Spørsmål og svar	2	03-13-2009 03:40
fjerne linjer fra fil	bluemoon1	Shell programmering og Skripting	9	11-09-2007 01:40
Fjern Dupliserte linjer fra fil	Nysif Steve	UNIX for Dummies Spørsmål og svar	18	09-09-2007 09:57
Fjern Dupliserte Lines i File	Den Tiack Ein	Shell programmering og Skripting	5	01-12-2006 08:30

Thread Tools	Søk i denne tråden
Vis Printable Version Email denne siden	Søk i denne tråden: Avansert søk
Visningsmoduser	Ranger denne tråden
Switch to Linear Mode Hybridmodus Switch to gjengede Mode	Ranger denne tråden:


	Powered by