同じようなラインをファイルから削除する- UNIXおよびLinuxフォーラム

Nysifスティーブ · ＃1 （**固定リンク**） 2007年8月31日

私は、以下の行を見られるようないくつか含まれているログファイル" " logreportている：

4時20分00秒は/ usr / libに/のSNMP / snmpdx ： [番号702911 デーモン。エラー] snmpdエージェントが死んだが、 pingに応答
6時38分08秒は/ usr / libに/のSNMP / snmpdx ： [番号702911 デーモン。エラー] snmpdエージェントが死んだが、 pingに応答
午前7時11分05秒は/ usr / libに/のSNMP / snmpdx ： [番号702911 デーモン。エラー] snmpdエージェントが死んだが、 pingに応答

私のエントリが重複するイベント（イベントの部分は赤で強調表示されてレポートを削除するには、レポートを編集する）のようになる。私はどうなっていくのか、イベントの知識がどのくらいにしている。私の下に見られているに近い出力を生成しようとしている：

4時20分00秒は/ usr / libに/のSNMP / snmpdx ： [番号702911 デーモン。エラー]エージェントsnmpdが死亡したのpingに応答
このエラーを再現された2回

aigles · ＃2 （**固定リンク**） 2007年9月2日

試してみては、次の適応 awkはプログラムです。
steve.awk ：

コード：

{
   if (match($0, /\[/) == 0) {
      Lines[++LinesCount] = $0;
      LineIds[LinesCount] = ""
      next;
   }

   id  = substr($0, RSTART);

   if (++Ids[id] == 1) {
      Lines[++LinesCount] = $0;
      LineIds[LinesCount] = id;
   }
}

END {
   for (i=1; i<=LinesCount; i++) {
      print Lines[i];
      if (id = LineIds[i]) {
         if (Ids[id] > 1) {
            print "This Error was reproduced", Ids[id], "times";
         }
      }
   }
}

を実行し、 awkはプログラム：

コード：

awk -f steve.awk logreport

ジャン\u003dピエール。

namishtiwari · ＃3 （**固定リンク**） 2007年9月3日

あなたが使用することができます-

猫ログファイル|ソート| uniq - cを> newlogfile

ありがとう
Namish

Nysifスティーブ · ＃4 （**固定リンク**） 2007年9月4日

私は、コードを使用して終了：

コード：

cat logfile | sort | uniq -c -n6 >> logreport

一方、 - n6フラグの比較のために最初の6分野は、 - cを無視するフラグを、それぞれの行の数を印刷する前に出現するuniqコマンド。その結果こそまさに、私が必要です。誰もご協力いただきありがとうございます。

uniesh · ＃5 （**固定リンク**） 2009年3月13日

猫ファイル1 |ソート| uniq - cを|カット- F2キー>ファイル2

その他のUNIXおよびLinuxフォーラムトピックは参考にすること
スレッド	スレッドスターター	フォーラム	返信	最後の投稿
同じようなエントリをファイルの削除	Nysifスティーブ	UNIXの詳細＆エキスパートのためのユーザー	2	2009年3月13日 03:50午前
viのファイル内の行を削除する	kjbaumann	UNIXのダミー質問と回答のため	2	2009年3月13日 03:40午前
ファイルから行を削除	bluemoon1	シェルプログラミングとスクリプティング	9	2007年11月9日 01:40午前
ファイルから重複行を削除する	Nysifスティーブ	UNIXのダミー質問と回答のため	18	2007年9月9日 09:57午前
重複行を削除するファイルの	アインはTiack	シェルプログラミングとスクリプティング	5	2006年1月12日 08:30午前

スレッドツール	このスレッドを検索
印刷用バージョンを表示するこのページをメール	このスレッドを検索：高度な検索
表示モード	このスレッド
スイッチリニアモードハイブリッドモードスレッドを切り替えるモード	このスレッド：


	を搭載