ファイルの重複行を削除する- UNIXおよびLinuxフォーラム

アインはTiack · ＃1 （**固定リンク**） 2005年7月25日

私は、ファイル内の重複行を削除するKSHスクリプトをしています。下記のファイル形式をしていると仮定します。

FileA
------
1253-6856
3101-4011
1827-1356
1822-1157
1822-1157
1000-1410
1000-1410
1822-1231
1822-1231
3101-4011
1822-1157
1822-1231
........

と私に以下のファイルとしては、重複行を単純にそれにします。

FileA
------
1253-6856
3101-4011
1827-1356
1822-1157
1000-1410
1822-1231
........

KSHにはどうすればいいですか？

nir_s · ＃2 （**固定リンク**） 2005年7月25日

次のコマンドをしてみてください：

コード：

awk '!x[$0]++' file > file.new

近赤外

アインはTiack · ＃3 （**固定リンク**） 2005年7月25日

近赤外ありがとう！これは素晴らしいです！

pixelbeat · ＃4 （**固定リンク**） 2005年7月25日

uniqファイル> file.new

もし、ファイルが既にしてソートされていません：

ソートファイル| uniq > file.new

ssk · ＃5 （**固定リンク**） 2005年7月26日

ソート- ūファイル名> filename.new

sumitgarg · ＃6 （**固定リンク**） 2006年1月12日

sskありがとう！

あなたのソリューションを効果的なので、これは簡単です！

ありがとう、

Sumit Garg

その他のUNIXおよびLinuxフォーラムトピックは参考にすること
スレッド	スレッドスターター	フォーラム	返信	最後の投稿
ログファイルに重複行を削除	karthikn7974	シェルプログラミングとスクリプティング	4	2009年3月21日 06:41午後
ファイルから重複したレコードのすべてのインスタンスを削除する	vukkusila	シェルプログラミングとスクリプティング	3	2007年12月12日 07:50午前
ファイルから重複行を削除する	Nysifスティーブ	UNIXのダミー質問と回答のため	18	2007年9月9日 09:57午前
重複行を削除する方法	fredao	シェルプログラミングとスクリプティング	3	2006年12月13日 12:51午後
ファイル内の重複行	guptan	UNIXの詳細＆エキスパートのためのユーザー	3	2006年5月18日 06:28午前

スレッドツール	このスレッドを検索
印刷用バージョンを表示するこのページをメール	このスレッドを検索：高度な検索
表示モード	このスレッド
スイッチリニアモードハイブリッドモードスレッドを切り替えるモード	このスレッド：


	を搭載