-フォーラムは、 UNIXおよびLinuxのファイルからテキストを抽出する独自の行

soliberus · ＃1 （**固定リンク**） 2008年8月22日

私14millionの行を持つファイルがあると私は別のテキストファイルにファイルのすべてのユニークな行を抽出したいと思います。

例えば：

ファイル1の内容

幸せな
悲しい
笑み
幸せな
おかしい
悲しい

私に対しては、コマンドを実行する1つのファイルを作成するための独自の行だけを返します（つまり、 1行に1行と悲しい）満足している。

誰かが正しい方向に私をポイントしてくださいでした。

ありがとう

Franklin52 · ＃2 （**固定リンク**） 2008年8月22日

あなたが試してみてください：

コード：

sort file | uniq > new_file

danmero · ＃3 （**固定リンク**） 2008年8月22日

お使いの 並べ替え サポートする - ū " uniq "オプション：

コード：

sort -u file > new_file

soliberus · ＃4 （**固定リンク**） 2008年8月22日

ありがとう...それは魔法のように動作する

その他のUNIXおよびLinuxフォーラムトピックは参考にすること
スレッド	スレッドスターター	フォーラム	返信	最後の投稿
ファイルから行を抽出	trichyselva	UNIXのダミー質問と回答のため	4	2008年9月2日 07:18午前
固定幅のテキストファイルからの独自のフィールドを持つレコードを抽出	sitney	シェルプログラミングとスクリプティング	8	2008年2月10日 03:18午前
どのようにテキストファイル内のすべてのユニークな言葉を読んで	aditya.ece1985	シェルプログラミングとスクリプティング	5	2007年11月30日 02:26午前
ファイルの2文字列の間の行を抽出	babloo	シェルプログラミングとスクリプティング	2	2007年2月14日 11:27午前
ファイルから行を抽出	pradeepthanraj	シェルプログラミングとスクリプティング	1	2005年11月15日 09:41午前

スレッドツール	このスレッドを検索
印刷用バージョンを表示するこのページをメール	このスレッドを検索：高度な検索
表示モード	このスレッド
スイッチリニアモードハイブリッドモードスレッドを切り替えるモード	このスレッド：


	を搭載